docs(adr): ADR-006 onnx-asr — независимая валидация через agent-judge
Переименовано из 005 в 006: на master уже есть ADR-005-parakeet-evaluation от прошлого эксперимента (Opus, отклонение Parakeet), нумерация бы конфликтовала. Качество замерено независимым agent-judge'ем по методологии ADR-005 на 9 транскриптах (3 файла × 3 backend), а не субъективными пометками "Отлично/Хорошо" на одном файле, как в первой версии. Артефакты транскриптов лежат в /mnt/c/ddmitry/Videos/OBS/ для верификации. Подтверждены три класса проблем Parakeet из ADR-005 (Mm-hmm-редукция, иноязычные вставки, искажение IT-терминов) на новом наборе файлов с конкретными цитатами и таймкодами. Обнаружен новый класс ошибок Whisper medium: галлюцинации на длинных файлах с тихими фрагментами (до 17 минут потеряно на одном файле, многоминутные повторы, приписывание несуществующих имён). Не описано в ADR-005, потому что там были 15-минутные отрывки. GigaAM v3 подтверждён как лучший backend для русских встреч на CPU (summary utility 4/5 на всех файлах, единственный без потерь содержания). Рекомендация в README уточнена: parakeet-v3 для русского не подходит, openvino-cpu medium — только для встреч ≤30 мин с равномерной громкостью. Co-Authored-By: Claude Opus 4.7 (1M context) <noreply@anthropic.com>
This commit is contained in:
@@ -229,8 +229,8 @@ language = "en"
|
||||
- **По умолчанию:** `medium` — хороший баланс скорости и качества
|
||||
- **Макс. качество (NVIDIA):** `large-v3` + `--compute-type float16`
|
||||
- **Макс. качество (Intel GPU):** `large-v3` + `--device openvino-gpu`
|
||||
- **Макс. скорость CPU (русский):** `--device onnx --model gigaam-v3` (17-29× RTF, без пунктуации)
|
||||
- **CPU с пунктуацией (русский):** `--device onnx --model parakeet-v3 --language ru` (12-20× RTF, возможны `<unk>`)
|
||||
- **Макс. скорость CPU (русский):** `--device onnx --model gigaam-v3` (17-29× RTF, без пунктуации; рекомендуется LLM-нормализация терминов после)
|
||||
- **CPU с пунктуацией (русский):** `--device openvino-cpu --model medium` (5-6× RTF; для встреч ≤30 мин с равномерной громкостью — на длинных файлах с тихими фрагментами возможны галлюцинации)
|
||||
- **Быстрый тест:** `tiny` — для проверки пайплайна
|
||||
|
||||
<details>
|
||||
@@ -253,7 +253,7 @@ language = "en"
|
||||
| `gigaam-v3` | ~300 MB | 17-29× | ru | ❌ |
|
||||
| `parakeet-v3` | ~600 MB | 12-20× | 25 языков | ✅ |
|
||||
|
||||
> **Рекомендация**: для русского — `gigaam-v3` (быстрее, чище). Для мультиязыка или пунктуации — `parakeet-v3 --language ru`. Подробнее в [ADR-005](docs/adr/005-onnx-asr-backend.md).
|
||||
> **Рекомендация**: для русского — `gigaam-v3` (единственный из onnx-моделей, дающий пригодный для конспекта транскрипт на русских встречах; см. [ADR-006](docs/adr/006-onnx-asr-backend.md)). `parakeet-v3` уместен только для англоязычного / multilingual контента — на русском воспроизводит проблемы из [ADR-005](docs/adr/005-parakeet-evaluation.md) (Mm-hmm-редукция тихих реплик, иноязычные вставки).
|
||||
|
||||
</details>
|
||||
|
||||
|
||||
Reference in New Issue
Block a user