Как проверить транскрипт на ошибки распознавания
Короткий ответ
Быстрый способ — прослушать 10-15% случайно выбранных звонков параллельно с чтением расшифровки и отмечать расхождения. Это не требует полной ручной проверки каждого текста, но даёт статистическую картину надёжности системы на ваших реальных записях.
Пошаговая инструкция
Шаг 1. Взять разнородную выборку
Включите звонки разного качества записи — чистые и шумные, короткие и длинные, с разными собеседниками.
Шаг 2. Читать текст, слушая аудио на удвоенной скорости
Так проверка идёт быстрее, чем при обычном темпе, а расхождения всё равно заметны.
Шаг 3. Классифицировать ошибки
Критичные — искажающие смысл сказанного (например, "да" распознано как "нет"). Некритичные — опечатки в словах, не влияющие на смысл (неверный падеж, пропущенное слово-паразит).
Шаг 4. Оценить долю критичных ошибок
Именно они важны — большое число некритичных опечаток не мешает содержательному анализу, критичные искажают оценку по чек-листу.
Что делать при высокой доле ошибок
Если критичные ошибки концентрируются на определённом типе звонков (например, все с плохим качеством записи через один источник телефонии), это указывает на техническую проблему, которую можно решить на уровне источника записи, а не только настройками распознавания.
Частые вопросы
Как часто нужно проводить такую проверку? При запуске системы — обязательно на старте, затем периодически, раз в квартал или при смене модели распознавания.
Что делать, если ошибки распознавания искажают конкретную оценку по чек-листу? Отметить такой звонок как требующий ручной проверки и скорректировать итоговую оценку вручную — не полагаться на автоматический результат там, где известно о проблеме с качеством записи.
Автор: редакция Auditka AI. Экспертная проверка: Александр Аничкин, основатель Auditka AI.