Как перевести чек-лист в промпт для ИИ
Короткий ответ
Критерий, понятный человеку интуитивно, языковой модели нужно объяснить явно: что именно проверяется, какой признак считается выполнением, и обязательно потребовать цитату из разговора как подтверждение вывода. Без требования цитаты модель может дать правдоподобный, но неточный ответ, и это невозможно быстро проверить.
Пошаговая инструкция
Шаг 1. Взять формулировку из человеческого чек-листа
Например: "менеджер выявил потребность клиента".
Шаг 2. Уточнить признак выполнения
"Задал минимум два уточняющих вопроса о задаче клиента и использовал полученный ответ в дальнейшей аргументации."
Шаг 3. Потребовать цитату
"Приведи точную цитату из разговора, подтверждающую вывод, с указанием, от кого фраза — от менеджера или от клиента."
Шаг 4. Указать формат ответа
"Ответь: выполнено / не выполнено / не применимо, с обоснованием и цитатой."
Пример готового промпта для одного критерия
"Оцени, назначил ли менеджер конкретный следующий шаг в конце разговора. Выполнено, если названы конкретная дата или время следующего контакта, либо конкретное действие с чёткими сроками. Не засчитывай общие фразы вроде 'я вам перезвоню' без конкретики. Приведи цитату, подтверждающую вывод."
Частые ошибки
Копирование человеческой формулировки один в один без уточнения признака выполнения — модель, как и неопытный проверяющий человек, трактует расплывчатую формулировку по-своему.
Отсутствие требования цитаты — это единственный практический способ быстро проверить, не выдумала ли модель вывод.
Частые вопросы
Нужно ли тестировать промпт перед использованием? Обязательно — прогоните его на 10-15 звонках с известной вам вручную оценкой и сравните результаты, прежде чем полагаться на систему полностью.
Как часто нужно пересматривать промпты? С той же периодичностью, что и обычные критерии чек-листа — см. «Как часто пересматривать критерии оценки звонков».
Автор: редакция Auditka AI. Экспертная проверка: Александр Аничкин, основатель Auditka AI.