Где возникает задача: цитата-основание вместо впечатления
Фраза «менеджер не выяснил потребность» звучит как вывод, но не показывает, где именно разговор пошёл не так. Руководителю приходится заново слушать звонок и угадывать, что имел в виду оценщик. Для разбора полезнее критерий, который можно увидеть в разговоре: например, менеджер уточнил задачу клиента до презентации продукта.
Тогда основанием служит не общий тон беседы, а конкретный вопрос и ответ на него. Если критерий — «уточнил задачу», реплика о сроке сама по себе ещё не доказывает, что задача понятна. Такое разделение помогает обсуждать наблюдаемое действие, а не спорить о впечатлении от звонка.
Как применить ИИ к этой задаче
Такой процесс соединяет критерии оценки, фрагменты разговоров и разбор исключений. Как устроить более широкий ИИ-контроль качества продаж, можно посмотреть отдельно.
- Опишите критерий наблюдаемым действием
Вместо «хорошо выявляет потребность» задайте признак: менеджер спрашивает о задаче клиента до предложения решения. Уточните, что делать, если тема не возникала: вернуть «нет данных», а не автоматически ставить минус.
- Попросите вывод с основанием
Для каждого критерия ИИ указывает оценку и короткую точную реплику, а при наличии временных отметок — место в записи. Поле «почему эта реплика подтверждает критерий» отделяет найденные слова от интерпретации модели.
- Передайте несоответствие на разбор
Если цитата не подтверждает вывод, пометьте случай для проверки. Руководитель сверяет фрагмент с записью и решает, ошибочна ли оценка, слишком широк ли критерий или нужен соседний контекст. Так спор превращается в правку правила или разметки.
Условный пример и критерий проверки
В условном примере клиент говорит: «Нужен отчёт к пятнице». Менеджер отвечает: «Что в отчёте обязательно должно быть?» Цитата показывает вопрос об ожидаемом содержании, но оценка «потребность уточнена» подтверждается только если клиент ответил и менеджер учёл этот ответ. Если ИИ вместо этого приводит перечень функций продукта, основание не соответствует выводу.
Сравните похожие реплики по тому, какое именно действие они подтверждают. Вопрос о сроке может подтвердить уточнение срока, но не обязательно задачи; самостоятельное описание клиентом проблемы не доказывает, что менеджер её выяснил. Таблица помогает заметить такую подмену и выбрать, какой фрагмент переслушать.
| Ситуация | Вывод и основание ИИ | Что проверить |
|---|---|---|
| Клиент: «Нужен отчёт к пятнице»; менеджер: «Что в нём обязательно?» | Потребность уточнена; приведён вопрос и ответ клиента | Учёл ли менеджер ответ в продолжении разговора? |
| Менеджер сразу перечисляет функции продукта | Потребность уточнена; основанием названа презентация функций | Фрагмент не показывает уточнение задачи: запросить другое основание или отметить вывод |
| Клиент сам называет задачу; менеджер спрашивает о сроке | Потребность уточнена; приведён вопрос о сроке | Разделить признаки: уточнение задачи и срока — разные действия |
Как выбрать следующий шаг
Начните с небольшой выборки звонков, где специалисты заранее независимо отметили несколько критериев. По каждому случаю сравните человеческую отметку, вывод ИИ и приведённую цитату. Разведите два вида расхождений: неверная оценка при подходящей цитате и верная на вид оценка с нерелевантным основанием. Во втором случае одной итоговой метки явно недостаточно.
Дальнейшее действие зависит от причины. Если ИИ нашёл не тот фрагмент, уточните требование к цитате; если специалисты по-разному понимают критерий, перепишите его через наблюдаемые признаки; если не хватает контекста, расширьте окно реплик. Затем проверьте изменённое правило на другом наборе звонков и решите, для каких критериев автоматическая оценка пригодна, а где нужен выборочный разбор.