Как ИИ оценивает звонки: критерии и логика
Руководитель видит итоговый балл звонка, но не понимает, откуда он взялся: почему у одного разговора оценка выше, чем у другого, и что именно проверяла система. Логика у оценки есть, и она устроена не вокруг отдельных слов. Разберём, как ИИ оценивает звонки: по каким критериям, как считает итог и почему вывод можно проверить на конкретном фрагменте.
Что значит «ИИ оценивает звонок»
Под оценкой обычно понимают одну цифру от нуля до ста. На деле до неё проходит несколько шагов: запись превращается в расшифровку, разговор раскладывается на этапы, на каждом этапе проверяются критерии, и только затем из них складывается итог. Понять логику — значит понять этот путь, а не спорить с числом.
От записи к расшифровке
Первый шаг — технический. Разговор расшифровывается с разделением реплик и сохранением таймкодов. Это не оценка, а подготовка: текст позволяет быстро находить нужные моменты и возвращаться к ним, вместо повторного прослушивания записи целиком.
Оценка смысла, а не только слов
Дальше система анализирует не лексику, а смысл реплик в контексте. Она отвечает на вопросы: выяснил ли менеджер задачу клиента, отработал ли возражение по сути, прозвучал ли следующий шаг. Слова служат материалом, но критерий — что произошло в разговоре.
Шесть этапов: каркас оценки
Разговор не оценивается как один сплошной поток. Его разбивают на этапы, и по каждому считается, пройден он или пропущен. Этапы задают маршрут, по которому движется клиент, и по ним же раскладывается оценка.
Какие этапы проходит разговор
Логика повторяет путь клиента: контакт и представление, выявление задачи, квалификация, презентация решения под эту задачу, работа с возражениями, согласование следующего шага. Каждый этап — отдельная зона проверки, а не часть общей картины.
Почему итог складывается по этапам
Когда оценка привязана к этапам, видно, где именно разговор проседает. Один балл говорит лишь, что звонок «средний»; разбивка по этапам показывает, что менеджер хорошо выявляет задачу, но не доводит разговор до закрывающего вопроса. Это уже готовый вывод для обучения.
Шестнадцать критериев оценки звонков
Этап отвечает на вопрос «где», критерий — на вопрос «что именно проверяем на этом этапе». Всего используется 16 критериев, и они описывают качество работы менеджера в каждой зоне разговора.
Какие группы критериев учитываются
Критерии покрывают разные стороны разговора: структуру и соблюдение этапов, содержание реплик, работу с задачей клиента, полноту и уместность ответов, инициативу и завершение. Такое деление помогает не потерять важное за общими формулировками и видеть, какой именно навык страдает.
Вес критерия и оценка по критериям
Критерии не равны между собой. Пропущенный следующий шаг весит в итоге больше, чем стилистическая неровность фразы, потому что он напрямую связан с судьбой сделки. Разный вес позволяет настроить оценку под приоритеты отдела, а не считать все пункты по одной цене. Если для компании критично удержание клиента, вес критериев на квалификации и завершении поднимают; если важнее скорость, акцент смещается на структуру разговора и своевременность шагов. Так шкала отражает реальную модель продаж, а не абстрактный идеал.
Ещё один эффект весов — защита от подгонки. Когда менеджер знает, что за один удачно произнесённый термин балл не поднимется, стимул «выполнять галочки» пропадает. Оценка начинает отражать то, что действительно влияет на разговор, а не то, что легко заметить в тексте.
Как считается итоговая оценка
Итог собирается снизу вверх: от критериев к этапам, от этапов к звонку. Это важно, потому что при такой логике оценка остаётся объяснимой на каждом уровне.
Балл по этапу
Сначала считается оценка каждого этапа: какие критерии на нём сработали, а какие выпали. Этап получает свой результат, и уже по нему видно, где разговор движется правильно, а где менеджер теряет линию.
Общий балл звонка
Затем оценки этапов складываются в общий балл разговора. Руководитель может работать на двух уровнях: смотреть на итог для сравнения менеджеров и разбирать слабый этап, когда нужно понять причину низкого результата.
Цитаты и таймкоды: почему выводу можно доверять
Оценка становится управленческим инструментом только тогда, когда её можно проверить. Именно поэтому вывод сопровождается цитатой и таймкодом: видно, на каком фрагменте разговора основан балл.
Как проверить спорную оценку
Если балл кажется завышенным или заниженным, руководитель открывает указанный момент и слушает его. Спор решается фактом, а не мнением: было сказано или не было, прозвучал вопрос или остался без ответа. Это снимает почву для претензий в духе «система не поняла разговор».
Оценка по критериям против одного среднего балла
Средний балл удобен для обзора, но бесполезен для разбора. Оценка по критериям и этапам объясняет, из чего он сложился, и подсказывает действие. Поэтому сравнивать менеджеров имеет смысл по обоим уровням: сначала по итогу, затем по конкретным этапам.
Где ИИ не принимает решений
Как бы точно система ни оценивала разговор, у неё есть границы. Она не знает истории сделки, характера клиента и договорённостей, которые существовали до звонка.
Контекст сделки остаётся за человеком
Один и тот же разговор может быть качественным или провальным в зависимости от стадии сделки и сегмента клиента. Поэтому критерии нужно настраивать под специфику отдела, а не считать оценку универсальной для всех ситуаций. Разговор с постоянным клиентом о допродаже и первый контакт с новым лидом требуют разных акцентов, и слепая общая шкала здесь только запутает.
Спорные случаи разбирает РОП
Пограничные оценки, влияющие на обучение или мотивацию, стоит проверять вручную. Автоматика отвечает за объём и статистику, человек — за исключения. Такое разделение повышает точность и сохраняет доверие к системе.
Как использовать оценку по критериям в работе
Смысл разбивки по этапам и критериям — в том, что она даёт готовые направления для действий, а не только констатацию факта.
Найти слабый этап
Если у отдела провисает один и тот же этап — это вопрос скрипта или процесса. Если у конкретного менеджера — вопрос обучения. Оценка по этапам различает эти два случая и не даёт лечить всех одной таблеткой.
Построить план обучения по данным
Данные показывают, чему учить и кого в первую очередь. Вместо общей лекции отдел получает разбор своих разговоров, привязанный к конкретному этапу и формулировкам. Так обучение становится точечным.
Вручную провести такую оценку по всем разговорам не получится: руководитель физически не успеет разобрать каждый звонок. Поэтому разбор имеет смысл перевести в сервис. Qall AI расшифровывает звонки, оценивает их по 16 критериям и 6 этапам, приводит цитаты с таймкодами, собирает дашборд и рейтинг менеджеров, ставит автозадачи по проблемным разговорам и формирует PDF-отчёт с основными ошибками менеджеров.
Пример: как раскладывается один звонок
Чтобы логика стала наглядной, пройдём по обычному разговору и посмотрим, что фиксирует оценка на каждом этапе. Речь о том, как система видит звонок, а не о конкретном балле.
Контакт и выявление задачи
На этапе контакта проверяется, представился ли менеджер и обозначил ли он цель разговора. На выявлении задачи — заданы ли открытые вопросы о ситуации клиента и его критериях выбора. Если менеджер сразу перешёл к презентации, не уточнив задачу, критерий выявления задачи выпадает, и это видно отдельно от всего остального разговора.
Презентация и работа с возражениями
На презентации оценивается, говорит ли менеджер о выгодах под выявленную задачу, а не перечисляет свойства. На возражениях — соединено ли несогласие клиента с конкретным аргументом и проверено ли, снято ли сомнение. Здесь особенно важна оценка смысла: формально ответ прозвучал, но если после него клиент вернулся к тому же вопросу, возражение не отработано.
Закрытие и следующий шаг
На завершении проверяется, прозвучал ли закрывающий вопрос и назван ли конкретный следующий шаг: встреча, расчёт, повторный звонок. Разговор, который закончился вежливым прощанием без договорённости, теряет балл именно на этом этапе — и руководитель видит, что дело не в подаче, а в завершении.
Практический блок: чек-лист настройки критериев
- Опишите этапы разговора так, как их проходит клиент в вашем отделе.
- Сформулируйте критерии на каждом этапе: что считается качественной работой.
- Задайте вес критериев, исходя из влияния на сделку, а не из удобства подсчёта.
- Проверьте, различает ли оценка смысл, а не только прозвучавшие слова.
- Убедитесь, что к каждому выводу приложены цитата и таймкод.
- Определите, какие оценки считаются спорными и кто их проверяет вручную.
- Свяжите итог по этапам с планом обучения и правками скрипта.
Ошибки в оценке звонков ИИ
- Оценивать разговор одним средним баллом без разбивки по этапам.
- Делать все критерии равными и терять приоритеты отдела.
- Игнорировать смысл реплик и опираться на совпадение слов.
- Строить выводы без цитат, из-за чего оценку невозможно проверить.
- Использовать оценку как инструмент наказания, а не как основу для обучения.
Частые вопросы
По каким критериям ИИ оценивает звонок?
По 16 критериям, которые распределены между 6 этапами разговора. Критерии описывают структуру, содержание реплик, работу с задачей клиента, инициативу и завершение. У каждого критерия есть вес, влияющий на итог.
Почему оценка идёт по этапам, а не одной цифрой?
Потому что один балл не показывает причину. Разбивка по этапам указывает, где именно разговор провисает, и превращает оценку в конкретное направление для обучения менеджера.
Как ИИ понимает смысл, а не только слова?
Он анализирует реплики в контексте этапа и последствий шага. Один и тот же термин в начале и в конце разговора оценивается по-разному, поэтому совпадение с заданным списком фраз здесь не решает.
Можно ли оспорить или проверить оценку?
Да. К выводу приложены цитата и таймкод, поэтому спорный момент открывается и проверяется вручную. Так оценка остаётся основанной на фактах, а не на впечатлении.
Подходит ли оценка по критериям для небольшого отдела?
Да. Логика этапов и критериев переносится на любой размер отдела, а по мере роста объёма разговоров ручной разбор дополняется автоматической оценкой без смены критериев.
Заключение
Логика оценки ИИ прозрачна, когда у неё есть каркас: 6 этапов задают маршрут разговора, 16 критериев описывают, что на каждом этапе считается качественной работой, а цитаты и таймкоды показывают, на каком фрагменте построен вывод. Итог складывается по этапам, поэтому видно не абстрактный балл, а слабое звено разговора. Так оценка превращается в основу плана обучения: сначала находится провисающий этап, затем — конкретные формулировки. Оцените это на своих звонках: Qall AI оценивает 100% звонков, а не выборку, поэтому системные ошибки перестают прятаться.