Скрипт и A/B-тесты: как находить лучшие формулировки

Зачем тестировать формулировки в скрипте

Скрипт — это не только последовательность этапов, но и слова, которыми менеджер ведёт клиента от шага к шагу. Пока формулировка не проверена на практике, она остаётся предположением: кажется удачной, но может не работать именно в вашем отделе.

Формулировка влияет на переход между этапами

Воронка подчиняется устойчивым пропорциям: соотношения между этапами повторяются. Но это не значит, что переходы зафиксированы. Ещё более века назад наблюдение за покупателями в торговых точках показало: пропорции повторяются, а на переходы между этапами можно влиять — качеством контакта, обучением продавцов, сервисом. Формулировка как раз и есть тот рычаг, которым менеджер двигает переход.

Практический вывод простой: если на этапе систематически теряется много клиентов, дело не в «плохом потоке», а в том, как именно менеджер ведёт разговор на этом шаге. Формулировка здесь — первое, что стоит проверить.

Что именно можно тестировать

Тестировать стоит не весь скрипт сразу, а отдельные элементы: вопрос, который открывает этап; переход к презентации; формулировку подытоживания; варианты ответа на частое возражение; фразу, которой назначается следующий шаг. Один элемент — одна гипотеза.

Отдельно стоит проверить, нет ли в скрипте фраз, которые формально корректны, но не двигают разговор. Их видно по записям: клиент отвечает односложно, тема закрывается, а этап остаётся пройденным только на бумаге. Такие места — первые кандидаты на тест.

Устойчивые пропорции воронки как база сравнения

Чтобы понять, стала ли формулировка лучше, нужно с чем-то сравнивать. Полезная база — обычная динамика воронки отдела.

Этапы воронки повторяются, переходы — управляемы

Из тысячи заявок не выйдет тысяча продаж: часть обращений нецелевые, часть горячие, а большинство — тёплая середина. Поэтому сравнивать варианты нужно по переходу между конкретными этапами, а не по числу сделок на выходе: на итог влияет слишком много факторов.

Почему нельзя сравнивать «на глаз»

Ощущение «эта фраза звучит лучше» ничего не доказывает: менеджер может провести удачный звонок на слабой формулировке и провалить сильную. Без сопоставимых выборок и одинаковых условий вывод получается случайным, и следующая неделя его не подтвердит.

Сравнение «на глаз» опасно ещё и тем, что отдел начинает спорить не о данных, а о личных предпочтениях. Один менеджер уверен, что клиентов разговорит одна фраза, другой настаивает на своей. Тест переводит этот спор в плоскость цифр: у обеих версий есть выборка, метрика и период проверки.

Как поставить A/B-тест формулировок

Тест — это не спор о том, какая фраза красивее, а последовательность шагов, которая снимает случайность.

Гипотеза и один изменяемый элемент

Начните с гипотезы: какой этап проседает и почему. Затем составьте два варианта формулировки, различающиеся одним элементом — началом фразы, вопросом или порядком смыслов. Остальные слова, структура и этапы остаются одинаковыми, иначе результат нельзя будет приписать изменению.

Сопоставимые выборки

Варианты проверяют на похожих звонках: одинаковый тип обращения, сопоставимый поток, схожие категории клиентов. Если один вариант получают только входящие, а другой — холодные звонки, сравнение теряет смысл. Менеджеров тоже стоит распределять так, чтобы сильный продавец не перевесил результат одной из версий.

Сопоставимость важна и по времени: не стоит сравнивать вариант A, проверенный в спокойную неделю, с вариантом B в период распродажи или сбоя. Отмечайте период и нагрузку — тогда результат теста можно будет воспроизвести, а не только наблюдать однажды.

Сколько ждать результата

Тест не заканчивают по первому удачному звонку. Нужно набрать достаточное число разговоров, чтобы отдельные случаи не искажали картину, и сравнить варианты на одном и том же отрезке с похожей нагрузкой. Спешка приводит к выводам, которые не подтверждаются на следующем замере.

Как выбрать, что тестировать первым

Соблазн переписать весь скрипт сразу велик, но результата это не даёт: непонятно, какое изменение сработало. Начинать стоит с узкого места воронки.

Ищите провал воронки, а не красивую фразу

Сначала определите этап, на котором отдел теряет больше всего возможностей. Если клиенты часто срываются между презентацией и следующим шагом, тестировать нужно формулировку перехода и закрытия, а не приветствие. Если проседает квалификация, проверяйте вопрос, который её открывает. Такой порядок связывает тест с бизнес-метрикой: вы улучшаете то, что действительно влияет на конверсию.

Начните с одного этапа

Один тест — один этап и одна гипотеза. Даже если хочется проверить сразу три идеи, растяните их в очередь: сначала сравнивают варианты открывающего вопроса, затем — переход к презентации, после — формулировку следующего шага. Так вы не только получаете чистый результат, но и накапливаете понятную историю изменений скрипта: что проверяли, что внедрили и почему.

Какие метрики показывают результат

Формулировку оценивают не по общему настроению, а по измеримым переходам.

Конверсия между этапами

Главный показатель — переход по этапам: заявка → ключевой этап и ключевой этап → сделка. Анализ воронки за период показывает, на каком шаге теряется больше всего возможностей; если провал повторяется на одном и том же этапе, это признак нарушения технологии на этом шаге, а не «сложных клиентов».

Смотреть только на итоговую конверсию в сделку недостаточно: до выручки влияет слишком много факторов. Метрика конкретного перехода чувствительнее и быстрее показывает эффект от новой формулировки.

Доля звонков со следующим шагом

Дополнительный сигнал — доля разговоров, которые заканчиваются конкретным следующим шагом, и доля звонков с прямым закрывающим вопросом. Эти метрики чувствительнее к формулировке, чем итоговая выручка, и быстрее показывают, сработал ли новый вариант.

Если тест касается перехода к закрытию, эти показатели основные: формулировка может не менять число сделок напрямую, но заметно двигать долю разговоров, которые заканчиваются конкретной договорённостью. А именно с неё и начинается сделка.

Качественные сигналы: цитаты и таймкоды

Цифры показывают, что изменилось, но не объясняют почему. Здесь помогают цитаты из звонков: видно, в какой момент клиент включился, а где потерял интерес. Разбор реальных разговоров показывает, какие фразы работают, а где менеджер уходит в монолог.

Типичные ошибки при A/B-тестах скрипта

Большинство провальных тестов рушится не на гипотезе, а на исполнении: сравнивают несопоставимое, меняют слишком много сразу или делают вывод слишком рано.

• Меняют сразу несколько элементов и не понимают, что сработало.
• Сравнивают варианты на разных типах звонков или в разное время.
• Делают вывод по нескольким звонкам, не дожидаясь сопоставимой выборки.
• Оценивают только итоговые сделки, игнорируя переходы между этапами.
• Не фиксируют условия теста и теряют возможность повторить результат.
• Внедряют удачную формулировку во все скрипты, не проверив её на другом потоке.

Практический блок: как организовать цикл тестов

Тест удобно вести по короткому протоколу. Таблица помогает не потерять условия и результат.

Такой цикл повторяется регулярно: одна проверенная формулировка за раз, с обязательной фиксацией условий.

Как читать результаты теста

Даже корректно поставленный тест легко истолковать неверно, если не учитывать контекст.

Учитывайте размер потока

Одинаковые доли при разном объёме значат не одно и то же: разрыв в несколько процентов на маленьком потоке может быть случайным, а на большом — устойчивым. Поэтому перед выводами полезно посмотреть, как менялась метрика от недели к неделе, а не только в сумме за тест.

Не путайте формулировку с навыком

Проигравший вариант не всегда хуже как фраза. Иногда менеджер просто не научился произносить её естественно, и весь этап звучит натянуто. Прежде чем отказываться от формулировки, стоит проверить, как её исполняли: возможно, дело в подаче, а не в словах. Здесь и помогают цитаты и таймкоды — они показывают не только результат, но и то, как фраза звучала в разговоре.

Как автоматизировать тестирование формулировок

Считать переходы между этапами и собирать фрагменты вручную долго: даже небольшая выборка требует прослушивания десятков разговоров. Здесь помогает речевая аналитика. Qall AI транскрибирует звонки, оценивает их по 16 критериям и 6 этапам и показывает, на каком шаге воронки чаще теряются клиенты — по всему отделу, а не по выборке.

Сервис приводит цитаты и таймкоды, собирает дашборд и рейтинг менеджеров, формирует автозадачи РОПу и PDF-отчёт с основными ошибками менеджеров. Бэклог возражений и идеи для контента подсказывают, какие формулировки стоит проверить следующими, а аудит 100% звонков даёт достаточно данных, чтобы сравнивать варианты на сопоставимых выборках. Данные по этапам накапливаются автоматически, поэтому каждый следующий тест опирается на историю предыдущих, а не начинается с нуля.

Частые вопросы

Сколько звонков нужно для честного A/B-теста?

Универсального числа нет: важно, чтобы выборка была сопоставимой и достаточной, чтобы отдельные удачные или неудачные разговоры не перевесили результат. Ориентируйтесь на повторяемость: если разрыв между вариантами держится на новом замере, вывод можно переносить в скрипт. На маленьком потоке тест идёт дольше, и это нормально — лучше подождать данных, чем внедрять формулировку по случайности.

Можно ли тестировать варианты на разных менеджерах?

Можно, но с оговоркой: сильный продавец может вытянуть слабую формулировку, а новичок — занизить сильную. Поэтому варианты стоит распределять так, чтобы в каждой группе были сотрудники разного уровня, или сравнивать формулировки внутри одного менеджера на похожих звонках.

Что делать, если новый вариант проиграл?

Проверьте, не смешаны ли условия: тип звонков, период, состав менеджеров. Если сравнение корректное, вернитесь к гипотезе — возможно, изменённый элемент был не той причиной, что вы предполагали, и тестировать нужно другой шаг.

Как часто пересматривать формулировки скрипта?

Регулярно, по мере накопления данных и изменения потока. Удачная фраза не остаётся лучшей навсегда: меняются клиенты, продукт и каналы, поэтому цикл «гипотеза — тест — внедрение» стоит поддерживать постоянно. Полезно пересматривать формулировки после запуска нового продукта, смены канала привлечения или заметного изменения портрета клиента.

Чем A/B-тест отличается от простого изменения скрипта?

Тем, что проверка идёт на сопоставимых выборках и по заранее выбранной метрике этапа. Простое изменение опирается на мнение, A/B-тест — на сравнение двух вариантов в одинаковых условиях.

Заключение

Лучшие формулировки не назначают, а находят: выдвигают гипотезу, ставят два варианта на сопоставимых выборках и смотрят на переходы между этапами, а не на отдельные удачные разговоры. Начните с одного проблемного этапа, зафиксируйте условия теста и внедряйте только то, что подтвердилось метриками. Чтобы собирать данные по всему отделу, а не по нескольким прослушанным звонкам, начните с загрузки записей: Qall AI проанализирует разговоры и пришлёт отчёт с основными ошибками менеджеров.