Нода «A/B тест»

Что такое нода A/B тест

Нода A/B тест — это разветвитель трафика, который автоматически распределяет пользователей по нескольким вариантам сценария в заданной пропорции. Это позволяет проверять гипотезы — например, какой текст приветствия, цена или воронка продаж работает лучше — не вручную, а на реальных пользователях и с точными цифрами.

Примеры использования:

Сравнить два варианта приветственного сообщения и увидеть, какой приводит больше подписок.
Протестировать разные цены на один и тот же продукт.
Сравнить короткую и длинную воронку продаж.
Проверить, на какой призыв к действию (кнопку) чаще кликают.

Один раз попав в одну из веток A/B теста, пользователь всегда будет идти по ней дальше — даже если запустит бота заново. Это гарантирует, что каждый человек видит целостный, непротиворечивый сценарий от начала до конца.

Добавление A/B теста

На холсте нажмите иконку колбы, чтобы добавить ноду A/B теста.
В настройках справа укажите, какой процент трафика получит каждая ветка (A, B, …). Сумма весов должна равняться 100%.
Для каждой ветки выберите (или создайте одним кликом) команду, к которой будет переходить пользователь.
При необходимости добавьте ещё ветки кнопкой «Добавить тест» (до 10 вариантов).
Опубликуйте сценарий.

Как читать результаты

На самой ноде на холсте (в режиме статистики) видно, сколько пользователей попало в каждую ветку.
Рядом с каждым исходящим соединением показывается доля трафика и текущая конверсия по ветке.
Кнопка со значком графика в заголовке ноды открывает подробную аналитику: таблицу по веткам (трафик, конверсии, Win Rate) и график динамики по дням — чтобы убедиться, что победа одной из веток — это устойчивая тенденция, а не случайность.
В аналитике можно выбрать, по какой именно цели (конверсии) считать статистику, если в сценарии настроено несколько целей.
Статистику по A/B тесту можно сбросить, если вы поменяли гипотезу и хотите начать сравнение заново.

Советы

Для честного сравнения не меняйте пропорции весов после старта теста — это исказит результаты.
Начинайте с простого теста из двух веток (A/B), прежде чем переходить к мультивариантным тестам.
Используйте вместе с нодой «Конверсия», чтобы автоматически видеть, какая ветка приносит больше целевых действий (заявок, оплат, подписок).
Дайте тесту накопить достаточно трафика, прежде чем делать выводы — маленькая выборка может ввести в заблуждение.