A/B тестирование SMS: 4 параметра с механикой и примерами
Параметр 1: текст и персонализация
Механика: разделите базу случайно на две равные части. Вариант A получает безликое сообщение, вариант B — персонализированное. Пример: вариант A: «Скидка 20% на кухни только сегодня: shop.ru/sale». Вариант B: «Иван, скидка 20% на кухни ждёт вас до полуночи: shop.ru/sale». Тестируйте на 10% базы (по 5% каждый вариант), затем победителя масштабируйте на оставшиеся 90%.
Что даёт: персонализированный текст конвертирует оценочно в 2–3 раза лучше массового при тех же расходах. Тест покажет, насколько это работает именно для вашей аудитории.
Параметр 2: время отправки
Механика: используйте одинаковый текст для обоих вариантов. Отправьте вариант A в пятницу в 12:00, вариант B — в пятницу в 18:00. Смотрите CTR через 24 часа. Важно: меняйте только время, не текст. Иначе невозможно понять, что именно повлияло на результат.
Что даёт: оптимальное время отправки индивидуально для каждой аудитории — его нельзя взять из общих рекомендаций, его можно только измерить. Разница в CTR между утренней и вечерней рассылкой может быть значительной.
Параметр 3: оффер
Механика: одинаковый текст, одинаковое время, разный оффер. Вариант A: «Скидка 15% на все кухни до воскресенья: shop.ru». Вариант B: «Бесплатная доставка при заказе до воскресенья: shop.ru». Метрика — CTR или конверсия в заявку.
Что даёт: разные аудитории реагируют на разные триггеры. Процентная скидка vs абсолютная выгода vs бесплатная услуга — что работает для ваших клиентов, покажет только тест. Подключение.
Параметр 4: длина сообщения
Механика: вариант A — один сегмент (до 70 символов кириллицы): «Иван, скидка 20% на кухни до пятницы: shop.ru». Вариант B — два сегмента: «Иван, только до пятницы — скидка 20% на всё кухонное оборудование. Успейте выбрать: shop.ru/sale». Стоимость варианта B вдвое выше, зато он содержит больше информации.
Что даёт: если CTR варианта A и варианта B близки — короткий вариант выгоднее: тот же результат за вдвое меньшие расходы. Если B значительно выше — двойные расходы оправданы.
Правила, без которых тест не работает
Один параметр за раз. Если одновременно менять и текст, и время — непонятно, что именно повлияло.
Случайное разделение базы. Не «первая половина списка» и «вторая» — случайная выборка.
Достаточная выборка. На каждый вариант нужно достаточное количество реакций для значимых выводов (как правило, от нескольких сотен). При малой базе результат случаен.
Масштабировать победителя. Тест без применения результата — потраченное время.