Как сравнить SMS, Viber и Email в одной рассылке

Как сравнить SMS, Viber и Email в одной рассылке

A/B-тестирование в омниканальных рассылках помогает понять, какой канал, текст и время отправки лучше работают для конкретной аудитории. Для этого базу делят на сопоставимые группы, каждой отправляют свою версию сообщения, а затем сравнивают доставку, клики, ответы и целевые действия. В статье разберём пошаговый подход для малого бизнеса в Беларуси: что тестировать в SMS, Viber и Email, как не исказить результат и как выбрать вариант для следующей кампании.

Что именно сравнивает A/B-тест в рассылках?

A/B-тест — это сравнение двух вариантов сообщения на одной и той же аудитории. В SMS можно проверить текст, призыв к действию или время отправки. В Viber добавляются изображение, кнопка и формат карточки. В Email обычно сравнивают тему письма, первый экран, предложение и время отправки.

Канал тоже можно сделать переменной. Например, одну часть клиентов направить в SMS, вторую — в Viber, а третью — в Email. Но такой тест отвечает только на вопрос о канале. Если одновременно изменить текст, скидку и время отправки, результат будет трудно объяснить.

Что тестируем Вариант A Вариант B Что сравниваем
Текст SMS «Скидка до 15 августа» «Заберите скидку до 15 августа» Клики и целевые действия
Время отправки Утро Вечер Отклик в одинаковый период
Канал SMS Viber Доставка, клики и обращения
Тема Email «Ваш заказ готов» «Заказ можно забрать сегодня» Открытия и переходы

Для небольшого бизнеса разумно начинать с одного изменения. Так проще понять, почему один вариант оказался сильнее. Если тестируете SMS и Viber, оставьте одинаковыми предложение, сегмент и период отправки.

Как подготовить аудиторию к сплит-тесту?

Сначала сформулируйте один вопрос. Например: «Клиенты, которые покупали в последние месяцы, чаще переходят по короткому предложению или по сообщению с объяснением выгоды?» После этого выберите один показатель успеха: клик, ответ, запись, покупка или другое действие, которое можно зафиксировать.

Базу разделите случайным образом на две или больше групп. Группы должны быть похожи по ключевым признакам: истории покупок, активности и типу клиента. Если активных клиентов отправить в одну группу, а давно молчащих — в другую, тест сравнит качество базы, а не тексты.

Сегментация особенно важна для коротких сообщений: в SMS ограничено место, поэтому каждая фраза должна соответствовать получателю. Для практической настройки групп можно использовать подходы из материала о сегментации SMS-рассылок в Беларуси.

Какие группы подойдут малому бизнесу?

  • новые клиенты и постоянные покупатели;
  • клиенты с недавней покупкой и те, кто давно не обращался;
  • получатели, которые уже переходили по ссылкам, и неактивная часть базы;
  • клиенты из разных городов, если предложение зависит от места обслуживания;
  • подписчики, которые предпочитают Email, Viber или SMS.

Не смешивайте в одном тесте рекламное предложение и сервисное уведомление. Напоминание о записи, статус заказа и акция решают разные задачи, поэтому для них нужны разные критерии оценки.

Как провести тест SMS, Viber и Email по шагам?

  1. Определите цель. Запишите действие, которое хотите получить: переход на страницу, ответ на сообщение, запись или покупку.
  2. Выберите одну переменную. Это может быть канал, текст, кнопка или время отправки. Остальные условия оставьте одинаковыми.
  3. Подготовьте два варианта. В SMS проверьте длину, ссылку и понятность призыва. В Viber проверьте отображение изображения и кнопки. В Email проверьте тему и первый экран письма.
  4. Разделите сегмент. Используйте случайное распределение и сохраните список групп, чтобы не отправить одному человеку обе версии.
  5. Проведите отправку. Для теста времени отправляйте варианты в один день и через одинаковый интервал. Для теста каналов учитывайте, что получатель может читать сообщения с разной скоростью.
  6. Соберите данные. Зафиксируйте доставку, клики, ответы, отписки и целевые действия. Для Email учитывайте открытия вместе с переходами, поскольку открытие само по себе не означает интерес.
  7. Выберите победителя. Сравнивайте варианты по заранее выбранной цели, а не по одному случайному заказу или ответу.

В омниканальной кампании полезно смотреть не только на результат каждого канала отдельно. Если человек получил Email, затем Viber, а потом SMS, история должна сохраняться в одном отчёте. Иначе один клиент попадёт в статистику несколько раз, а вывод получится неточным. Перечень показателей для такой оценки разобран в материале об омниканальной аналитике SMS, Viber и Email.

Какие показатели сравнивать после отправки?

Начните с доставки: сообщение должно дойти до адресата. Затем смотрите на вовлечённость — переходы, ответы и другие действия внутри канала. Главный показатель выбирайте по задаче кампании. Для напоминания важен ответ или подтверждение, для предложения — переход и заказ, для Email-цепочки — переход на нужный экран.

Показатель Что он показывает Как использовать
Доставка Сколько сообщений достигло адресатов Проверить качество базы и работу канала
Клики Сколько получателей перешло по ссылке или кнопке Сравнить текст, призыв и предложение
Ответы Сколько людей вступило в диалог Оценить сообщения с вопросом или просьбой подтвердить действие
Целевые действия Сколько клиентов записалось, заказало или подтвердило Выбрать вариант, который приносит нужный бизнес-результат
Отписки и жалобы Как аудитория реагирует на частоту и содержание Решить, нужно ли изменить сегмент или сценарий

Не сравнивайте только абсолютное число кликов, если в группах разный размер. Используйте долю получателей, которые выполнили действие, и фиксируйте одинаковый период наблюдения. Для ссылки применяйте отдельные метки или разные адреса, иначе переходы из SMS, Viber и Email смешаются.

Какие ошибки искажают результаты A/B-теста?

  • Одновременная проверка нескольких изменений. Если вместе поменять текст, канал и время, победителя нельзя объяснить.
  • Разные сегменты. Активные покупатели и неактивные контакты дают разный отклик ещё до отправки.
  • Оценка сразу после отправки. SMS часто читают быстро, а Email может получить переходы позже. Период сравнения должен быть одинаковым.
  • Ориентация только на доставку. Доставленное сообщение не означает, что клиент заинтересовался предложением.
  • Повторная отправка проигравшего варианта тем же людям. Она меняет поведение получателей и портит сравнение.
  • Слишком сложная ссылка. Длинный адрес занимает место в SMS и мешает понять, куда ведёт сообщение. Для коротких ссылок в email-маркетинге можно изучить отдельный материал о повышении кликабельности ссылок.

После теста сохраните не только победивший текст, но и условия отправки: сегмент, канал, дату, время и целевую метрику. Через несколько кампаний накопится рабочая библиотека сценариев для разных групп клиентов. Её удобно поддерживать в едином кабинете, где SMS, Viber и Email проходят через общие сегменты и отчёты.

3 шага, которые можно сделать на этой неделе:

  1. Выберите одну кампанию и сформулируйте один вопрос для теста: канал, текст или время.
  2. Разделите похожую аудиторию на две группы и подготовьте два варианта сообщения.
  3. Сравните доставку, клики и целевое действие, после чего используйте победивший вариант в следующей рассылке.