A/B-тест — это сравнение двух версий письма на части базы, чтобы понять, какая из них приносит больше переходов и заказов. Тема влияет на открываемость, но дальше письмо читают или закрывают из-за прехедера, первого абзаца, кнопки и времени отправки. Ниже — пошаговый разбор для небольших баз: какие гипотезы проверять, как считать результат и как перенести победивший вариант в автоматическую цепочку.
Почему тема письма отвечает не за всё
Тема решает одну задачу: письмо открыли. Что будет дальше, зависит от содержимого. Открываемость email держится около 20 % — это заметно ниже, чем у SMS, где показатель доходит до 90 % (сравнение каналов коммуникации, 2025). Даже удачная тема не гарантирует клик: человек открыл письмо, увидел первый экран и за пару секунд решил, читать его или закрыть.
К открываемости стоит относиться как к ориентиру, а не как к точному прибору. Её считают по загрузке картинок, а почтовые клиенты часто их не подгружают — цифры искажаются. Разница в 3 открытия между группами может оказаться техническим шумом. Об этом подробнее в разборе про то, почему открываемость email-рассылок вводит в заблуждение.
Что проверять кроме темы: пять рабочих гипотез
Для базы в несколько сотен адресов достаточно одной гипотезы на тест. Вот варианты, которые дают заметную разницу быстрее всего.
| Что меняем | Пример гипотезы | На что смотрим |
|---|---|---|
| Прехедер | «Скидка до конца недели» вместо пустой строки после темы | Открываемость |
| Первый абзац | Одно предложение с выгодой вместо приветствия на три строки | Переходы, отписки |
| Кнопка | «Посмотреть каталог» вместо «Подробнее» | Клики (CTR) |
| Отправитель | Имя менеджера вместо названия компании | Открываемость, жалобы |
| Время отправки | Утро вторника вместо вечера пятницы | Открываемость, клики |
Прехедер — это строка, которую почтовый клиент показывает рядом с темой. Она либо поддерживает тему, либо тратит внимание впустую. Если у вас её нет, вы теряете вторую строку в списке входящих.
По кликам и заказам судить надёжнее, чем по открытиям. Клик — действие, которое сложно спутать с техническим шумом или случайной подгрузкой картинки. Если раньше тестов не было, начните с разбора как малому бизнесу проводить A/B-тесты email-рассылок — там разобраны базовые сценарии для небольшой базы.
Как провести тест по шагам
- Запишите гипотезу одной фразой: «Если поставить кнопку выше блока с доставкой, кликов станет больше, потому что не нужно листать». Один тест — одна гипотеза.
- Оставьте одну переменную. Если меняете и картинку, и кнопку, вы не узнаете, что именно сработало.
- Проверьте доставляемость до старта: отправьте обе версии на свои адреса в Gmail, Mail.ru и Яндекс, посмотрите, не уходит ли письмо в «Спам». Тест, где один вариант не дошёл, ничего не значит.
- Разделите базу случайно: половина получает версию А, половина — версию Б. Время отправки и сегмент одинаковые.
- Если база большая, сначала отправьте тестовую часть — например, по 20 % на каждую версию, а победителя затем отправьте остальным.
- Дождитесь, пока соберутся реакции: обычно это несколько часов, иногда сутки.
- Запишите итог в отдельный файл: дата, гипотеза, что меняли, результат. Через полгода этот журнал заменит вам десяток догадок.
Полная процедура с примерами — в руководстве A/B-тестирование email-рассылок для МСП.
Как оценить результат честно
Смотрите на метрики по порядку: сначала доставляемость, затем бизнес-результаты, потом открываемость, CTR и долю отписок (подход к аналитике email-рассылок, Mindbox). Если у варианта А открываемость выше, а доставляемость ниже, сравнивать нечего — сначала разбирайтесь с доставкой.
При базе в 200–300 контактов разница в 2–3 открытия ничего не доказывает. Ориентируйтесь на клики и заказы. Если обе группы дали одинаковое число переходов, победителя нет, и это нормальный результат: вы узнали, что этот элемент на аудиторию не влияет, и перешли к следующей гипотезе.
Считайте не по одной отправке, а по двум-трём, если письмо регулярное. Одна кампания может совпасть с распродажей, выходным или сбоем у провайдера — и вы сделаете вывод из случайности.
Типичные ошибки
- Меняют сразу тему, кнопку и картинку — результат нечитаемый.
- Делят базу не случайно: активных в версию А, спящих в версию Б. Так тестируют не письмо, а актив
