«А давайте попробуем другую тему» — это не A/B-тест, а гадание. Настоящий A/B-тест даёт честный ответ, какой вариант работает лучше для вашей конкретной базы. Иногда результат удивляет.
01Что такое A/B-тест в рассылках
A/B-тест — это сравнение двух вариантов письма (A и B) на части базы. Подписчики случайным образом делятся пополам, каждая половина получает свой вариант, и через заданное время система смотрит, какой показал лучшую метрику: открываемость, кликабельность или конверсию.
Большинство современных email-платформ умеют это автоматически: вы создаёте два варианта, задаёте размер тестовой группы (часто 20–30% базы) и целевую метрику. Победитель потом уходит на остальную базу.
02Что тестировать в первую очередь
Не всё одинаково влияет на результат. По нашему опыту работы с рассылками порядок такой.
Тема письма и имя отправителя
Самый сильный рычаг: именно от них зависит, откроют письмо или нет. Тестируйте разные подходы: короткая и длинная тема, вопрос и утверждение, цифра в теме и без, эмодзи и без. Имя отправителя тоже работает: «BrandEvo» против «Анна из BrandEvo» — часто заметная разница в Open Rate. Подробнее — в материале про темы писем.
Прехедер
Это короткий текст, который виден в инбоксе рядом с темой. Часто его недооценивают и оставляют первой строкой письма. Прехедер — отдельный инструмент: он либо усиливает тему, либо добавляет аргумент.
Призыв к действию (CTA)
Текст и цвет кнопки, формулировка («Подробнее», «Получить скидку», «Записаться»), количество CTA на письмо. Один из самых частых источников роста CTR.
Структура и длина письма
Длинное письмо с подробным текстом против короткого с одной мыслью; один блок против нескольких; картинка в шапке против текстового начала. Зависит от ниши, но проверять стоит.
03Что тестировать дополнительно
- Время отправки — утро, день, вечер, разные дни недели. Учтите часовые пояса базы.
- Персонализация в теме — с именем и без. Не всегда имя в теме повышает открываемость, иногда раздражает.
- Сегменты — одно и то же письмо работает по-разному на разных сегментах: это тоже A/B-тест, только не одного письма, а целой стратегии.
- Тон и стиль — официальный или дружеский, длинные абзацы или короткие, эмодзи в тексте.
- Картинки — наличие баннера в шапке, фотография товара, иллюстрация.
04Как поставить тест корректно
Главная ошибка — тестировать всё сразу. Если вы одновременно меняете тему, время отправки и CTA, вы никогда не узнаете, что именно сработало. Правило: один тест — одна переменная.
Минимальный размер группы
На маленькой базе (несколько сотен подписчиков) A/B-тесты почти бесполезны: разница в одно открытие меняет результат. Ориентир — минимум несколько тысяч получателей в каждой группе. Если база меньше, тестируйте на нескольких рассылках подряд и смотрите тренд.
Целевая метрика
Для теста темы — Open Rate. Для теста CTA или контента — CTR или конверсия в покупку. Для теста времени отправки — открываемость и кликабельность одновременно.
Что фиксировать
Гипотезу, вариант A, вариант B, размер групп, дату, метрику и результат. Без журнала тестов вы через месяц забудете, что уже проверяли, и будете ходить по кругу.
05Типичные ошибки
- «Победил вариант B на 2%» — часто это случайная разница, а не настоящий эффект. Проверяйте статзначимость или повторяйте тест.
- Тест на разных сегментах — если вариант A ушёл новым подписчикам, а B — старым, сравнение бессмысленно.
- Слишком много тестов одновременно — теряется фокус и тратится база.
- Внедрение «победителя» без проверки — то, что сработало в одной рассылке, может не повториться. Лучший вариант — повторный тест через месяц.
- Тест без гипотезы — «давайте попробуем» без понимания, что и зачем меняем, ничему не учит.
06Что обычно даёт рост
По опыту работы с разными нишами, самые заметные приросты дают тесты темы и прехедера (Open Rate растёт быстрее всего), а самые устойчивые — тесты CTA и структуры письма (они стабильно улучшают CTR и конверсию). Тесты времени отправки часто показывают более слабый эффект, чем принято думать: разница обычно есть, но небольшая. Подробнее про метрики — в статье про открываемость писем.
Один регулярный A/B-тест в каждой большой рассылке за полгода обычно даёт более заметный рост, чем смена платформы или редизайн шаблона.
Email-маркетинг с тестами в плане работ
В подписке закладываем регулярные A/B-тесты на ключевых рассылках, ведём журнал гипотез и каждый месяц показываем, что и насколько улучшилось. Подключаем рассылку к сквозной аналитике, чтобы видеть деньги, а не только клики.
Официальная документация по теме — Постмастер Mail.ru.