Вот простой пример А/B тестирования: Крис хочет отправить электронное сообщение своим подписчикам, чтобы рассказать им о своей новой книге. В предметной строке помещается: (А) Купить новую книгу Криса Бэгготта и (В) Я хотел бы узнать Ваше мнение о своей новой книге. Одна из этих предметных строк, возможно, лучше другой. Но какая именно? В традиционном маркетинге вы просто предполагаете, какой вариант лучше. Половина отдела ответит А, вторая половина — В. Затем босс говорит: «Вообще-то мне никогда не нравился Крис Бэгготт», так что скорее всего, он не разрешит поместить его имя в предметную строку. Вот это логика!
Крис Бэгготт. “E-mail маркетинг работает”

Введение

В прошлый раз мы делали Сводку статистики рассылок по месяцам. В этот раз вернёмся к теме тестирования.

Мы уже посмотрели, как простое перемещение кнопок социальных сетей из верхней части письма в нижнюю и небольшая игра с их цветом привели к повышению эффективности (кликабельности) в 30 раз.

Сегодня посмотрим на тест темы письма: как проверка 2-х разных тем повысило итоговую прибыль с рассылки почти на 15 000 рублей.

К слову сказать, тестирование темы — один из наиболее эффективных инструментов повышения результативности email рассылки в целом.

Если вспомнить воронку продаж для email, тема письма стоит там в самом верху, осуществляя “захват” аудитории для её последующего ведения к самому узкому месту воронки — выполнению целевых действий на сайте. Подробнее »


В прошлый раз мы разбирали подробную аналитику рассылок для интернет-магазинов. Сегодня у нас любопытный кейс про тестирование рассылки (на основе механики сплит-тестирования).

Интересен он в первую очередь полученными результатами, которые в очередной раз доказывают, что мелочи имеют значение. И даже совсем небольшие изменения могут в разы изменить ваши показатели — как в большую, так и в меньшую сторону.

Подробнее »


Странно, что до сих пор многие специалисты по маркетингу не проводят проверок, а полагаются на то, что им «кажется». Если вы уже провели проверку, у вас есть огромное преимущество перед ними. Вы признали тот факт, что только информация, полученная в результате проверки, скажет вам, что на самом деле правильно. Разница между вами и теми консервативными маркетологами очень заметна.
Крис Бэгготт. “E-mail маркетинг работает”

В прошлый раз обсуждали оценку экономической эффективности рассылок — какой доход приносят email кампании и окупает ли это вложения в них?

Сегодня снова поговорим о тестировании. Причём не о каком-нибудь простеньком а/б тесте, а о полномасштабной многопараметрической проверке.

Вообще, называть её можно по-разному: многовариантное/мультивариантное / MVT тестирование.

Но суть при этом остаётся прежней: если в а/б тесте вы делаете 2 варианта одного итого же письма, меняете в каждом один параметр, а потом сравниваете результаты, то в многопараметрическом тесте вы делаете сразу много вариантов одного и того же письма (4, 10, 16 и т.д.), где в каждом можете поменять уже несколько параметров и сравнить результаты.

Подробнее »


В прошлый раз мы наконец-то “добили” Мэйл Чимп — создание email кампании в сервисе по шагам. Сегодня поговорим про АБ тест в рассылках.

Обычно маркетологам трудно сразу предсказать реакцию подписчиков на то или иное послание. Но при помощи тестирования результаты рассылок можно существенно улучшить.

Суть А/В тестирования проста: части подписчиков вы предъявляете вариант письма А, другой части — вариант В, сравниваете их эффективность и “победителя” по намеченному вами параметру (числу просмотров, числу кликов) рассылаете третьей части базы — самой большой.

АБ тест: типовая схема проведения в рассылке

 Впрочем, здесь есть свои тонкости:

Подробнее »


В прошлый раз мы разбирали основные показатели эффективности отдельных email-кампаний. Сегодня поговорим про последовательное тестирование. Когда речь заходит о тестировании, то обычно имеют ввиду А/В (сплит) тестирование или многопараметрическую проверку.

Однако такие вещи не всегда можно реализовать на практике. Часто не хватает времени, часто игра не стоит свеч: размер базы подписчиков недостаточен, чтобы проводить полномасштабные проверки.

При тестах важную роль играет объём выборки. По мнению Криса Бэгготта (эксперта в области email маркетинга, автора книги “Email маркетинг работает”), имеет смысл делать выборки не меньше 250 подписчиков — тогда результаты будут более менее достоверными.

При этом тестировать лучше не больше 10% базы — чтобы самое эффективное содержание смогла оценить большая часть аудитории.

Давайте посчитаем, какого размера должен быть список рассылки (именно список — то есть тот сегмент базы подписчиков, которому вы единовременно намереваетесь разослать email кампанию), чтобы провести корректное А/В тестирование?

Подробнее »