— Выполните запрос на тестовой закрытой площадке, если она у вас есть. Если ее нет, проверьте данные, полученные в первый день эксперимента. В процессе исследования воронки вы замечаете, что 60% пользователей уходят до завершения регистрации. Это означает, что можно повысить количество регистраций, изменив страницу регистрации, что, в свою очередь, должно помочь увеличить количество активных пользователей. Вот шесть шагов, которые нужно пройти, чтобы провести тестирование.
С помощью специальных инструментов, например, Google Optimize, трафик сайта разделяется на два потока. Одной части посетителей показывается старый вариант страницы, а другой – новый, с перемещенной кнопкой. Далее анализируются показатели конверсии по обеим группам.
A/B тест: что это такое и как его провести
Вкусы вашей аудитории могут не совпасть с вашими, а прогадать — значит, потерять часть лидов. В отчёте будут все показатели обоих вариантов — например, данные о количестве посетителей страницы, числе целевых действий, конверсиях. Если Varioqub обнаружит лучший вариант, он выделит его зелёным цветом. Тогда для тестирования собирают команду, состоящую как минимум из аналитика и разработчика. Маркетологи используют сплит-тестирование, чтобы найти наиболее эффективный вариант текста объявления, призыва к действию на странице сайта, заголовка лид-формы во «ВКонтакте» и так далее. Метод A/B-тестирования используют для исследования рекламы, воронок продаж, сайта.
- Маркетолог предполагает, что, если изменить цвет кнопки «Купить» с зелёного на синий, конверсия вырастет до 7%.
- Тогда удастся сделать вывод, стоит ли всё-таки вносить изменения.
- Только так вы сможете оптимизировать ваши лендинги, а вместе ними и рекламные объявления под предпочтения своей аудитории.
- Метрикой А/В-тестирования квиза и сайта для компании по покупке авто с пробегом выбираем количество оставленных заявок.
- Он более читабельный, а значит повысить количество скачиваний.
Если у сайта высокий трафик, можно провести A/B-тестирование оптимизации навигации. Например, изменяя количество подкатегорий, выделяя важные разделы яркими цветами и так далее. Но для сайтов с низким трафиком фидбек нужно собирать по-другому. Учитывайте, что не все посещения страницы можно отследить (например, если пользователь не соглашается с политикой конфиденциальности). Поэтому вы должны наблюдать, сколько точек данных генерируется каждый день для точной оценки ожидаемой даты окончания эксперимента. Если сценарий вашего тестирование примерно такой же, как описанные выше, в итоге вы получите письменные ответы на 10 вопросов.
Принцип 1. Использовать только один ключевой показатель
Как правило, бизнесы с низким трафиком на сайтах не могут использовать A/B-тестирование в его традиционном понимании, но существует множество альтернатив. Например, пользовательские тестирования, тепловые карты, древовидное тестирование, айтрекинг и другие практики, описанные в статье. Они помогут выяснить, насколько оправданы траты на оптимизацию, и довольны ли клиенты товарами или услугами.
Механизм прост – исследование запускается в несколько кликов. Тестировать можно только лендинги, созданные на платформе. Четкая формулировка поможет прояснить, действительно ли внесенные изменения коррелируют с выбранными метриками.
Собирайте информацию из ваших инструментов аналитики
Респонденты делятся на равные и однородные группы, а затем оценивается, какой из вариантов оказался более успешным. Предположим, вы хотите изменить дизайн домашней страницы, и ваши дизайнеры придумали шесть вариантов. Что ж, для этого и существует A/B-тестирование, верно? Вы снизите свою возможность обнаружить статистический эффект, так как в каждой группе будет меньше людей.
Даже если результат статистически значим, это не гарантия правдивости результата, пока период теста не завершен. Если анализируется сайт, то рассчитать время тестирования можно с учетом ежедневного трафика. В среднем, для проведения объективного теста достаточно двух недель. Чтобы исключить влияние внешних факторов (например сезонности, курса валют, погоды и т. д.), контрольный и тестовый вариант нужно проверять одновременно. Каждый сайт или мобильное приложение содержит в себе десятки элементов, так или иначе влияющих на пользовательский опыт и, соответственно, трафик, конверсию и другие целевые показатели.
Отличия между A/B-тестированием и сплит-тестированием
Это необходимо для проверки достоверности полученных данных, а также статистическую значимость результатов. С помощью тестов повышается качество трафика, a/b testing это позитивно влияющего на увеличение конверсии и прибыли. А/B-тестирование помогает понять, что улучшить, а также как не сделать товар или услугу хуже.
Для этого важно понять причину, почему люди уходят без покупки или регистрации. У тех или иных ресурсов разные аудитории и цели, поэтому не существует универсальной причины. Опытным путем в ходе сплит-тестирования выясняется, какой именно вариант оформления кнопок или текста будет самым удачным. Если ориентироваться только на личные ощущения, то конкуренты, которые проведут тщательный анализ метрики, легко вас обойдут и предложат потребителям тот вариант, который им нужен. Поэтому без А/B-тестирования сегодня не может обойтись ни один проект (приложения, товары, услуги и т. д.).
Что такое А/В тестирование?
Если отсутствует ресурс получить адекватные данные, A/B-тесты не покажут результат. Это может быть какая-то кнопка или форма для регистрации, картинка в статье, видеоролик в боковой панели, который идет фоном, или же вовсе количество символов в статье. Решите, с чего нужно начать, чтобы не распыляться и не проводить тестирование на большом количестве элементов. Внесете слишком много коррективов и незаметно для себя начнете сравнивать две принципиально разные страницы.
Чтобы принимать решения об эффективности теста, выбирают уровень значимости 90, 95 или 99%. Пересечение распределений при этом равно 10%, 5% или 1% соответственно. При невысоком уровне значимости вы рискуете сделать неверные выводы об эффекте изменения. Аналитик должен обязательно рассчитать статистическую значимость результатов.