Продолжительность зависит от посещаемости ресурса, но в любом случае лучше проводить a/b-тестирование не менее 2 недель. Принятие окончательного решения раньше окончания срока тестирования, в результате чего возрастает вероятность ошибки первого рода. Много лет назад вероятность рассчитывали вручную по формулам, но сегодня есть автоматизированные инструменты, упрощающие работу аналитика. В нашем примере получили 27 заказов с лендинга с круглыми кнопками.
Расслабьтесь и наблюдайте за текущими результатами, особенно на начальном этапе. Проверяйте, чтобы ничего не сломалось и обе группы «чувствовали себя хорошо». Когда-то он больше технический, когда-то нет, все зависит от текущей команды и возможностей для проведения тестирования.
A/B тесты — что это такое и как использовать?
С помощью калькуляторов можно узнать, достаточно ли трафика на вашем сайте для A/B-теста с выбранной статистической значимостью. В калькулятор нужно ввести текущий показатель конверсии, желаемый уровень конверсии и процент статистической значимости. Простое руководство о том, как повысить конверсию сайта с помощью аналитики. Тестируем разные варианты страницы и находим самый конверсионный с помощью тестов. Провести A/B-тестирование нескольких элементов выгоднее, чем полностью переделывать структуру и внешний вид страницы без понимания, как это повлияет на поведение посетителей.
Это очень удобный инструмент, схожий по принципу с Яндекс.Экспериментами. Простота настройки позволяет пользоваться инструментом специалистам любого уровня и увеличить эффективность работы кампаний. Нажимаем кнопку «Сохранить» и попадаем на страницу готового проекта.
Подготовьте эксперимент
— Контрольная версия, А выигрывает или между версиями нет разницы. — В самом начале проведения тестирования проверьте, действительно ли оно работает. В процессе исследования воронки вы замечаете, что 60% пользователей уходят до завершения регистрации. Это означает, что можно повысить количество регистраций, изменив страницу регистрации, что, в свою очередь, должно помочь увеличить количество активных пользователей.
Например, мы хотим изменить цвет кнопки призыва к действию с красного на зеленый или переместить ссылку на правила возврата товаров из футера в боковое меню. Проверяйте темы, содержание, макет и другие элементы писем. Разделите аудиторию пополам, отправьте одно и то же письмо с разными https://deveducation.com/blog/gayd-dlya-novichkov-a-b-testirovanie-i-razlichnye-metody-provedeniya-ego/ темами, а затем посмотрите, с какой темой чаще открывали рассылку. Сплит-тест поможет определить, на что лучше реагирует ваша аудитория, и со временем быстрее «нащупывать» удачные варианты. В статье на примерах покажем, что это такое и как этим инструментом правильно пользоваться.
Выберите страницу, которую будете тестировать
В материале расскажем, как проводится такое тестирование и какие сервисы помогут упростить этот процесс. Независимо от того, был ли ваш тест успешным или нет, относитесь к каждому эксперименту как к возможности для обучения. Используйте то, чему вы научились, для выработки вашей следующей гипотезы. Вы можете, например, использовать предыдущий тест или сконцентрироваться на другой области, требующей оптимизации. В этом сценарии вы можете углубиться в данные или провести исследование пользователей, чтобы понять, почему новая версия не работает так, как ожидалось.
- Аудитории из разных регионов и источников, разного пола и возраста, в разное время дня и года могут непредсказуемо отличаться по поведению.
- В первую очередь надо думать, как не сделать проект хуже.
- Взглянем на интерфейс утилиты, настроим A/B-тестирование и подключим к Google Optimize какой-нибудь сайт.
- Во вкладке «Условия фильтрации» появится строка «Эксперименты».
- Эта разновидность теста эффективна в случае точечных изменений, не затрагивающих глобально работу сайта.
Если ваш бизнес связан с фермерством, то на аудиторию может лучше сработать зеленый или голубой. И в целом цветовые вкусы аудитории меняются со временем, какие-то оттенки становятся раздражающими или выходят из моды. Упростите действия, которые требуются от пользователя на сайте. Например, вместо большой формы обратного звонка оставьте краткую — только имя и номер. Людям жалко тратить время на заполнение больших анкет.
Анализируйте результаты. Наконец-то самое интересное
Выполняйте изменения последовательно, чтобы не потратить зря время и бюджет. Будь это перестановка блоков, изменения цветовой гаммы или полноценный редизайн — гадать, как отреагирует аудитория, не придется. A/B-тесты помогут собрать поведенческую статистику и остановиться на том, что не приведёт к падению конверсий. После клика на кнопку «Применить» откроется окно, в котором нужно выбрать вариант применения изменений – «Изменить исходную кампанию» или «Преобразовать в новую кампанию». После начала эксперимента, статистику по нему можно смотреть на странице «Проекты и эксперименты» во вкладке «Эксперименты в кампаниях». Выбираем из выпадающего списка исходную кампанию, на основе которой будем создавать проект и проводить тестирование, пишем название этого проекта.
Цена сервиса A/B-тестирования зависит от количества выполненных вами тестов. Вариант подойдет компании среднего размера без собственного отдела маркетинга. Конечно, это не относится к случаям, когда тестирование должно выявить наиболее удачный рекламный креатив. В таком случае основной целевой аудиторией исследования как раз являются пользователи, увидевшие ваши разные объявления рекламу.
Что можно исследовать сплит-методом
Разницу в среднем KPI для двух выборок показали через разность «sd» —среднеквадратичное отклонение. Двумя цветами обозначены A- и B-сегменты, на которых проводился тест. Так, на картинке 1 для A-сегмента у KPI 2,5 плотность значений 0,3, то есть оно встречается в 30% случаев. В рассылке или на лендинге иногда применяют агрессивный красный цвет кнопок.
Оставляете на сайте ту, на которую пользователи реагируют лучше. Допустим, у вас уже есть два страницы, и вы хотите узнать, какая из них работает лучше. К примеру, вы запускаете рассылку и у вас есть две разные версии потенциального лендинга.
