Нельзя завершать сплит-тестирование раньше, чем был достигнут размер выборки. В отчёте будут все показатели обоих вариантов — например, данные о количестве посетителей страницы, числе целевых действий, конверсиях. Если Varioqub обнаружит лучший вариант, он выделит его зелёным цветом.
Выберите программу, с помощью которой будете проводить тестирование. Для подключения системы нужен доступ администратора сайта — код события нужно будет добавить в шапку на исследуемой https://deveducation.com/ странице. Это замедлит получение статистически значимых данных. Мы рекомендуем использовать A/B-тестирование, если каждый вариант теста увидят более 1000 пользователей.
Не проводите A/B-тестирование незначительных изменений
Короче говоря, вам больше не надо рассуждать, почему тот или иной вариант страницы (или шага в пользовательском сценарии) более удачный — эксперимент все скажет сам за себя. A/B-тестирование — один из компонентов процесса оптимизации коэффициента конверсии (CRO), с помощью которого собирают качественные и количественные оценки пользователей. Полученные данные используют для изучения потенциальных клиентов и оптимизации воронки конверсии.
Другой пример модификации с низким риском — добавление новой функции. A/B-тест поможет сделать результат внедрения более предсказуемым. A/B-тесты позволяют получать хороший результат и при этом вносить лишь небольшие изменения, что приводит к увеличению ROI.
Этапы A/B тестирования
К количественным метрикам можно применить метод статистического анализа и понять, достоверны ли итоги сплит-тестирования. К качественным метрикам метод статистического анализа применить нельзя. Только когда мы опровергнем нулевую гипотезу, сможем принять альтернативную — о том, что новый вариант работает лучше старого.
- Если бездумно копировать чужие гипотезы, можно потерять много времени и не улучшить показатели.
- Иначе может получиться так, что отдельный сегмент аудитории будет видеть только один вариант — и результат будет недостоверным.
- Сравниваются два варианта (контрольный и тестовый) нескольких элементов в различных комбинациях.
- Поэтому в зависимости от того, что он смотрел и что ему нравится, зритель на своей главной странице видит те или иные шоу и фильмы в том или ином порядке.
Чтобы понять, какой призыв к действию (CTA, call-to-action) работает лучше, можно менять цвет кнопки или ее положение. Чтобы оценить разные заголовки — выписать варианты, подходящие под креатив. По результатам тестирования вы видите, что больше людей переходит a/b testing это по объявлению с заголовком о бесплатной доставке. Значит, это преимущество более привлекательно для целевой аудитории и стоит использовать его в рекламе. Фактически каждый элемент веб-страницы, конвертирующий посетителя в клиента, может быть протестирован.
Что можно тестировать
Метод A/B-тестирования используют для исследования рекламы, воронок продаж, сайта. Чтобы проверить это предположение, маркетолог использует специальный сервис — например, AB Tasty. Сервис распределяет трафик так, что половина посетителей страницы видят старую её версию, а половина — новую, с синей кнопкой «Купить». Через три недели маркетолог сравнивает результаты. Конверсия старой версии страницы — 5%, а новой — 7,5%.
Для электронной коммерции это может быть продажа продукта, а для b2b — генерация качественных лидов. Компании заинтересованы в том, чтобы посетители совершали на сайте целевые действия. То, насколько это удаётся, измеряется коэффициентом конверсии.
Для чего нужно тестирование?
Для настройки нового эксперимента нажмите на «Создать эксперимент». Напишите его название, выберите даты проведения эксперимента и долю аудитории, которая будет в нём участвовать. Тогда для тестирования собирают команду, состоящую как минимум из аналитика и разработчика. Чтобы сравнить два варианта объекта, нужно сформулировать гипотезу, определить метрики, рассчитать размер выборки, запустить тест и проанализировать результаты. Для проведения сплит-теста нужна большая выборка аудитории.
Несмотря на то, что Booking.com более десяти лет проводит A/B-тестирование, они постоянно думают, как ещё можно улучшить пользовательский опыт. С помощью A/B-тестирования можно увеличить количество заказов, дополнительных покупок и других позиций. Протестируйте разные варианты форм регистрации и подписки, блоков рекомендуемого контента, кнопок социальных сетей и других каналов продвижения.
