4 страшные ошибки при проведении A/B-тестирования

Зачастую, после анализа юзабилити ресурса, выявляется ряд рекомендаций, реализация которых очевидна и не подлежит сомнению. А что делать, если вы сомневаетесь в результате? Поможет только A/B-тестирование (сплит-тестирование). Провести его самому не так уж сложно, но для начала рассмотрим, чего делать НЕ надо.

Типичные ошибки при проведении A/B-тестирования

1. Не тестируйте все подряд.
Вы прочитали, что надо изменить цвет кнопки на красный, а у вас зеленая? И тут же бежите запускать тест? Постарайтесь так не делать. Почему? Потому что хорошие результаты дают тесты, основанные на хорошей ГИПОТЕЗЕ.
Как ее получить? Проанализируйте поведение своих посетителей в вебвизоре или по тепловой карте Яндекс-метрики. По ним вы увидели, что посетители не могут найти форму заказа? Вот вам и хорошая гипотеза, начинайте работать с формой.

2. Короткое время проведения эксперимента.
Для того, чтобы результаты теста были достоверными, он должен длиться достаточное время (минимум 14 дней). Чем больший трафик вы прогнали через тестируемые страницы, тем выше точность полученных данных.

3. Тестируйте гипотезы на управляемом трафике,
дающим примерно сравнимые результаты каждый день, приводящем примерно одинаковую целевую аудиторию.
Можно использовать трафик из:

• Google Adwords поиск;
• Яндекс.Директ поиск;
• Яндекс.Директ РСЯ;
• Вконтакте таргетинг;
• E-mail рассылки.

Разнородный трафик дает результаты, которые практически невозможно анализировать.

4. За показатель эффективности гипотезы принимайте не конверсию, а прибыль.
Обычно, те, кто решил своими силами проводить сплит-тестирование сайта, выбирают за показатель успешности варианта его конверсию. Хотим вас огорчить, это-не правильно.
Ведь конверсия по сути - относительный параметр, который нам ничего не говорит ни о прибыли, ни о среднем чеке. Важно отслеживать конечный результат -прибыль. А если судить по ней, зачастую сайты с более низкой конверсией приносят большую прибыль, чем лендинги с более высокими показателями конверсий. И, если разобраться, это логично, потому что обычно клиентов с хорошим чеком меньше, чем с маленьким.
В качестве показателя эффективности лендинга можно брать и доход на клик (EPC)=прибыль/количество кликов.


Надеемся, вы прочитали эту информацию раньше, чем ринулись в пучины сплит-тестирования. А если нет, то лучше поздно, чем никогда)

Читайте также

Основные сервисы для проведения A/B тестирования

A/B тестирование – основной инструмент для повышения конверсии. Запустить тестирование можно бесплатно, а можно- воспользоваться сервисом для тестирования...

Анализ эффективности лендинга

Итак, лендинг запущен, и посетители совершают на нем целевое действие. Вроде бы все замечательно и можно расслабиться. Но пока еще рано. Есть вероятность, что конверсия ниже той, которую вы ожидали получить. Значит, ваш лендинг нужно улучшать...

Дизайн триггеров или дизайн-триггеры?

Для начала разберемся, что такое «триггеры»? По определению в БСЭ, это спусковое устройство, которое сколь угодно долго находится в состоянии равновесия, а потом скачком переключается в другое при получении внешнего сигнала.

Написать комментарий