Стоит ли одновременно тестировать несколько вариантов вашей страницы?

Часто в онлайн-маркетинге оптимизация коэффициента конверсии и A / B-тестирование используются как синонимы.

Вы хотите повысить производительность страницы (версия A), поэтому создайте альтернативную версию этой страницы (версия B), разделите трафик между двумя страницами и посмотрите, какая страница работает лучше всего.

Однако большинство людей не осознают, что такой строгий A / B-тестирование не всегда является наиболее продуктивным способом тестирования вашего сайта.

Если у вас есть трафик, вам может быть интересно пройти тест A / B / C / D / и т. Д. (даже если это не так хорошо звучит, как «Тест A / B»).

В конце концов, чем больше у вас вариантов, тем больше вы можете узнать из каждого теста.

Почему вы должны попробовать несколько вариантов

На недавней конференции Optimizely рассказала о том, что определили лучшие тестирующие компании в мире.

Удивительно, но тестирование нескольких вариантов было одним из четырех крупнейших предикторов успеха теста.

На основании данных, собранных из более чем 100 000 тестов, 65% тестов, выполненных в Optimizely, имели только 2 варианта (контроль и вариант 1). Только 17% тестов имели 4 или более вариаций.

Там нет ничего удивительного, не так ли?

Но здесь все становится действительно интересно. Только 14% экспериментов только с 2 вариациями дали значительное улучшение в степени конверсии. С другой стороны, тесты с 5 вариациями имели прибыль 27%.

Это означает, что ваш коэффициент конверсии повысится на 90%, если вы попробуете 5 вариантов вместо 2!

Поэтому, если вы просто проводите A / B-тестирование, вы тратите драгоценный трафик и снижаете свои шансы на успех.

Вопрос в том, как?

С A / B-тестированием вы в основном говорите: «Я думаю, что текущий дизайн или мой новый дизайн будут работать лучше для моей целевой аудитории».

Но что, если вариант работает лучше? Значит ли это, что вы обнаружили идеальную версию своей страницы?

Даже отдаленно. Даже с успешным тестом A / B вы должны продолжать тестирование, чтобы действительно создать идеальную страницу.

К сожалению, каждый последующий A / B-тест вводит свой собственный набор переменных. Такие вещи, как сезонность, конкурентные предложения, рекламные акции и естественные изменения, могут сделать невероятно трудным продвижение вперед с помощью строгого A / B-тестирования.

Однако, если вы тестируете несколько вариантов одновременно, вы можете сравнить яблоки с яблоками и добиться гораздо более активного прогресса в своих тестах.

Тематическое исследование

Недавно мы провели тест для клиента, который хотел получить трафик на свой сайт с главных страниц сайта до страницы «Найти свой локальный раздел».

После долгих размышлений и анализа мы решили добавить ссылку «Найти свою локальную главу» в нижний колонтитул клиента. Это позволило бы разместить ссылку перед максимально широкой аудиторией и максимально увеличить число людей, которые кликают на страницу местной главы.

Вариант 1

Это то, что мы изначально собрали вместе:

Вариант 2

Когда мы впервые предложили добавить эту ссылку в нижний колонтитул, клиент подумал, что включение ссылки будет целесообразным; другими словами, они были счастливы с вариантом.

Однако мы знали, что у нас достаточно трафика на сайте, чтобы протестировать более одного варианта, поэтому мы собрали вторую версию ссылки:

Вариант 3

Инстинкт кишки сказал нам, что этот новый вариант, вероятно, будет работать лучше, чем наша первая попытка, но в Disruptive мы верим в тестирование, а не в инстинкт кишки, поэтому мы решили: «Эй, у нас достаточно трафика, чтобы попробовать 3 варианта, что-нибудь еще!

Однако мы столкнулись с недостатком.

Первые два варианта идеально подходят для темы и цветового оформления страницы. Но когда мы пытаемся собрать наш третий вариант, у нас заканчиваются причудливые идеи.

Мы кратко обсудим решение для 2 вариантов, но затем подумаем: «Что мы должны потерять? Давай попробуем что-нибудь новое! "

Итак, мы взяли вариант 2 и окружили его яркой и контрастной синей рамкой, которая выделяла его на остальной части страницы:

Это сильно отличалось от всего, что мы пробовали на странице раньше, но мы решили реализовать эту идею и включить ее в наш тест.

результаты

После трех недель и более 110 000 посетителей у нас появился победитель:

Неудивительно, что добавление ссылки «Найти свою локальную главу» в нижний колонтитул во всех случаях увеличивает трафик на страницу локальной главы более чем на 60%.

Тем не менее, наш «дополнительный» вариант темной стрельбы был бесспорным победителем. Увеличен трафик на страницу местной главы почти на 83%.

Если бы мы просто выполнили A / B-тест между исходным нижним колонтитулом без ссылок и новым серым нижним колонтитулом «Найди свою локальную главу», мы бы увеличили трафик на страницу локальной главы примерно на 63%.

Это было бы огромным успехом, но мы бы только узнали, что добавление ссылки в нижнем колонтитуле увеличивает трафик на страницу локальной главы.

Включив дополнительные варианты (включая менее эстетичный вариант), мы обнаружили, что люди хотят посетить страницу местного раздела. Они просто не знали, как туда добраться.

Создание высококонтрастной кнопочной ссылки в нижнем колонтитуле позволило посетителям сайта выяснить, как попасть на страницу с местным трафиком.

Это был не тот дизайн, который мы бы выбрали, чтобы выиграть, но поскольку мы протестировали несколько вариантов одновременно, мы смогли быстро определить гораздо более эффективный вариант.

вывод

При оптимизации коэффициента конверсии возникает соблазн сосредоточиться на A / B-тестировании, но если у вас есть трафик для тестирования нескольких вариантов, ваши тесты с большей вероятностью дадут результаты, которые вы ищете.

Это может занять немного больше творчества и усилий, но если вы сможете почти удвоить свой показатель успешности тестирования и сократить время на успех, результаты будут того стоить.

Кстати, если вы хотите, чтобы я посмотрел ваш сайт и дал некоторые рекомендации по тестированию (включая подсказки о том, сколько вариантов попробовать одновременно), пожалуйста, дайте мне знать здесь или в комментариях!

Вы пробовали тестировать несколько вариантов одновременно? Каковы были ваши результаты?