Вы тратите время на A / B-тестирование? Многие компании допускают ошибки в A / B-тестах, которые стоят им времени и денег, которые они не могут себе позволить, потому что они не понимают, что такое A / B-тесты и как их правильно выполнять.
A / B-тестирование – это невероятный способ улучшить ваши конверсии для любого бизнеса. Мы видели, что клиенты OptinMonster используют сплит-тестирование, чтобы легко получить более квалифицированных потенциальных покупателей, увеличить свой список рассылки и даже увеличить конверсию на 1500%.
НО, если вы делаете одну из распространенных ошибок тестирования, перечисленных ниже, ваши тесты подразделения могут работать больше вреда, чем пользы, Qubit говорит, что плохо выполненное сплит-тестирование может заставить компании инвестировать в ненужные изменения и даже снизить их прибыль.
Правда в том, что A / B-тестирование – это гораздо больше, чем просто настройка теста. Если вы действительно хотите увидеть улучшения, которые может принести сплит-тестирование, вам нужно правильно запустить тесты и избежать ошибок, которые подрывают ваши результаты.
В этой статье вы раскроете ошибки A / B-тестирования, которые допускают многие компании, чтобы вы могли их избежать, а также узнаете, как использовать сплит-тестирование ПРАВИЛЬНЫМ способом для выявления скрытых стратегий, которые могут инициировать ваши конверсии.
Давайте начнем!
1. Split Test не ту страницу
Одной из самых больших проблем с A / B-тестированием является тестирование не тех страниц. Важно не тратить время, ресурсы и деньги на бессмысленное сплит-тестирование.
Как узнать, стоит ли запускать сплит-тест? Если вы продвигаете бизнес, ответ прост: лучшие страницы, на которых можно разделить тест, – это те, которые имеют значение в конверсиях и привлекают больше потенциальных клиентов или продаж.
Hubspot говорит, что лучшими страницами для оптимизации на любом сайте являются наиболее посещаемые страницы:
Страницы продуктов особенно важны для тестирования сайтов электронной коммерции, особенно их самых продаваемых продуктов.
Другими словами, если страница не является частью вашей маркетинговой или сбытовой воронки, нет смысла пробовать ее (если только вы не хотите добавить ее в эти воронки).
Если внесение изменений не повлияет на чистую прибыль, продолжайте и попробуйте страницу, которая увеличит ваш доход вместо этого.
2. Иметь неверную гипотезу
Одной из наиболее важных ошибок A / B-теста, которую следует избегать, является отсутствие правильной гипотезы.
Что такое тестовая гипотеза A / B? Гипотеза A / B теста – это теория о том, почему вы получаете конкретные результаты на веб-странице и как вы можете улучшить эти результаты.
Давайте внимательнее посмотрим на это. Чтобы сформировать гипотезу, вам необходимо:
- Шаг 1: Обратите внимание на то, превращаются ли люди на ваш сайт. Вы получите эту информацию из аналитического программного обеспечения, которое отслеживает и измеряет, что люди делают на вашем сайте. Например, это скажет вам, если люди нажимают на ваш призыв к действию, подписываются на вашу рассылку или совершают покупку.
- Шаг 2: Рассуждать о том, почему происходят определенные вещи. Например, если люди попадают на вашу целевую страницу, но не заполняют форму, чтобы захватить их основной магнит, или у страницы высокий показатель отказов, то, возможно, призыв к действию неправильный.
- Шаг 3Подумайте о некоторых возможных изменениях, которые могут привести к тому, что вы захотите изменить поведение на определенной странице. Например, в приведенном выше сценарии вы можете попробовать другую версию вашего призыва к действию.
- 4 этап: Рассчитайте, как вы будете измерять успех, чтобы точно знать, если какое-то конкретное изменение имеет значение в конверсиях. Это важная часть гипотезы A / B-теста.
Вот как бы вы сложили все это, следуя нашему предыдущему примеру:
- наблюдениеМы замечаем, что, хотя на главной странице нашего основного магнита много трафика, коэффициент конверсии низкий, и люди не подписываются на получение основного магнита.
- Возможная причинаМы считаем, что это потому, что призыв к действию недостаточно ясен.
- Предлагаемое решениеМы считаем, что можем решить эту проблему, изменив текст на кнопке призыва к действию, чтобы сделать ее более активной.
- измерение: Мы будем знать, что мы правы, если мы увеличим подписки на 10% в течение месяца после модификации.
Обратите внимание, что вам нужны все элементы для правильной гипотезы: просмотр данных, рассуждения о причинах, предложение теории о том, как это исправить, и измерение результатов после реализации массива.
3. Сплит тест слишком много элементов
Это одна из ключевых ошибок в A / B-тестировании, которую совершают многие люди: пытаясь разделить тест на слишком много элементов одновременно.
Может показаться, что тестирование нескольких элементов страницы одновременно экономит время, но это не так. Что происходит, так это то, что вы никогда не узнаете, какое изменение отвечает за результаты.
Мы, вероятно, упомянем это несколько раз, потому что это очень важно: разделенное тестирование означает изменение элемента на одной странице и тестирование его на другой версии того же элемента, как показано здесь:
В тот момент, когда вы меняете более одного элемента за раз, вам требуется многовариантный тест, подробно описанный в нашем сравнительном тесте по сравнению с многовариантным тестом.
Многофакторное тестирование может быть отличным способом протестировать редизайн сайта, когда вам нужно изменить множество элементов на странице. Но вы можете получить множество комбинаций, и вам понадобится время, которое вы не захотите вкладывать. Многомерные тесты также хорошо работают только на сайтах и страницах с большим трафиком.
В большинстве случаев простой сплит-тест даст вам наиболее значимые результаты.
4. Запустите слишком много сплит-тестов одновременно
Когда дело доходит до A / B-тестирования, будьте проще.
Можно запустить несколько сплит-тестов. Например, вы можете получить значительные результаты, протестировав три разные версии вашей кнопки призыва к действию. (Выполнение этих тестов не то же самое, что и многовариантные тесты, потому что вы по-прежнему меняете только один элемент для каждого теста.)
Самые опытные оптимизаторы конверсий рекомендуют не запускайте более четырех сплит-тестов одновременно, Одна из причин заключается в том, что чем больше вариантов вы используете, тем больше необходим размер тестовой выборки A / B. Это потому, что вы должны отправлять больше трафика каждой версии, чтобы получить надежные результаты.
Это известно как статистическая значимость A / B-тестирования (или, в повседневном смысле, обеспечение достаточного количества цифр, чтобы иметь реальное значение), что вы можете проверить с помощью инструментов, описанных в нашем руководстве по разделенному тестированию.
5. Получить неправильное время
С A / B-тестированием время – все, и есть некоторые классические ошибки A / B-тестирования, связанные со временем …
Сравните разные периоды времени
Например, если вы получаете наибольшее количество трафика со своего сайта в среду, то нет смысла сравнивать результаты сплит-тестов за этот день с результатами в день с низким трафиком.
Что еще более важно, если вы розничный продавец электронной торговли, вы не можете сравнить результаты сплит-теста для праздничного бума с результатами, которые вы получили во время спада продаж в январе.
В обоих случаях вы не сравнивая как с как, так что вы не получите надежных результатов. Решение состоит в том, чтобы запустить тест для сопоставимых периодов, чтобы вы могли точно оценить, изменились ли какие-либо изменения.
Также важно обратить внимание на внешние факторы, которые могут повлиять на результаты разделенных тестов. Если вы занимаетесь маркетингом на местном уровне, а мощность отключается из-за стихийного бедствия, вы не получите ожидаемого трафика или результатов. По мнению Small Business Sense, предложение, связанное с зимой, не будет иметь такого же эффекта, как летние.
Не запускайте тест надолго
Вы также должны выполнить A / B-тестирование в течение определенного периода времени, чтобы получить статистическую значимость A / B-тестов и 95% -ный рейтинг достоверности результатов. Это 95% означает, что вы можете быть уверены, что ваши результаты точны, и что вы обязательно будете принимать новые маркетинговые решения на основе этих данных.
Как вы увидите в совете № 7, это время варьируется в зависимости от ожидаемого количества конверсий и количества вариаций. Если вы запустите 2 варианта и ожидаете 50 конверсий, ваш пробный период будет короче, чем если бы у вас было 4 варианта и вы ищете 200 конверсий.
Вот график из Оптимизатора веб-сайтов, который поможет вам определить, достигли ли вы статистической значимости для вашего теста А / В. Введите количество посетителей и конверсий для вашего теста, а также рассчитайте статистическую значимость. Он также включает в себя значение P, статистическое значение, которое также помогает подчеркнуть достоверность вашей статистики.
Тест на разные задержки
Время также может повлиять на успех ваших сплит-тестов OptinMonster. Одна из ошибок A / B-теста, которую мы видим, когда люди совершают свои кампании, – это изменение времени их проведения.
Если кампания отображается после того, как ваш посетитель был на странице в течение 5 секунд, а другая – через 20 секунд, это не настоящий тест для разделения.
Это потому, что вы не сравниваете подобные аудитории. В общем, гораздо больше людей будут оставаться на странице в течение 5 секунд, чем 20 секунд.
В результате вы увидите разные показы для каждой кампании, и результаты не будут иметь смысла или будут полезны для вас.
Помните, что для истинного теста деления вы должны изменить элемент на странице, а НЕ время. Но если вы хотите поэкспериментировать с выбором времени, у этой статьи есть всплывающие окна, приветствия и скользящие кампании.
6. Работа с неправильным трафиком
Мы упомянули статистическую значимость тестов A / B выше. Помимо получения правильного пробного периода, вы также должны иметь правильный объем трафика. По сути, вы должны протестировать свои кампании с достаточно людей, чтобы получить значимые результаты,
Если у вас сайт с высоким трафиком, вы сможете быстро выполнить сплит-тесты благодаря постоянному потоку посетителей на ваш сайт.
Если у вас есть сайт с небольшим трафиком или случайными посещениями, это займет немного больше времени.
Также важно правильно распределить трафик, чтобы вы ДЕЙСТВИТЕЛЬНО проводили подобные тесты. Некоторые программы раздельного тестирования позволяют вам вручную назначать трафик, который вы используете для тестирования, но проще разделить трафик автоматически, чтобы избежать возможности получения ненадежных результатов неправильного типа разбивки.
Если вы используете OptinMonster для A / B-тестирования, это легко сделать правильно, потому что OptinMonster автоматически разделяет ваш трафик в зависимости от количества выполняемых тестов.
7. Попробуй слишком рано
Распространенной ошибкой A / B-тестирования является слишком ранний запуск сплит-теста.
Например, если вы начинаете новую кампанию OptinMonster, вам следует немного подождать, прежде чем начинать сплит-тест. Во-первых, не имеет смысла создавать сплит-тест, потому что у вас не будет данных для создания базовой линии для сравнения. Вы не будете ничего проверять, что является пустой тратой времени.
Вместо этого запустите новую кампанию как минимум на неделю и посмотрите, как она работает, прежде чем приступить к настройке и тестированию. Вы можете использовать эту диаграмму Digital Marketer, чтобы рассчитать свой идеальный пробный период на основе ожидаемого количества конверсий.
8. Изменение параметров в середине теста
Один из способов действительно испортить вашу A / B-процедуру – это изменить настройки в середине теста.
Это происходит, если вы:
- Вы решаете изменить объем веб-трафика, который видит элемент управления или вариант.
- Добавьте или измените вариант до окончания идеального пробного периода A / B, как показано в таблице выше.
- Измените ваши разделенные цели теста.
Как говорит Wider Funnel, внезапные изменения делают ваш тест недействительным и искажают результаты.
Если вам абсолютно необходимо что-то изменить, начните тест снова. Это единственный способ получить результаты, которым вы можете доверять.
9. Неточное измерение результатов
Измерение результатов так же важно, как и тестирование, однако это одна из областей, где люди допускают дорогостоящие ошибки в тестах А / Б. Если вы не правильно измеряете результаты, вы не можете доверять своим данным и не можете принимать обоснованные решения. в данных об их маркетинге.
Один из лучших способов решить эту проблему – убедиться, что ваше решение A / B-тестирования работает с Google Analytics.
OptinMonster интегрируется с Google Analytics, поэтому вы можете видеть точные данные о трафике и конверсиях на своей панели инструментов.
Вот как Google Analytics интегрируется с OptinMonster, чтобы вы могли получать полезную информацию. Вы также можете настроить собственную панель мониторинга Google Analytics для сбора данных кампании с остальными показателями веб-сайта.
10. Использование разных правил отображения
Один из способов действительно испортить результаты A / B-тестов OptinMonster – это внести произвольные изменения в правила отображения.
OptinMonster имеет мощные правила отображения, которые влияют на то, когда отображаются кампании, в каком часовом поясе и в каком месте они отображаются, кто их видит и многое другое.
Но помни это сплит тесты о смене предмета на странице. Если вы измените правила отображения, чтобы один вариант показывался людям в Великобритании, а другой – людям в США. Это не похожее сравнение.
Если одна кампания – это ворота приветствия, а другая – кампания с намерением выйти, это не аналогичное сравнение. Если кампания показывается в 9 часов утра а другой в 9 вечера, это не … ну, идея понятна.
Если ваши кампании не показываются в одно и то же время аудитории одного и того же типа, вы не получите достоверных данных. Обратитесь к нашему руководству по использованию правил просмотра с OptinMonster, чтобы узнать, как настроить правила, когда кампании должны отображаться и кто должен их видеть.
11. Запуск тестов в неправильном месте
Это одна из самых глупых ошибок A / B-теста, которую, по вашему мнению, может заметить большинство людей.
Многие люди тестируют свои маркетинговые кампании на сайте разработки, и это отличная идея. Что не так хорошо, так это то, что иногда они забывают перенести выбранные кампании на действующий сайт, и тогда кажется, что их сплит-тесты не работают.
Это потому, что единственные люди, которые посещают сайт разработки, являются веб-разработчиками, а не их клиентами. К счастью, переключение – это простое решение, поэтому, если вы не видите ожидаемых результатов, эту проблему стоит проверить.
Если вы используете OptinMonster, вот как он решает эту проблему:
Войдите в панель управления OptinMonster и щелкните значок своей учетной записи, чтобы открыть раскрывающееся меню. Перейдите к Мой аккаунт,
идти сайты,
Выберите сайт, который хотите изменить, и нажмите «Изменить».
Измените URL-адрес веб-сайта разработки на действующий сайт, затем сохраните изменения.
Для получения дополнительной информации прочитайте наш документ о том, как добавлять, удалять или редактировать веб-сайт на OptinMonster.
12. Откажитесь от сплит-тестирования
Некоторые компании постоянно оптимизируют свои сайты, а это значит, что они всегда тестируют и увеличивают конверсии. Других не так уж и много.
Одной из ошибок A / B-теста, которую вы хотите избежать чаще всего, является слишком ранняя остановка теста (например, до как минимум одной недели, упомянутой выше) или принятие решения о сбое теста и его остановка.
Отказ от сплит-тестирования является ужасной ошибкой, потому что вы не сможете воспользоваться преимуществами оптимизации, если это произойдет.
Прежде всего, нет неудавшегося сплит-тестапотому что целью теста является сбор данных. Вы можете узнать некоторые неожиданные результаты, которые помогут вам создавать новые тесты.
Во-вторых, если вы сдаетесь, потому что не получаете ожидаемых результатов, то следуйте тому, что вам говорят данные. Ваш инстинкт, также известный как уклон подтверждения, мог легко быть неправильным. Вы всегда можете запустить новый тест в конце пробного периода, чтобы увидеть, принесут ли различные изменения ожидаемые результаты.
В-третьих, не решайте, что тест был проведен достаточно долго, если у вас не было достаточно времени, чтобы получить приличный размер выборки и достичь статистической значимости и 95% -ного доверительного показателя. В противном случае вы потеряете свое время.
13. Слепо следуйте разделенным тестам
Всегда полезно прочитать примеры из практики и узнать о методах сплит-тестирования, которые работали для разных компаний.
Но одна ошибка A / B теста, которую вы должны избежать копирование того, что работает для других,
Если это кажется странным, послушайте нас …
Можно использовать тематические исследования, чтобы получить идеи о том, как и на что разделить тест, но имейте в виду, что то, что сработало для другого бизнеса, может не сработать для вас, потому что их бизнес уникален.
Вместо этого используйте тематические исследования A / B-тестирования в качестве отправной точки для создания своей собственной стратегии A / B-тестирования, которая позволит вам увидеть, что лучше всего подходит для ваших клиентов, а не для кого-то другого.
Теперь, когда вы знаете глупые ошибки A / B-тестирования, которые напрасно тратят ваше время, усилия и деньги, вы можете успешно начать сплит-тестирование. Как вы уже видели, OptinMonster облегчает сплит-тестирование ваших маркетинговых кампаний, чтобы вы могли получить лучшие результаты.
Чтобы получить больше вдохновения в маркетинге, ознакомьтесь с нашим экспертным резюме о создании великолепных целевых страниц для своих маркетинговых кампаний и узнайте больше о создании мобильных кампаний optin, которые принесут вам прибыль.
И не забудьте следовать за нами Twitter и Facebook для более подробных руководств.
