Содержание
Поэтому перед тем, как броситься в тестирование сайта, Вам нужно понимать, сколько человек его посещает ежедневно и сколько дней тестирование должно длиться. Проведение эксперимента и накопление данных.Здесь потребуется запустить тест и выждать период. Не стоит в это время заранее наблюдать за результатами, потому, что в первые минуты эксперимента Вам может показаться, что всё плохо и печально.
Сначала сформулируем ключевые задачи компании или магазина и убедимся, что цели эксперимента с ними совпадают. Не проверяйте гипотезы, которые сразу не согласованы с глобальной целью. Если неверно выбрать ориентир, вы впустую потратите время и деньги. Проводить тесты с помощью нескольких разных сервисов — это трудоемко, сложно и дорого. К примеру, воспользоваться популярными сервисами от Google. Тонкости проведения сплит-тестов во многом зависят от интерфейса и особенностей сервиса.
Сухие цифры, статистика, гарантированный результат — все так просто. Чтобы провести a/b тестирование, которое даст корректные данные, нужно следовать правилам. Мы составили из них последовательность действий, получилось 10 шагов.
Но дальше стоит проанализировать средний чек или объем продаж, то есть привязку к экономическим показателям сайта – они могут не вырасти, а, наоборот, упасть. Смысла в конверсии как таковой уже не будет, так как эта цель промежуточная (конечная – доход). Недешевый платный сервис, у которого есть пробный тариф, чтобы бесплатно попробовать функционал. Его плюсы в удобном механизме настройки сплит-теста и учете даже незначительного объема трафика.
- Практикующие специалисты приводят данные о том, что необходимо провести контрольное тестирование через какое-то время после завершения первого эксперимента.
- Чтобы не сомневаться в достоверности результатов, тест лучше проводить с контрольной выборкой.
- Подключите сквозную аналитику на основе коннекторов — и вы сразу увидите, какие изменения принесли вам больше всего клиентов, а какие — просто слили бюджет.
- Выборка данных — предмет отдельного разговора и даже собственного калькулятора.
- Прежний вариант «Расчет цены» меняете на «Бесплатная консультация».
В настройках сайта указываем процент аудитории, который будет участвовать в эксперименте. Google Optimize – бесплатный веб-сервис, помогающий тысячам разработчиков оптимизировать страницы и быстро достигать поставленных целей. Здесь есть все необходимое и за это необходимое не приходится платить. Optimizely – удобное приложение, пользующееся большим спросом на западе. Возможно, причиной тому служит возможность проводить тесты, используя визуальный интерфейс.
Многовариантный эксперимент
Заголовок статьи – первое, что видит пользователь, решивший посетить ваш сайт. Если заголовок изначально не привлекает внимание приходящей аудитории и не способен заставить человека прочитать статью, то вы уже потеряли часть прибыли. От цвета кнопок и наличия отдельных фраз до огромных кусков медиаконтента или количества материалов на сайте в целом. Это можно сделать в информации о странице, щелкнув значок замка рядом с URL-адресом. Если вам не приходят Push-уведомления, проверьте настройки уведомлений. — Нулевая гипотеза предполагает, что результаты, А и В на самом деле не отличаются и что наблюдаемые различия случайны.
Почти бесполезно ставить завышенные цели, допустим, повысить конверсию в 2 раза за месяц. Последний обычно рассчитывается автоматически в тех инструментах для альфа- и бета-тестов, которые были выбраны. Например, чтобы резко увеличить число транзакций на сайте по требованию инвестора. Конверсионные кнопки (размер, расположение, цвет).
Он помогает работать с небольшими объемами данных, допустим, для среднесуточных значений. Размер выборки учитывается при оценке значимости. Для качественного продвижения продукта необходимо проверять каждую новую идею. Прежде чем настроить глобальные изменения на сайте, нужно убедиться, что они не навредят. Доверительное А/Б-тестирование позволяет получить объективную статистику, которая повлияет на принятое решение специалиста. Тогда удастся сделать вывод, стоит ли всё-таки вносить изменения.
Что такое А/Б тест?
Многое зависит от возможностей команды, наличия материальных и временных ресурсов для выполнения теста. Если мы говорим об отдельных сервисах, то они тоже есть, но, как правило, только для сайтов. Мы в своей работе используем эксперименты от Google Analytics.
Например, можно протестировать четыре фразы call to action для одной кнопки. Чтобы не сомневаться в достоверности результатов, тест лучше проводить с контрольной выборкой. Для этого нужно разделить аудиторию, на которой будут тестироваться варианты, не на две группы (A и B), а на три (A, A и B). Двум группам показать одну версию, третьей — другую.
Это тоже своего рода тестирование, но более масштабное и продвинутое. Вы можете создать несколько вариантов страницы (больше двух). Искусственный интеллект автоматически подберет аудиторию под каждый тип страницы, причем он будет делать это на постоянной основе.
Часто использую метод АБ теста, в принципе, его всегда и надо использовать, поскольку креативность креативностью, а поведение пользователя может быть непредсказуемым. Данные тесты часто дают понять наглядно моим клиентам, что “поиграть со шрифтом” не так суперски как кажется. Если отслеживать только основной показатель, не учитывая при этом дополнительные, результат будет неполным. Учитывайте связанные показатели — их изменение может дополнить начальную гипотезу и дать материал для построения следующих.
Как провести А/B тестирование в Google Optimize
Поэтому лучше проводить тест именно на тех сайтах, у которых уже есть поток посетителей — как новых, так и постоянных. А/Б-тестирование — это инструмент, который поможет найти самые эффективные варианты для https://deveducation.com/ продвижения вашего сайта. Кроме этого, вы сможете проверить их сначала на вашей целевой аудитории, прежде чем внести решающие изменения. После этого дизайнер нарисовал две версии кнопки для субтитров.
Например, сейчас у вас из 200 посетителей страницы 20 человек записываются на тренинг. Чтобы добиться показателя в 24 заявки, нужен рост на 20%. Задаем имеющуюся конверсию – 10% (20 из 200) и желаемый прирост 20%. Получается, что для достоверного тестирования, нам нужно показать обе страницы 7246 людям, по 3623 человека на каждую.
Что такое A/B-тестирование и как его проводить
Для наших мобильных пользователей мы провели A/B-тест, чтобы узнать, какой тип CTA внизу страницы конвертирует лучше всего. В качестве независимой переменной мы изменили дизайн CTA-панели. В частности, мы использовали в тесте один контрольный и три претендента. В качестве зависимых переменных мы использовали просмотры страниц на странице благодарности CTA и клики по CTA.
Анализ результатов
Считается, что продолжительность набора статистики по каждому варианту должна составлять не менее 7-10 дней. Только тогда можно с уверенностью говорить, что полученные данные — не результат случайности или влияния каких-то внешних факторов. Например, мы хотим изменить цвет кнопки призыва к действию с красного на зеленый или переместить ссылку на правила возврата товаров из футера в боковое меню. В формах для генерации лидов важно все, от цветов кнопок до текста. Такие нюансы могут серьезно повлиять на реакцию пользователя — сократить время на обдумывание покупки или вовсе заставить уйти с сайта. AB-test поможет улучшить формы подписки и повысить CTR — коэффициент кликабельности.
И в целом цветовые вкусы аудитории меняются со временем, какие-то оттенки становятся раздражающими или выходят из моды. Он может быть техническим и влияющим на функционирование ресурса или содержать только незначительные изменения визуального характера. Поэтому рассмотрим подробнее, A/B-тестирование как провести А/Б-тест двух сайтов. К тесту нужно правильно подготовиться, настроив систему аналитики. Также обязательно заранее разобрать алгоритм, как проводить А/Б-тестирование для достижения желаемых метрик. Теперь перейдем к тому, зачем нужны такие тесты и как их проводить.
Единственное, что можно сделать — уменьшить срок, настроить график запуска и окончания. Для этого кликните по иконке часов в панели инструментов. Дополнительно можно указать, какая доля общего трафика должна участвовать в эксперименте. В настройках вы можете указать, на какой из вариантов направить больше трафика.
Вы наверняка заинтересованы в привлечении именно бесплатного трафика на ваш сайт. Бесплатных клиентов, пришедших из органической выдачи. И наш эксперимент показал однозначное превосходство этой гипотезы. Для нас лично было достаточно такого показателя вероятности превосходства и количества сеансов, чтобы присудить победу этому варианту страницы. Подумайте, какую проблему решает подавляющее большинство ваших посетителей с помощью вашего продукта.
Теперь у вас есть независимая переменная, зависимая переменная и желаемый результат. Используйте эту информацию, чтобы создать неизмененную версию того, что вы тестируете, в качестве контрольного сценария. Если вы тестируете веб-страницу, это будет неизмененная страница в том виде, в котором она уже существует. Если вы тестируете целевую страницу, это будет дизайн целевой страницы и копия, которую вы обычно используете. Чтобы провести A/B-тест, вам нужно создать две разные версии одного фрагмента контента, изменив одну переменную.
Метод подходит, когда продукт локальный и требуется протестировать большие изменения бизнес-модели, или попробовать совершенно новый продукт. Например, беспилотное такси, которое тестирует Яндекс в одном из районов Москвы. Если результаты будут положительными, можно масштабировать продукт на всю остальную аудиторию. Например, они могут сравнивать две версии онбординга, разные варианты фичей продукта и их удобство для пользователей. Продакты и маркетологи должны понимать, что они могут протестировать, как провести эксперимент и проанализировать его результаты.