A/B-тест лендинга для медицинского оффера
A/B-тест помогает выбрать лучший вариант страницы по данным, а не по вкусу. Но на небольших объёмах он легко вводит в заблуждение. Разбираем, как формулировать гипотезы, на что смотреть и когда делать выводы.
Что такое A/B-тест и зачем он вебмастеру
Суть проста: две версии страницы показываются разным людям одновременно, затем сравниваются результаты. Версия A — текущая, версия B — с одним изменением. Если трафик в обе версии идёт в одно и то же время и из одного источника, различия в результатах можно связать с изменением, а не с днём недели или настроением аудитории.
Для вебмастера тест — способ перестать спорить о том, какой заголовок лучше, и начать проверять. Каждая проверка стоит бюджета, поэтому тестировать нужно то, что может сдвинуть результат: оффер, первый экран, форму, цену, элементы доверия. Цвет кнопки на малом трафике почти ничего не покажет.
Как сформулировать гипотезу
Гипотеза состоит из наблюдения, изменения и ожидаемого эффекта. Например: «Люди уходят с первого экрана, не видя формы. Если добавить кнопку записи в первый экран, доля оставивших заявку вырастет». Такая формулировка показывает, что измерять и почему.
- Опишите проблему по данным: где уходят, что не работает.
- Предложите одно изменение, которое решает именно эту проблему.
- Определите метрику успеха заранее: принятые заявки на клик, а не просто заявки.
- Определите, сколько трафика вы готовы потратить на тест.
- Запишите гипотезу в заметки к офферу, чтобы потом не забыть, что проверяли.
Меняйте один элемент. Если вы поменяли заголовок, фото и форму одновременно, вы узнаете, что вариант B лучше или хуже, но не узнаете почему.
Что тестировать в первую очередь
| Элемент | Пример гипотезы | Приоритет |
|---|---|---|
| Первый экран | Заголовок про услугу и город против заголовка про повод обращения | Высокий |
| Форма | Два поля против трёх; квиз против короткой формы | Высокий |
| Цена | С ценой против без цены | Высокий |
| Элементы доверия | Реальное фото врача против нейтральной иллюстрации | Средний |
| Структура страницы | Короткая против длинной | Средний |
| Мелочи | Цвет кнопки, шрифт | Низкий |
Какие метрики смотреть
Клики и заявки — промежуточные показатели. Главная метрика для вебмастера — принятые заявки: именно они оплачиваются. Страница, которая даёт больше заявок, но с большей долей отказов по подстатусам, может быть хуже. Фиксируйте для каждого варианта: число переходов, число заявок, число принятых, число отменённых и причины отмен.
Статусы лидов вы видите в кабинете, а постбэк уходит при приёме и при каждой смене статуса, что позволяет связать результат с вариантом страницы. Заявки проходят разбор не мгновенно: часть из них остаётся в холде, поэтому сравнивайте варианты, когда большая часть заявок уже получила итоговый статус, а не на следующий день.
Сколько ждать и когда остановить
Главная ошибка — остановить тест при первых цифрах. На малых объёмах случайность легко выглядит как закономерность: одна-две заявки меняют картину. Мы не называем универсального числа, потому что нужный объём зависит от конверсии и разницы между вариантами. Практическое правило: чем меньше различие, тем больше данных нужно.
- Заранее определите бюджет или число переходов на вариант.
- Не останавливайте тест из-за «красивой» картины на втором дне.
- Не продлевайте бесконечно, пока результат не понравится.
- Если различия невелики после разумного объёма, считайте варианты равноценными и выберите более простой.
Типичные ошибки
- Несколько изменений сразу. Невозможно понять причину результата.
- Разный трафик в вариантах. Если A получает поиск, а B ленту, вы сравниваете источники, а не страницы.
- Разное время. Вариант A в будни, вариант B на выходных.
- Оценка по кликам. Дешёвые клики не равны хорошим заявкам.
- Подглядывание. Частые проверки и ранняя остановка по случайным данным.
- Изменение условий оффера в ходе теста. Цена, лимиты, гео: меняются и результат искажается.
Как провести тест в кабинете вебмастера
В потоке можно подключить несколько лендингов и разделить трафик между ними, это и есть сплит-тест. Запустите оба варианта в одном потоке, чтобы источник и время были одинаковыми. Метки sub1…sub5 помогут различать креативы и размещения внутри вариантов. Подробнее механика описана в статье про сплит лендингов в потоке.
Лимиты оффера тоже влияют на тест: если дневной лимит по городу исчерпан, заявки перестанут приниматься в оба варианта, и результаты искажаются. Учитывайте это при планировании.
Как зафиксировать выводы
После теста запишите: что проверяли, на каком трафике, сколько данных набрали, каков результат по принятым заявкам, что решили. Эти заметки сэкономят бюджет: через полгода вы не будете повторять проверку. Если выигравший вариант заметно лучше, сделайте его основным и придумайте следующую гипотезу. Если результат неясен, не пытайтесь выжать из данных то, чего в них нет.
Помните: результат относится к конкретному офферу, аудитории и периоду. При смене услуги или источника трафика проверку стоит повторить.
Пример плана одного теста
Условный пример. Наблюдение: на лендинге по диагностике много переходов, но мало заявок. Гипотеза: человек не видит, что именно входит в услугу. Вариант B: добавить под заголовком короткий список того, что входит в исследование. Метрика: принятые заявки на переход. Объём: определённое заранее число переходов на каждый вариант. Условие остановки: накоплен запланированный объём и итоговые статусы по большей части заявок. Вывод записывается в заметки.
Отдельно о сезонности: в медицине спрос меняется по времени года и по неделям, а в праздничные периоды клиники работают по сокращённому графику. Запускайте оба варианта на одинаковых отрезках времени и не начинайте тест накануне длинных выходных, если не уверены, что клиника будет принимать заявки в обычном режиме.
Вопросы и ответы
Сколько трафика нужно для A/B-теста?
Универсального числа нет: оно зависит от конверсии и величины различий. Чем меньше разница, тем больше данных нужно. Не делайте выводов по паре заявок.
Можно ли тестировать два изменения одновременно?
Можно, но тогда вы сравниваете наборы изменений. Для понимания причин лучше менять один элемент за раз.
Как учитывать заявки в холде?
Дождитесь, когда большая часть заявок получит итоговый статус, и сравнивайте по принятым. Холд означает, что итог ещё не определён.
Что делать, если разницы нет?
Считайте варианты равноценными и выберите более простой или дешёвый в поддержке. Затем проверьте другую гипотезу.
Подходит ли A/B-тест при маленьком бюджете?
Тестируйте крупные изменения, у которых больше шансов дать заметный эффект. Мелкие правки на малом трафике почти ничего не покажут.
Можно ли сравнивать период до и после изменения вместо теста?
Можно, но это слабее: в разные периоды отличаются трафик, сезон и креативы. Одновременный сплит надёжнее.