Бизнес — статьи о сайтах
Разбираем, как провести A/B-сравнение страницы музея: от выбора одной гипотезы до целей в аналитике и учёта сезонности. В конце есть условный пример и проверочный список.
Директор музея или руководитель отдела маркетинга часто слышит два мнения о странице: «кнопку надо выделить» и «главное — рассказать об экспозиции». Спор решается проверкой. Две версии одной страницы показывают разным посетителям в одно и то же время и сравнивают, что они делают дальше. Для музея у такой проверки есть свои особенности: сезонность, выходные и каникулы, разные цели визитов.
Берите одну гипотезу, а не «новый дизайн целиком». Если в версии B изменились заголовок, порядок блоков и цвет кнопки, вы не поймёте, что сработало. Для музея обычно проверяют:
Сначала сформулируйте гипотезу письменно: «Если вынести часы работы и кнопку в верхний экран, больше посетителей дойдёт до страницы покупки билета, потому что им не придётся искать эти данные».
Допустим, у музея есть страница с описанием залов, фотографиями, часами работы и ссылкой на покупку билета. Это иллюстрация, а не реальный случай.
Вариант A (текущий). Сверху идёт большой абзац об истории здания, затем залы, в самом низу блок «Часы работы и цены» и кнопка «Купить билет».
Вариант B. Сразу под заголовком компактный блок: «Сегодня открыто до 18:00», строка с ценами и кнопка «Купить билет». История здания и описание залов ниже без изменений.
Меняется только расположение и состав верхнего блока, остальное одинаково. Основная метрика: доля визитов, в которых был клик по кнопке покупки. Дополнительные: прокрутка до описания залов и переход в раздел «Как добраться». Дополнительные нужны, чтобы заметить побочный эффект. Например, кнопку нажимают чаще, но до рассказа о коллекции почти никто не доходит.
Версии должны идти параллельно. Сравнение «март по старому дизайну и апрель по новому» ничего не доказывает: в апреле могли начаться каникулы или открыться выставка. Каждый посетитель должен видеть один и тот же вариант при повторных заходах, поэтому выбранную версию запоминают в cookie. Деление можно настроить на стороне сервера или специальным сервисом. В Google Analytics для этого есть раздел экспериментов.
Заранее настройте цели в системе аналитики, например в Яндекс.Метрике: клик по кнопке покупки, переход на страницу оплаты, отправка формы заявки на экскурсию. Если билеты продаются на внешнем сервисе, отдельно проверьте, что клик по ссылке фиксируется. Иначе вы увидите только заходы и не узнаете результат. Передайте в отчёты признак версии (A или B), чтобы строить срезы по устройствам и источникам.
Смотрите отдельно на смартфоны и компьютеры. Посетитель, который на улице ищет вход, и человек, планирующий поездку за неделю, ведут себя по-разному. Версия может выигрывать на телефонах и проигрывать на компьютерах.
У музеев трафик неровный: выходные не похожи на будни, школьные группы приходят по расписанию, а у выставки есть пик в начале и в конце. Поэтому тест должен охватить целое число недель, а не остановиться в первый день, когда одна версия случайно ушла вперёд. Заранее выберите срок и дату остановки и не меняйте их по ходу.
Если посетителей мало, разница в несколько кликов может быть случайной. Посмотрите не только на проценты, но и на абсолютное число целевых действий в каждой версии. Когда их единицы, честный вывод такой: данных недостаточно, тест лучше продлить или проверить более заметное изменение.
Результат ненадёжен, если во время теста:
Даже небольшая проверка помогает принимать решения по данным: вы видите, как поведение посетителей меняется от конкретной правки, а не от общего ощущения, что «так красивее».
Читайте также
Бизнес — статьи о сайтах
SEO — статьи о сайтах
Интернет-маркетинг: статьи о рекламе, SEO и аналитике
Интернет-маркетинг: статьи о рекламе, SEO и аналитике
Заявка
Свяжемся в течение рабочего дня, зададим уточняющие вопросы и предложим варианты. Без навязчивых звонков.
Форма обратной связи