Как сравнить два варианта страницы на сайте фермерского хозяйства

На сайте фермы часто спорят: нужен ли наверху большой рассказ о хозяйстве или лучше сразу показать состав набора, цену и кнопку заказа? Такие споры решаются вкусом, а проверить можно на практике. Для этого разным посетителям показывают два варианта одной страницы и смотрят, какой чаще приводит к заявке или звонку. Ниже о том, как сделать это аккуратно на небольшом сайте.

Сначала одна гипотеза, а не «переделаем всё»

Если в новом варианте поменяли заголовок, фото, цену, форму и цвет кнопки, а заявок стало больше, вы не узнаете, что именно сработало. Сформулируйте одно предположение по схеме «если..., то...». Например: «если сразу под заголовком показать состав набора, дни доставки и короткую форму, заявок на корзину будет больше, чем при длинном рассказе о хозяйстве в начале страницы». Всё, что не относится к проверке, оставьте в обоих вариантах одинаковым.

Условный пример: страница заказа фермерской корзины

Допустим, на сайте есть страница «Корзина на неделю»: овощи, зелень, яйца, творог. Пример придуман для иллюстрации.

• Вариант А (текущий): заголовок «О нашем хозяйстве», три абзаца истории, фото полей, ниже состав набора, а в самом конце кнопка «Оставить заявку» и форма из шести полей, включая e-mail и комментарий.
• Вариант Б: заголовок «Корзина на неделю: что внутри и когда привезём». Под ним список состава, цена за набор, дни и районы доставки, телефон и форма из трёх полей: имя, телефон, адрес. История хозяйства перенесена ниже.

Здесь проверяется одна идея: покупателю условия нужны раньше истории. Если хотите отдельно узнать, влияет ли длина формы, проведите это вторым тестом, после первого.

Как разделить посетителей и не исказить сравнение

Варианты должны работать одновременно, а не по схеме «в июле старый, в августе новый». Спрос на ферме зависит от сезона урожая, погоды, праздников и ярмарок, и такое сравнение будет нечестным. Каждого посетителя случайно направляют на А или Б и запоминают выбор (обычно через cookie), чтобы при повторном визите он видел ту же версию.

Для этого можно взять инструмент экспериментов в системе веб-аналитики, например Content Experiments в Google Analytics, или попросить разработчика сделать простое разделение на стороне сервера. Основной адрес страницы лучше не менять, чтобы не сломать ссылки из каталогов и рекламных объявлений.

Не запускайте тест одновременно с рассылкой или акцией: на страницу придёт нетипичная аудитория, и результат нельзя будет перенести на обычные дни. Проверьте, что оба варианта одинаково быстро открываются и корректно выглядят в разных браузерах и на телефонах. Иначе вы сравните не тексты, а ошибки вёрстки.

Что считать результатом, если заказывают и по телефону

Многие клиенты ферм предпочитают позвонить, поэтому одних отправок формы мало. Настройте в счётчике цели: отправка формы, переход на страницу «Спасибо», клик по номеру телефона. Для звонков удобнее всего показывать в каждом варианте свой номер, если это позволяет телефония. Если нет, пусть тот, кто отвечает на звонки, спрашивает, откуда человек узнал о ферме, и отмечает ответ в таблице.

Считайте не клики по кнопке, а заявки, которые дошли до реального заказа. Отдельно помечайте спам, ошибочные обращения и адреса вне зоны доставки: в одном из вариантов их может быть заметно больше.

Сколько ждать, если посетителей немного

На сайте хозяйства обычно не тысячи визитов в день. Тогда разница в две-три заявки легко окажется случайностью. Поэтому:

• не останавливайте тест на второй день только потому, что Б вырвался вперёд;
• держите его не меньше двух-трёх полных недель, чтобы попали и будни, и выходные;
• заранее решите, при каких условиях вы заканчиваете тест, и не меняйте варианты по ходу;
• если разница небольшая, а заявок мало, считайте результат ничьёй и оставьте тот вариант, который проще поддерживать.

При малом трафике сравнивайте заметные различия: порядок блоков, длину формы, наличие цены. Правка оттенка кнопки на такой выборке ничего не покажет.

Проверочный список перед запуском

• Сформулирована одна гипотеза, и варианты отличаются только в ней.
• Выбраны цели: форма, звонок, страница «Спасибо»; все они проверены тестовой заявкой.
• Посетители делятся случайно, и повторный визит показывает ту же версию.
• Оба варианта работают одновременно и одинаково загружаются на компьютере и телефоне.
• Для звонков есть способ понять, с какой версии они пришли.
• Заданы срок теста и условие остановки, а в период теста нет акций и рассылок на эту страницу.
• По итогам сравниваются реальные заказы, а не только обращения; спам исключён.

Все статьи блога