Как оценить результат изменения страницы на сайте продуктового магазина

В продуктовом ритме заказы колеблются по дням, акциям и остаткам, поэтому рост после правки страницы ещё не доказательство. Разбираем, как выбрать показатели и не принять совпадение за результат.

Раздел: Интернет-маркетинг: статьи о рекламе, SEO и аналитике
Обложка статьи: как оценить результат изменения страницы

Спрос в продуктовом магазине зависит не только от дизайна: на него влияют зарплатные дни, выходные, праздники, акции, погода и наличие товара на складе. Поэтому фраза «после обновления заказов стало больше» ещё ничего не доказывает. Разберём, как заранее поставить вопрос, выбрать показатели и не принять совпадение за результат.

Сформулируйте гипотезу до запуска правки

Запишите одно предложение по схеме: «Если мы изменим X, то покупатели станут делать Y, потому что Z». Например: «Если в карточке товара заменить кнопку «В корзину» на счётчик «− 1 +», покупатели будут чаще брать несколько штук за одно действие, потому что им не придётся открывать корзину». Такая запись сразу показывает, какой показатель считать главным, а какие использовать для проверки побочных эффектов.

Условный пример: счётчик количества в категории «Молоко и сыры»

Представим страницу категории вымышленного магазина. Было: у каждого товара кнопка «В корзину», а количество меняется только в самой корзине. Стало: после первого нажатия кнопка превращается в счётчик с кнопками «−» и «+».

Ожидаем, что вырастет число товаров, добавленных за сеанс, а доля дошедших до оформления не снизится. Риски тоже понятны. На телефоне можно случайно нажать «+» дважды. Покупатель может не заметить, что в корзине три пачки вместо одной, и тогда вырастут отмены, замены и обращения в поддержку. Всё это нужно измерять вместе с «приятными» показателями.

Какие показатели смотреть и в каком порядке

  • Главный. Один показатель, привязанный к гипотезе. Для примера это доля сеансов с категорией, где добавлен хотя бы один товар, или число оформленных заказов на сеанс.
  • Промежуточные. Добавления в корзину на сеанс, изменения количества, удаления товаров из корзины.
  • Защитные. Доля начавших и завершивших оформление, отмены после заказа, обращения о составе заказа, скорость загрузки страницы.
  • Осторожно. Средний чек: он может вырасти из-за акции или подорожавших товаров, а не из-за правки страницы.

Убедитесь, что в системе аналитики (например, в Яндекс Метрике) настроены события: просмотр категории, добавление в корзину, изменение количества, удаление, начало оформления, подтверждённый заказ. Если события не были настроены до правки, сравнивать будет не с чем.

Как отделить эффект страницы от эффекта недели

Продуктовый трафик ходит волнами, и сравнение «вчера и сегодня» почти всегда обманывает. Что учесть:

  • Сравнивайте полные недели и одинаковые дни недели, а не произвольные отрезки;
  • Ведите журнал событий: акции, рассылки, запуск рекламы, смена цен, перебои с товаром, изменения слотов доставки;
  • Смотрите отдельно мобильные и компьютерные сеансы, новых и вернувшихся покупателей: правка может помочь одним и мешать другим;
  • Не оценивайте период с праздниками и обычные недели как равные.

A/B-тест или сравнение «до и после»

Надёжнее показывать старую и новую версии одновременно разным посетителям, выбранным случайно. Тогда акции и день недели действуют на обе группы одинаково. Не останавливайте тест в первый удачный день и заранее решите, сколько он продлится. Если заказов мало, главный показатель будет «шуметь», и придётся либо дольше ждать, либо опираться на промежуточные показатели, помня об их ограничениях.

Если тест технически невозможен, сравнивайте периоды «до» и «после» и добавьте контроль: похожую категорию, которую не меняли. Если «Молоко и сыры» выросло, а «Хлеб» за то же время нет, довод в пользу правки сильнее. Если выросли обе, дело, скорее всего, в сезоне или акции.

Проверочный список перед выводами

  • Гипотеза записана до запуска, главный показатель выбран заранее.
  • Цели и события в аналитике работают и проверены тестовым заказом.
  • Сравниваются сопоставимые периоды или одновременные группы.
  • Учтены акции, рассылки, реклама, остатки и изменения цен.
  • Проверены защитные показатели: оформление, отмены, обращения.
  • Данные разделены по устройствам и типам покупателей.
  • Решение определено: оставить, откатить или доработать и проверить снова.

Если результат неоднозначен, это тоже результат: значит, у правки нет подтверждённого эффекта. Тогда проще вернуть прежнюю версию или изменить гипотезу, чем объяснять случайный рост.

Все статьи блога

Читайте также

Заявка

Расскажите о проекте

Свяжемся в течение рабочего дня, зададим уточняющие вопросы и предложим варианты. Без навязчивых звонков.

Форма обратной связи

Согласия перед отправкой

Отвечаем в рабочие дни с 10:00 до 19:00

Написать в Telegram
Расчёт стоимости

Узнайте стоимость сайта