Стас Игнатьев поделился необычным для этого канала кейсом: аналитики X5 Retail Group рассказывают, как проводят А/Б-тестирования в офлайне.

В X5 Retail Group входят магазины «Пятёрочка», «Перекрёсток» и «Карусель», всего 15 000 магазинов. В тексте рассказывают с каким сложностями приходится сталкиваться в офлайне, на что обращают внимание: https://habr.com/ru/company/X5RetailGroup/blog/466349/

#аналитика #тестирование #x5

Миша Стерликов порекомендовал статью про стоимость правильных и ошибочных решений при А/Б-тестировании: https://ecommerce-in-ukraine.blogspot.com/2019/07/ab-testing-strategy-bad-good-decisions-costs.html

Автор статьи предлагает простой подход, который позволяет подобрать confidence level исходя из того, насколько стоимость ошибочного решения выше стоимости правильного решения.

Пример: если стоимость ошибочного решения в 2х раза превышает стоимость правильно решения, то достаточно confidence level = 78%.

#михаил_стерликов #аналитика #тестирование

У нас вновь выступает Андрей Тян из Fast Track!

Записывайтесь на пиццу, Андрей расскажет про то, как внедрять гипотезы в корпорациях: it-agency.ru/events/pizza-product-tba-11-2019

Андрей говорит, что больше всего сложностей в корпорациях возникает с внедрением и масштабированием работы по гипотезам, поэтому на пицце речь пойдёт именно о внедрении

#стратпицца #андрей_тян #itagency #гипотезы #тестирование

В догонку кейса добавлю, что по итогам А/Б-тестирований на разных проектах пришёл к проверке гипотез на «дешёвом» трафике.

Если тематика слишком конкурентная и ставки высоки, то можно проводить тесты на трафике из сетевых кампаний «Яндекс.Директа» и Google Ads.

Как правило, конверсия там ниже, чем из поисковых кампаний и таргетированной рекламы, но такой трафик настолько дешевле и настолько больше по объёмам, что это всё равно получается выгоднее для бюджета клиента и меньше по срокам.

#маркетинг #тестирование #джедаи