Как сравнить результаты конверсий?
Даже зная кол-во просмотров каждого варианта и кол-во переходов нельзя просто так взять и сравнить их отношения.
Чтоб понять какой из вариантов лучше конвесит нужно оценить статзначимость!
Можно воспользоваться формулой расчета интервала для разницы двух конверсий с картинки, где:
С1, С2 - конверсии
N1, N2 - величины выборок
1,96 - коэффициент для уровня доверия 95%
😎 Пример:
Продолжаем следить за Губернатором, который повышает уровень образования.
Он нарисовал два постера с QR-кодами на курс по повышению грамотности.
Прошло время и теперь он знает, какое кол-во людей их увидело и какое кол-во перешло по ним.
Первый пост собрал 1000 просмотров и 35 переходов, коэфф конверсии 35/1000=0,035
Второй пост собрал 1250 просмотров и 21 переход, коэфф конверсии 21/1250=0,0168
Тогда, подставляя значения в формулу в таблице
Получим доверительный интервал [0,0043;0,032]
Как оценить доверительный интервал:
Если полученный интервал не включает 0, можно считать, что изменение конверсии статистически значимое.
Если бы содержал, это бы значило, что по имеющимся данным конверсии неразличимы.
Итого:
Значение больше нуля, значит изменение показателя конверсии одного варианта относительно другого можно считать статистически значимым с уровнем доверия 95%( в нашем случае, так как брали коэффициент 1,96) и лежит в полученном интервале.
Значит первый пост имеет лучшую конверсию.
@product_lev
#analyst #Confidence #product #pm #менеджер #продукта #аналитика #pmm #маркетинг #ctr #конверсия
Даже зная кол-во просмотров каждого варианта и кол-во переходов нельзя просто так взять и сравнить их отношения.
Чтоб понять какой из вариантов лучше конвесит нужно оценить статзначимость!
Можно воспользоваться формулой расчета интервала для разницы двух конверсий с картинки, где:
С1, С2 - конверсии
N1, N2 - величины выборок
1,96 - коэффициент для уровня доверия 95%
😎 Пример:
Продолжаем следить за Губернатором, который повышает уровень образования.
Он нарисовал два постера с QR-кодами на курс по повышению грамотности.
Прошло время и теперь он знает, какое кол-во людей их увидело и какое кол-во перешло по ним.
Первый пост собрал 1000 просмотров и 35 переходов, коэфф конверсии 35/1000=0,035
Второй пост собрал 1250 просмотров и 21 переход, коэфф конверсии 21/1250=0,0168
Тогда, подставляя значения в формулу в таблице
Получим доверительный интервал [0,0043;0,032]
Как оценить доверительный интервал:
Если полученный интервал не включает 0, можно считать, что изменение конверсии статистически значимое.
Если бы содержал, это бы значило, что по имеющимся данным конверсии неразличимы.
Итого:
Значение больше нуля, значит изменение показателя конверсии одного варианта относительно другого можно считать статистически значимым с уровнем доверия 95%( в нашем случае, так как брали коэффициент 1,96) и лежит в полученном интервале.
Значит первый пост имеет лучшую конверсию.
@product_lev
#analyst #Confidence #product #pm #менеджер #продукта #аналитика #pmm #маркетинг #ctr #конверсия
1👍9🔥4❤3✍1
Размер выборки эксперимента
Разберем, как прикинуть, какое кол-во пользователей нам нужно для проверки гипотезы, что новый вариант продукта лучше
😎 Вернемся к нашему губернатору из предыдущих постов.
Последний эксперимент с рекламой принес конверсию из просмотра в переход по QR 3,5%.
Губернатор нашел консультанта, который обещал улучшить рекламу по QR переходили не 3,5%, а 5% из тех, кто её увидел.
Давайте прикинем, какое кол-во человек нам нужно, чтоб на них проверить, что новая реклама действительно так хороша.
Воспользуемся калькулятором выборок
Вводим:
Базовый уровень конверсии = 3.5
Минимальное отклонение, которое хотим засечь = 5% - 3.5% = 1.5
Статистическая мощность = 80%
Уровень значимости = 5%
Мощность — это вероятность увидеть стат значимое изменение между версиями, если оно действительно есть(стандартно 80%).
Уровень значимости — обратное значение к уровню уверенности (95% из поста про стат значимость).
Получаем: 2496 пользователей в одном варианте
Это значит, что для сравнения двух вариантов нам нужно суммарно 2496*2=4992 пользователей, тогда получится засечь отклонение в 1.5% от базового значения в 3.5% с вероятностью 80%.
@product_lev
#analyst #Significance #product #pm #менеджер #продукта #аналитика #pmm #маркетинг #ctr #конверсия
Разберем, как прикинуть, какое кол-во пользователей нам нужно для проверки гипотезы, что новый вариант продукта лучше
😎 Вернемся к нашему губернатору из предыдущих постов.
Последний эксперимент с рекламой принес конверсию из просмотра в переход по QR 3,5%.
Губернатор нашел консультанта, который обещал улучшить рекламу по QR переходили не 3,5%, а 5% из тех, кто её увидел.
Давайте прикинем, какое кол-во человек нам нужно, чтоб на них проверить, что новая реклама действительно так хороша.
Воспользуемся калькулятором выборок
Вводим:
Базовый уровень конверсии = 3.5
Минимальное отклонение, которое хотим засечь = 5% - 3.5% = 1.5
Статистическая мощность = 80%
Уровень значимости = 5%
Мощность — это вероятность увидеть стат значимое изменение между версиями, если оно действительно есть(стандартно 80%).
Уровень значимости — обратное значение к уровню уверенности (95% из поста про стат значимость).
Получаем: 2496 пользователей в одном варианте
Это значит, что для сравнения двух вариантов нам нужно суммарно 2496*2=4992 пользователей, тогда получится засечь отклонение в 1.5% от базового значения в 3.5% с вероятностью 80%.
@product_lev
#analyst #Significance #product #pm #менеджер #продукта #аналитика #pmm #маркетинг #ctr #конверсия
1👍9🔥4✍2😁1
Audio
Первый подкаст!
Моя подруга Катя Короткова пригласила записать пилотный выпуск подкаста про IT
Её канал о жизни операционного директора российского бренда косметики
Обсудили вместе, что такое продуктовый подход
Записали по зуму, выкладываем на каналах mp3шкой - настоящий MVP)
Таймкоды:
1:00 - Что такое продуктовый подход
2:40 - Применимость продуктового подхода
3:30 - Разница продуктового и проектного подхода
7:25 - Привет ребятам из HR
8:20 - Когда применять продуктовый подход на примере цветочного ларька
9:50 - Продакт - новый маркетолог
10:09 - Как продакту и маркетологу поделить поляну
11:00 - Продуктовый подход в фитнес-клубе
12:10 - Ключевые продуктовые инструменты
13:55 - Инструмент целеполагания SMART
16:00 - Как найти нужный инструмент
17:05 - Подытожим, что такое продуктовый подход
18:30 - Кто отвечает в компании за продуктовый подход
19:00 - Привет ребятам из Беру
19:30 - Какие должности в бизнесе несут в себе продуктовую функцию
Как же круто, что Телеграм сам вставил ссылки на аудио из моего описания! Не подозревал о таком функционале.
Лайк, коммент:) 🥷Напишите, про что было бы интересно еще послушать?
@product_lev
#подкаст #product #pm #менеджер #продукта #pmm #project #mvp
Моя подруга Катя Короткова пригласила записать пилотный выпуск подкаста про IT
Её канал о жизни операционного директора российского бренда косметики
Обсудили вместе, что такое продуктовый подход
Записали по зуму, выкладываем на каналах mp3шкой - настоящий MVP)
Таймкоды:
1:00 - Что такое продуктовый подход
2:40 - Применимость продуктового подхода
3:30 - Разница продуктового и проектного подхода
7:25 - Привет ребятам из HR
8:20 - Когда применять продуктовый подход на примере цветочного ларька
9:50 - Продакт - новый маркетолог
10:09 - Как продакту и маркетологу поделить поляну
11:00 - Продуктовый подход в фитнес-клубе
12:10 - Ключевые продуктовые инструменты
13:55 - Инструмент целеполагания SMART
16:00 - Как найти нужный инструмент
17:05 - Подытожим, что такое продуктовый подход
18:30 - Кто отвечает в компании за продуктовый подход
19:00 - Привет ребятам из Беру
19:30 - Какие должности в бизнесе несут в себе продуктовую функцию
Как же круто, что Телеграм сам вставил ссылки на аудио из моего описания! Не подозревал о таком функционале.
Лайк, коммент:) 🥷Напишите, про что было бы интересно еще послушать?
@product_lev
#подкаст #product #pm #менеджер #продукта #pmm #project #mvp
11🔥13👍8❤6👏4
Что почитать?
Искусство системного мышления. Необходимые знания о системах и творческом подходе к решению проблем, Макдермотт Иан, О'Коннор Джозеф
Кому: менеджерам, кто хочет попробовать взглянуть на ситуацию объективно
Количество страниц: 319
Оценка: 10 контуров обратной связи из 10
Отзыв:
В книге описана методология графического отображения систем любой сложности. Которая может помочь найти точки приложения рычага для наиболее эффективного воздействия на ситуацию.
Мне очень книга понравилась! Даже выделил бы её рядом с Джедайскими техниками, только она не про тактические приемы, а про стратегические. Если у вас есть мыслетопливо для инвестирования в свое долгосрочное развитие - маст!
Выделю некоторые мысли, давно хотел про них поразмышлять, оказалось, что уже поразмышляли за меня:
1) Крайне полезно понимать длительность задержки поступления обратной связи после совершения действия.
2) Крайне полезно инвестировать силы в следующие шаги, когда ты на подъеме.
Хорошо, что у меня были долгие поездки в этом месяце - получилось сосредоточиться над книгой.
Потому что в начале идёт 30 страниц предисловия. Обычно мне интересно читать как готовилась книга и на что обращают внимание рецензенты, но в этот раз мозг начал сворачиваться в трубочку. Даже пошел заглянуть в отзывы - треть ставили книге дизлайк. Мне кажется, что как раз из-за начала, на мой вкус описание не попадало в ЦА, не активировало меня как активного читателя. Поэтому смело пропускайте.
@product_lev
#чтопочитать #системное #мышление #вопросы #литература #стратегия #развитие #тактика
Искусство системного мышления. Необходимые знания о системах и творческом подходе к решению проблем, Макдермотт Иан, О'Коннор Джозеф
Кому: менеджерам, кто хочет попробовать взглянуть на ситуацию объективно
Количество страниц: 319
Оценка: 10 контуров обратной связи из 10
Отзыв:
В книге описана методология графического отображения систем любой сложности. Которая может помочь найти точки приложения рычага для наиболее эффективного воздействия на ситуацию.
Мне очень книга понравилась! Даже выделил бы её рядом с Джедайскими техниками, только она не про тактические приемы, а про стратегические. Если у вас есть мыслетопливо для инвестирования в свое долгосрочное развитие - маст!
Выделю некоторые мысли, давно хотел про них поразмышлять, оказалось, что уже поразмышляли за меня:
1) Крайне полезно понимать длительность задержки поступления обратной связи после совершения действия.
2) Крайне полезно инвестировать силы в следующие шаги, когда ты на подъеме.
Хорошо, что у меня были долгие поездки в этом месяце - получилось сосредоточиться над книгой.
Потому что в начале идёт 30 страниц предисловия. Обычно мне интересно читать как готовилась книга и на что обращают внимание рецензенты, но в этот раз мозг начал сворачиваться в трубочку. Даже пошел заглянуть в отзывы - треть ставили книге дизлайк. Мне кажется, что как раз из-за начала, на мой вкус описание не попадало в ЦА, не активировало меня как активного читателя. Поэтому смело пропускайте.
@product_lev
#чтопочитать #системное #мышление #вопросы #литература #стратегия #развитие #тактика
1👍8✍4❤3🔥1
Оценить объем рынка
TAM, SAM, SOM - метрики, которые позволяют оценить объемы рынка в разных разрезах.
Я с ними познакомился примерно год назад, когда обсуждал кейс с собеса со знакомым продактом.
Рассмотрим на примере продажи вакцины стоимостью 1р, которая защищает 1 год.
TAM (Total Addressable Market) — общий целевой рынок.
На такую сумму потениальные покупатели могли бы совершить покупку.
Пример: вакцинировать можно всё население планеты, TAM=8,191 млрд.р
SAM (Serviceable Available Market) — доступный объём рынка.
На такую сумму покупатели совершают покупку у вас и конкурентов.
Пример: кто-то не хочет вакцинироваться по личным причинам, сейчас вы и конкуренты вакцинируете 10% населения, SAM=0,891 млрд.р
SOM (Serviceable Obtainable Market) — достижимый объём рынка.
На такую сумму покупатели совершают покупку у вас
Пример: вы сейчас вакцинируете только страны СНГ и только работоспособное население 101 млн. человек, SOM=101 млн.р
Также для оценки используют метрики:
PAM (Potential Available Market) - потенциальный объем рынка.
На такую сумму потенциально покупатели совершат покупку у вас.
Пример: в 2030 по прогнозу будет 8,6 млрд человек, на 2030, PAM=8,6 млрд.р
EVG (Evangelists) - рынок ранних последователей.
На такую сумму ранние последователи совершат покупку у вас.
Пример: если бы мы только начинали захватывать рынок, могли бы прикинуть, сколько вакцин за год можем изготовить и продать, например 900 тыс, EVG=900 тыс.р
Имея эти данные можно сделать вывод, о потенциале развития продукта.
@product_lev
#Market #PAM #TAM #SAM #SOM #EVG #развитие #оценка #рынок #знание #pm #product #метрики
TAM, SAM, SOM - метрики, которые позволяют оценить объемы рынка в разных разрезах.
Я с ними познакомился примерно год назад, когда обсуждал кейс с собеса со знакомым продактом.
Рассмотрим на примере продажи вакцины стоимостью 1р, которая защищает 1 год.
TAM (Total Addressable Market) — общий целевой рынок.
На такую сумму потениальные покупатели могли бы совершить покупку.
Пример: вакцинировать можно всё население планеты, TAM=8,191 млрд.р
SAM (Serviceable Available Market) — доступный объём рынка.
На такую сумму покупатели совершают покупку у вас и конкурентов.
Пример: кто-то не хочет вакцинироваться по личным причинам, сейчас вы и конкуренты вакцинируете 10% населения, SAM=0,891 млрд.р
SOM (Serviceable Obtainable Market) — достижимый объём рынка.
На такую сумму покупатели совершают покупку у вас
Пример: вы сейчас вакцинируете только страны СНГ и только работоспособное население 101 млн. человек, SOM=101 млн.р
Также для оценки используют метрики:
PAM (Potential Available Market) - потенциальный объем рынка.
На такую сумму потенциально покупатели совершат покупку у вас.
Пример: в 2030 по прогнозу будет 8,6 млрд человек, на 2030, PAM=8,6 млрд.р
EVG (Evangelists) - рынок ранних последователей.
На такую сумму ранние последователи совершат покупку у вас.
Пример: если бы мы только начинали захватывать рынок, могли бы прикинуть, сколько вакцин за год можем изготовить и продать, например 900 тыс, EVG=900 тыс.р
Имея эти данные можно сделать вывод, о потенциале развития продукта.
@product_lev
#Market #PAM #TAM #SAM #SOM #EVG #развитие #оценка #рынок #знание #pm #product #метрики
1❤9🔥8👍4💯1
Double Diamond
Сегодня захотел написать об одном из самых популярных методов разработки продуктов — Double Diamond Design Process.
Это одна из циклических моделей процессов работы команды с дизайн мышлением.
На самом деле вы уже использовали этот фреймворк, даже если не знали такого названия, так он сводится к пословице "Семь раз отмерь, один раз отрежь".
Метод состоит из четырех итеративных процедур в двух пространствах-бриллиантах:
1) Пространство проблемы.
В качестве исследователей могут участвовать продакт, аналитик и дизайнер.
Нужно провести исследование рынка, пользователя и текущих решений.
В итоге приоритизировать полученный список самых больных/фокусных проблем, получив топ.
2) Пространство решения.
Во втором бриллианте вместе с системными аналитиками и разработчиками, прорабатываем способы решения и получаем оценку трудоёмкости задач.
Чтоб финально определиться с вариантом решения.
Далее, имея приоритетный образ решения по самой больнючей проблеме, можно уходить в планирование реализации.
Кстати, эта методология активно используется в Авито, тут в абзаце "Как мы работаем?" можно посмотреть их подход к работе по спринтам отталкиваясь от ОКР.
@product_lev
#дизайн #мышление #Авито #pm #product
Сегодня захотел написать об одном из самых популярных методов разработки продуктов — Double Diamond Design Process.
Это одна из циклических моделей процессов работы команды с дизайн мышлением.
На самом деле вы уже использовали этот фреймворк, даже если не знали такого названия, так он сводится к пословице "Семь раз отмерь, один раз отрежь".
Метод состоит из четырех итеративных процедур в двух пространствах-бриллиантах:
1) Пространство проблемы.
В качестве исследователей могут участвовать продакт, аналитик и дизайнер.
Нужно провести исследование рынка, пользователя и текущих решений.
В итоге приоритизировать полученный список самых больных/фокусных проблем, получив топ.
2) Пространство решения.
Во втором бриллианте вместе с системными аналитиками и разработчиками, прорабатываем способы решения и получаем оценку трудоёмкости задач.
Чтоб финально определиться с вариантом решения.
Далее, имея приоритетный образ решения по самой больнючей проблеме, можно уходить в планирование реализации.
Кстати, эта методология активно используется в Авито, тут в абзаце "Как мы работаем?" можно посмотреть их подход к работе по спринтам отталкиваясь от ОКР.
@product_lev
#дизайн #мышление #Авито #pm #product
🔥6❤4✍3👍1
Серебряные пули
Каждый раз встречаясь со знакомыми менеджерами или знакомясь с кем-то на конференциях, разговор заходит до приемов, которые применяются в задачах. Постоянно хочется услышать про какое-то суперрешение, серебряную пулю для решения проблем, но всегда разговор сводится к тому, что всё решает продуктовый подход.
Не теряю надежду когда-то найти такую драгоценность:)
Но пока, кажется, что вместо этого, собирать пулю нужно по крупицам, рецепт примерно такой:
- 20% структурированная теория в голове
- 80% собственная работа и общение
🥷А у вас на пути попадались серебряные
@product_lev
#мысли #pm #серебряные #пули
Каждый раз встречаясь со знакомыми менеджерами или знакомясь с кем-то на конференциях, разговор заходит до приемов, которые применяются в задачах. Постоянно хочется услышать про какое-то суперрешение, серебряную пулю для решения проблем, но всегда разговор сводится к тому, что всё решает продуктовый подход.
Не теряю надежду когда-то найти такую драгоценность:)
Но пока, кажется, что вместо этого, собирать пулю нужно по крупицам, рецепт примерно такой:
- 20% структурированная теория в голове
- 80% собственная работа и общение
🥷А у вас на пути попадались серебряные
@product_lev
#мысли #pm #серебряные #пули
❤9🔥5💯4👍1
B2B или B2C?
Недавно услышал интересную мысль на подкасте от Михаила Токовинина основателя amoCRM - не существует B2B, так как любой продукт делается для пользователя. Результат работы влияет на пользователя, который его оценит и сделает вывод о ценности продукта.
Что это вообще такое?
На примере B2C - это сокращение business to consumer ( от бизнеса потребителю) - компания продаёт товары или услуги напрямую физическому лицу.
Наиболее популярные буквы в формулировках:
B (business) - бизнес
C (consumer) - потребитель
G (goverment) - правительство
Лично я успел поработать в Яндексе в
B2B: ЯДо - сервис, который позволял компаниям подключаться к логистическим мощностям Яндекса
B2B2C: ПВЗ и Постаматы Маркета
И в VK B2C, B2G - ряд проектов для педагогов и детей еще в проработке.
На мой вкус не сильно различается работа, разве что в b2c больше нужно думать о привлечении пользователя.
🥷А у вас получалось поработать в нескольких направлениях, чтоб сравнить их на личном опыте?
@product_lev
#мысли #pm #b2b #b2c
Недавно услышал интересную мысль на подкасте от Михаила Токовинина основателя amoCRM - не существует B2B, так как любой продукт делается для пользователя. Результат работы влияет на пользователя, который его оценит и сделает вывод о ценности продукта.
Что это вообще такое?
На примере B2C - это сокращение business to consumer ( от бизнеса потребителю) - компания продаёт товары или услуги напрямую физическому лицу.
Наиболее популярные буквы в формулировках:
B (business) - бизнес
C (consumer) - потребитель
G (goverment) - правительство
Лично я успел поработать в Яндексе в
B2B: ЯДо - сервис, который позволял компаниям подключаться к логистическим мощностям Яндекса
B2B2C: ПВЗ и Постаматы Маркета
И в VK B2C, B2G - ряд проектов для педагогов и детей еще в проработке.
На мой вкус не сильно различается работа, разве что в b2c больше нужно думать о привлечении пользователя.
🥷А у вас получалось поработать в нескольких направлениях, чтоб сравнить их на личном опыте?
@product_lev
#мысли #pm #b2b #b2c
❤8👍4🔥3
This media is not supported in your browser
VIEW IN TELEGRAM
Давай знакомиться:)
Бу! Испугался? Не бойся, я друг, я тебя не обижу.
Давно хотел собрать пост-коннектор, чтоб познакомиться и разузнать интересы читателей, поэтому вэлком в комменты, расскажите о себе:)
🎄Как вас зовут, чем увлекаететесь?
🎄Какие задачи перед вами стоят в наступающем году? Может нужен совет или специалист - найдется на канале!
🎄Чем вы можете помочь другим, может тоже советом или идеей?
🎄Делитесь контактами, вашими каналами и ссылками на link. Кстати, вот мой - www.linkedin.com/in/lev-kornev
@product_lev
#networking #pm #merry #christmas #and #happy #new #year
Бу! Испугался? Не бойся, я друг, я тебя не обижу.
Давно хотел собрать пост-коннектор, чтоб познакомиться и разузнать интересы читателей, поэтому вэлком в комменты, расскажите о себе:)
🎄Как вас зовут, чем увлекаететесь?
🎄Какие задачи перед вами стоят в наступающем году? Может нужен совет или специалист - найдется на канале!
🎄Чем вы можете помочь другим, может тоже советом или идеей?
🎄Делитесь контактами, вашими каналами и ссылками на link. Кстати, вот мой - www.linkedin.com/in/lev-kornev
@product_lev
#networking #pm #merry #christmas #and #happy #new #year
1❤13❤🔥6😁6👍2🔥1
Ретроспектива
Супер ритуал для IT-команды, работающей по agile - Ретро.
Пост как раз под конец года:)
Это командная встреча по итогам спринта, квартала, года или конкретного проекта.
На встрече обсуждают итоги и ход работ, выделяют моменты на проработку.
Такая встреча нужна, чтоб усвоить опыт, полученный во время работы.
Например, у нас в команде самовывоза Маркета было регулярное ретро по итогам спринта сразу после демо(про него напишу отдельно).
Мы оставались только командой продукта и разработки. На встречу уходило примерно 1,5 часа.
🫡 Мы обсуждали статус выполнения задач с прошлых ретро.
🥸 Мы в закрытую(не видно текста, чтоб не сбивало тех, кто пишет другие) писали карточки в таблицу + и - спринта.
😎 Когда все всё написали, мы открываели карточки(но пока не открывали имён тех, кто написал) и голосовали за понравившиеся, чтоб вначале обсудить самые поддерживаемые.
🧐 Потом начинали обсуждение по одной карточке. Моё ноу-хау обсуждать вначале не один столбец целиком с плюсами или минусами, а чередовать радостные и грустные карточки - обсуждение идёт живее.
🤓 По итогам обсуждения карточки, мы либо закрывали её, либо писали новую задачу в работу. Например, внести конкретное исправление в регламент техлида или начать планировать дополнительное время в спринт для команды разработки на проведение ревью.
В разных моих командах мы использовали один из двух типов досок для проведения ретро:
Картинка 1 - табличка из трёх колонок: что было классно, что не понравилось, что мы улучшим.
Картинка 2 - интерактивная доска с кораблём или островом, где помимо плюсов и минусов процесса работы можно было поделиться эмоциями и подсветить опасения.
Кстати, мне всегда нравились командные ретро и обычно напрягали проектные со смежниками.
Потому что со своей командой уже хорошо знакомы и играете вдолгую: искренне хвалите и ответственно говорите про ошибки.
А при работе со смежниками всегда мелькает мысль: не разосрались - уже хорошо.
Если смежники часто меняются, например, у вас один общий проект за несколько лет, то на ретро есть риск, что вы просто попереводите стрелки и разойдетесь каждый со своим мнением. Чтоб такого не было - нужно заранее договориться о правилах ритуала.
С другой стороны, можно и говном покидаться, если у вас есть хороший фасилитатор на встрече. Тогда получится и выпустить пар - не держать в себе и разойтись с чувством завершенного проекта в кругу профессионалов, которые спорили про свои профессиональные вопросы:)
А вы используете ритуал ретроспектив? Как у вас проходит, какими бордами пользуетесь? Что в нём нравится или не заходит?
@product_lev
#pm #ретроспектива #ретро #ритуал #agile #product #owner
Супер ритуал для IT-команды, работающей по agile - Ретро.
Пост как раз под конец года:)
Это командная встреча по итогам спринта, квартала, года или конкретного проекта.
На встрече обсуждают итоги и ход работ, выделяют моменты на проработку.
Такая встреча нужна, чтоб усвоить опыт, полученный во время работы.
Например, у нас в команде самовывоза Маркета было регулярное ретро по итогам спринта сразу после демо(про него напишу отдельно).
Мы оставались только командой продукта и разработки. На встречу уходило примерно 1,5 часа.
🫡 Мы обсуждали статус выполнения задач с прошлых ретро.
🥸 Мы в закрытую(не видно текста, чтоб не сбивало тех, кто пишет другие) писали карточки в таблицу + и - спринта.
😎 Когда все всё написали, мы открываели карточки(но пока не открывали имён тех, кто написал) и голосовали за понравившиеся, чтоб вначале обсудить самые поддерживаемые.
🧐 Потом начинали обсуждение по одной карточке. Моё ноу-хау обсуждать вначале не один столбец целиком с плюсами или минусами, а чередовать радостные и грустные карточки - обсуждение идёт живее.
🤓 По итогам обсуждения карточки, мы либо закрывали её, либо писали новую задачу в работу. Например, внести конкретное исправление в регламент техлида или начать планировать дополнительное время в спринт для команды разработки на проведение ревью.
В разных моих командах мы использовали один из двух типов досок для проведения ретро:
Картинка 1 - табличка из трёх колонок: что было классно, что не понравилось, что мы улучшим.
Картинка 2 - интерактивная доска с кораблём или островом, где помимо плюсов и минусов процесса работы можно было поделиться эмоциями и подсветить опасения.
Кстати, мне всегда нравились командные ретро и обычно напрягали проектные со смежниками.
Потому что со своей командой уже хорошо знакомы и играете вдолгую: искренне хвалите и ответственно говорите про ошибки.
А при работе со смежниками всегда мелькает мысль: не разосрались - уже хорошо.
Если смежники часто меняются, например, у вас один общий проект за несколько лет, то на ретро есть риск, что вы просто попереводите стрелки и разойдетесь каждый со своим мнением. Чтоб такого не было - нужно заранее договориться о правилах ритуала.
С другой стороны, можно и говном покидаться, если у вас есть хороший фасилитатор на встрече. Тогда получится и выпустить пар - не держать в себе и разойтись с чувством завершенного проекта в кругу профессионалов, которые спорили про свои профессиональные вопросы:)
А вы используете ритуал ретроспектив? Как у вас проходит, какими бордами пользуетесь? Что в нём нравится или не заходит?
@product_lev
#pm #ретроспектива #ретро #ритуал #agile #product #owner
👍8🔥7❤4💯1
Демо
Неотрывно от Ретро существует ритуал Демо (обзор спринта). Демо идёт перед Ретро.
На Демо команда демонстрирует результаты своей работы.
При работе спринтами Демо обычно назначается на последний день спринта.
Кому?
Демонстрация ведётся перед стейкхолдерами и командами поддержки бизнес-процессов.
Также можно позвать руководителей разработки и продукта, смежников.
Для чего?
В первую очередь Демо проводится для того, чтоб показать результат стейкхолдерам.
Регулярная демонстрация функционала командам поддержки бизнеса держит вас в синхронизации.
Поддержка и операции будут находиться в полном понимании о работе продукта, даже если вы не пишете обзоры на новый функционал.
За счет Демо можно строить доверительные и дружеские отношения со смежниками и руководителями показывая им, на что были проинвестированы ресурсы их подчиненных. И в следующий раз они возможно охотнее станут помогать.
Кто проводит?
Тестировщик - обычно тестировщик показывает демо по сценариям тестирования.
Разработчик - если хотят лично показать эдакое решение.
Продакт - если важно на демо не споткнуться - продемонстрировать безукоризненный стандартный сценарий, на демо есть сложный стейкхолдер - будут вопросы и про сроки и про возможные проблемы.
Советы:)
Пинговать перед демонстрацией зрителей, если есть что показать. Нужно звать всех заинтересованных участников.
Если демо ответственное, то лучше предзаписать на видео функционал, чтоб что-то не сломалось на живой демонстрации. Но на видео не нужно записывать пояснения - их можете давать сами поверх видео, так как скорее всего будут другие вопросы.
@product_lev
#демо #scrum #agile #pm #product
Неотрывно от Ретро существует ритуал Демо (обзор спринта). Демо идёт перед Ретро.
На Демо команда демонстрирует результаты своей работы.
При работе спринтами Демо обычно назначается на последний день спринта.
Кому?
Демонстрация ведётся перед стейкхолдерами и командами поддержки бизнес-процессов.
Также можно позвать руководителей разработки и продукта, смежников.
Для чего?
В первую очередь Демо проводится для того, чтоб показать результат стейкхолдерам.
Регулярная демонстрация функционала командам поддержки бизнеса держит вас в синхронизации.
Поддержка и операции будут находиться в полном понимании о работе продукта, даже если вы не пишете обзоры на новый функционал.
За счет Демо можно строить доверительные и дружеские отношения со смежниками и руководителями показывая им, на что были проинвестированы ресурсы их подчиненных. И в следующий раз они возможно охотнее станут помогать.
Кто проводит?
Тестировщик - обычно тестировщик показывает демо по сценариям тестирования.
Разработчик - если хотят лично показать эдакое решение.
Продакт - если важно на демо не споткнуться - продемонстрировать безукоризненный стандартный сценарий, на демо есть сложный стейкхолдер - будут вопросы и про сроки и про возможные проблемы.
Советы:)
Пинговать перед демонстрацией зрителей, если есть что показать. Нужно звать всех заинтересованных участников.
Если демо ответственное, то лучше предзаписать на видео функционал, чтоб что-то не сломалось на живой демонстрации. Но на видео не нужно записывать пояснения - их можете давать сами поверх видео, так как скорее всего будут другие вопросы.
@product_lev
#демо #scrum #agile #pm #product
👍8✍5🔥5❤1
Sprint Planning (планирование спринта)
Цель мероприятия — определить объём работ, которые будут выполнены командой за предстоящий цикл.
Дано:
У команды есть стратегия развития продукта или дорожная карта на месяц/квартал.
Крупные задачи даже могут быть уже разбиты по инженерам.
Подготовка к планированию:
1) Продакт, исходя из стратегической дорожной карты, готовит описание задач для команды, которые стоят в плане на ближайший цикл.
2) 1ое сито огранки описания: для проверки качества описанных задач можно идти двумя путями:
а - обсудить с тимлидами реалистичность реализации
б - поставить задачу системному аналитику, чтоб он подготовил описания для технической команды
3) 2ое сито огранки описания: для синхронизации понимания можно использовать груминг
В рамках такой встречи продакт демонстрирует команде описание задач и отвечает на вопросы - фиксирует ответы.
Цель груминга - добиться максимального понимания командой разработки требований, которые сочинил продакт.
4) Декомпозиция
Задачи с верхнеуровневой оценкой более одного спринта одним разработчиком могут быть декомпозированы тимлидом на мелкие - помещающиеся в спринт.
Если в работе не участвует системный аналитик, то тимлид может завести подзадачи к задаче продакта. Где будут описания более техническим языком с уточнениями, какие именно подходы к изменению систем нужно предпринять.
5) Оценка
Разработка проводит оценивание задач
Для этого могут вестить обычные обсуждения или использован механизм Planning Poker.
Планирование:
После оценки продакт точнее понимает, сколько стоит каждая задач.
Также он знает, какой ресурс у него есть: например сколько сторипоинтов есть на бэкенд и фронтенд.
В планировании помимо задач учитываются дежурства и отпуска.
По итогам планирования спринта:
1) Получаем Гант или список задач на каждого разработчика
И планы по тестированию и релизам.
2) Донести планы до команды можно на Кикофе - установочной встрече в начале спринта или просто на первом стендапе.
🥷А чем у вас отличается процесс планирования спринта? Или может вы работаете по Канбану?
@product_lev
#планирование #scrum #agile #pm #product
Цель мероприятия — определить объём работ, которые будут выполнены командой за предстоящий цикл.
Дано:
У команды есть стратегия развития продукта или дорожная карта на месяц/квартал.
Крупные задачи даже могут быть уже разбиты по инженерам.
Подготовка к планированию:
1) Продакт, исходя из стратегической дорожной карты, готовит описание задач для команды, которые стоят в плане на ближайший цикл.
2) 1ое сито огранки описания: для проверки качества описанных задач можно идти двумя путями:
а - обсудить с тимлидами реалистичность реализации
б - поставить задачу системному аналитику, чтоб он подготовил описания для технической команды
3) 2ое сито огранки описания: для синхронизации понимания можно использовать груминг
В рамках такой встречи продакт демонстрирует команде описание задач и отвечает на вопросы - фиксирует ответы.
Цель груминга - добиться максимального понимания командой разработки требований, которые сочинил продакт.
4) Декомпозиция
Задачи с верхнеуровневой оценкой более одного спринта одним разработчиком могут быть декомпозированы тимлидом на мелкие - помещающиеся в спринт.
Если в работе не участвует системный аналитик, то тимлид может завести подзадачи к задаче продакта. Где будут описания более техническим языком с уточнениями, какие именно подходы к изменению систем нужно предпринять.
5) Оценка
Разработка проводит оценивание задач
Для этого могут вестить обычные обсуждения или использован механизм Planning Poker.
Планирование:
После оценки продакт точнее понимает, сколько стоит каждая задач.
Также он знает, какой ресурс у него есть: например сколько сторипоинтов есть на бэкенд и фронтенд.
В планировании помимо задач учитываются дежурства и отпуска.
По итогам планирования спринта:
1) Получаем Гант или список задач на каждого разработчика
И планы по тестированию и релизам.
2) Донести планы до команды можно на Кикофе - установочной встрече в начале спринта или просто на первом стендапе.
🥷А чем у вас отличается процесс планирования спринта? Или может вы работаете по Канбану?
@product_lev
#планирование #scrum #agile #pm #product
👍6❤4✍4🤝1
Ежедневный стендап (Daily Scrum)
Подытоживаю мини-серию постов про ритуалы скрама мини-постом про дейлик.
Дейлик - это короткая встреча, на которой каждый член команды делится информацией о своей работе, проблемах и планах на день.
На встрече каждый участник кратко рассказывает о том, что он делал вчера, какие задачи он планирует выполнить сегодня и с какими проблемами он столкнулся.
Главная цель: синхронизировать команду и поддержать в трудностях, как сеанс групповой терапии.
Важно:
1) Приходить на встречу вовремя, говорить кратко и по делу.
Дейлик должен быть стремительным.
2) Не давать уходить в дискуссии по конкретным задачам.
Если не получилось обсудить в паре предложения - уводить разборку в отдельное пространство.
3) Держать внимание всех участников.
Если с этим возникают проблемы, стоит пересмотреть длительность/формат/состав встречи.
4) Хорошо, если ведущий встречи начинает её с целей спринта и заканчивает, подытоживая ими же.
5) Мастхев пользоваться канбан доской для прохождения по задачам
Кстати, на стендапы не обязательно ходить продакту, он может быть ситуативным слушателем. Но в моем опыте были и команды, где продакт рассказывал о своих планах на день команде:)
🥷А как у вас проходят стендапы, стоите ли вы на них, чтоб держать темп?
@product_lev
#daily #scrum #agile #productmanagement
Подытоживаю мини-серию постов про ритуалы скрама мини-постом про дейлик.
Дейлик - это короткая встреча, на которой каждый член команды делится информацией о своей работе, проблемах и планах на день.
На встрече каждый участник кратко рассказывает о том, что он делал вчера, какие задачи он планирует выполнить сегодня и с какими проблемами он столкнулся.
Главная цель: синхронизировать команду и поддержать в трудностях, как сеанс групповой терапии.
Важно:
1) Приходить на встречу вовремя, говорить кратко и по делу.
Дейлик должен быть стремительным.
2) Не давать уходить в дискуссии по конкретным задачам.
Если не получилось обсудить в паре предложения - уводить разборку в отдельное пространство.
3) Держать внимание всех участников.
Если с этим возникают проблемы, стоит пересмотреть длительность/формат/состав встречи.
4) Хорошо, если ведущий встречи начинает её с целей спринта и заканчивает, подытоживая ими же.
5) Мастхев пользоваться канбан доской для прохождения по задачам
Кстати, на стендапы не обязательно ходить продакту, он может быть ситуативным слушателем. Но в моем опыте были и команды, где продакт рассказывал о своих планах на день команде:)
🥷А как у вас проходят стендапы, стоите ли вы на них, чтоб держать темп?
@product_lev
#daily #scrum #agile #productmanagement
👍8👏4❤3🔥1🤣1
Основные ритуалы Скрама
Написал серию постов о том, какие встречи-ритуалы приняты в командах, работающих по agile-методике под названием Scrum с советами по использованию:
1) Планирование: груминг, покер, планирование
2) Стендапы
3) Демо
4) Ретро
У менеджера помимо основных ритуалов будут встречи один на один:
1) 1-1 с руководителем
11) 1-1 с подчиненными менеджерами
111) 1-1 с руководителями стейкхолдеров
1111) 1-1 с лидами разработки/аналитики/дизайна
Что еще можно добавить:
1) Неформальный стендап
в посте на день разработчика написал, как можно классно сплотить команду.
2) Встреча с командой стейкхолдеров: заказчики/операции/поддержка
если вам не хватает встреч 1-1 с лидами, можно собрать регулярную общую встречу для пущей синхронизации и выпуска пара.
3) Кикоф
встреча в начале спринта вместо или дополнительно к первому стендапу, на которой лид или продакт мотивирует команду на свершения рассказом про цели и задачи на спринт.
🥷А какие регулярки в командах встречали вы?
@product_lev
#planning #kickoff #daily #demo #retrospective #scrum #agile #productmanagement #pm
Написал серию постов о том, какие встречи-ритуалы приняты в командах, работающих по agile-методике под названием Scrum с советами по использованию:
1) Планирование: груминг, покер, планирование
2) Стендапы
3) Демо
4) Ретро
У менеджера помимо основных ритуалов будут встречи один на один:
1) 1-1 с руководителем
11) 1-1 с подчиненными менеджерами
111) 1-1 с руководителями стейкхолдеров
1111) 1-1 с лидами разработки/аналитики/дизайна
Что еще можно добавить:
1) Неформальный стендап
в посте на день разработчика написал, как можно классно сплотить команду.
2) Встреча с командой стейкхолдеров: заказчики/операции/поддержка
если вам не хватает встреч 1-1 с лидами, можно собрать регулярную общую встречу для пущей синхронизации и выпуска пара.
3) Кикоф
встреча в начале спринта вместо или дополнительно к первому стендапу, на которой лид или продакт мотивирует команду на свершения рассказом про цели и задачи на спринт.
🥷А какие регулярки в командах встречали вы?
@product_lev
#planning #kickoff #daily #demo #retrospective #scrum #agile #productmanagement #pm
❤10👍5👏3✍1
Матрица RACI: как не утонуть в зонах ответственности
Кто должен ревьюить продуктовое решение?
Кто может дать исчерпывающий ответ на вопрос по процессу?
Кто отвечает за часть решения головой?
Кого ставить в известность об изменении?
Если вы ведете новый или очень ответственный проект, работаете в новой команде или хотите опрозрачнить зоны ответственности в коммуникацию внутри текущей, вам может помочь матрица RACI.
RACI - это инструмент для распределения ролей ответственности в команде.
Расшифровывается как Responsible, Accountable, Consulted и Informed:
1) Responsible (Ответственный) – кто выполняет задачу. Например, разработчик, который пишет код.
2) Accountable (Подотчетный или утверждающий) – кто несет ответственность за результат. Обычно это менеджер, который следит за тем, чтобы задача была выполнена в срок и в соответствии с требованиями.
3) Consulted (Консультируемый) – эксперты, чье мнение важно для выполнения задачи.
4) Informed (Информируемый) – кто должен быть в курсе прогресса. Это могут быть стейкхолдеры или другие команды, которые зависят от результатов вашей работы.
Инструмент представляет собой таблицу, где вертикально выписываются задачи, а горизонтально - участники проекта, в ячейках на пересечении задачи и исполнителя указывается, какую роль он несёт по задаче.
Пример того, как вписывается RACI приложил к посту. Такой гант поможет менеджеру не только отслеживать, процесс по задачам, но и убедиться, что были получены все аппрувы и уведомлены все заинтересованные.
🥷Вы часто используете RACI в работе?
Я расписывал на своих первых проектах, чтоб не запутаться в трёх соснах, а потом только уже на крупных кроссконтурных проектах, где было задействовано параллельно более 50 специалистов в разных ролях.
@product_lev
#RACI #productmanager #teamefficiency #roleclarity #AIme
Кто должен ревьюить продуктовое решение?
Кто может дать исчерпывающий ответ на вопрос по процессу?
Кто отвечает за часть решения головой?
Кого ставить в известность об изменении?
Если вы ведете новый или очень ответственный проект, работаете в новой команде или хотите опрозрачнить зоны ответственности в коммуникацию внутри текущей, вам может помочь матрица RACI.
RACI - это инструмент для распределения ролей ответственности в команде.
Расшифровывается как Responsible, Accountable, Consulted и Informed:
1) Responsible (Ответственный) – кто выполняет задачу. Например, разработчик, который пишет код.
2) Accountable (Подотчетный или утверждающий) – кто несет ответственность за результат. Обычно это менеджер, который следит за тем, чтобы задача была выполнена в срок и в соответствии с требованиями.
3) Consulted (Консультируемый) – эксперты, чье мнение важно для выполнения задачи.
4) Informed (Информируемый) – кто должен быть в курсе прогресса. Это могут быть стейкхолдеры или другие команды, которые зависят от результатов вашей работы.
Инструмент представляет собой таблицу, где вертикально выписываются задачи, а горизонтально - участники проекта, в ячейках на пересечении задачи и исполнителя указывается, какую роль он несёт по задаче.
Пример того, как вписывается RACI приложил к посту. Такой гант поможет менеджеру не только отслеживать, процесс по задачам, но и убедиться, что были получены все аппрувы и уведомлены все заинтересованные.
🥷Вы часто используете RACI в работе?
Я расписывал на своих первых проектах, чтоб не запутаться в трёх соснах, а потом только уже на крупных кроссконтурных проектах, где было задействовано параллельно более 50 специалистов в разных ролях.
@product_lev
#RACI #productmanager #teamefficiency #roleclarity #AIme
👍12❤🔥7🔥4✍2❤1
Что почитать?
Черный лебедь: под знаком непредсказуемости, Нассим Николас Талеб
Кому: всем, кто интересуется рисками, неопределенностью и стратегическим мышлением
Кол-во страниц: 480
Оценка от меня: 10 неслучайных случайностей из 10
Отзыв:
Классная книга на подумать на ряду вместе с Думай медленно, решай быстро Канемана. Много отсылок на нее и идеи Канемана в целом. Мне очень приятно, что начинаю шарить за менеджерский лор)
Автор пишет про свою жизнь. Он был из семьи зам. премьер-министра Ливана, но участвовал в митингах против власти, как его семья думала о безоблачном будущем, но пришлось сидеть в бомбоубежищах под обстрелами во время войны. Про его опыт в бизнесе и трейдинге, какого курса всегда придерживался: делать много мелких ставок с очень большим коэффициентом.
В книге очень много интереснейших отсылок(список литературы на 30 страниц) и критики на работы нобелевских лауреатов и классиков философии и математики. У меня появилось большое желание пройти повышение квалификации или углубленные курсы по этим дисциплинам, уж очень интересно было бы говорить с автором на одном языке(тут небольшая шутка, автор много раз подчеркивает свое исключительное знание французского).
Больше всего запомнился вывод из закона Парето: помимо 20% усилий приносящих 80% результата, есть 1% процент усилий, который приносит 50%.
Но скажу честно, главную мысль: Гауссианой(нормальным распределением) нельзя пользоваться в общем случае для прикладных задач, я понял только на понятийном уровне, что вероятность критичных исключений из правила перекрывает само правило. Возможно, через следующие книги автора получится врубиться посильнее. На очереди Антихрупкость и Одураченные случайностью.
@product_lev
#ЧерныйЛебедь #Талеб #Риски #Неопределенность #Стратегия #ProductManagement #product #pm #литература #чтопочитать
Черный лебедь: под знаком непредсказуемости, Нассим Николас Талеб
Кому: всем, кто интересуется рисками, неопределенностью и стратегическим мышлением
Кол-во страниц: 480
Оценка от меня: 10 неслучайных случайностей из 10
Отзыв:
Классная книга на подумать на ряду вместе с Думай медленно, решай быстро Канемана. Много отсылок на нее и идеи Канемана в целом. Мне очень приятно, что начинаю шарить за менеджерский лор)
Автор пишет про свою жизнь. Он был из семьи зам. премьер-министра Ливана, но участвовал в митингах против власти, как его семья думала о безоблачном будущем, но пришлось сидеть в бомбоубежищах под обстрелами во время войны. Про его опыт в бизнесе и трейдинге, какого курса всегда придерживался: делать много мелких ставок с очень большим коэффициентом.
В книге очень много интереснейших отсылок(список литературы на 30 страниц) и критики на работы нобелевских лауреатов и классиков философии и математики. У меня появилось большое желание пройти повышение квалификации или углубленные курсы по этим дисциплинам, уж очень интересно было бы говорить с автором на одном языке(тут небольшая шутка, автор много раз подчеркивает свое исключительное знание французского).
Больше всего запомнился вывод из закона Парето: помимо 20% усилий приносящих 80% результата, есть 1% процент усилий, который приносит 50%.
Но скажу честно, главную мысль: Гауссианой(нормальным распределением) нельзя пользоваться в общем случае для прикладных задач, я понял только на понятийном уровне, что вероятность критичных исключений из правила перекрывает само правило. Возможно, через следующие книги автора получится врубиться посильнее. На очереди Антихрупкость и Одураченные случайностью.
@product_lev
#ЧерныйЛебедь #Талеб #Риски #Неопределенность #Стратегия #ProductManagement #product #pm #литература #чтопочитать
❤15👍3🔥3✍1
AARRR! Пиратская маркетинговая воронка
AARRR – это фреймворк маркетинговой воронки пользователей от касания лида до получения дохода, которая была сформулирована в 2007 году. Секрет названия прост: «AARRR» звучит как клич пиратов.
Воронка состоит из 5 уровней:
1) Aquisition - Привлечение
Пользователь заинтересовался нами: перешел по рекламе.
2) Activation - Активация
Пользователь выполнил первый важный шаг в продукте: прошел регистрацию, добавил товар в корзину.
3) Retention - Удержание
Пользователь воспользовался нами не одноразово, продолжает взаимодействовать с продуктом.
4) Referral - Распространение
Пользователь привлек в продукт новых пользователей или реактивировал старых.
5) Revenue - Доход
Пользователь принес нам доход.
Я часто пользовался фреймворком на собеседованиях, чтоб генерировать гипотезы улучшений воронки продукта. Из последнего рабочего опыта: выступал смежником для EdTech департамента в ВК, размышлял через воронку, на каких стадиях могу влиять на пользователя, чтоб понять, что ничего не упускаю.
На картинке к посту есть пример метрик, которые могут служить индикаторами по уровням воронки.
Пользовались ли вы воронкой в своей работе? Успешно?
@product_lev
#AARRR #AAARRR #marketing #productmanagement #pm #metrics
AARRR – это фреймворк маркетинговой воронки пользователей от касания лида до получения дохода, которая была сформулирована в 2007 году. Секрет названия прост: «AARRR» звучит как клич пиратов.
Воронка состоит из 5 уровней:
1) Aquisition - Привлечение
Пользователь заинтересовался нами: перешел по рекламе.
2) Activation - Активация
Пользователь выполнил первый важный шаг в продукте: прошел регистрацию, добавил товар в корзину.
3) Retention - Удержание
Пользователь воспользовался нами не одноразово, продолжает взаимодействовать с продуктом.
4) Referral - Распространение
Пользователь привлек в продукт новых пользователей или реактивировал старых.
5) Revenue - Доход
Пользователь принес нам доход.
Я часто пользовался фреймворком на собеседованиях, чтоб генерировать гипотезы улучшений воронки продукта. Из последнего рабочего опыта: выступал смежником для EdTech департамента в ВК, размышлял через воронку, на каких стадиях могу влиять на пользователя, чтоб понять, что ничего не упускаю.
На картинке к посту есть пример метрик, которые могут служить индикаторами по уровням воронки.
Пользовались ли вы воронкой в своей работе? Успешно?
@product_lev
#AARRR #AAARRR #marketing #productmanagement #pm #metrics
👍10❤9😁4
Мэтр РММ Илья Красинский про проблемы в А/В-тестировании
В прошлую пятницу, был вебинар Ильи Красинского на канале у Юрия Борзило
На самом вебинаре обсудили разные вопросы касательно А/В тестов, почему они могут не работать и что с этим делать. Тут лежит полная версия, где больше говорили, какие есть проблемы в инструментах и подходах.
Делюсь интересными мыслями, которые выписал для себя:
1) Дизайнеры дублируют наиболее устоявшийся вид лендинга - это антипаттерн, нужно улучшать лендинги.
🤔Чрезвычайно ценится у дизайнера умение в аналитику.
2) Как быстро оценить лендинг:
1-Обсудить, что пользователь должен увидеть, понять и сделать?
2-Смотрим на лендинг, решаем, видим ли это?
🤔Казалось бы элементарно, но не всегда доходят руки.
3) Если А/В не ухудшающий - катим на опыте, если ухудшающий - правим и заново запускаем А/В.
🤔При общих равных дороже будет откатывать все внесенные изменения и убивать мотивацию у команды разработки.
4) По возможности постоянно проводить зеленый АА тест.
🤔Нужно иметь уверенность в своем инструменте исследований.
5) Ошибочно делить группы на А/В по четности id.
🤔В противном случае в новых А/В будут те же группы.
Картинка 1 - Путь пользователя не воронка, а минное поле
Картинка 2 - Пример того, как метрика может расти суммарно, хотя в каждом сегменте идет падение
Я познакомился с работами Ильи в 2019 году, когда смотрел лекции ШМЯ.
Многим известен бестдонлоадер Ильи с моделью юнит-экономики.
Рад был поучаствовать в дискуссии на тему:)
@product_lev
#мысли #pm #pmm #Красинский #ab #analytics
В прошлую пятницу, был вебинар Ильи Красинского на канале у Юрия Борзило
На самом вебинаре обсудили разные вопросы касательно А/В тестов, почему они могут не работать и что с этим делать. Тут лежит полная версия, где больше говорили, какие есть проблемы в инструментах и подходах.
Делюсь интересными мыслями, которые выписал для себя:
1) Дизайнеры дублируют наиболее устоявшийся вид лендинга - это антипаттерн, нужно улучшать лендинги.
🤔Чрезвычайно ценится у дизайнера умение в аналитику.
2) Как быстро оценить лендинг:
1-Обсудить, что пользователь должен увидеть, понять и сделать?
2-Смотрим на лендинг, решаем, видим ли это?
🤔Казалось бы элементарно, но не всегда доходят руки.
3) Если А/В не ухудшающий - катим на опыте, если ухудшающий - правим и заново запускаем А/В.
🤔При общих равных дороже будет откатывать все внесенные изменения и убивать мотивацию у команды разработки.
4) По возможности постоянно проводить зеленый АА тест.
🤔Нужно иметь уверенность в своем инструменте исследований.
5) Ошибочно делить группы на А/В по четности id.
🤔В противном случае в новых А/В будут те же группы.
Картинка 1 - Путь пользователя не воронка, а минное поле
Картинка 2 - Пример того, как метрика может расти суммарно, хотя в каждом сегменте идет падение
Я познакомился с работами Ильи в 2019 году, когда смотрел лекции ШМЯ.
Многим известен бестдонлоадер Ильи с моделью юнит-экономики.
Рад был поучаствовать в дискуссии на тему:)
@product_lev
#мысли #pm #pmm #Красинский #ab #analytics
👍10✍6❤5🔥1
Продуктовая стратегия: Личный опыт и конкретные шаги
Формулирование продуктовой стратегии — важнейший шаг в управлении продуктом, который определяет его долгосрочный успех.
Когда я столкнулся с задачей формулирования стратегии, мне никто не мог подсказать четкого фреймворка.
Поэтому решил восстановить в памяти те шаги, по которым прошел сам.
Предыстория:
Я был владельцем продукта самовывоза в Яндекс Маркете, реализовал крупный кросс-контурный проект в логистике, и мне предложили перейти в роль руководителя продуктовой команды в коммерческое направление.
Продукт был относительно молодой: Ассортиментный комитет - сервис для принятия решений о закупке маркетплейсом товаров в собственность(например, собственная торговая марка или ёлок под нг накупить, чтоб выдержать спрос).
Главной задачей помимо организации команды стало собрать стратегию развития продукта.
Как формулировал стратегию:
1) собрал меморандум продукта
- обсудил со смежниками, как работа продукта выглядит в их глазах: менеджеры категорий по закупкам, финансовые и продуктовые аналитики, разработка
- разобрался в бизнес-процессах около продукта, кто зависит от нас и от кого мы
2) выделил три основные цели развития продукта в бесконечности
- основываясь на общей стратегии маркетплейса и целей смежных контуров
3) декомпозировали три цели деревом до конкретных задач
4) из конкретных задач собрали дорожную карту на год в зависимости от их приоритета в текущей стратегии компании и импакта внутри команды
5) получилось пять уровней задач сверху вниз от целей
6) нижний уровень описали по СМАРТу
Все пункты итеративно дорабатывались вместе со смежниками и продуктовой командой
Каждый пункт помогали обрабатывать продакты из моей команды.
Защита стратегии и дорожной карты на год была вначале на узкий круг руководителей, чтоб притереться, потом на широкий круг всех смежников.
В итоге получил артефакты:
1) меморандум продукта
2) дерево целей продукта
3) дорожная карта на год
Отсюда понравились графические изображения.
🥷А вы сталкивались с долгосрочным планированием? Какие приемы использовали?
@product_lev
#product #strategy #pm #planning #experience #yandex
Формулирование продуктовой стратегии — важнейший шаг в управлении продуктом, который определяет его долгосрочный успех.
Когда я столкнулся с задачей формулирования стратегии, мне никто не мог подсказать четкого фреймворка.
Поэтому решил восстановить в памяти те шаги, по которым прошел сам.
Предыстория:
Я был владельцем продукта самовывоза в Яндекс Маркете, реализовал крупный кросс-контурный проект в логистике, и мне предложили перейти в роль руководителя продуктовой команды в коммерческое направление.
Продукт был относительно молодой: Ассортиментный комитет - сервис для принятия решений о закупке маркетплейсом товаров в собственность(например, собственная торговая марка или ёлок под нг накупить, чтоб выдержать спрос).
Главной задачей помимо организации команды стало собрать стратегию развития продукта.
Как формулировал стратегию:
1) собрал меморандум продукта
- обсудил со смежниками, как работа продукта выглядит в их глазах: менеджеры категорий по закупкам, финансовые и продуктовые аналитики, разработка
- разобрался в бизнес-процессах около продукта, кто зависит от нас и от кого мы
2) выделил три основные цели развития продукта в бесконечности
- основываясь на общей стратегии маркетплейса и целей смежных контуров
3) декомпозировали три цели деревом до конкретных задач
4) из конкретных задач собрали дорожную карту на год в зависимости от их приоритета в текущей стратегии компании и импакта внутри команды
5) получилось пять уровней задач сверху вниз от целей
6) нижний уровень описали по СМАРТу
Все пункты итеративно дорабатывались вместе со смежниками и продуктовой командой
Каждый пункт помогали обрабатывать продакты из моей команды.
Защита стратегии и дорожной карты на год была вначале на узкий круг руководителей, чтоб притереться, потом на широкий круг всех смежников.
В итоге получил артефакты:
1) меморандум продукта
2) дерево целей продукта
3) дорожная карта на год
Отсюда понравились графические изображения.
🥷А вы сталкивались с долгосрочным планированием? Какие приемы использовали?
@product_lev
#product #strategy #pm #planning #experience #yandex
👍9❤8🔥8