🔘 Ухудшающие A/B тесты – самый недооцененный инструмент менеджера продукта

~Время на чтение статьи: 6-8 минут

🔷 Ухудшающие эксперименты — это один из способов снизить уровень неопределенности с помощью предварительной оценки потенциала влияния составляющей продукта (напр. через ухудшение составляющей) на метрики.

🔷 Зачастую ухудшающие A/B тесты - это дешево!

🔷 Аргумент против ухудшающих тестов - они портят опыт пользователей и увеличивают churn. На самом деле работа любого продакта снижать неопределенность и принимать верные решения при ограниченных ресурсах, а такие тесты говорят о влиянии составляющей продукта на метрики и позволяют значимо увеличить вероятность улучшить продукт в будущем, не потратив лишние ресурсы.
➕ часто ухудшающие тесты не оказывают никакого влияния на продукт.

🔷 Ухудшающими тестами вы "портите" жизнь малому количеству пользователей на (❗️) короткое время, но улучшаете для всех + новых пользователей.

🔷 Важно помнить, что у любой методологии есть свои границы применимости.

🔷 Summary (и снова):
Например, нужно проверить, что какое-то дорогостоящее улучшение вырастит метрики. На самом деле вы устанавливаете связь изменения и метрик. Если связь есть, то ухудшение уронит метрики, а улучшение вырастит. Только ухудшение дешевле.

🎁 Бонус трек:
- Результаты теста по замедлению сайта Financial Times
- Программа акселерации и трудоустройства продактов. Платите только с будущей зарплаты.

🔈🔉🔊 Расскажите о канале друзьям и коллегам 🔊🔉🔈
Спасибо, что читаете. Надеюсь, вам здесь нравится🙃

#product_dump @pm_dump

Спроси маму. Как общаться с клиентами и подтвердить правоту своей бизнес-идеи, если все кругом врут

Статья ~7 минут чтения, книга ~2-3 вечера.

🔷 Customer development - поговорить с клиентами до того, как что-либо создавать. Ниже две главные мысли книги и правила CustDev'а
❗️Неправильно проведенный CustDev ведёт к множеству ложноположительных сигналов

1️⃣ Говорите с клиентами или пользователями об их жизни
Хорошие темы: бизнес процессы, pains, how solve now, what already tried, what budget was spent on it
Плохие темы: ваша идея, другие возможные решения

2️⃣ Спрашивайте о конкретных вещах, которые происходили в прошлом, а не о взглядах и мнениях на перспективу (или эмоциях)
Хорошие вопросы: Как пытались с этим справиться? Какие покупали приложения? Кто выделял на это бюджет? Какой был бюджет?
Плохой вопрос: А сколько вы бы заплатили за …?

🔷 Правила и советы по книге:
- Избегайте формализма
- Вас будут стараться похвалить за внимание ко мнению - избегайте этого
- Просите показать процесс и наблюдайте
- Просите представить вас “следующим” потенциальным клиентам или пользователям
- Отслеживайте противоречивую информацию и копайте глубже. Используй 5W (“Why?”)
- Задавайте вопросы, которые могут разрушить вашу картину будущего бизнеса
- Общайтесь с людьми, пока слышите что-то новое (это вам не выборка!)
- Всегда обсуждайте полученную информацию с коллегами, фиксируйте письменно. Не становитесь бутылочным горлышком
- Очевидно, но готовьтесь ко встречам (опросник, темы)
- Формат 2-3 человек - один общается, второй конспектирует. Делайте правильный конспект (вкл. эмоции людей)
- Скорость. Потратьте 2 недели, но концентрированно.

🎁 Бонус трек:
- Сама книга на Amazon за $ и Bookmate
- Для пиратов следующий пост 😉
- Продуктовые исследования. Иван Замесин (видео, 01:22:34)
- Всё о CustDev. Чтение ~57 минут, но будет отдельный пост

🔈🔉🔊 Расскажите о канале друзьям и коллегам 🔊🔉🔈
Спасибо, что читаете. Надеюсь, вам здесь нравится🙃

#product_dump @pm_dump

Роб Фитцпатрик “Спроси маму”

Epub, full 

Продолжение поста о главных тезисах книги “Спроси маму”

🔊 С каждым репостом плачет маленький лицензионный издатель 🔊

#product_dump @pm_dump

Unit экономика. Ликбез и очень-очень много ссылок

Чтение ~5-7 минут, если не записывать

🔷 Unit экономика - это отчет о прибылях и убытках в расчете на натуральную единицу измерения. Это может быть выполненный заказ, проданная услуга или товар.

🔷 Когорта - это группа пользователей объединенных по календарному (рекомендуется) или иным признакам. Пост про когортный анализ.

🔘 Средний C1 (конверсия в 1ю покупку) - 1%;
🔘 COGS = Cost of Good Sold or Commission;
В COGS не входят Fix Cost (постоянные издержки) - аренда офиса, бухучет раз в квартал, зп невовлеченных сотрудников;
🔘 Fix Costs - вообще не участвуют в расчете юнит-экономики. Выполняет сравнительную функцию;
🔘 1stCOGS (%) - затраты на первую покупку (не повторяются дальше). Рекламные акции, подарки при первой покупке.

🔷 Summary:
Каждый расчёт unit-экономики должен учитывать все нюансы именно ВАШЕГО бизнеса. Я, например, для B2B продукта Fix Costs включал в COGS, UA и C1 вообще убрал etc.

🎁 Бонус трек:
- Круто и важно: “Гайд: как разобраться в юнит-экономике за 1 день”. Красинский, Ханин, Шаблоны, Книги и вот это всё.
- Лекция (видео, 1:19:20). Илья Красинский, Школа менеджеров Яндекса
- Формула ARPPU для разных бизнес-моделей - раз, два
- Влад Прищепов - Алгоритм расчёта Unit экономики
- Калькулятор unit экономики ueCalc.
Демо этого сервиса в excel в следующем посте. Пользуйтесь на здоровье 😉
- Мой пост про LTV и CAC
- Сайт с шаблонами моделей для юнит экономики по сферам бизнеса

🔈🔉🔊 Расскажите о канале друзьям и коллегам 🔊🔉🔈
Спасибо, что читаете. Надеюсь, вам здесь нравится🙃

#product_dump @pm_dump

“Демо euCalc в формате excel”. Продолжение ликбеза по юнит экономике.

❗️Файл хорош для пробы пера и тренировки, но сам сервис дает гораздо шире функционал.
uecalc.com

🔊🔉🔈

#product_dump @pm_dump

Конкурс продуктовых аналитиков от Joom

Олег Якубенков, Joom, ex-Facebook

Архив с заданием и топ-3 решениями. Для всех, кто интересуется аналитикой в продуктах (надеюсь для всех)

🔊🔉🔈

#naked_links @pm_dump

🔷 Product Management Search Engine

От продактов Google, Facebook, ведущих стартапов

1000+ статей по менеджменту продуктов (worldwide)
Никаких видео, книг и рекламы
Только статьи👌Страница обновляется

🔊 Поделись постом с друзьям и коллегам 🔊

#naked_links @pm_dump

🔷 Яндекс.Взгляд
Сервис для исследования мнений

Может быть полезным инструментом для валидации гипотез.
Кто-то успел попробовать? Поделитесь мнением со мной: @pmdump_bot

❓Справка по Яндекс.Взгляд

🔊 Подписывайся на канал, делись постом 🔊

#naked_links @pm_dump

🔷 0x1.tv - ещё один источник знаний для вас

Не смотри на дизайн, это крутой проект)

🔷 Проект, который собирает доклады с различных IT-конференций. Все видео представлены в удобном категоризированном каталоге. Есть раздел с докладами по теме "Управление продуктами"

🔊 Подписывайся на канал, делись постом 🔊

#naked_links @pm_dump

Can't unsee - выбери корректный дизайн

Игра

🔷 Продакт менеджерам важно разбираться в дизайне, в том числе подмечать косяки в получаемых макетах

🔷 Can't unsee — игра, где надо выбрать из двух элементов дизайна правильный.
И весело и полезно, между прочим.

🔗 Credits: подсмотрено на канале "Технологии, медиа и общество"

#naked_links @pm_dump

🔷 Как измерить product/market fit с помощью метрик

Время на чтение ~6-8 минут

🔷 Product / Market fit - это успешность / востребованность продукта рынком

🔷 Автор предлагает смотреть на P/M fit через месячный retention (можно зависеть от категории продукта).
Нужно построить график retention и понять выравнивается ли он со временем.
Если продукт может превратить часть новых пользователей в регулярную аудиторию, то, значит, часть рынка находит продукт полезным и готова его регулярно использовать для решения своей задачи.

🔷 Также приводятся ряд других способов замера p/m fit, но они скорее субъективны

🔷 Summary: такой способ очень прозрачный и, главное, однозначный. Способ позволяет понять, что рынок конечен и рост продукта должен обеспечиваться чем-то еще, кроме привлечения новых пользователей.

🎁 Бонус трек:
- How Superhuman Built an Engine to Find Product/Market Fit
- (оффтоп) Turn any Google sheet into an API instantly, for free with Sheety

🔊 Подписывайся на канал, делись постом 🔊

#product_dump @pm_dump

Минутка радости благодаря Product Sense 🥳

Неограниченное количество людей смогут стать слушателями.
Подробности на сайте: productsense.io/mindset

Планирую писать тезисы и главные мысли с лекций и воркшопов в канал.
Ваши вопросы и пожелания пишите в бота: @pmdump_bot

#ProductMindset @pm_dump

🔷 Старт недели №1 - Product MindSet

1️⃣ Первая встреча была про глубинные интервью и их анализ от ребят из UX лаборатории Сбербанка и ЦИАНа

Звёзды субботнего вечера:
- Алина Ермакова, UX лаборатория Сбербанка
- Дарья Хлопова, Senior Reseacher ЦИАНа

"Интервью. Как провести глубинное исследование и выявить инсайты"
Ермакова Алина

“Мы провели 15 интервью, что дальше?”
Хлопова Даша

🎁 Эти две прекрасные презентации можно запросить через бота: @pmdump_bot

Summary по классике будет раскрыто в двух следующих постах

#ProductMindset #productsense @pm_dump

🔷 "Интервью. Как провести глубинное исследование и выявить инсайты"
Ермакова Алина, Сбербанк

🔷 Чтобы воспользоваться вашим продуктом, люди вообще ничего не должны «делать». Это ваш бизнес должен незаметно интегрироваться в человеческую жизнь!

- Определитесь с целью и объектом исследования
- Набираем репрезентативную выборка (6-8 интервью в каждом сегменте ЦА)
- Сделайте гайд полуструктурированного интервью
- Наблюдайте, общайтесь
- Анализируйте

🔷 Правила и советы:
- Проведите хоть раз интервью в естественной среде (около банкомата, например)
- Понимайте реальную задачу / потребность клиентов

🎁 Бонус трек:
- Список ошибок исследования (в презентации)
- Крутой кейс по product discovery (в презентации)

#ProductMindset #productsense @pm_dump

🔷 “Мы провели 15 интервью, что дальше?”
Хлопова Даша, ЦИАН Групп

😈 Вредный совет:
Делай выводы на ходу и сразу иди фигачить инсайты в прод

🔷 Варианты для анализа интервью:
1️⃣ Делать заметки во время интервью - нужен второй пилот, иначе порвётесь
Тут поможет структурированная таблица (пример в презе)
2️⃣ Разбирать расшифровки - транскрибирование это боль
В два окна открываете расшифровку и по важным моментам делаете “стикер” (электронный / бумажный)

🔷 Как анализировать? Кластеризация с помощью фрейкворков и инструментов.

1. CJM (самый хайповый сейчас) - поможет углубиться во все детали сценарного интервью и копнуть максимально глубоко во все нюансы проблемного интервью.
2. JTBD - поможет сфокусировать беседу на задачах пользователя
3. Pains/Gains/Jobs - поможет глубже копать и задавать больше вопросов – ведь мы хотим выявить все критерии “успеха” и “не успеха” задачи.

🎁 Бонус трек:
- Даша давала доп.материалы -> вот они

#ProductMindset #productsense @pm_dump

🔷 Привет! 🔷

Вас становится всё больше, это очень радует 🙂

🔷 Вы мне очень поможете в развитии канала, если пройдете опрос и(или) поделись ссылкой на него со знакомыми, кто интересуется управлением продуктами 🔈🔉🔊

Опрос. Всего 4 вопроса (~1-2 минуты): bit.ly/pm_poll
Ссылка на канал: bit.ly/pm_subscribe
Ссылка на мою карту навыков продакта: bit.ly/PdM_skills

А для самых щедрых на фидбек есть бот - welcome! Буду рад, стучитесь: @pmdump_bot 🙏

🤖 Smart Home: A digital UI Kit for the physical world

powered by Invision App

🔷 Зачем изобреть велосипед, когда можно собрать интерфейс с минимальной тратой ресурсов дизайнера, верно? 🧐

🔷 Smart Home - этот UI kit. Полный комплект для всех ваших потенциальных устройств: хаб, термостаты, лампы и других устройств умного дома.

🔘 100+ UI элементов
🔘 1 организованное пространство компонент
🔘 24 экрана

Исходники доступны для Photoshop, Sketch и Studio.
Скачать можно с Google Drive

🎁 Бонус трек:
- Пост с Velocity - UI kit с полноценной адаптивной дизайн-системой

🔊🔊 Поделись со своими дизайнерами, сделай их счастливыми 🔊🔊

#naked_links @pm_dump

🔷 How to design goal oriented user onboarding in 4 steps

Eng. Время чтения ~7 минут

🔷 Занимательный факт:
Среднее приложение теряет до 71% юзеров в течение 90 дней

🔷 “Tutorial trap”:
Многие считают, что экраны туториала - это универсальный ответ при онбординге и фокусируются только на них. Но оказывается, что пользователи часто просто бездумно пролистывают экраны 🤷‍♂️
Не забывайте, что главная цель - донести ключевую ценность вашего продукта в кратчайшие сроки, а не просто поставить обучающие экраны. Может вам лучше подойдет другой способ?

🔷 GOO = Goal oriented onboarding состоит из 4 этапов:

1️⃣ Drive users toward specific, key actions
- Не замыкайтесь на финальных конверсионных действиях. Цель максимально просто и быстро донести ценность продукта.
В тему: Байрам Аннаков (CEO App in the Air): как делать правильный onboarding

2️⃣ Focus your product around onboarding first
- Продумайте какие действия должен совершить пользователь, чтобы его шанс конвертироваться увеличился и убедитесь, что они присутствуют в онбординге.

3️⃣ Add new UI where it's needed most
- Самое время протестить всё из пункта 1-2. Не тратьте много времени, 5 юзер-тестов прояснят ситуацию (зависит от продукта, прим. автора канала)
- А теперь заполняйте найденные проблемы в вашем онбординге, например, UI элементами (напр. подсказка)

4️⃣ Analyze, adjust, and repeat
- Поймите, что самое интересное только начинается и продолжайте работать 😉

🔷 Summary:
Ваш фокус - это заставить пользователя сделать минимум усилий для совершения высоко конверсионных действий, а не просто всадить tutorial в первую сессию

🎁 Бонус трек:
- Мой прошлый пост про онбординг;
Стоит делать тэги по темам: онбординг, юнит-экономика и т.д? Напишите в бота, пожалуйста: @pmdump_bot
- UserOnboard - портал посвященный онбординг (много кейсов);
- Лучшие практики онбординга от Appcues
- 5 лучших примеров онбординга от Appcues

🔊 Нравится канал? Делись постом 🔊

#product_dump @pm_dump

⚠️ При публикации действительно потерялся второй пункт GOO ☹️

Спасибо за бдительность 🙏

🎁 Компенсирующий бонус трек:
- Библиотека лучших продуктовых фреймворков в одном месте
- Statista: сайт со статистикой и данными по 600 отраслям в 50+ странах by Simulator GoPractice
- Банк слайдов - ведь найденные данные нужно красиво презентовать команде и стейкхолдерам 👌

#naked_links

🔷 Шаблон рамочного договора для дизайнера
by Tema Lebedev

🎁 В наличии:
- Рамочный договор;
- Приложение на айдентику;
- Приложение на сайт.

Я человек простой
👨🏼‍🦰
Больше работаю с дизайнерами - больше публикую материалов про дизайнеров

#naked_links @pm_dump

Презентации с митапа №3

Product Mindset

🔷 Алиса Полякова - "Evaluating the monetary value of your feature"
Agenda: Сколько стоят ваши решения? Про ICE, приоритезацию + кейс 🎁

🔷 Антон Гусев - "Ценность дороже денег"
Agenda: Что причиняет ценность потребителям? А как это использовать против них? 💸

🔷 Глеб Тертычный - "Менеджмент - это игра"
Agenda: Ты тролль? Или маг? Или может воин?! В общем про этико-деятельный спектр позиций человека 🧙‍♂️🔝

🎁 Бонус трек:
Теперь все презентации, ВИДЕО лекций и материалы программы Product Mindset доступны на сайте: space.productsense.io/product-mindset

P.S. У некоторых из нас сейчас идёт неделя юнит-экономики. У меня как раз есть пост с безумным количеством материалов по теме 📚
Забирайте 👍

#productmindset #productsense @pm_dump