Критерии статистической значимости: критерий Манна-Уитни

Критерий Манн-Уитни (Mann–Whitney U test) проверяет равенство распределений. Он не сравнивает средние или медианы, как многие ошибочно предполагают. Он лишь учитывает расположение элементов выборок относительно друг друга и не берет в расчет абсолютные значения их элементов.

На этом пост можно было бы завершить. Но давайте разберемся, почему вам стоит с осторожностью использовать этот критерий в своей работе.

Критерий так «популярен» из-за 2 мифов:

♦️ Если в данных много выбросов – t-test использовать нельзя. В таком случае нужно переходить к его непараметрическому аналогу Манна-Уитни, который более устойчив к выбросам.

♦️ Если распределение отлично от нормального (выборка перекошена) – параметрический t-test использовать нельзя. Вновь можно попасться в ловушку и применить Манна-Уитни.

Ошибкой здесь будет то, что критерий Манна-Уитни с бОльшей вероятностью даст статистически значимый эффект на той же выборке. Но, в сравнении с тем же t-тестом, процент ложноположительных срабатываний (ошибок I рода) у него будет значительно выше.

Но ведь гораздо сложнее принять факт, что эксперимент не дал стат. значимого изменения. Куда приятнее поверить Манна-Уитни и тому, что эффект на самом деле есть. Это и делает его таким популярным среди аналитиков.

Обычно, я пишу что-то вроде «используйте этот инструмент в свой работе». Но сегодня скажу иначе – будьте внимательны при использовании этого инструмента. Возможно, для вашей задачи нужны альтернативные и более подходящие критерии для проверки статистической значимости. Какие? Узнаете в следующих постах.

#абтесты #статкритерии

Разбор вопроса «Почему вы ищете новую работу?»

Ещё один достаточно распространенный вопрос на собеседованиях. HR задаёт его, чтобы понять вашу мотивацию перейти на новое место и узнать возможные проблемы на текущем.

Ошибочными вариантами ответов будут:

♦️ «Мне уже полтора года не повышают ЗП».

Указание на зарплату, как основную причину поиска новой работы, создаст впечатление, что вы работаете только ради денег.

♦️ «Да на самом деле меня увольняют».

Если вы скажите, что вас увольняют, то наверняка у нанимающего менеджера возникнут вопросы, а почему уволили именно вас. Что заставит их сомневаться в вашей компетентности или способности справиться с новой работой.

♦️ «В компании одни мудаки».

Этот ответ создаст у работодателя впечатление о вашей негативной и несговорчивой личности, что не является привлекательным.

♦️ «Вы - компания мечты. Всегда хотел именно к вам».

Этот ответ покажется чрезмерно льстивым и неискренним. Компании ценят честность и конкретные мотивы кандидатов.

Своим ответом вам нужно показать, что увольняетесь вы редко и по серьезным причинам, которые не повторятся вновь, или не зависят от вас. А также расскажите, что хотите развития, и что именно у этого работодателя сможете расти.

Пример хорошего ответа:

💎 «Я уже 2 года работаю продуктовым аналитиком в компании и хорошо знаю продукт. Хочется амбициозных задач, но последние полгода все ощущается довольно рутинно. Уже несколько раз обсуждал это со своими руководителями, но в ближайший год новых проектов не предвидится».

А почему вы ищете новую работу?

Сегодня у меня для вас предложение

У каждого из вас свои уникальные интересы, знания и опыт.

Мне интересно узнать, какие темы вы бы хотели, чтобы я разобрал.

Поделитесь, пожалуйста, своими мыслями и идеями в комментариях. Постараюсь разобрать наиболее интересные из них в будущих постах.

Ваши идеи помогут создать еще более интересный контент и обогатить наше комьюнити!

Выкладываю обещанную запись эфира «mock-интервью на продуктового аналитика»

Спасибо всем тем, кто смотрел нас в прямом эфире! Надеюсь вам понравился небольшой afterparty, который не попал в эфир :D. И спасибо Ксении, героине mock-интервью, за её харизму, смелость и разделенную мудрость.

На интервью мы успели рассмотреть кейсы по А/Б-тестированию и продуктовому мышлению, решили небольшую задачу по SQL, а также пару задач по алгоритмам на Python.

Кто будет смотреть в записи – уверен, что он вам понравится!

Прикладываю также временные метки к эфиру:

1:05 - Самопрезентация

6:50 - А/Б-тестирование (методология)

20:40 - Дизайн А/Б-теста (LinkedIn кейс)

26:10 - Продуктовое мышление (Telegram кейс)

36:46 - SQL

48:05 - Python и алгоритмы

Не забудьте подписаться на Youtube канал! На нем будет еще много интересного о продуктовой аналитике и росте в IT как в формате shorts, так и полноформатных видео.

Если тоже хотите оценить свой уровень, прокачать слабые стороны и перейти на более высокооплачиваемую работу – я могу вам с этим помочь. Все подробности на моей странице на GetMentor.

А как вам эфир? Что можно было бы улучшить и сделать иначе в следующий раз? Поделитесь, пожалуйста, своими мыслями в комментариях. Ваша обратная связь очень важна для меня и работы над качеством создаваемого контента!