Учебник ШАДа продолжает пополняться!
Почитал про алгоритмы и оценку моделей - одни из лучших объяснений, которые я видел. В том плане, что погружение достаточно плавное: сначала даётся интуитивное понимание (которого и многим не хватает), а потом уже постепенное погружение в детали.

Очень советую всем как минимум почитать блок про градиентный бустинг, как максимум - прям поразбираться со всеми блоками.
Ссылка: https://ml-handbook.ru

🔥🔥🔥 Интервью с Валерой Бабушкиным про карьеру в Data Science

https://youtu.be/732JwGoJeew

В канале часто появляются материалы относительно тех или иных ML-алгоритмов. Но вот конкретные приложения к прикладным задачам найти не так просто.
У Вани Максимова есть очень хороший канал ML for Value. В нем он разбирает применение различных подходов к решению практических задач.
Ваня долгое время работал в DS консалтинге, сейчас руководит одной из DS команд в Delivery Club, так что ему есть что рассказать 🙂
Ссылка на канал: https://t.me/ml4value

Для тех, кто пропустил: ODS запускает поток своего бесплатного курса по по Data Science! Курс уже стартанул, но войти в него можно и сейчас.

https://ods.ai/tracks/open-ml-course/about

Подробную инфу про курс и про то, как на него записаться, можно почитать тут.
Там очень хорошее разнообразие тем и ведёт его Петя Ермаков - я проходил его курсы в DataGym, он очень клёво умеет объяснять :)

Ещё один клёвый тренажёр+учебник по #SQL.
Кому sql-ex кажется сложноватым и некрасивым - этот ресурс зайдёт.
На сайте есть платная версия (которая позволяет смотреть авторские решения), но можно вполне обойтись и без неё.

Тут можно потренироваться в хитрых джойнах, агрегациях и понабивать руку. Интерфейс очень приятный и позволяет потыкать схему БД, даёт подсказки как в коде, так и непосредственно по решению. В более сложные штуки (к примеру, в оконные функции) этот ресурс не лезет. Ну и запросы даже в самых сложных задачках получаются не сказать чтобы громоздкие.

Ссылка: https://sql-academy.org/ru/trainer

Кстати, у друзей из МегаФона есть хорошая #вакансия на DE.
Просят опыт работы, дают ~150-180к, возможна удаленка. Просят как минимум SQL и Python, подробное описание тут:
https://telegra.ph/Vakansiya-Data-Engineer-MegaFon-02-06

Пару постов выше в комментариях написали про тренажёр по #SQL от ДВФУ.
Решил в него потыкаться, за несколько ночей пробежал интересные для себя задания.

Моё мнение: удобный и интересный формат, в начале даже даётся кусок теории (по терминологии работы с БД).
Далее блок за блоком рассматривается использование различных SQL-операторов. Тем, кто с SQL вообще не знаком, точно зайдёт.
Единственное что мне не понравилось - многие задания связаны с обновлением имеющихся таблиц (UPDATE).
На практике чаще всего работаешь с боевыми таблицами, которые менять очень плохо/невозможно. А для каждой созданной в своей схеме здорово иметь скрипт, который её собирает. Если вы после создания таблицы делаете в ней какие-то апдейты, то их можно легко забыть и потерять воспроизводимость. В общем, не очень люблю я UPDATE, а тут пришлось изрядно так с ним повозиться.
И оконных функций в курсе фактически нет. Но кажется, что они уже являются продвинутым уровнем 🙂

Ссылка на курс: https://stepik.org/course/63054/

Многие коллеги (авторы tg-каналов) в виду сложившейся ситуации приостановили постинг материалов, я долгое время тоже думал на эту тему. Пока я думал, несколько людей из разных стран обратились в личку с вопросами относительно поиска работы (в том числе из-за переезда из родных мест). Поэтому принял решение продолжить выкладывать материалы. Моя позиция относительно всего этого такая: человеческая жизнь - самое дорогое, что есть на свете. И нам очень важно ценить её.
Миссия этого канала - помочь всем вам развивать свои навыки для того, чтобы сделать жизнь лучше (как в материальном, так и в моральном плане).
Поэтому материалы продолжат выходить в стандартном режиме. Давайте будем использовать этот канал как библиотеку знаний, которую каждый сможет использовать для апгрейда своих навыков.

К слову, обновил наш сборник материалов на Notion всеми последними постами.
Кроме того, прямо сейчас находится в монтаже интервью с создателем одной из самых сильных школ по аналитике в СНГ, которого знают, кажется, все. Догадатесь о ком речь?)

🔥🔥🔥 Интервью с Толей Карповым про тренды, роли и образование в Data Science

Интервью сняли ещё пару недель назад, монтировали очень ускоренно. Смотрите пока доступен YouTube 🙂

https://youtu.be/ZLfGSQHqk3c

В комментариях Максим поделился своими бесплатными курсами по #SQL. Посмотрел, понравились, делюсь с вами 🙂

Что мне зашло:
1. Вы не живёте в ваккуме степика/sql-ex/другой предподготовленной среды. В рамках второго занятия вы ставите себе Oracle (попутно прочувствовав все боли) и работаете уже в нём;
2. У курсов есть чат в tg с поддержкой, Максим там отвечает на вопросы по заданиям и не только. Этого часто не хватает;
3. Расширенный курс реально расширенный, как бы это забавно не звучало. В частности, там есть уроки по тонкостям работы с Oracle PL/SQL, мне такого урока во время работы на прошлом месте очень не хватало 🙂

1. Базовый курс по SQL для аналитиков и менеджеров
https://www.youtube.com/playlist?list=PLKl9v2TQvIkq4i_hZwZ1PmobxJSkIGwBf

2. Расширенные возможности SQL
https://youtube.com/playlist?list=PLKl9v2TQvIkqHEOvM1sLX3rNJ3WZJRKQ9

Ещё одна статья про оконные функции в #SQL.
Она позволит понять что это такое и зачем оно нужно (с красивыми иллюстрациями). Единственное - там рекламируется курс от SQL Lite по оконкам, его рекомендовать не могу т.к. не проходил. Но статья очень наглядная.
https://antonz.ru/window-functions/

Первая статья - тут. В ней есть примеры кода на SQL, но наглядность имхо чуть ниже.

P.S. Заметил, что в последнее время в канале стало много SQL, этим постом поток информации по ним временно остановим 🙂

#релокация
Подготовил для вас небольшую подборку материалов по теме:

1. Ролик от Future Today про ребят, которые работают в DS за границей: https://youtu.be/9Mmm0VGSTqM. Тут и про поиск работы, и про то, как и где искать работу, и про организацию переезда. И истории ребят очень вдохновляющие 🙂

2. Ребята из Proglib недавно написали статью, но она про айтишников в целом. Тем не менее, в ней можно найти много хороших советов, которые будут актуальны и для даты + подборку сайтов, по которым можно поискать вакансии. https://proglib.io/sh/alMdjIAUb6

3. Команда Толи Карпова пару дней назал провела прямой эфир про устройство на работу вне России: https://t.me/karpovcourseschat/48378
Пока не добрался послушать целиком, но знаю что там брали интервью у Марселя, который работает продуктовым аналитиком

4. Если вы мыслите сразу масштабно, то можете почитать статью о доходах в FAANG и пойти в канал Валеры Бабушкина, у него есть целый цикл статей про подготовку в FAANG (MAANG?): раз и два

Если у кого есть ещё полезные материалы - накидывайте в комментарии, думаю, всем будет полезно 🙂
И если вам нравится подобный контент - ставьте реакции, а то в последнее время как-то совсем скромненько с ними

#cheatsheet
У нас в канале уже появлялись шпаргалки по python, по pandas (и даже расширенная по анализу данных с помощью pandas!), по SQL и по ключевым идеям машинного обучения

Нашёл ещё одну классную подборку, тут очень сжато есть и про базовую теорию вероятности, и про предподготовку данных, и про модели, и даже про фреймворки для работы с большими данными немного. Все материалы на английском, но тут такой английский, который DS-ам понимать уж точно стоит :)

🔥🔥🔥 Интервью с Николаем Валиотти, создателем блога LEFT JOIN и Valiotti Analytics

https://youtu.be/PuqV8Ct06i0

Про банки и кредитный скоринг 🏦
Не так давно на канале вышло интервью с Толей Карповым, он в нём несколько раз сказал про то, что очень здорово понимать специфику задач компании, в которую вы собеседуетесь.
Поэтому появилась идея сделать цикл постов про различные задачи, которые решаются в тех или иных областях. Порой они пересекаются (то же самое uplift-моделирование делают уже, кажется, все), поэтому постараемся учесть и специфические области :)
Одна из самых классических задач, которую решают в банках - кредитный скоринг.

Про кредитный скоринг в классическом понимании можно почитать в очень наглядной статье от ребят из Glowbyte: https://habr.com/ru/company/glowbyte/blog/519382/
Но иногда DS-команды заходят сильно дальше - вот статья ребят из Альфы, которые работают с потранзакционным анализом, используя DL подходы: https://habr.com/ru/company/alfa/blog/657577/. Там и про проблемы предобработки транзакционных данных, и про архитектуру решения

Хочу порекомендовать бесплатного бота🤖 с книгами на технические темы.
Там есть и книги по программированию, и по статистике, и по машинному обучению.

В частности, мне зашла книга Основы статистического обучения: интеллектуальный анализ данных, логический вывод и прогнозирование
Хасти Тревор, Тибришани Роберт, Джером Фридман (в боте /dl_1377)
В ней очень подробно разобраны классические алгоритмы машинного обучения как со статистической, так и с прикладной точки зрения.

Информация должна быть доступна и бесплатна🎓
https://t.me/searchIT_bookbot

Пожалуй, самая подробная статья про градиентные бустинги (да и в целом про деревья решений и всё что с ними связано) на русском языке:
https://habr.com/ru/company/ods/blog/645887/

Тут есть ответы на очень большое количество вопросов, но статью за один присест вряд ли прочитаешь. Когда-то я начал делать цикл роликов по ключевым моментам алгоритмов (линейная регрессия часть 1 и часть 2). Тыкайте 👍 если стоит сделать такие же ролики и по деревьям/бустингам 🙂

Exploratory Data Analysis - часто самая загадочная и непонятная часть в анализе данных. Всем рекомендую посмотреть видео Александра Дьяконова, в которых он делает EDA для нескольких датасетов:
Хакатон МКБ: https://youtu.be/LDSMqYSE1vI
Google Brain - Ventilator Pressure Prediction: https://youtu.be/3Ri0l9hhlmM

P.S. Если кто не знает - у Александра есть канал, там много полезностей можно найти 🙂

Статья про то, почему быть крутым специалистом и хорошо проходить собеседования - не одно и то же:

https://habr.com/ru/company/itsumma/blog/597561/

Продолжаем серию постов про специфику задач в различных областях.
Меня тут очень занесло и я зачитался про то, как под капотом работает Я.Такси.
Многие статьи старые (2018-2019), но ключевые задачи у ребят наверняка сохранились.

Что происходит, когда вы делаете заказ: https://vc.ru/yandex.go/40971-pod-kapotom-yandeks-taksi
[Eng] Machine Learning for the Win: https://medium.com/@underthehood21/machine-learning-for-the-win-7fad19f0e358
[ENG] How Yandex.Taxi Algorithms Steer Drivers To Higher Earnings: https://medium.com/swlh/how-yandex-taxi-algorithms-steer-drivers-to-higher-earnings-e683c3feb3eb
Динамическое ценообразование: https://habr.com/ru/company/yandex/blog/429226/
Прогноз времени подачи авто: https://habr.com/ru/company/yandex/blog/431196/
Доставка через такси: https://vc.ru/yandex.go/127822-vash-zakaz-dostavit-yandeks-taksi
Про историю приложения: https://vc.ru/yandex.go/312161-ot-spiska-taksoparkov-do-superappa