Опыт работы с данными или с чем может столкнуться аналитик
В этой статье автор хотел бы погрузить вас в мир данных и вспомнить:
• какие встречались проекты, связанные с хранилищами и данными
• какие задачи приходилось решать
• какие навыки пригодились
Секреты аналитики
В этой статье автор хотел бы погрузить вас в мир данных и вспомнить:
• какие встречались проекты, связанные с хранилищами и данными
• какие задачи приходилось решать
• какие навыки пригодились
Секреты аналитики
Что под капотом у рекомендаций Авито на главной
Они решают две задачи:
1️⃣ Показывают пользователю максимально релевантные товары.
2️⃣ Разбавляют выдачу объявлениями, которые могут быть интересны.
Качественные товары с адекватной ценой часто разбирают в первые часы. Поэтому важно, чтобы они быстро попадали на главную.
Недавно мы поменяли архитектуру рекомендаций — и ускорили их в 18 раз. После этого контакты продавцов с покупателями выросли на 1%, а расход памяти упал в три раза.
Но получилось всё это не с первого раза: пришлось пройти несколько итераций.
Подробности в статье↖️
Они решают две задачи:
Качественные товары с адекватной ценой часто разбирают в первые часы. Поэтому важно, чтобы они быстро попадали на главную.
Недавно мы поменяли архитектуру рекомендаций — и ускорили их в 18 раз. После этого контакты продавцов с покупателями выросли на 1%, а расход памяти упал в три раза.
Но получилось всё это не с первого раза: пришлось пройти несколько итераций.
Подробности в статье
Please open Telegram to view this post
VIEW IN TELEGRAM
Media is too big
VIEW IN TELEGRAM
Polars - лучший инструмент Data Scientist для обработки данных
00:00 Что такое Polars?
00:42 Установка и считывание данных
02:01 Базовые операции
03:53 MLOps инструменты
05:01 Выбор столбцов
06:09 Индексы
06:27 Фильтрация по условиям
07:31 Агрегация информации
08:54 Изменение данных
11:14 Аналог map для строк в Polars
11:37 Group By и Pivot
13:45 Визуализация данных
Смотреть это видео на youtube: youtu.be/kACKlWBK1s0
Секреты аналитики
00:00 Что такое Polars?
00:42 Установка и считывание данных
02:01 Базовые операции
03:53 MLOps инструменты
05:01 Выбор столбцов
06:09 Индексы
06:27 Фильтрация по условиям
07:31 Агрегация информации
08:54 Изменение данных
11:14 Аналог map для строк в Polars
11:37 Group By и Pivot
13:45 Визуализация данных
Смотреть это видео на youtube: youtu.be/kACKlWBK1s0
Секреты аналитики
Как автоматизировать проверки данных в Airflow с Great Expectations
Эта статья будет интересна, тем кто понимает принципы работы с Great Expectations, как минимум, базово знаком с составляющими компонентами и хочет вывести этот инструмент на прод с использованием Apache Airflow.
Секреты аналитики
Эта статья будет интересна, тем кто понимает принципы работы с Great Expectations, как минимум, базово знаком с составляющими компонентами и хочет вывести этот инструмент на прод с использованием Apache Airflow.
Секреты аналитики
Please open Telegram to view this post
VIEW IN TELEGRAM
«Иногда твоя работа выглядит магией»: что делают дата-сайентисты в промышленности и почему так востребованы
Data Science уже давно вышла за пределы ИТ-компаний, шагнула дальше банков и телекома и пришла в промышленность, в том числе тяжёлую. Традиционные подходы исчерпали свой потенциал за десятки лет постоянных оптимизаций и улучшений. Поэтому все обратили внимание на работу с данными.
Секреты аналитики
Data Science уже давно вышла за пределы ИТ-компаний, шагнула дальше банков и телекома и пришла в промышленность, в том числе тяжёлую. Традиционные подходы исчерпали свой потенциал за десятки лет постоянных оптимизаций и улучшений. Поэтому все обратили внимание на работу с данными.
Секреты аналитики
Please open Telegram to view this post
VIEW IN TELEGRAM
Media is too big
VIEW IN TELEGRAM
Базовые возможности Power BI
В этом видеоуроке автор познакомит вас с принципами работы и возможностями Power BI Desktop. Вы узнаете, как создавать надежные модели данных и грамотные отчеты, чтобы повысить эффективность бизнес-аналитики.
Благодаря сочетанию Power BI Desktop и службы Power BI становится гораздо проще моделировать, строить, совместно использовать и расширять новые идеи из мира данных. Power BI Desktop централизует, упрощает и ускоряет то, что в противном случае могло бы представлять собой разрозненный, неупорядоченный и достаточно сложный процесс.
Смотреть это видео на youtube: youtu.be/OURwuBhXA6E
Секреты аналитики
В этом видеоуроке автор познакомит вас с принципами работы и возможностями Power BI Desktop. Вы узнаете, как создавать надежные модели данных и грамотные отчеты, чтобы повысить эффективность бизнес-аналитики.
Благодаря сочетанию Power BI Desktop и службы Power BI становится гораздо проще моделировать, строить, совместно использовать и расширять новые идеи из мира данных. Power BI Desktop централизует, упрощает и ускоряет то, что в противном случае могло бы представлять собой разрозненный, неупорядоченный и достаточно сложный процесс.
Смотреть это видео на youtube: youtu.be/OURwuBhXA6E
Секреты аналитики
Please open Telegram to view this post
VIEW IN TELEGRAM
Два подхода моделирования исторических данных
В этой статье автор расскажет про два подхода моделирования исторических данных:
• использование временных таблиц
• использование исторических таблиц
Секреты аналитики
В этой статье автор расскажет про два подхода моделирования исторических данных:
• использование временных таблиц
• использование исторических таблиц
Секреты аналитики
Please open Telegram to view this post
VIEW IN TELEGRAM
Media is too big
VIEW IN TELEGRAM
Обзор дашборда в QlikSense
В этом видео автор подробно разбирает дашборд, созданный в QlikSense на основе датасета Superstore.
00:16 Загрузочный скрипт
01:56 Структура дэшборда
03:04 Работа с Variable Input
04:45 Динамическое переключение показателей
05:50 KPI, показатели YoY, переменные
07:25 Меры
09:46 Диаграмма Treemap
10:30 Измерения
11:10 Drilldown
12:39 Число показателей в диаграммах
13:10 Точечная диаграмма
14:45 Всплывающие подсказки и их настройка
Смотреть это видео на youtube: youtu.be/AbcxCD1wUjU
Секреты аналитики
В этом видео автор подробно разбирает дашборд, созданный в QlikSense на основе датасета Superstore.
00:16 Загрузочный скрипт
01:56 Структура дэшборда
03:04 Работа с Variable Input
04:45 Динамическое переключение показателей
05:50 KPI, показатели YoY, переменные
07:25 Меры
09:46 Диаграмма Treemap
10:30 Измерения
11:10 Drilldown
12:39 Число показателей в диаграммах
13:10 Точечная диаграмма
14:45 Всплывающие подсказки и их настройка
Смотреть это видео на youtube: youtu.be/AbcxCD1wUjU
Секреты аналитики