Big Data мертвы, да здравствуют Smart Data

Концепция Big Data эволюционирует. Фокус смещается от количества собираемой информации к ее качеству. Этот сдвиг парадигмы привел к появлению понятия Smart Data — «умных» данных, которые являются продуктом интеллектуальной обработки и эволюции Big Data.

Секреты аналитики

Выборочное удаление столбцов для повышения эффективности хранения в озерах данных

В этой статье автор разбирает процесс оптимизации форматов хранения данных, вы узнаете как сократить размер данных в рамках формата Apache Parquet за счет удаления неиспользующихся колонок большого размера.

Секреты аналитики

Аналитические важности: Jupyter Notebook 7, декораторы Python, Streamlit, индексы PostgreSQL, Pandas

00:00 Вступление
00:20 Jupyter Notebook 7
05:05 Декораторы в Python
09:45 Streamlit
14:53 Оптимизация работы Jupyter Notebook
17:53 Сравнение Python, SQL, Excel, R и JavaScript
21:19 Выбор формата файла для Pandas
24:18 Индексы в PostgreSQL
28:48 Заключение

Смотреть это видео на youtube: youtu.be/wJLZDNIzKRo

Секреты аналитики

Data Mesh – ячеистые топологии для работы с данными

В этой статье автор расскажет о распределённой облачной ячеистой топологии (data mesh), где данные можно группировать в зависимости от их предметной области и трактовать “данные как продукт,” организуя в каждой предметной области конвейерную обработку собственных данных.

Секреты аналитики

Hippotable — анализ данных прямо в браузере

В этом материале рассмотрим удобный инструмент для анализа данных. Автор объяснит как он работает, покажет пример использования и расскажет о дальнейшем развитии продукта.

Секреты аналитики

Как мы спасли от выгорания нанимающих аналитиков

В этой статье автор подробно расскажет, с какими сложностями сталкиваются нанимающие менеджеры в сфере Data Science в условиях интенсивного процесса найма сотрудников, а также продемонстрирует, к какому виду привел процесс собеседований и найма аналитиков больших данных.

Секреты аналитики

Что такое аналитический инжиниринг?

Инженеры-аналитики предоставляют конечным пользователям чистые наборы данных, моделируя их таким образом, чтобы конечные пользователи могли сами отвечать на свои вопросы. В данной статье автор расскажет о тенденциях рынка, которые привели к появлению этой новой роли в современных командах по работе с данными.

Секреты аналитики

Spark не для чайников: где?

Apache Spark уже давно перестал быть просто технологией и превратился в своего рода стандарт для обработки больших данных. Этот фреймворк, сочетающий в себе скорость, надежность и масштабируемость, вышел далеко за пределы простого инструмента, превратившись в надежного партнера для огромного числа проектов. Поэтому, когда речь заходит о масштабных вычислениях и эффективной обработке данных, Spark - первое, что приходит на ум.

Секреты аналитики

Что такое сквозная аналитика и зачем она нужна?

Сквозная аналитика собирает данные о полном цикле сделки со всех доступных источников трафика. От момента просмотра рекламного объявления пользователем до момента его последнего контакта с менеджером.

С помощью сквозной аналитики вы можете видеть результаты работы рекламы и понимать, на что конкретно расходуются средства.

0:00 Начало
0:17 Что такое сквозная аналитика?
1:38 Задачи сквозной аналитики
4:10 Что нужно для внедрения сквозной аналитики?
6:54 Способы реализации сквозной аналитики
9:44 Инструменты сквозной аналитики

Смотреть это видео на youtube: youtu.be/3ixfh_Zrxhw

Секреты аналитики

Что должен знать дата-инженер - роадмап для джуниора

Узнаем, как выстроить процесс подготовки и обучения, если у вас появилось желание стать дата-инженером. Все необходимые для старта знания можно получить бесплатно и из разных источников.

Секреты аналитики

Аналитика мобильных приложений — простыми словами для бизнеса

Продуктовая и сквозная аналитика, data driven подход — красивые слова, вдохновляющие, когда ты понимаешь какой профит это дает, и внушающие ужас, когда ты подступаешься к этому в первый раз. Но, что важно, малопонятные для бизнеса.

В этой статье автор объясняет, как устроена аналитика мобильных приложений, максимально простыми словами. За основу для анализа возьмем мобильное приложение интернет-магазина ... утюгов.

Секреты аналитики

Гайд по мета-анализу результатов тестов

Подсчитать и проанализировать можно не только A/B, но также подвергнуть анализу ряд тестов с общей нулевой гипотезой. Другими словами, протестировать результаты серии тестов с классическим статистическим выводом о значимости показателей этой серии, то есть провести мета-анализ.

Секреты аналитики