Интересный проект на тему Data Lineage
Generate and Visualize Data Lineage from query history
https://github.com/tokern/data-lineage
Generate and Visualize Data Lineage from query history
https://github.com/tokern/data-lineage
GitHub
GitHub - tokern/data-lineage: Generate and Visualize Data Lineage from query history
Generate and Visualize Data Lineage from query history - tokern/data-lineage
The_Enterprise_Data_Catalog_Early_Release_Ole_Olesen_Bagneux_z_lib.pdf
1.2 MB
The Enterprise Data Catalog (Early Release) (Ole Olesen-Bagneux).pdf
How do you search for data? Combing the internet is simple. But do you search for data at work? It can be difficult and time-consuming. Sometimes it even seems impossible. This book introduces a practical solution: the data catalog. Data analysts, data scientists, and data engineers will learn how to create true data discovery in their organizations, making the catalog a key enabler for data-driven innovation and data governance.
Learn what a data catalog is and how it can help your organization search for data
Organize data in a catalog, including its sources, where it belongs, and how to describe it with metadata
Manage your data catalog, create access to data sources, and browse relational graph structures across systems and domains
Learn how to search your data, including its sources, and how it travels and changes in data lineage
Implement a data catalog in a way that exactly matches the strategic priorities of your organization
How do you search for data? Combing the internet is simple. But do you search for data at work? It can be difficult and time-consuming. Sometimes it even seems impossible. This book introduces a practical solution: the data catalog. Data analysts, data scientists, and data engineers will learn how to create true data discovery in their organizations, making the catalog a key enabler for data-driven innovation and data governance.
Learn what a data catalog is and how it can help your organization search for data
Organize data in a catalog, including its sources, where it belongs, and how to describe it with metadata
Manage your data catalog, create access to data sources, and browse relational graph structures across systems and domains
Learn how to search your data, including its sources, and how it travels and changes in data lineage
Implement a data catalog in a way that exactly matches the strategic priorities of your organization
Democratize enterprise analytics with Microsoft Power BI
These announcements include:
🔵 Datamart in Power BI
🟡 Metrics in Power BI and other enhancements
💙 Data storytelling in PowerPoint
💛 Integration with Outlook and Office Hub
☮
https://powerbi.microsoft.com/en-us/blog/democratize-enterprise-analytics-with-microsoft-power-bi/
These announcements include:
🔵 Datamart in Power BI
🟡 Metrics in Power BI and other enhancements
💙 Data storytelling in PowerPoint
💛 Integration with Outlook and Office Hub
☮
https://powerbi.microsoft.com/en-us/blog/democratize-enterprise-analytics-with-microsoft-power-bi/
Microsoft
Democratize enterprise analytics with Microsoft Power BI
Microsoft Build represents the ultimate developer event. A hundred thousand developers from across the world gather for three days with their peers to learn, engage, and collaborate on the latest innovations and tools from Microsoft.
Forwarded from Data Engineering / Инженерия данных / Data Engineer / DWH
Self-service Business Intelligence, Powered by dbt
https://medium.com/modern-business-intelligence/self-service-business-intelligence-powered-by-dbt-3b7e24a92e27
https://medium.com/modern-business-intelligence/self-service-business-intelligence-powered-by-dbt-3b7e24a92e27
Medium
Self-service Business Intelligence, Powered by dbt
Self-service Business Intelligence (BI) is just around the corner, right?
Sad KPI
100 дней безуспешных попыток "привыкнуть" или хотя бы свыкнуться с реальностью 💛💙
100 дней безуспешных попыток "привыкнуть" или хотя бы свыкнуться с реальностью 💛💙
Forwarded from Apache Superset BI
Что такое Apache Superset? Плюсы и минусы. Установка через Docker-Compose. Примеры дашбордов, обзор архитектуры многоконтейнерного приложения. Описание основных фич.
https://ivan-shamaev.ru/what-is-apache-superset-docker-install-dashboard-examples/
https://ivan-shamaev.ru/what-is-apache-superset-docker-install-dashboard-examples/
Персональный блог Data Engineer | Ex-TeamLead BI Developer
Что такое Apache Superset? Установка Docker. Примеры дашбордов
Что такое Apache Superset. Установка Docker. Примеры дашбордов. Filters, sql, config, clickhouse, python, cache, plugin
Forwarded from Data Engineering / Инженерия данных / Data Engineer / DWH
What is a Data Platform? And How to Build One
In this post:
- What is a data platform?
- The six must-have layers of a modern data platform
- Data Storage and Processing
- Data Ingestion
- Data Transformation and Modeling
- Business Intelligence (BI) and Analytics
- Data Observability
- Data Discovery
- Data platform vs. customer data platform
- Build or buy your 6-layer data platform? It depends.
https://www.montecarlodata.com/blog-what-is-a-data-platform-and-how-to-build-one/
In this post:
- What is a data platform?
- The six must-have layers of a modern data platform
- Data Storage and Processing
- Data Ingestion
- Data Transformation and Modeling
- Business Intelligence (BI) and Analytics
- Data Observability
- Data Discovery
- Data platform vs. customer data platform
- Build or buy your 6-layer data platform? It depends.
https://www.montecarlodata.com/blog-what-is-a-data-platform-and-how-to-build-one/
Monte Carlo Data
What Is A Data Platform? And How To Build An Awesome One
A data platform is a central repository and processing house for all of an organization's data. Here's how to build an awesome data platform.
Forwarded from Инжиниринг Данных (Dmitry)
МОДУЛЬ 7-2 ЧТО ТАКОЕ APACHE SPARK
Apache Spark является самым популярным инструментом среди инженеров данных, аналитиков и инженеров машинного обучения. Его главная задача это обработка данных. С помощью Spark можно подключаться к любому источнику данных, читать большие данные и обрабатывать их в оперативной памяти с использованием распределенного вычисления (distributed computing).
В этом видео:
📌 Узнаем история Apache Spark
📌 Посмотрим примеры архитектур с использованием Spark
📌 Разберемся когда его можно использовать
📌 Узнаем про основные компоненты
📌 Узнаем, обозначает термин Unified Analytics
Apache Spark является самым популярным инструментом среди инженеров данных, аналитиков и инженеров машинного обучения. Его главная задача это обработка данных. С помощью Spark можно подключаться к любому источнику данных, читать большие данные и обрабатывать их в оперативной памяти с использованием распределенного вычисления (distributed computing).
В этом видео:
📌 Узнаем история Apache Spark
📌 Посмотрим примеры архитектур с использованием Spark
📌 Разберемся когда его можно использовать
📌 Узнаем про основные компоненты
📌 Узнаем, обозначает термин Unified Analytics
YouTube
DATALEARN | DE - 101 | МОДУЛЬ 7-2 ЧТО ТАКОЕ APACHE SPARK
Apache Spark является самый популярным инструментом среди инженеров данных, аналитиков и инженеров машинного обучения. Его главная задача это обработка данных. С помощью Spark можно подключаться к любому источнику данных, читать большие данные и обрабатывать…
Подборочка дизайнов dashboards, charts, admin panels & analytics
https://search.muz.li/inspiration/dashboard-inspiration
https://search.muz.li/inspiration/dashboard-inspiration
Muzli
500+ Dashboards, admin panels &apm; analytics design inspiration - Muzli
Constantly-updated list of well designed dashboards both for web and mobile, from the always-fresh Muzli inventory, to inspire you in your design process.
Всё про Apache Superset здесь https://t.me/apache_superset_bi
Telegram
Apache Superset BI
? 👉 @iv_shamaev 🧑💻
Apache Superset — это 📊 ПО с открытым исходным кодом для исследования и визуализации данных. Это готовое к использованию бизнес-веб-приложение. Superset способен обрабатывать данные петабайтного масштаба и подключаться к любым DB
Apache Superset — это 📊 ПО с открытым исходным кодом для исследования и визуализации данных. Это готовое к использованию бизнес-веб-приложение. Superset способен обрабатывать данные петабайтного масштаба и подключаться к любым DB
Forwarded from Инжиниринг Данных (Dmitry)
Сегодня узнал, что если в github .com заменить на .dev то откроется Visual Code в браузере!
📈 A curated list of awesome data visualization libraries and resources.
https://github.com/javierluraschi/awesome-dataviz
https://github.com/javierluraschi/awesome-dataviz
GitHub
GitHub - hal9ai/awesome-dataviz: :chart_with_upwards_trend: A curated list of awesome data visualization libraries and resources.
:chart_with_upwards_trend: A curated list of awesome data visualization libraries and resources. - hal9ai/awesome-dataviz
Forwarded from Apache Superset BI
📋 Просмотр модели permission в Superset средствами Qlik Sense
https://telegra.ph/Prosmotr-modeli-permission-v-Superset-sredstvami-Qlik-Sense-06-09
❗️Присоединяйтесь к каналу 👉🏿 Apache Superset BI 😊
https://telegra.ph/Prosmotr-modeli-permission-v-Superset-sredstvami-Qlik-Sense-06-09
❗️Присоединяйтесь к каналу 👉🏿 Apache Superset BI 😊
Telegraph
Просмотр модели permission в Superset средствами Qlik Sense
В этой статье будет кратко описана модель выдачи прав доступа для Superset. Вы можете ее реализовать в другом инструменте, просто мне удобнее смотреть в Qlik Sense. Присоединяйтесь к каналу https://t.me/apache_superset_bi - только тут будет публиковаться…
Forwarded from Data Engineering / Инженерия данных / Data Engineer / DWH
Создание современной платформы для работы с данными с помощью Open-Source-решений
https://habr.com/en/company/vk/blog/671642/
https://habr.com/en/company/vk/blog/671642/
Habr
Создание современной платформы для работы с данными с помощью Open-Source-решений
Команда VK Cloud Solutions перевела краткий конспект с Open Source Data Stack Conference . Конференция была посвящена созданию платформ для работы с данными на базе Open-Source-решений —докладчики...
Forwarded from Reveal the Data
Мокапы дашбордов
Сделал удобный набор графиков для макетирования дашбордов. Он сильно ускоряет разработку макетов. Я давно пользуюсь схожим набором, и часто прямо на встречах с заказчиками собираю макет вместе с ними. Это быстро и наглядно.
Версии
— В виде PPTX презентации: самый быстрый вариант, можно копировать элементы просто перенося их с зажатым Ctrl/Cmd и гибко настраивать картинки.
— В виде книги в Табло: можно тонко настроить графики, они лучше заполняют пространство и картинка получается приближенная к финальному результату.
— На доске в Miro: удобно шерить и обсуждать, добавлять идеи и замечания, но не очень удобно работать с картинками.
Графики сделаны в нейтральном стиле, чтобы не отвлекать от бизнес задачи и подчеркнуть, что это мокап. Удобно поверх картинок писать ярким цветом идеи, реальные названия метрик и т.п. Если у вас есть свой стайлгайд или другая BI, сделайте такие же инструменты на своих графиках, просто наскринив и нарезав существующие дашборды.
@revealthedata
Сделал удобный набор графиков для макетирования дашбордов. Он сильно ускоряет разработку макетов. Я давно пользуюсь схожим набором, и часто прямо на встречах с заказчиками собираю макет вместе с ними. Это быстро и наглядно.
Версии
— В виде PPTX презентации: самый быстрый вариант, можно копировать элементы просто перенося их с зажатым Ctrl/Cmd и гибко настраивать картинки.
— В виде книги в Табло: можно тонко настроить графики, они лучше заполняют пространство и картинка получается приближенная к финальному результату.
— На доске в Miro: удобно шерить и обсуждать, добавлять идеи и замечания, но не очень удобно работать с картинками.
Графики сделаны в нейтральном стиле, чтобы не отвлекать от бизнес задачи и подчеркнуть, что это мокап. Удобно поверх картинок писать ярким цветом идеи, реальные названия метрик и т.п. Если у вас есть свой стайлгайд или другая BI, сделайте такие же инструменты на своих графиках, просто наскринив и нарезав существующие дашборды.
@revealthedata
Канал про Apache Superset. Здесь периодически публикуются свежие материалы и новости по Open-Source продукту.
Подписывайтесь 😉👍
https://t.me/apache_superset_bi
#реклама
Подписывайтесь 😉👍
https://t.me/apache_superset_bi
#реклама
Telegram
Apache Superset BI
? 👉 @iv_shamaev 🧑💻
Apache Superset — это 📊 ПО с открытым исходным кодом для исследования и визуализации данных. Это готовое к использованию бизнес-веб-приложение. Superset способен обрабатывать данные петабайтного масштаба и подключаться к любым DB
Apache Superset — это 📊 ПО с открытым исходным кодом для исследования и визуализации данных. Это готовое к использованию бизнес-веб-приложение. Superset способен обрабатывать данные петабайтного масштаба и подключаться к любым DB