Forwarded from Инжиниринг Данных (Dmitry)
dbt известны своей относительной простотой, так как дает возможность создавать все трансформации данных на SQL. Согласно их roadmap на 2022 год, они добавляют поддержку Python - Python-language dbt models
GitHub
dbt-core/docs/roadmap/2022-05-dbt-a-core-story.md at main · dbt-labs/dbt-core
dbt enables data analysts and engineers to transform their data using the same practices that software engineers use to build applications. - dbt-labs/dbt-core
Forwarded from Datahub Project
Telegraph
DataHub: Popular metadata architectures explained
When I started my journey at LinkedIn ten years ago, the company was just beginning to experience extreme growth in the volume, variety, and velocity of our data. Over the next few years, my colleagues and I in LinkedIn’s data infrastructure team built out…
How to measure data quality. Practical guidelines for how to measure… | by Mikkel Dengsøe | May, 2022 | Medium
https://medium.com/@mikldd/how-to-measure-data-quality-cc3d81dd98be
https://medium.com/@mikldd/how-to-measure-data-quality-cc3d81dd98be
Medium
How to measure data quality
Practical guidelines for how to measure quality, engagement and productivity in a data team
5 ways to measure the ROI of Data & Analytics (The simple way) | by Santiago Tacoronte | Medium
https://santiagotacoronte.com/5-ways-to-measure-the-roi-of-data-analytics-the-simple-way-a61790eff7d1
https://santiagotacoronte.com/5-ways-to-measure-the-roi-of-data-analytics-the-simple-way-a61790eff7d1
Medium
5 ways to measure the ROI of Data & Analytics (The simple way)
“We need more data analysts” or “we have too many data analysts.” Where do you stand?.
Если вы рассматриваете варианты для замены западных вендоров - советую присмотреться к FineBI.
Чтобы получать оперативную информацию по продукту - подпишитесь на канал https://t.me/finebi_russia
#реклама
Чтобы получать оперативную информацию по продукту - подпишитесь на канал https://t.me/finebi_russia
#реклама
Telegram
FineBI Russia
Канал про FineBI & FineReport на русском - китайская система бизнес-аналитики. Платформа поставляется в комплекте с платформами управления и контроля корпоративного уровня. Fine BI Data Management — программное обеспечение для анализа данных
FlowingData
Graphics by Nathan Yau, borne out of everyday curiosities, learning experiments, and mild insomnia.
https://flowingdata.com/category/projects/
Graphics by Nathan Yau, borne out of everyday curiosities, learning experiments, and mild insomnia.
https://flowingdata.com/category/projects/
FlowingData
Projects – FlowingData
Graphics by Nathan Yau, borne out of everyday curiosities, learning experiments, and mild insomnia.
Интересный проект на тему Data Lineage
Generate and Visualize Data Lineage from query history
https://github.com/tokern/data-lineage
Generate and Visualize Data Lineage from query history
https://github.com/tokern/data-lineage
GitHub
GitHub - tokern/data-lineage: Generate and Visualize Data Lineage from query history
Generate and Visualize Data Lineage from query history - tokern/data-lineage
The_Enterprise_Data_Catalog_Early_Release_Ole_Olesen_Bagneux_z_lib.pdf
1.2 MB
The Enterprise Data Catalog (Early Release) (Ole Olesen-Bagneux).pdf
How do you search for data? Combing the internet is simple. But do you search for data at work? It can be difficult and time-consuming. Sometimes it even seems impossible. This book introduces a practical solution: the data catalog. Data analysts, data scientists, and data engineers will learn how to create true data discovery in their organizations, making the catalog a key enabler for data-driven innovation and data governance.
Learn what a data catalog is and how it can help your organization search for data
Organize data in a catalog, including its sources, where it belongs, and how to describe it with metadata
Manage your data catalog, create access to data sources, and browse relational graph structures across systems and domains
Learn how to search your data, including its sources, and how it travels and changes in data lineage
Implement a data catalog in a way that exactly matches the strategic priorities of your organization
How do you search for data? Combing the internet is simple. But do you search for data at work? It can be difficult and time-consuming. Sometimes it even seems impossible. This book introduces a practical solution: the data catalog. Data analysts, data scientists, and data engineers will learn how to create true data discovery in their organizations, making the catalog a key enabler for data-driven innovation and data governance.
Learn what a data catalog is and how it can help your organization search for data
Organize data in a catalog, including its sources, where it belongs, and how to describe it with metadata
Manage your data catalog, create access to data sources, and browse relational graph structures across systems and domains
Learn how to search your data, including its sources, and how it travels and changes in data lineage
Implement a data catalog in a way that exactly matches the strategic priorities of your organization
Democratize enterprise analytics with Microsoft Power BI
These announcements include:
🔵 Datamart in Power BI
🟡 Metrics in Power BI and other enhancements
💙 Data storytelling in PowerPoint
💛 Integration with Outlook and Office Hub
☮
https://powerbi.microsoft.com/en-us/blog/democratize-enterprise-analytics-with-microsoft-power-bi/
These announcements include:
🔵 Datamart in Power BI
🟡 Metrics in Power BI and other enhancements
💙 Data storytelling in PowerPoint
💛 Integration with Outlook and Office Hub
☮
https://powerbi.microsoft.com/en-us/blog/democratize-enterprise-analytics-with-microsoft-power-bi/
Microsoft
Democratize enterprise analytics with Microsoft Power BI
Microsoft Build represents the ultimate developer event. A hundred thousand developers from across the world gather for three days with their peers to learn, engage, and collaborate on the latest innovations and tools from Microsoft.
Forwarded from Data Engineering / Инженерия данных / Data Engineer / DWH
Self-service Business Intelligence, Powered by dbt
https://medium.com/modern-business-intelligence/self-service-business-intelligence-powered-by-dbt-3b7e24a92e27
https://medium.com/modern-business-intelligence/self-service-business-intelligence-powered-by-dbt-3b7e24a92e27
Medium
Self-service Business Intelligence, Powered by dbt
Self-service Business Intelligence (BI) is just around the corner, right?
Sad KPI
100 дней безуспешных попыток "привыкнуть" или хотя бы свыкнуться с реальностью 💛💙
100 дней безуспешных попыток "привыкнуть" или хотя бы свыкнуться с реальностью 💛💙
Forwarded from Apache Superset BI
Что такое Apache Superset? Плюсы и минусы. Установка через Docker-Compose. Примеры дашбордов, обзор архитектуры многоконтейнерного приложения. Описание основных фич.
https://ivan-shamaev.ru/what-is-apache-superset-docker-install-dashboard-examples/
https://ivan-shamaev.ru/what-is-apache-superset-docker-install-dashboard-examples/
Персональный блог Data Engineer | Ex-TeamLead BI Developer
Что такое Apache Superset? Установка Docker. Примеры дашбордов
Что такое Apache Superset. Установка Docker. Примеры дашбордов. Filters, sql, config, clickhouse, python, cache, plugin
Forwarded from Data Engineering / Инженерия данных / Data Engineer / DWH
What is a Data Platform? And How to Build One
In this post:
- What is a data platform?
- The six must-have layers of a modern data platform
- Data Storage and Processing
- Data Ingestion
- Data Transformation and Modeling
- Business Intelligence (BI) and Analytics
- Data Observability
- Data Discovery
- Data platform vs. customer data platform
- Build or buy your 6-layer data platform? It depends.
https://www.montecarlodata.com/blog-what-is-a-data-platform-and-how-to-build-one/
In this post:
- What is a data platform?
- The six must-have layers of a modern data platform
- Data Storage and Processing
- Data Ingestion
- Data Transformation and Modeling
- Business Intelligence (BI) and Analytics
- Data Observability
- Data Discovery
- Data platform vs. customer data platform
- Build or buy your 6-layer data platform? It depends.
https://www.montecarlodata.com/blog-what-is-a-data-platform-and-how-to-build-one/
Monte Carlo Data
What Is A Data Platform? And How To Build An Awesome One
A data platform is a central repository and processing house for all of an organization's data. Here's how to build an awesome data platform.
Forwarded from Инжиниринг Данных (Dmitry)
МОДУЛЬ 7-2 ЧТО ТАКОЕ APACHE SPARK
Apache Spark является самым популярным инструментом среди инженеров данных, аналитиков и инженеров машинного обучения. Его главная задача это обработка данных. С помощью Spark можно подключаться к любому источнику данных, читать большие данные и обрабатывать их в оперативной памяти с использованием распределенного вычисления (distributed computing).
В этом видео:
📌 Узнаем история Apache Spark
📌 Посмотрим примеры архитектур с использованием Spark
📌 Разберемся когда его можно использовать
📌 Узнаем про основные компоненты
📌 Узнаем, обозначает термин Unified Analytics
Apache Spark является самым популярным инструментом среди инженеров данных, аналитиков и инженеров машинного обучения. Его главная задача это обработка данных. С помощью Spark можно подключаться к любому источнику данных, читать большие данные и обрабатывать их в оперативной памяти с использованием распределенного вычисления (distributed computing).
В этом видео:
📌 Узнаем история Apache Spark
📌 Посмотрим примеры архитектур с использованием Spark
📌 Разберемся когда его можно использовать
📌 Узнаем про основные компоненты
📌 Узнаем, обозначает термин Unified Analytics
YouTube
DATALEARN | DE - 101 | МОДУЛЬ 7-2 ЧТО ТАКОЕ APACHE SPARK
Apache Spark является самый популярным инструментом среди инженеров данных, аналитиков и инженеров машинного обучения. Его главная задача это обработка данных. С помощью Spark можно подключаться к любому источнику данных, читать большие данные и обрабатывать…
Подборочка дизайнов dashboards, charts, admin panels & analytics
https://search.muz.li/inspiration/dashboard-inspiration
https://search.muz.li/inspiration/dashboard-inspiration
Muzli
500+ Dashboards, admin panels &apm; analytics design inspiration - Muzli
Constantly-updated list of well designed dashboards both for web and mobile, from the always-fresh Muzli inventory, to inspire you in your design process.
Всё про Apache Superset здесь https://t.me/apache_superset_bi
Telegram
Apache Superset BI
? 👉 @iv_shamaev 🧑💻
Apache Superset — это 📊 ПО с открытым исходным кодом для исследования и визуализации данных. Это готовое к использованию бизнес-веб-приложение. Superset способен обрабатывать данные петабайтного масштаба и подключаться к любым DB
Apache Superset — это 📊 ПО с открытым исходным кодом для исследования и визуализации данных. Это готовое к использованию бизнес-веб-приложение. Superset способен обрабатывать данные петабайтного масштаба и подключаться к любым DB
Forwarded from Инжиниринг Данных (Dmitry)
Сегодня узнал, что если в github .com заменить на .dev то откроется Visual Code в браузере!
📈 A curated list of awesome data visualization libraries and resources.
https://github.com/javierluraschi/awesome-dataviz
https://github.com/javierluraschi/awesome-dataviz
GitHub
GitHub - hal9ai/awesome-dataviz: :chart_with_upwards_trend: A curated list of awesome data visualization libraries and resources.
:chart_with_upwards_trend: A curated list of awesome data visualization libraries and resources. - hal9ai/awesome-dataviz