Python 🐍 Work With Data
1.6K subscribers
76 photos
13 videos
136 files
441 links
A collection of books and articles on Python and various data manipulation tools. Overview of architecture of business intelligence systems, design and development of BI Reports, data processing in Python Pandas.
Download Telegram
Когда на проекте почти все источники - файлы Excel
Витрина данных для веб‑аналитики в ClickHouse
👍 Бесплатный курс
👍 4 модуля с теорией и практикой

+ Airflow и дашборд в DataLens

👎 на этом курсе не предусмотрено получение сертификата.


https://cloud.yandex.ru/training/datamart
Forwarded from DataEng
Ребята из PostHog (сервис продуктовой аналитики) выложили в Open Source интересную балалайку HouseWatch.

Это веб-сервис, разработанный на Django и React для управления и мониторинга ClickHouse-кластером. PostHog активный пользователь ClickHouse, у них в блоге есть даже занятный пост про сравнение Apache Druid и ClickHouse. Если вы активно используете ClickHouse в продакшене, то рекомендую присмотреться и попробовать в деле.
Взято из чатов)
Python 3.12 Preview: More Intuitive and Consistent F-Strings

Статья рассказывает о новых возможностях f-строк в Python 3.12. F-строки представляют собой специальный вид строк, которые позволяют встраивать значения переменных непосредственно внутрь строковых литералов. Они были введены в Python 3.6 и стали очень популярными благодаря своей простоте и удобству.

Однако с версией Python 3.12 были добавлены новые возможности, делающие использование f-строк ещё более мощным. В статье описываются следующие новшества:

▫️Улучшенная обработка ошибок: Если внутри f-строки происходит ошибка, теперь Python выводит более информативные сообщения об ошибках, что упрощает их отладку.

▫️Условное выражение в f-строках: Теперь можно использовать условные выражения внутри f-строк, что позволяет более гибко форматировать вывод в зависимости от значений переменных.

▫️Вызов функций внутри f-строк: С появлением Python 3.12 стало возможным вызывать функции прямо внутри f-строк, что позволяет создавать более сложные и динамические строки.

▫️Расширенная поддержка специальных символов: Теперь в f-строках можно использовать специальные символы, такие как перенос строки и символы табуляции, что облегчает форматирование вывода.

▫️Поддержка дополнительных форматов вывода: Добавлены новые спецификаторы формата, что упрощает вывод чисел, дат и времени.

https://realpython.com/python312-f-strings/
Очередная 🫣 Open Source BI система, но возможно (не пробовал сам) легче разворачивается, по сравнению с Apache Superset.

Чего нет в OpenSource версии:
- Custom SSO/SAML Providers
- Custom email alerts

Весь движок на JS (python не увидел). Вероятно загрузка данных с помощью dbt реализована.

Понравилось, что внутри можно в режиме AdHoc отчета выбирать метрики, измерения и при этом просматривать разные диаграммы, переключаясь между ними.

https://github.com/lightdash/lightdash
Кажется, что Дурову пора бы уже в премиум подписке сделать функцию отключения сторисов. Вот только за эту фичу я бы неглядя взял премиум 🙈
#накипело
Forwarded from 🔋 Труба данных (Simon Osipov)
Нужно больше OpenSource!

Видя счет за Tableau внутри компании, иногда мне хочется плакать. Или притащить и заменить это каким-нибудь OpenSource тулом (нежно намекаю на это тимлиду визуализации, которая читает мой канал ❤️). Но потом я останавливаюсь, взвешиваю текущие факторы "за" и "против" и пока откладываю эту идею.

Разнообразие OpenSource тулов это хорошо, ведь каждый может себе подобрать то, что ему подходит. И пусть меня, как всегда, закидают 💩 в реакциях, факт того, что Яндекс сделал открытым DataLens - не может не радовать. Возможно, кому-то этот инструмент тоже подойдет.

https://github.com/datalens-tech/datalens и https://datalens.tech/ и @YandexDataLens

@ohmydataengineer | Поддержать автора на Patreon | на Бусти