Курсы валют и аналитика – использование обменных курсов в Хранилище Данных
#БлогкомпанииOTUS #BigData #DataEngineering #dbt #currency #airflow #sql IV
https://habr.com/ru/post/558238/
#БлогкомпанииOTUS #BigData #DataEngineering #dbt #currency #airflow #sql IV
https://habr.com/ru/post/558238/
t.me
Курсы валют и аналитика – использование обменных курсов в Хранилище Данных
Привет! На связи Артемий – Analytics Engineer из Wheely.Сегодня хотел бы поговорить о вопросах конвертирования финансовых показателей в разные валюты. Вопрос дос...
[Перевод] Новый KubernetesExecutor 2.0 в Airflow 2.0
#BigData #DevOps #airflow #kubernetes IV
https://habr.com/ru/post/558376/
#BigData #DevOps #airflow #kubernetes IV
https://habr.com/ru/post/558376/
t.me
Новый KubernetesExecutor 2.0 в Airflow 2.0
Мы познакомим вас с новыми функциями KubernetesExecutor 2.0. Внимание, спойлер!!! Процесс стал быстрее, гибче и проще для понимания. Вместе с Airflow 2.0 мы рады...
DAG’и без напрягов: наш опыт использования метаданных при работе с Apache Airflow
#БлогкомпанииЛеруаМерлен #Apache #BigData #Хранилищаданных #DataEngineering #airflow #greenplum IV
https://habr.com/ru/post/564276/
#БлогкомпанииЛеруаМерлен #Apache #BigData #Хранилищаданных #DataEngineering #airflow #greenplum IV
https://habr.com/ru/post/564276/
t.me
DAG’и без напрягов: наш опыт использования метаданных при работе с Apache Airflow
Apache Airflow – простой и удобный batch-ориентированный инструмент для построения, планирования и мониторинга дата-пайплайнов. Ключевой его особенностью являетс...
Как мы развернули коммунальный Apache Airflow для 30+ команд и сотни разработчиков
#БлогкомпанииЛеруаМерлен #Apache #BigData #DevOps #DataEngineering #airflow #devops IV
https://habr.com/ru/post/580944/
#БлогкомпанииЛеруаМерлен #Apache #BigData #DevOps #DataEngineering #airflow #devops IV
https://habr.com/ru/post/580944/
t.me
Как мы развернули коммунальный Apache Airflow для 30+ команд и сотни разработчиков
Всем привет!В этой статье я расскажу, как мы внедряли сервис Apache Airflow для использования различными командами в нашей компании, какие задачи мы хотели решить этим сервисом, опишу архитектуру...
Знакомство с Apache Airflow: установка и запуск первого DAGа
#БлогкомпанииАльфаБанк #Python #Программирование #DataEngineering #Airflow #python #data IV
https://habr.com/ru/post/676926/
#БлогкомпанииАльфаБанк #Python #Программирование #DataEngineering #Airflow #python #data IV
https://habr.com/ru/post/676926/
Хабр
Знакомство с Apache Airflow: установка и запуск первого DAGа
Привет! Меня зовут Алексей Карпов, я прикладной администратор (MLOps) отдела сопровождения моделей машинного обучения в Альфа-Банке. Хочу поделиться опытом в работе с Apache Airflow. Расскажу, как...
Apache Airflow в связке с Kubernetes
#БлогкомпанииOkko #Python #Apache #DevOps #DataEngineering #airflow #kubernetes IV
https://habr.com/ru/companies/okko/articles/736468/
#БлогкомпанииOkko #Python #Apache #DevOps #DataEngineering #airflow #kubernetes IV
https://habr.com/ru/companies/okko/articles/736468/
Хабр
Apache Airflow в связке с Kubernetes
Привет! Меня зовут Алексей Карпов, я DevOps-инженер отдела ML разработки в OKKO. В этой статье я поделюсь опытом в работе Apache Airflow в связке с Kubernetes. Мы соберем собственный образ Docker с...
Mini-ml-stand для бедных
#DataMining #BigData #Машинноеобучение #Kubernetes #DataEngineering #airflow #minio IV
https://habr.com/ru/articles/743782/
#DataMining #BigData #Машинноеобучение #Kubernetes #DataEngineering #airflow #minio IV
https://habr.com/ru/articles/743782/
Хабр
Mini-ml-stand для бедных
Что-то сделала нейронка Вступление и немного про себя Всем привет! Снова на связи General RJ45 с новым прекрасным решением, но на сей раз по теме ML и аналитики. Я MLOps/DevOps, на моем счету уже два...
Эффективная загрузка внешних данных в корпоративное хранилище: опыт «Магнита»
#БлогкомпанииMagnittech #BigData #Хранилищаданных #magnittech #управлениеданными #datamanagement #airflow IV
https://habr.com/ru/companies/magnit/articles/753002/
#БлогкомпанииMagnittech #BigData #Хранилищаданных #magnittech #управлениеданными #datamanagement #airflow IV
https://habr.com/ru/companies/magnit/articles/753002/
Хабр
Эффективная загрузка внешних данных в корпоративное хранилище: опыт «Магнита»
Представьте: есть задача наладить аналитику данных, находящихся в интернете. Ежедневно менеджеры компании посещают сайты партнёров или сайты с публичной информацией, выгружают из них отчёты или...
Эластичный DAG или «гнём, где не гнулось»
#БлогкомпанииГазпромбанк #Python #airflow #dag #разработка #etlпроцессы #python IV
https://habr.com/ru/companies/gazprombank/articles/759562/
#БлогкомпанииГазпромбанк #Python #airflow #dag #разработка #etlпроцессы #python IV
https://habr.com/ru/companies/gazprombank/articles/759562/
Хабр
Эластичный DAG или «гнём, где не гнулось»
Всем привет, на связи IT-сообщество Газпромбанка, и меня зовут Павел. Я, у нас в банке, занимаюсь разработкой на языке программирования Python, и уже больше года, создаю загрузчики внешних данных для...
Airflow в Kubernetes. Часть 1
#Python #Apache #DevOps #Kubernetes #DataEngineering #установкаприложений #airflow IV
https://habr.com/ru/articles/769098/
#Python #Apache #DevOps #Kubernetes #DataEngineering #установкаприложений #airflow IV
https://habr.com/ru/articles/769098/
Хабр
Airflow в Kubernetes. Часть 1
Приветствую! На пути инженера данных часто встречаются задачи связанные с DevOps. Одна из таких - развернуть Airflow в Kubernetes кластере. Если до этого похожего опыта работы не было, то эта задача...