Привет, я Дмитрий Логвиненко — Data Engineer отдела аналитики группы компаний «Везёт». Я расскажу вам о замечательном инструменте для разработки ETL-процессов —...

Concepts that data engineers must know in 10 words or less

Команда VK Cloud Solutions перевела краткий конспект с Open Source Data Stack Conference . Конференция была посвящена созданию платформ для работы с данными на базе Open-Source-решений —докладчики...

Данная статья посвящена настройке и работе с Docker Swarm. Swarm это стандартный оркестратор для docker контейнеров, доступный из «коробки», если у вас установлен сам docker. Что нам потребуется для...

GeekBrains: Построение хранилища данных и основы ETL - TolstikovIgor/ETL

Find self-paced tutorials to increase your Docker knowledge, and join a global community of collaborative developers. Play with Docker today!

Last 28 days / Monthly ranking of repos in this collection by stars, pull requests, issues. Historical Ranking by Popularity.

В этом ролике мы рассмотрим cicd. Разберем теорию, которая связана с CI CD, а также на реальных примерах рассмотрим CI/CD pipeline. Ролик по cicd особенно будет полезен начинающим разработчикам, которые ранее с этой концепцией не сталкивались.

Мой курс "Продвинутый…

В видео разберем, что такое SSH, как он работает и как начать использовать его.

🔗 Полезные ссылки:
Клиенты SSH:
Mac:
- iTerm2 http://iterm2.com/
- Cathode http://www.secretgeometry.com/apps/cathode/

Win:
- PuTTY http://www.chiark.greenend.org.uk/~sgtatham/putty/…

Сегодня рассмотрим, как организовать полностью сохраняемый сервис Apache NiFi с помощью Docker

This video shows you to start NiFi as docker container. It also shows the port customization and volume mounting.

Apache NiFi : https://nifi.apache.org/
Docker hub link : https://hub.docker.com/r/apache/nifi/
Docker Installation : https://github.com/san…

Для анализа данных в облаке не достаточно СУБД и средств визуализации — нужен ещё и понятный инструмент, который автоматизирует сбор, подготовку и обработку данных. На вебинаре мы расскали о таком сервисе — Apache Airflow.

Эксперты Yandex Cloud обсудили:…

A 101 guide on some of the frequently used Apache Airflow Operators with detailed explanation of setting them up(with code)…

Развернуто рассказываем о том, что такое Docker-compose и как с ним работать.

https://t.me/devops_dataops Version​ # Debian/Ubuntu uname -a lsb_release -a # CentOS/RedHat cat /etc/centos-release cat /etc/redhat-release # This will provide a lot more information cat /etc/os-release System​ # Restart reboot # Memory free # Disk df -hl…