Приветствую вас!
🔔
Спешу сообщить
Вышел новый урок курса по dbt :
Интеграция airflow и dbt

▶️Перейти к уроку

▶️Перейти к просмотру на YouTube

▶️Перейти к просмотру на RuTube
Буду признателен за ваши лайки и комментарии!Ваша поддержка очень важна!✨

#dbt #БазыДанных #АналитикаДанных

Всем привет! Завтра стартует курс по Clickhouse.

На первом занятии мы:
- развернем BI систему Datalens и построим в ней дашборд на основе витрины данных из Clickhouse;
- зафиксируем проблемы со скоростью отрисовки дашборда;
- на протяжении курса мы с вами разберем по крайней мере 12 способов ускорения запросов к витрине данных в Clickhouse и хорошенько ускорим наш дашборд.

Список тем, которые будут разобраны на курсе https://docs.google.com/document/d/1RzklXwwWyPXFXiNR0_NEV6sSps8-XYhpIVrc931VSDA/edit?usp=sharing

Продолжительность: 5 месяцев.
Условия участия в платной группе - оплата 5000 рублей в месяц.
Цель курса - освоить Clickhouse на уровне достаточном для решения всех инженерных задач.

Для записи и по любым вопросам пишите @vladamelin

Друзья, вы уже оставили больше 100 отзывов о курсах! Это круто! 🎉
Я искренне рад каждому вашему комментарию и честному мнению.Спасибо !❤️Это помогает мне развивать курсы и делать их еще полезнее !

Проходите курсы, делитесь впечатлениями- мне важно знать, что вам понравилось (или нет 😉)!

🔸Курс по SQL ➡️ Курс SQL с нуля до устройства на работу за 4 месяца
🔸Курс по dbt ➡️ dbt - современный метод трансформации данных 🔸Курс по Power BI ➡️ Бизнес Аналитика с нуля. Power BI. Business intelligence 🔸Курс по Docker ➡️ Введение в Docker

Привет!

Опубликовано 2 первых видео курса по Clickhouse:

1. Краткий обзор Clickhouse, а также основных сценариев использования и как будем изучать Clickhouse на курсе
https://rutube.ru/video/b260fa2e413adc916853fb1d72770bd3/
https://youtu.be/aN7grWZq_7Y

2. Разворот ПО для курса: Clickhouse + git + DBeaver + Datalens + создаем учебную витрину данных и на ее основе дашборд в Datalens.
Созданный нами дашборд тормозит и нам предстоит на курсе его оптимизировать по скорости открытия.
https://rutube.ru/video/f3bf161707f0b2708827a34ca96cd896/?r=wd
https://youtu.be/CXkOunzY6sk

Еще есть возможность присоедниться к платной группе курса с общими созвонами (на которых разбирает дополнительные темы), проверками ДЗ, чатом и ответами на вопросы.

Для записи и по любым вопросам пишите @vladamelin

📊 Давайте решим практическую SQL-задачу!

Дано:⬇️

Таблица employees с полями:

name (имя сотрудника)

department_id (отдел)

salary (зарплата)

❓Задача:
Написать SQL-запрос, который выведет список имен всех сотрудников из 10-го отдела с зарплатой больше 20 000.Вывести необходимо все 3 поля.

💡 Попробуйте написать свой запрос и поделитесь в комментариях!

Docker — это платформа для разработки, доставки и запуска приложений в контейнерах. Если раньше настройка сервера могла занять часы, то с Docker всё разворачивается за минуты!

💻Курс - Введение в Docker с 0
Урок 1️⃣ Знакомство с понятиями Container, Images и с архитектурой.

▶️Смотреть на youtube

Для прохождения полного бесплатного курса переходите https://itempuniversity.com/course/view.php?id=669

#docker #АналитикаДанных #DataEngineering

Приветствую всех !
Это группа посвящена курсам для аналитиков и инженеров данных. Меня зовут Амелин Владимир. Я очень рад вашему присутствию на моем канале и надеюсь, что ваше обучение будет простым и интересным! На данный момент опубликованы курсы по Power BI, основам проектирования хранилища данных, SQL, dbt, Docker.
В ближайшее время планируется публикация курсов по Clickhouse, Python, Airflow.

У нас 2 основных формата обучения:

1️⃣Полностью бесплатное и самостоятельное прохождение курсов в своем ритме. Вы проходите уроки и выполняете домашние задания. Начинайте в любое время!

🔸Курс по SQL ➡️ Курс SQL с нуля до устройства на работу за 4 месяца
🔸Курс по dbt ➡️ dbt - современный метод трансформации данных 🔸Курс по Power BI ➡️ Бизнес Аналитика с нуля. Power BI. Business intelligence 🔸Курс по Docker ➡️ Введение в Docker

2️⃣В платных группах с полноценной обратной связью, проверками домашних заданий, еженедельными групповыми созвонами, чатом и помощью в решение всех трудностей.


⚠️Информацию о старте новых групп публикуется заранее.


❗️Все видео доступны на каналах 👇

▶️https://www.youtube.com/@DataCourse

▶️https://rutube.ru/channel/50132024/

▶️https://www.youtube.com/@itempuniversity

в открытом доступе❗️

Также есть VK-канал!
👉 Переходите по ссылке: https://vkvideo.ru/@amelin.analytics

Не пропускайте новые видео — подписывайтесь,ставьте лайки и включайте уведомления! 🚀


‼️По всем вопросам о курсах и для записи вы можете написать @vladamelin‼️

Всем привет! опубликован урок по первичным инексам в Clickhouse https://rutube.ru/video/f3ae2f6e4983d800a2e5e4cb6e68087f/

Друзья, всем привет!

Спасибо вам за внимание к курсам и участие в чате!
Действительно курсы по dbt и ClickHouse сейчас не доступны на itempuniversity. Курсы на itempuniversity со всеми ДЗ и разборами будут доступны в платных группах.

В открытом доступе остаются плейлисты с большим количеством видео уроков:
https://rutube.ru/plst/727863
https://rutube.ru/plst/1016824

https://www.youtube.com/playlist?list=PLzvuaEeolxkyx7XruoatSFdYDyLji_o1J
https://www.youtube.com/playlist?list=PLzvuaEeolxkwI70QKwtZGXiXCJH7RZpGe

Друзья, добрый вечер! 3 сентября стартует курс по ClickHouse для инженеров и аналитиков данных.

На первом занятии мы:
- развернем BI систему Datalens и построим в ней дашборд на основе витрины данных из ClickHouse;
- зафиксируем проблемы со скоростью отрисовки дашборда;
- на протяжении курса мы с вами разберем по крайней мере 12 способов ускорения запросов к витрине данных в ClickHouse и хорошенько ускорим наш дашборд.

Список тем, которые будут разобраны на курсе https://clck.ru/3NUCQi

Продолжительность: 5 месяцев.
Условия участия в платной группе: при оплате за первый месяц до 31 августа стоимость составит 5000 рублей в месяц. При оплате после 31 августа - 6000 рублей в месяц.

Цель курса - освоить ClickHouse на уровне достаточном для решения всех инженерных задач.

Каждую неделю:
- вам будут открыты новые видеоуроки с теоретическим и практическим материалом;
- будут проходить общие созвоны продолжительностью до 1,5 часов, на которых мы будем разбирать ваши вопросы и решать дополнительные задачи;
- будут домашние задания с разбором и проверкой;
- повторение пройденного материала.

У нас будет закрытый чат в телеграме для решения оперативных вопросов.

Для участия необходимо умение писать SELECT запросы на выборку данных.

Для записи и по любым вопросам пишите @vladamelin

«Курс по dbt» стартует 06 сентября!

Друзья, «Курс по dbt для инженеров и аналитиков данных» стартует 06 сентября!

dbt упрощает создание ETL потоков:
- кода надо писать меньше;
- скорость расчетов остается такой же высокой, как при использовании sql процедур;
- проект работает стабильнее;
- скорость разработки повышается.

На курсе мы с вами:
- создадим проект dbt с нуля;
- интегрируем dbt с airflow;
- настроим автоматические тесты данных;
- научимся генерировать SQL код с помощью Jinja;
- и многое другое

dbt все чаще встречается на проектах и в вакансиях по инженерии или анализу данных. Владение этим инструментов повышает вашу ценность на рынке,

▶️Чтобы начать обучение, достаточно владеть основами написания select запросов в SQL.

🚀Цель курса - освоение инструмента dbt на уровне middle - middle+, чтобы успешно пройти собеседование и погрузиться в мир разработки

🟢Программа курса
Неделя 1
Что такое dbt?
Установка ПО, разворот и сборка учебного проекта
Неделя 2
Создание нового проекта dbt
Подключаем БД источник
Подключение и настройка источников данных в dbt. Тесты данных источников
Неделя 3
Модели данных в dbt, view, table, ephemeral, materialized view
Практика создания моделей данных
Создание модели данных для фактов
Настройка свойств моделей
Настройка свойств модели
Неделя 4
Инкрементальное обновление моделей
Неделя 5
Seeds, загрузка csv файлов
Snapshots, реализация историчности scd2 в dbt
Неделя 6
Конфигурирование моделей. Configs
Неделя 7
Использование Analyses для ad hoc запросов
Введение в Jinja
Неделя 8
Базовые возможности Jinja
Неделя 9
Возможности работы с Jinja в dbt, часть 1
Неделя 10
Макросы в dbt
Неделя 11
Возможности работы с Jinja в dbt, часть 2
Неделя 12
Обзор пакетов в dbt
Обзор пакета codegen
Неделя 13
Пакет тестирования качества проекта dbt_project_evaluator
Пакет automate_dv для работы с datavault
Неделя 14
Команды dbt
Фильтрация элементов
Неделя 15
Практика
Неделя 16
Singular тесты
Generic тесты
Unit тесты
Неделя 17
Интеграция airflow и dbt

Продолжительность: 5 месяцев.
Условия участия в платной группе: при оплате за первый месяц до 31 августа стоимость составит 5000 рублей в месяц. При оплате после 31 августа - 6000 рублей в месяц.

Пишите @vladamelin для записи и по всем вопросам!

Курс будет стартован при наборе группы от 7 человек.

Привет!

опубликовано 3ье занятие курса по ClickHouse, на котором мы делаем 7 оптимизаций скорости открытия дашборда. Дашборд сделан в Datalens на основе витрины данных в ClickHouse.

https://youtu.be/H0yxcVGAXZ0
https://rutube.ru/video/private/c77a864accf13f69c9bb72094af8eb1f/?p=rx3lvQjpTj10ZWAm0beq3A
https://disk.yandex.ru/i/rZoKRqVjT72udw

Большая задержка с публикацией связана с тем, что на видео вместо «партиционирование» говорил «партицирование» 🙈🤪 Так руки и не дошли исправить, публикую как есть

Всем привет!

напоминаю, что на следующей неделе стартуем 2 курса:

☀️6 сентября в 10-00 стартует курс по dbt. dbt - современный ETL инструмент для трансформации данных.
Цель курса, чтобы вы освоили dbt, как минимум, на уровне крепкого middle.
Для старта необходимо только уметь писать SQL запросы и ваше желание.
Продолжительность - 4 месяца.
Более подробно тут https://t.me/dwhlearn/58

☀️3 сентября в 18-30 начнется курс по ClickHouse.
ClickHouse - самая быстрая аналитическая база данных в мире.
ClickHouse стал стандартом для хранения витрин данных, а также для realtime анлитики.
Для начала обучения нужно уметь только писать select запросы.
Продолжительность - 5 месяцев.
Более подробно тут https://t.me/dwhlearn/57

Оплата происходит помесячно. Если вы вносите первый платеж по 31 августа, то месяц обучения стоит 5000 рублей. При оплате после 31 августа стоимость составит 6000 рублей в месяц.

И dbt и ClickHouse инструменты набирающие большую популярность и их знание помогает повысить вашу ценность на рынке труда.

Для записи и по любым вопросам пишите @vladamelin

Поступило предложение набрать группу по изучению SQL с нуля.

SQL - это основа, которую необходимо знать всем инженерам и аналитикам данных.
За 4 месяца вы напишите более 60 SQL запросов.
Для старта не требуется никаких специальных знаний.

Если мы наберем группу из 5 человек, то курсу быть!

Если вы намерены участвовать, то оставьте, пожалуйста, свой голос в опросе ниже.

Стоимость - 5000 рублей за 1 месяц обучения.

🔹Программа курса ⬇️
Неделя 1
Описание курса
Установка ПО
Неделя 2
Получение столбцов и их именование в select
Математические функции в SQL
Функции работы со строками
Выбор нужных строк. Логические операторы и выражения в WHERE
Неделя 3
Что такое NULL? Сравнение с пустой строкой
Сортировка строк с помощью Order By
Получение уникальных значений. Distinct
Дополнительная практика на sql-ex.ru
Неделя 4
Соединения таблиц. JOIN
Неделя 5
Группировки. Group By, Having
Условия в выражениях с помощью Case
Неделя 6
Получение части строк в результате с помощью Limit и Offset
Объединение результатов запросов. Union, Except, Intersect
Неделя 7
Фильтрация в агрегатных функциях Filter
Подзапросы
Неделя 8
Общие табличные выражения (CTE)
Неделя 9
Оконные функции
Неделя 10
Порядок выполнения частей запроса
Создание и наполнение таблиц. Типы данных
Неделя 11
Преобразования типов данных
Представления
Ограничения
Неделя 12
Рекурсия
Оптимизация
Неделя 13
Рекомендации по устройству на работу
Неделя 14
Звездочка, снежинка, нормализация
Неделя 15 и неделя 16
Практика решения задач

Для записи и по любым вопросам обращайтесь к @vladamelin

Друзья, все таки группа изучения SQL с нуля собралась!

Начнем со второй недели сентября. Время встреч определим несколько позже в группе.

Всем, кому интересно, пишите для записи, а также свои вопросы @vladamelin

Стоимость - 5000 рублей в месяц.
Продолжительность - 4 месяца.

До встречи!

Всем привет!

Опубликован урок по ClickHouse, посвященный:
- работе с Explain
- получению плана выполнения запроса
- разбором этапов, которые проходит запрос при выполнении
- получении времени выполнения каждого шага запроса

https://disk.yandex.ru/i/P-b27PH1skURVQ
https://rutube.ru/video/private/11592260688f32ff521d21c59d0cff23/?p=Ifqa2b_N-bPeQr3-LhrQlw
https://youtu.be/s376Iq9QWYs

Привет! сегодня в 18-30 состоится первое занятие пятимесячного курса по ClickHouse для аналитика и инженеров данных.

На курсе вы пройдете всю необходимую базу, чтобы стать, как минимум, крепким мидлом в разработке на ClickHouse.
Более подробно тут https://t.me/dwhlearn/57

Оплата помесячная - 6000 рублей в месяц.
Для начала обучения необходимо только уметь писать SELECT запросы на выборку данных.

Чтобы присоединиться, пиши @vladamelin

Всем привет! сегодня стартует новая группа изучения SQL для аналитиков данных. В течение 4-х месяцев мы будем каждую неделю изучать новый материал, делать домашние задания, созваниваться и обсуждать вопросы, решать задачи.

Чтобы присоединиться или по любым вопросам пишите @vladamelin

Также на прошлой недели начались курсы по ClickHouse и dbt. Еще есть возможность присоединиться.

Привет!

Опубликовано занятие курса по ClickHouse, посвященное движку ReplicatedMergeTree

https://youtu.be/AfrABUWYg-c
https://rutube.ru/video/a7a9471d202c8bedd25087649e95a4b5/
https://disk.yandex.ru/i/y0CBJuRtzR3TYw

В этом видео вы найдете:
- 2 способа создания таблицы с движком ReplicatedMergeTree;
- описания параметров, передаваемых при создании таблицы;
- как посмотреть содержимое в ClickHouse Keeper;
- демонстрацию, что происходит при вставки/изменении/удалении строк на одной из реплик;
- демонстрацию, что происходит при вставке строк на ноду, при выключенной второй ноде;
- демонстрацию, что происходит при вставке строк на ноду, при выключенном ClickHouse Keeper;

Код с занятия: https://github.com/amelinvladimir/clickhouse_course/tree/main/24%20ReplicatedMergeTree

Документация: https://clickhouse.com/docs/ru/engines/table-engines/mergetree-family/replication

Друзья, делюсь новостями:

🎉 сегодня записал и опубликовал завершающее 26ое занятие курса по ClickHouse 🎉

мы с группой начали обучение в мае и вот оно подходит к концу. Группа у нас отличная, очень благодарен за участие, доверие и ваши вложенные силы! ❤️

Немного о планах:
1. В ближайшие 2 недели опубликую курс по ClickHouse на stepik.org. Это будет мой первый курс на этой платформе 🎉 Пока не особо понимаю, как правильно на этой платформе продвигать курсы. Какому-то количеству первых покупателей будет скидка, там так полагается.
2. Чуть позже опубликую также на stepik.org курс по dbt.
3. Курс по python для анализа данных начнем в ближайшее время, ориентируемся начать 10 декабря. Чуть позже опубликую программу и анонс.