Инженеры/архитекторы/аналитики данных
975 subscribers
1 photo
3 videos
49 links
Канал посвящен обучению с нуля до архитектора хранилища данных. Изучаем SQL, Power BI, ETL, Python, моделирование DWH, выбор технических решений для DWH.
Download Telegram
Media is too big
VIEW IN TELEGRAM
🔎Знаете ли вы, что основы SQL остаются актуальными уже десятки лет, так как SQL востребован и активно развивается 🚀

«Курс по SQL»

Урок 1️⃣ Описание курса и его цели. Знакомство с SQL.

Что вас ждет в этом видео?⬇️
🔹Что такое SQL и почему он так важен для устройства на работу?
🔹На какие вакансии можно устроиться, изучив SQL?
🔹Где применяется SQL?
🔹Как устроены базы данных и зачем они нужны?
🔹SQL и его части

▶️Смотреть урок на youtube

▶️Смотреть урок в VK

Для прохождения полного курса переходите на
https://itempuniversity.com/course/view.php?id=533

#SQL #БазыДанных #АналитикаДанных
11👍2🔥1
Всем привет! Завтра стартует курс по Clickhouse.

На первом занятии мы:
- развернем BI систему Datalens и построим в ней дашборд на основе витрины данных из Clickhouse;
- зафиксируем проблемы со скоростью отрисовки дашборда;
- на протяжении курса мы с вами разберем по крайней мере 12 способов ускорения запросов к витрине данных в Clickhouse и хорошенько ускорим наш дашборд.

Список тем, которые будут разобраны на курсе https://docs.google.com/document/d/1RzklXwwWyPXFXiNR0_NEV6sSps8-XYhpIVrc931VSDA/edit?usp=sharing

Продолжительность: 5 месяцев.
Условия участия в платной группе - оплата 5000 рублей в месяц.
Цель курса - освоить Clickhouse на уровне достаточном для решения всех инженерных задач.

Для записи и по любым вопросам пишите @vladamelin
🔥4
This media is not supported in your browser
VIEW IN TELEGRAM
Друзья, вы уже оставили больше 100 отзывов о курсах! Это круто! 🎉
Я искренне рад каждому вашему комментарию и честному мнению.Спасибо !❤️Это помогает мне развивать курсы и делать их еще полезнее !

Проходите курсы, делитесь впечатлениями- мне важно знать, что вам понравилось (или нет 😉)!

🔸Курс по SQL ➡️ Курс SQL с нуля до устройства на работу за 4 месяца
🔸Курс по dbt ➡️ dbt - современный метод трансформации данных 🔸Курс по Power BI ➡️ Бизнес Аналитика с нуля. Power BI. Business intelligence 🔸Курс по Docker ➡️ Введение в Docker
🔥6
Привет!

Опубликовано 2 первых видео курса по Clickhouse:

1. Краткий обзор Clickhouse, а также основных сценариев использования и как будем изучать Clickhouse на курсе
https://rutube.ru/video/b260fa2e413adc916853fb1d72770bd3/
https://youtu.be/aN7grWZq_7Y

2. Разворот ПО для курса: Clickhouse + git + DBeaver + Datalens + создаем учебную витрину данных и на ее основе дашборд в Datalens.
Созданный нами дашборд тормозит и нам предстоит на курсе его оптимизировать по скорости открытия.
https://rutube.ru/video/f3bf161707f0b2708827a34ca96cd896/?r=wd
https://youtu.be/CXkOunzY6sk

Еще есть возможность присоедниться к платной группе курса с общими созвонами (на которых разбирает дополнительные темы), проверками ДЗ, чатом и ответами на вопросы.

Для записи и по любым вопросам пишите @vladamelin
🔥271
📊 Давайте решим практическую SQL-задачу!

Дано:⬇️

Таблица employees с полями:

name (имя сотрудника)

department_id (отдел)

salary (зарплата)

Задача:
Написать SQL-запрос, который выведет список имен всех сотрудников из 10-го отдела с зарплатой больше 20 000.Вывести необходимо все 3 поля.

💡 Попробуйте написать свой запрос и поделитесь в комментариях!
🔥1
Docker — это платформа для разработки, доставки и запуска приложений в контейнерах. Если раньше настройка сервера могла занять часы, то с Docker всё разворачивается за минуты!

💻Курс - Введение в Docker с 0
Урок 1️⃣ Знакомство с понятиями Container, Images и с архитектурой.

▶️Смотреть на youtube

Для прохождения полного бесплатного курса переходите https://itempuniversity.com/course/view.php?id=669

#docker #АналитикаДанных #DataEngineering
🔥10
Приветствую всех !
Это группа посвящена курсам для аналитиков и инженеров данных. Меня зовут Амелин Владимир. Я очень рад вашему присутствию на моем канале и надеюсь, что ваше обучение будет простым и интересным! На данный момент опубликованы курсы по Power BI, основам проектирования хранилища данных, SQL, dbt, Docker.
В ближайшее время планируется публикация курсов по Clickhouse, Python, Airflow.

У нас 2 основных формата обучения:

1️⃣Полностью бесплатное и самостоятельное прохождение курсов в своем ритме. Вы проходите уроки и выполняете домашние задания. Начинайте в любое время!

🔸Курс по SQL ➡️ Курс SQL с нуля до устройства на работу за 4 месяца
🔸Курс по dbt ➡️ dbt - современный метод трансформации данных 🔸Курс по Power BI ➡️ Бизнес Аналитика с нуля. Power BI. Business intelligence 🔸Курс по Docker ➡️ Введение в Docker

2️⃣В платных группах с полноценной обратной связью, проверками домашних заданий, еженедельными групповыми созвонами, чатом и помощью в решение всех трудностей.


⚠️Информацию о старте новых групп публикуется заранее.


❗️Все видео доступны на каналах 👇

▶️https://www.youtube.com/@DataCourse

▶️https://rutube.ru/channel/50132024/

▶️https://www.youtube.com/@itempuniversity

в открытом доступе❗️

Также есть VK-канал!
👉 Переходите по ссылке: https://vkvideo.ru/@amelin.analytics

Не пропускайте новые видео — подписывайтесь,ставьте лайки и включайте уведомления! 🚀


‼️По всем вопросам о курсах и для записи вы можете написать @vladamelin‼️
👍25🔥141
Всем привет! опубликован урок по первичным инексам в Clickhouse https://rutube.ru/video/f3ae2f6e4983d800a2e5e4cb6e68087f/
🔥22👍5
Друзья, добрый вечер! 3 сентября стартует курс по ClickHouse для инженеров и аналитиков данных.

На первом занятии мы:
- развернем BI систему Datalens и построим в ней дашборд на основе витрины данных из ClickHouse;
- зафиксируем проблемы со скоростью отрисовки дашборда;
- на протяжении курса мы с вами разберем по крайней мере 12 способов ускорения запросов к витрине данных в ClickHouse и хорошенько ускорим наш дашборд.

Список тем, которые будут разобраны на курсе https://clck.ru/3NUCQi

Продолжительность: 5 месяцев.
Условия участия в платной группе: при оплате за первый месяц до 31 августа стоимость составит 5000 рублей в месяц. При оплате после 31 августа - 6000 рублей в месяц.

Цель курса - освоить ClickHouse на уровне достаточном для решения всех инженерных задач.

Каждую неделю:
- вам будут открыты новые видеоуроки с теоретическим и практическим материалом;
- будут проходить общие созвоны продолжительностью до 1,5 часов, на которых мы будем разбирать ваши вопросы и решать дополнительные задачи;
- будут домашние задания с разбором и проверкой;
- повторение пройденного материала.

У нас будет закрытый чат в телеграме для решения оперативных вопросов.

Для участия необходимо умение писать SELECT запросы на выборку данных.

Для записи и по любым вопросам пишите @vladamelin
👍41
«Курс по dbt» стартует 06 сентября!

Друзья, «Курс по dbt для инженеров и аналитиков данных» стартует 06 сентября!

dbt упрощает создание ETL потоков:
- кода надо писать меньше;
- скорость расчетов остается такой же высокой, как при использовании sql процедур;
- проект работает стабильнее;
- скорость разработки повышается.

На курсе мы с вами:
- создадим проект dbt с нуля;
- интегрируем dbt с airflow;
- настроим автоматические тесты данных;
- научимся генерировать SQL код с помощью Jinja;
- и многое другое

dbt все чаще встречается на проектах и в вакансиях по инженерии или анализу данных. Владение этим инструментов повышает вашу ценность на рынке,

▶️Чтобы начать обучение, достаточно владеть основами написания select запросов в SQL.

🚀Цель курса - освоение инструмента dbt на уровне middle - middle+, чтобы успешно пройти собеседование и погрузиться в мир разработки

🟢Программа курса
Неделя 1
Что такое dbt?
Установка ПО, разворот и сборка учебного проекта
Неделя 2
Создание нового проекта dbt
Подключаем БД источник
Подключение и настройка источников данных в dbt. Тесты данных источников
Неделя 3
Модели данных в dbt, view, table, ephemeral, materialized view
Практика создания моделей данных
Создание модели данных для фактов
Настройка свойств моделей
Настройка свойств модели
Неделя 4
Инкрементальное обновление моделей
Неделя 5
Seeds, загрузка csv файлов
Snapshots, реализация историчности scd2 в dbt
Неделя 6
Конфигурирование моделей. Configs
Неделя 7
Использование Analyses для ad hoc запросов
Введение в Jinja
Неделя 8
Базовые возможности Jinja
Неделя 9
Возможности работы с Jinja в dbt, часть 1
Неделя 10
Макросы в dbt
Неделя 11
Возможности работы с Jinja в dbt, часть 2
Неделя 12
Обзор пакетов в dbt
Обзор пакета codegen
Неделя 13
Пакет тестирования качества проекта dbt_project_evaluator
Пакет automate_dv для работы с datavault
Неделя 14
Команды dbt
Фильтрация элементов
Неделя 15
Практика
Неделя 16
Singular тесты
Generic тесты
Unit тесты
Неделя 17
Интеграция airflow и dbt

Продолжительность: 5 месяцев.
Условия участия в платной группе: при оплате за первый месяц до 31 августа стоимость составит 5000 рублей в месяц. При оплате после 31 августа - 6000 рублей в месяц.

Пишите @vladamelin для записи и по всем вопросам!

Курс будет стартован при наборе группы от 7 человек.
👍3🔥1
Привет!

опубликовано 3ье занятие курса по ClickHouse, на котором мы делаем 7 оптимизаций скорости открытия дашборда. Дашборд сделан в Datalens на основе витрины данных в ClickHouse.

https://youtu.be/H0yxcVGAXZ0
https://rutube.ru/video/private/c77a864accf13f69c9bb72094af8eb1f/?p=rx3lvQjpTj10ZWAm0beq3A
https://disk.yandex.ru/i/rZoKRqVjT72udw

Большая задержка с публикацией связана с тем, что на видео вместо «партиционирование» говорил «партицирование» 🙈🤪 Так руки и не дошли исправить, публикую как есть
👍9🔥9😁31
Всем привет!

напоминаю, что на следующей неделе стартуем 2 курса:

☀️6 сентября в 10-00 стартует курс по dbt. dbt - современный ETL инструмент для трансформации данных.
Цель курса, чтобы вы освоили dbt, как минимум, на уровне крепкого middle.
Для старта необходимо только уметь писать SQL запросы и ваше желание.
Продолжительность - 4 месяца.
Более подробно тут https://t.me/dwhlearn/58

☀️3 сентября в 18-30 начнется курс по ClickHouse.
ClickHouse - самая быстрая аналитическая база данных в мире.
ClickHouse стал стандартом для хранения витрин данных, а также для realtime анлитики.
Для начала обучения нужно уметь только писать select запросы.
Продолжительность - 5 месяцев.
Более подробно тут https://t.me/dwhlearn/57

Оплата происходит помесячно. Если вы вносите первый платеж по 31 августа, то месяц обучения стоит 5000 рублей. При оплате после 31 августа стоимость составит 6000 рублей в месяц.

И dbt и ClickHouse инструменты набирающие большую популярность и их знание помогает повысить вашу ценность на рынке труда.

Для записи и по любым вопросам пишите @vladamelin
Планируешь пройти курс по SQL в закрытой группе?
Anonymous Poll
22%
Да
18%
Думаю
60%
Посмотреть ответы
Поступило предложение набрать группу по изучению SQL с нуля.

SQL - это основа, которую необходимо знать всем инженерам и аналитикам данных.
За 4 месяца вы напишите более 60 SQL запросов.
Для старта не требуется никаких специальных знаний.

Если мы наберем группу из 5 человек, то курсу быть!

Если вы намерены участвовать, то оставьте, пожалуйста, свой голос в опросе ниже.

Стоимость - 5000 рублей за 1 месяц обучения.

🔹Программа курса ⬇️
Неделя 1
Описание курса
Установка ПО
Неделя 2
Получение столбцов и их именование в select
Математические функции в SQL
Функции работы со строками
Выбор нужных строк. Логические операторы и выражения в WHERE
Неделя 3
Что такое NULL? Сравнение с пустой строкой
Сортировка строк с помощью Order By
Получение уникальных значений. Distinct
Дополнительная практика на sql-ex.ru
Неделя 4
Соединения таблиц. JOIN
Неделя 5
Группировки. Group By, Having
Условия в выражениях с помощью Case
Неделя 6
Получение части строк в результате с помощью Limit и Offset
Объединение результатов запросов. Union, Except, Intersect
Неделя 7
Фильтрация в агрегатных функциях Filter
Подзапросы
Неделя 8
Общие табличные выражения (CTE)
Неделя 9
Оконные функции
Неделя 10
Порядок выполнения частей запроса
Создание и наполнение таблиц. Типы данных
Неделя 11
Преобразования типов данных
Представления
Ограничения
Неделя 12
Рекурсия
Оптимизация
Неделя 13
Рекомендации по устройству на работу
Неделя 14
Звездочка, снежинка, нормализация
Неделя 15 и неделя 16
Практика решения задач

Для записи и по любым вопросам обращайтесь к @vladamelin
🙏5
Друзья, все таки группа изучения SQL с нуля собралась!

Начнем со второй недели сентября. Время встреч определим несколько позже в группе.

Всем, кому интересно, пишите для записи, а также свои вопросы @vladamelin

Стоимость - 5000 рублей в месяц.
Продолжительность - 4 месяца.

До встречи!
👍7
Всем привет!

Опубликован урок по ClickHouse, посвященный:
- работе с Explain
- получению плана выполнения запроса
- разбором этапов, которые проходит запрос при выполнении
- получении времени выполнения каждого шага запроса

https://disk.yandex.ru/i/P-b27PH1skURVQ
https://rutube.ru/video/private/11592260688f32ff521d21c59d0cff23/?p=Ifqa2b_N-bPeQr3-LhrQlw
https://youtu.be/s376Iq9QWYs
🔥271
Привет! сегодня в 18-30 состоится первое занятие пятимесячного курса по ClickHouse для аналитика и инженеров данных.

На курсе вы пройдете всю необходимую базу, чтобы стать, как минимум, крепким мидлом в разработке на ClickHouse.
Более подробно тут https://t.me/dwhlearn/57

Оплата помесячная - 6000 рублей в месяц.
Для начала обучения необходимо только уметь писать SELECT запросы на выборку данных.

Чтобы присоединиться, пиши @vladamelin
👍1
Всем привет! сегодня стартует новая группа изучения SQL для аналитиков данных. В течение 4-х месяцев мы будем каждую неделю изучать новый материал, делать домашние задания, созваниваться и обсуждать вопросы, решать задачи.

Чтобы присоединиться или по любым вопросам пишите @vladamelin

Также на прошлой недели начались курсы по ClickHouse и dbt. Еще есть возможность присоединиться.
🔥5
Привет!

Опубликовано занятие курса по ClickHouse, посвященное движку ReplicatedMergeTree

https://youtu.be/AfrABUWYg-c
https://rutube.ru/video/a7a9471d202c8bedd25087649e95a4b5/
https://disk.yandex.ru/i/y0CBJuRtzR3TYw

В этом видео вы найдете:
- 2 способа создания таблицы с движком ReplicatedMergeTree;
- описания параметров, передаваемых при создании таблицы;
- как посмотреть содержимое в ClickHouse Keeper;
- демонстрацию, что происходит при вставки/изменении/удалении строк на одной из реплик;
- демонстрацию, что происходит при вставке строк на ноду, при выключенной второй ноде;
- демонстрацию, что происходит при вставке строк на ноду, при выключенном ClickHouse Keeper;

Код с занятия: https://github.com/amelinvladimir/clickhouse_course/tree/main/24%20ReplicatedMergeTree

Документация: https://clickhouse.com/docs/ru/engines/table-engines/mergetree-family/replication
🔥16👍41