Всем привет! в 11-00 в эту субботу будет созвон с презентацией курса по моделированию хранилища данных.

Пришлю ссылку за час.

Вы можете прислать вопросы заранее или уже задать в субботу.

Буду всем рад)

Доброе утро!

сегодня в 11-00 состояится презентация курса "Моделирование хранилища данных".

Присоединяйтесь по ссылке https://jazz.sber.ru/u5mo1r?psw=OAESUh0UExtYERVEQgAECFcbCA

Если будут проблемы с подключением, то пишите https://t.me/vladamelin

Всем доброе утро! Опубликовано видео по моделированию хранилища данных на Data Vault. Буду рад вашим вопросам, пожеланиям и отзывам
https://www.youtube.com/watch?v=65b99XCuiR4

Друзья, привет!
Рад объявить, что с 4 августа начинаем проводить клуб инженерии данных по пятницам, в рамках которого будем изучать разные технологии.

Будем проводить встречи раз в неделю по пятницам вечером, в 18 или 19 или 20. Дополнительно проведем голосование по выбору времени. Продолжительность встречи - ориентированно от 1 до 2 часов.

Начнем с изучения Docker, потому что он нам понадобится для изучения других технологий.

Дальше будем изучать разные инструменты: ClickHouse, Greenplum, Debezium и тд

У каждого из этих инструментов есть своя официальная документация вместе с учебными примерами - изучать будем по ней.

Будем проходить как теорию, но что самое главное - будем делать практику, как на занятии, так и в качестве домашнего задания, для того, чтобы формировался навык использования инструментов и для того, чтобы как вы так и я росли как профессионалы.

Изучать каждый из инструментов будем не глубоко. Мы познакомимся с инструментом, поймем его плюсы и минусы, попробуем в работе в некоторых примерах и пойдем дальше.

Это нужно для того, чтобы формировался кругозор и вы могли подобрать лучший инструмент для конкретной задачи. А это задача уровня Senior специалиста.

Также у нас будет формироваться навык быстро осваивать новые инструменты и внедрять в работу.

Необходимый уровень подготовки - умение работать на компьютере. А с точки зрения знания инженерии данных - можно приходить с нулевым уровнем.

Клуб - безоплатный.

Для записи - напишите @vladamelin и я добавлю вас в чат.

Друзья, добрый день!
запись первого занятия курса по dbt, которое прошло вчера, 7 февраля https://youtu.be/fXt-VmqsVPA
ссылка на курс, где можно сдавать домашние задания https://itempuniversity.com/course/view.php?id=684#section-0
договорились провести следующее занятие через 2 недели, то есть 21ого февраля, чтобы было 2 недели на выполнение дз

Друзья, всем привет!
напоминаю, что следующее занятие по dbt будет 21 февраля в 20-00.
Есть время на разворачивание ClickHouse и упаковку dbt в docker-контейнер.
Всем удачного выполнения домашнего задания!
https://itempuniversity.com/course/view.php?id=684#section-0

Добрый вечер! ссылка на занятие https://telik.solit-clouds.ru/connect/43ac55bb-ce45-43d3-8bbb-b036f640f6d8/m

Сегодня разберем вопросы по развороту ClickHouse + dbt на Windows, а также познакомимся с базовыми командами linux.

Начало в 20-00

Добры вечер!
сегодня в 20-00 по МСК пройдет третье занятие по dbt.
Ссылка для входа: https://telik.solit-clouds.ru/connect/43ac55bb-ce45-43d3-8bbb-b036f640f6d8/m

Доброе утро! Очередное занятие по dbt пройдет сегодня в 20-00 по МСК. За 10 минут до начала будет опубликована ссылка.
Сегодня будем изучать SQL модели.

Добрый вечер! начнем через 10 минут. Ссылка для входа https://telik.solit-clouds.ru/connect/43ac55bb-ce45-43d3-8bbb-b036f640f6d8/m

Всем привет! Вынужден перенести очередное занятие по dbt на следующую среду. Приношу извинения

Добрый день!

опубликованы занятия:
3ье с обзором основных функций dbt:
https://itempuniversity.com/mod/page/view.php?id=54253
https://www.youtube.com/watch?v=H8bSVen1pQE

4ое про модели dbt:
https://itempuniversity.com/mod/page/view.php?id=54252
https://www.youtube.com/watch?v=Yz4EKr2ZJfs

Сегодня в 20-00 по МСК состоится 5ое занятие курса по dbt по теме Snapshot
ссылка на занятие: https://telik.solit-clouds.ru/connect/43ac55bb-ce45-43d3-8bbb-b036f640f6d8/m

Присоединяйтесь!

Друзья, занятие по dbt начнется через 9 минут, заходите https://telik.solit-clouds.ru/connect/43ac55bb-ce45-43d3-8bbb-b036f640f6d8/m

Всем привет!

Запись предыдущего занятия по Snapshot лежит тут https://itempuniversity.com/mod/page/view.php?id=54257&forceview=1

Сегодня в 20-00 по МСК проведем занятие по тестам в dbt.
Ссылка на встречу: https://telik.solit-clouds.ru/connect/43ac55bb-ce45-43d3-8bbb-b036f640f6d8/m

Занятие по тестам в dbt начнется через 10 минут
Заходите по ссылке https://telik.solit-clouds.ru/connect/43ac55bb-ce45-43d3-8bbb-b036f640f6d8/m

Всем привет!
Напоминаю, что сегодня (28 августа) в 20-00 по мск проведем вводное занятие по Business Intelligence и инженерии данных.
Занятие в первую очередь для тех, кто интересуется ИТ, но еще не определился с конкретным направлением.
Задача: помочь понять, интересна ли вам сфера работы с данными.

Ссылка будет опубликована за 10 минут до начала.

через 10 минут начнется занятие, на котором вы узнаете, что такое Business Intelligence и инженерия данных.

Будут даны ответы на вопросы:
- Какую пользу приносит BI и инженерия данных бизнесу? На реальном примере;
- Из каких частей состоит инжиниринг данных?
- Какие есть роли в инжиниринге данных? Что они должны знать и уметь?
- Какой план обучения?

Если вы хотите войти в ИТ и еще не определились со сферой, то заходите:
https://telik.emias.ru/connect/a03296e8-9230-42ff-afdd-28dce6e9ac47/m

Всем привет!
Запись вводной встречи про инженерию данных (пока только в низком качестве, в высоком будет позже) - https://disk.yandex.ru/i/b0VcTpOkc1qKaw
Ссылка на презентацию - https://docs.google.com/presentation/d/19tEbu56fmjw_NPPLGiY0KiWMeNwoqwLCcaCLnonF7h4/edit?usp=sharing

Всем привет! сегодня начинается обучение аналитиков и инженеров данных в группе. Мы приступим к изучению курса по sql.
На данный момент группа малая - 2 человека.
Если есть желание - присоединяйтесь. Для этого напишите @vladamelin
Вы получите много внимания.
Мы сделаем особый акцент на подготовку к прохождению собеседования на аналитика или инженера данных.
Стоимость обучения - 5000 рублей в месяц.

формат обучения:
- каждую неделю вы будете изучать видео уроки и делать домашние задания
- по домашним заданиям вы будете получать обратную связь
- в чате вы сможете получать ответы на вопросы, консультации
- раз в неделю у нас будет проходить общий созвон продолжительностью от 1 до 1,5 часов, на котором мы будем разбирать ваши вопросы, решать задачи, готовиться к прохождению собеседования

Уровень подготовки - любой. Главное - ваше желание учиться и интерес к теме анализа данных.

Всем привет!
В следующую среду (11 декабря) стартует группа по изучению инструмента трансформации данных dbt.

Для записи пишите @vladamelin.

Внутри хранилища данных нам нужно делать расчеты, чтобы в итоге получить витрины данных. Мы можем это делать с помощью sql процедур, а альтернативой является dbt, который является прослойкой между хранилищем данных и кодом разработчика.

При использовании dbt разработчик пишет только select запросы, а таблицы и код наполнения таблиц за него создает dbt и при этом вы получаете следующие возможности:
- готовый движок для тестирования данных с большим набором готовых тестов;
- автогенерацию документации;
- lineage - графическое изображение связей между объектами;
- использование шаблонизитора кода jinja, который открывает широкие возможности по сокращению объема кода и реализации нестандартных алгоритмов;
- хранение кода в git (или аналоге) с возможность проводить код ревью, видеть историю всех изменений, хранить код каждого релиза, а также откатить изменения по задаче за несколько кликов;
- настроить ci/cd процесс (автоматизировать процесс тестирования кода, сборки и разворота проекта);
- использования готовых алгоритмов историчности, инкрементальной загрузки данных и др.

Как итог:
- кода надо писать меньше;
- скорость расчетов остается такой же высокой, как при использовании sql процедур;
- проект работает стабильнее;
- скорость разработки повышается.

Для начала обучение нужно только умение писать базовые select запросы в sql.

Формат обучения:
- онлайн встречи 1 раз в неделю по средам в 20-00 по мск, где будем разбирать ваши вопросы. Продолжительность - 1,5 часа;
- самостоятельное изучение видео уроков в течение недели и выполнение домашних заданий;
- проверка ваших домашних заданий;
- будет чат, где можно задавать вопросы.

Продолжительность: 3-4 месяца.

Условия участия в платной группе - оплата 5000 рублей в месяц.

Цель курса - освоение инструмента dbt на уровне junior+ - middle-, чтобы успешно пройти собеседование и уверенно приступить к разработке.

Для записи и по любым вопросам пишите @vladamelin

Всем привет! сегодня начнется курс по dbt. Кому интересно - пишите @vladamelin
Курс будет особенно интересен тем, кто хочет стать инженером данных, но еще не знаком с данным инструментом.