Сообщение для тех, кто не работал с Airflow и Clickhouse.
Нужны 2 человека для тестировочного прохождения модуля МКС Трекер.
Напишите в лс.
@storm_de
Нужны 2 человека для тестировочного прохождения модуля МКС Трекер.
Напишите в лс.
@storm_de
🔥2
Еще нужны люди, кто не работал с Airflow и Clickhouse.
Для тестового прохождения модуля по отслеживанию полета международной космической станции.
Модуль маленький, быстро и легко проходится.
Займет минимум полчаса, максимум пару часов или больше.
Нужны люди, кто готов пройти сегодня и завтра, т. к. я корректирую модуль по фидбэкам.
Напишите в лс.
@storm_de
Для тестового прохождения модуля по отслеживанию полета международной космической станции.
Модуль маленький, быстро и легко проходится.
Займет минимум полчаса, максимум пару часов или больше.
Нужны люди, кто готов пройти сегодня и завтра, т. к. я корректирую модуль по фидбэкам.
Напишите в лс.
@storm_de
Отзыв человека, который прошёл тест-драйв модуля:
#review
Хоть это и минимальный и очень простенький проект, но какая-никакая практика с очень вкусным и современным стеком для вкатунов - польза огромная, написано всё очень понятно, без лишнего, не справиться с чем-то крайне тяжело. Код DAG'а разобран достаточно, важные его настройки упомянуты, оч понравилось.
Ещё очень приятно было увидеть блок с аналитикой. Просто мало кто из тех, кто вкатывается, думает о работе ДЕ с этой стороны, как по мне ДЕ важно понимать, как люди пишут аналитические вопросы с данным, которые они предоставляют.
Учитывая, что это только один блок из множества, мне уже кажется, что курс получится очень здоровским
#review
🔥6❤2
Еще один отзыв по модулю МКС, от программиста:
#review
Прошел модуль - хочу сказать, это прерасная работа! 🌟 Особенно хочу подчернуть внимание к деталям. Проблем на Windows никаких не возникло (тут можно обойтись без предоставления прав к папке). Единственное, что пришлось уточнять - это что за функция такая в clickhouse "toStartOfFiveMinutes()", ну и чутка подробнее вникать в якорение. Круто и интересно, мне очень понравилось! 👍 🔥
да, иногда приходится ждать подольше, когда стартанет airflow, когда появится dag - и конечно, очень хорошо, что в тексте указано, что следует иметь терпение и подождать)
ты молодец! 🔥
Спасибо за возможность изучить материал))
#review
🔥6
Вот придумай любое слово и подставь перед ним "Data", обязательно найдется компания с таким именем, даже если не связана с данными... Все, кому не лень назвались датой и все названия заняли. Жесть 😁.
Как у JS разработчиков, придумай любое слово и обязательно найдется JS библиотека или фреймворк с таким названием.
Как у JS разработчиков, придумай любое слово и обязательно найдется JS библиотека или фреймворк с таким названием.
❤3
Помогите выбрать логотип для Data Human - курсам по Data Engineering!
Я застрял на выборе между двумя концепциями.
1️⃣ Голова + база данных — прямая отсылка к Data Engineering, хранилищам и DWH
2️⃣ Голова + барчарт — аналитика, данные, рост
Оба варианта на картинках выше 👆
Какой из них лучше отражает суть курса по Data Engineering?
👍 — за базу данных
❤️ — за барчарт
Если что, пишите в комментариях почему!
Я застрял на выборе между двумя концепциями.
1️⃣ Голова + база данных — прямая отсылка к Data Engineering, хранилищам и DWH
2️⃣ Голова + барчарт — аналитика, данные, рост
Оба варианта на картинках выше 👆
Какой из них лучше отражает суть курса по Data Engineering?
👍 — за базу данных
❤️ — за барчарт
Если что, пишите в комментариях почему!
👍20❤1
Спасибо за голоса! Я обновил аватарку и логотип на сайте.
В следующем посте я поделюсь очередным отзывом о курсе.
Этот и другие подобные отзывы убеждают меня, что я работаю над курсом не зря и создаю именно то, что нужно.⚡️
В следующем посте я поделюсь очередным отзывом о курсе.
Этот и другие подобные отзывы убеждают меня, что я работаю над курсом не зря и создаю именно то, что нужно.
Please open Telegram to view this post
VIEW IN TELEGRAM
🔥2❤1
Отзыв:
#review
Эрик, это просто какой-то разрыв мозга в хорошем смысле 😄
Я вообще не ожидал, что за сутки смогу настолько глубоко погрузиться в инженерию данных. Буквально вчера я был человеком, который вообще не трогал Ubuntu, Docker, Airflow, ClickHouse, PostgreSQL, VS Code и Python, а сегодня у меня уже крутится собственный пайплайн с реальными данными МКС.
И самое главное — это не ощущалось как «сухой курс». Это было ощущение, будто я реально прикоснулся к инженерии. Когда ты первый раз читаешь логи, дебажишь ошибку, находишь суть проблемы, правишь схему таблицы и после этого видишь долгожданный SUCCESS — это какая-то магия. Словами не описать эмоции радости))
Особенно поразило, как быстро начинает меняться мышление. Ты уже начинаешь смотреть не как «пользователь компьютера», а как человек, который управляет системой: сервисами, данными, контейнерами, пайплайнами. Это не просто решать задачи на leetcode, а прямо работать с инфраструктурой.
И отдельно спасибо за подачу. Очень чувствуется, что курс делал практик, а не человек, который просто пересказывает документацию. Всё максимально живое и настоящее. И спасибо огромное за поддержку в процессе)
Я в полном восторге. Огромное спасибо 🔥
#review
🔥5
🛰 Что нового
Прокачал модуль ISS Tracker (координаты МКС).
1. Простой дашборд на Streamlit
Трек станции на карте мира + графики по странам, несколько строк Python. В уроке честно оговорил: Streamlit взят для простоты, в реальной работе это Grafana / Metabase / Superset.
В скрине показываю, как это выглядит.
2. Один DAG → два
Вместо одного пайплайна теперь два независимых + два слоя данных: •
Слои развязаны: отвалится геокодер - сбор координат всё равно работает. Классический паттерн staging-слоёв.
Курс в раннем доступе, для доступа пишите: @storm_de
Прокачал модуль ISS Tracker (координаты МКС).
1. Простой дашборд на Streamlit
Трек станции на карте мира + графики по странам, несколько строк Python. В уроке честно оговорил: Streamlit взят для простоты, в реальной работе это Grafana / Metabase / Superset.
В скрине показываю, как это выглядит.
2. Один DAG → два
Вместо одного пайплайна теперь два независимых + два слоя данных: •
iss_ingest → сырые координаты в positions_raw • iss_enrich → определяет страну, пишет в positionsСлои развязаны: отвалится геокодер - сбор координат всё равно работает. Классический паттерн staging-слоёв.
Курс в раннем доступе, для доступа пишите: @storm_de
🔥5
Рассматривал возможность сделать модуль с обработкой данных стартапов, акселерируемых Y Combinator. В процессе узнал, что количество сотрудников в Stripe составляет 8 000–8 500 человек по всему миру, из них 40% - инженеры и разработчики. Удивлён такому большому количеству. Казалось бы, простой продукт: подкручиваешь платёжку на сайт - и готово. Как будто простой и тонкий слой между тем, кто платит, и тем, кто получает оплату. Но сколько людей трудится... Они точно там все работают? В таком количестве как будто бы можно затеряться и ничего не делать...
Это яркий пример принципа: колоссальный труд за кулисами, чтобы был простой и понятный UX/UI.
Я сам сейчас тоже вкладываю много труда в создание курса, чтобы для учеников сложные темы "заходили" легко и без боли. Ведь за кажущейся простотой стоит невидимый объем работы.🙂
Это яркий пример принципа: колоссальный труд за кулисами, чтобы был простой и понятный UX/UI.
Я сам сейчас тоже вкладываю много труда в создание курса, чтобы для учеников сложные темы "заходили" легко и без боли. Ведь за кажущейся простотой стоит невидимый объем работы.
Please open Telegram to view this post
VIEW IN TELEGRAM
👏6❤1
Цена 50 долларов - курс в разработке, модули выходят постепенно, поэтому пока так.
Платишь один раз и получаешь все модули навсегда: и нынешние, и будущие, без доплат. Цена растёт по мере выхода новых модулей - кто зашёл раньше, платит меньше.
Оплата принимается из любой страны.
Пишите @storm_de
Платишь один раз и получаешь все модули навсегда: и нынешние, и будущие, без доплат. Цена растёт по мере выхода новых модулей - кто зашёл раньше, платит меньше.
Оплата принимается из любой страны.
Пишите @storm_de
🔥3
Data Human pinned «Цена 50 долларов - курс в разработке, модули выходят постепенно, поэтому пока так. Платишь один раз и получаешь все модули навсегда: и нынешние, и будущие, без доплат. Цена растёт по мере выхода новых модулей - кто зашёл раньше, платит меньше. Оплата принимается…»
Я давно делаю сайт курса, подбирал дизайн, фронтенд-стек и т. д. Пусть это всё требует времени, но я всё равно этим занимаюсь, потому что хочу удобный и приятный пользовательский интерфейс. Ещё свой сайт гибкий — можно легко добавлять новый функционал. Например, я захотел сделать так, чтобы при демонстрации структуры папок проекта можно было папки раскрывать и закрывать. Теперь это работает (скрин).
🔥6
Что меня радует - люди, которые помогали мне тестировать один из модулей, вернулись и купили доступ к полному курсу. Для меня это очень приятный и важный сигнал.
#review
#review
🔥4
Анонс модуля
Люблю слушать фидбек от участников курса - для меня это полезный брейнсторминг.
Один из участников предложил составить карту навыков, которую можно использовать как справочник. А кто я такой, чтобы отказываться от хорошей идеи?
Сейчас на этапе составления: что должен знать Junior DE по Python и SQL.
Дальше будет по другим технологиям и грейдам.
Это будет отдельный справочный модуль в курсе.
#announce
Люблю слушать фидбек от участников курса - для меня это полезный брейнсторминг.
Один из участников предложил составить карту навыков, которую можно использовать как справочник. А кто я такой, чтобы отказываться от хорошей идеи?
Сейчас на этапе составления: что должен знать Junior DE по Python и SQL.
Дальше будет по другим технологиям и грейдам.
Это будет отдельный справочный модуль в курсе.
#announce
👍6
Друзья, делюсь отзывом еще одного участника курса:
#review
Привет! Удалось вчера наконец-то дойти до курса на чуть-чуть. Всё как и писали в отзывах, очень просто и понятно на реальных примерах.
Мне кажется такая подача материала это то, что реально работает на большинстве людей с разным бэкграундом, в отличии от некоторых крупных школ: там люди возможно и специалисты, но как это часто бывает, хороший специалист не всегда хороший преподаватель, я много раз расстраивался, что я тупой, пока не начал просить гугл мне объяснить.
#review
🔥5
Случайно обнаружил, что ровно год назад начал делать сайт для курса. За год - 682 коммита. 🙂
#backstage
#backstage
Please open Telegram to view this post
VIEW IN TELEGRAM
Please open Telegram to view this post
VIEW IN TELEGRAM
🔥3👏3
Что нового: модуль про чёрные дыры + карта навыков. И меняю цену
Накопилось, чем поделиться 👇
1. Новый модуль - Gravitational Waves. Полноценный практический проект на реальных научных данных: забираем каталог слияний чёрных дыр от обсерватории LIGO, поднимаем ClickHouse в Docker, грузим данные Python-скриптом, классифицируем слияния (чёрные дыры / нейтронные звезды), считаем SQL-аналитику и строим дашборд на Streamlit. Реальные события космического масштаба - на твоих графиках.
2. Карта навыков для Junior. Сначала замахивался на все три грейда, но решил сфокусироваться: сейчас полезнее вкладывать время в курс для новичков, чем распыляться на middle и senior. Сделал карту для Junior - что знать по Python, SQL, Git, Linux, Docker, dbt и остальному стеку, и до какой глубины. Без воды.
3. Про цену. Курс кусок за куском становится плотнее, и это повод сказать: ранний доступ сейчас стоит $30. Это стартовая цена для самых первых, и уже есть первая группа учеников.
👉 Беру ещё 12 человек по $30, дальше цена $40. Кто заходит сейчас, фиксирует доступ ко всему курсу навсегда: и к тому, что есть, и ко всему, что добавлю потом.
Вопросы или хотите глянуть, что внутри, - пишите в лс @storm_de
🙂
Накопилось, чем поделиться 👇
1. Новый модуль - Gravitational Waves. Полноценный практический проект на реальных научных данных: забираем каталог слияний чёрных дыр от обсерватории LIGO, поднимаем ClickHouse в Docker, грузим данные Python-скриптом, классифицируем слияния (чёрные дыры / нейтронные звезды), считаем SQL-аналитику и строим дашборд на Streamlit. Реальные события космического масштаба - на твоих графиках.
2. Карта навыков для Junior. Сначала замахивался на все три грейда, но решил сфокусироваться: сейчас полезнее вкладывать время в курс для новичков, чем распыляться на middle и senior. Сделал карту для Junior - что знать по Python, SQL, Git, Linux, Docker, dbt и остальному стеку, и до какой глубины. Без воды.
3. Про цену. Курс кусок за куском становится плотнее, и это повод сказать: ранний доступ сейчас стоит $30. Это стартовая цена для самых первых, и уже есть первая группа учеников.
👉 Беру ещё 12 человек по $30, дальше цена $40. Кто заходит сейчас, фиксирует доступ ко всему курсу навсегда: и к тому, что есть, и ко всему, что добавлю потом.
Вопросы или хотите глянуть, что внутри, - пишите в лс @storm_de
🙂
❤2👍2🔥2