Всем привет, я Миша и я data engineer в Сбер Образовании

Пытаюсь сюда писать и снимать на ютуб
сюда https://www.youtube.com/@NOdatamisha
и сюда https://www.youtube.com/@otishniki

Мои видеоуроки по data https://telegra.ph/Videouroki-08-26

Контент, надеюсь, будет интересен все, кто интересуется data технологиями (data engineering, data science, data analytics) и другим айтишникам, да и не айтишникам тоже)

А еще есть личный тг https://t.me/MihaVeryNiceOfficial

Как я сменил свою первую работу в it

Собрал все свои посты про поиск работы и опубликовал на habr и vc
Можете глянуть, если еще не видели
Ну и оценить если понравится)

https://habr.com/ru/articles/733424/

https://vc.ru/u/446984-data-misha/685740-kak-ya-smenil-svoyu-pervuyu-rabotu-v-it

Лучшие каналы в телеграмме

В телеграмме нет рекомендаций, поэтому найти хорошие айтишные каналы бывает сложно

Помогу вам с этим немного

https://t.me/ityoutubers_com/63

Greenplum

Мне на работе сейчас придется работать с Greenplum. До этого я с ней на практике не сталкивался. В интернете не так много инфы про нее, хотя штука вроде популярная.

Если кратко то это СУБД, основанная на PostgreSQL, но для OLAP (большие аналитические запросы), когда как сам PostgreSQL подходит для OLTP (много мелких операций).

Если хотите почитать подробнее, то вот ссылки:

⁃ https://pgday.ru/presentation/227/596db8cb6922d.pdf

⁃ https://medium.com/@bigdataschool/greenplum-vs-postgresql-7-%D1%81%D1%85%D0%BE%D0%B4%D1%81%D1%82%D0%B2-%D0%B8-3-%D0%BE%D1%82%D0%BB%D0%B8%D1%87%D0%B8%D1%8F-cbfb7c96f7ea

⁃ https://dzen.ru/a/Yt9qPYiWW278Tsv9

Пишите что делали и чему научились

В ближайшее время мне предстоит изучить много нового и я буду писать об этом (возможно что-то буду выкладывать в канал). Для этого существует несколько причин:

✅Систематизация новых знаний: в голову попадает много новой информации и чтобы хорошо ее освоить нужно воспроизвести, пусть кратко, пусть понятно только тебе, но главное, что суметь понять и объяснить ее

✅Чувство прогресса: тут просто приятно видеть сколько нового ты изучил за последнее время, дает мотивацию продолжать дальше


Когда делаешь какую-то работу, записывать тоже полезно:

✅Чувство прогресса: также как в выше

✅Возможность при необходимости продемонстрировать свои достижения: при поиске новой работы или повышения на нынешней

Писать полезно даже если у вас нет телеграмм канала)

SQL online

Когда проходил собесы, то иногда приходилось решать тестовые и не всегда был доступ к своему пк с установленной бд, тогда пришлось искать что-то онлайн

Отличным решением стал https://sqliteonline.com

Достаточной удобный сайт, с возможностью работать с разными СУБД и умеющий сохранять ваши таблицы и запросы даже после закрытия

Если у вас нет возможности установить на свой пк полноценную СУБД, то этот вариант является хороший временным решением

Также может отлично подойти если у вас нет пк, а только телефон)

Если ты аналитик или хочешь им стать, то этот канал для тебя!

В нем ты найдешь переводы различных статей по аналитике (АБ-тесты, дашборды, различная теория и многое другое), а также сможешь узнать новые слова по соответствующей тематике, так как каждый перевод сопровождается набором неизвестных ранее автору слов и словосочетаний.

Вот некоторые из переводов:

🐼PandasAI: Супер простой анализ данных с ИИ

📈Понимание методов синтетического контроля

📊Пошаговая инструкция по сегментации пользователей с использованием K-Means и PCA в Python

Подписывайся и не пропускай новые переводы!

@letsdatanow

#реклама

DWH

Data Warehouse (DWH) является централизованной базой данных, используемой для хранения и анализа структурированных и неструктурированных данных. Она используется для сбора, объединения и хранения больших объемов данных из различных источников данных и систем и предоставляет пользователям мощные инструменты для анализа информации


DWH состоит из нескольких слоев данных, их количество и названия могут отличаться, но вот один из примеров:

✅Источники данных - это базовые источники данных, которые используются для загрузки данных в DWH. Они могут быть как структурированные, так и неструктурированные

✅Рабочая база данных используется для очистки, преобразования и интеграции данных из источников данных

✅Интегрированная база данных хранит данные, приведенные к единому масштабу и представленные в структурированном виде

✅Аналитическая база данных используется для анализа данных и предоставления результатов анализа пользователям.

Нужно ли решать тестовое?

Начинающему специалисту сейчас трудно найти работу, поэтому ему, конечно, стоит цепляться за любую возможность попасть в свою первую компанию

А вот если это ваша не первая работа, то тут к тестовому можно относиться по разному. Я считаю, что если вакансия нравится, то на тестовое задание время выделить можно, но не больше 1-2 часов, т.к. высок риск, что ваши усилия пропадут даром. Я выполнял тестовые всего 4 раза и в двух из них мне даже не написали, что я задание сделал плохо(

Также можно найти истории где чувак сделал не тестовое, а целый проект и взамен ничего не получил


А как вы относитесь к тестовым заданиями?

Интересная табличка
На ней показана время загрузки данных при разных скоростях соединения

Data engineering С чего начать?

Отличным вариантом для знакомства с профессией de является ресурс data learn
Там уже вышло 7 модулей в которых рассказывается рассказывается о профессии, о различных инструментах de и многом другом с чем вам возможно предстоит столкнуться

Также de необходимо знать sql и возможно python. Для их изучения хорошо подходят бесплатные курсы на stepik

Конфа от людей для людей
 
Если вы любите конференции и не любите БИГТЕХ, которые чаще всего и проводят конфы, то тут появилась отличная возможность посетить такое мероприятие. EXOZ организует It Meetup, а занимается этим не огромная бездушная корпорация, а обычный человек, такой как мы с вами
 
А еще она будет проводиться не в банальной Москве или Питере, а в Калуге. Хороший повод выбраться в другой город и узнать если ли жизнь на марсе за МКАДом, но при этом не так далеко от мск
 
27 мая, Калуга, отель "Four Points by Sheraton" доклады от опытных спикеров, нетворкинг, розыгрыш призов и скидка на отель, которая может понадобиться если захотите остаться погулять по городу (а вы захотите)
 
Сайт конференции с подробной информацией https://exoz.ru
 
Если остались вопросы, то можете написать их Денису лично
 
Поддержим «человеческое» айти
 
#реклама ИП Петров Денис Алексеевич, ИНН 402915535006, erid: LdtCKAGyT

Светлое будущее Обычное настоящее

Думаю многие видели то как представляли будущее лет 50 назад - летающие машины, повсюду роботы и все такое

Мне стало интересно А что думали о будущем не в далеком прошлом, а лет 10 лет назад. Но не о будущем в целом, а о профессиях, какие из них должны быть востребованные в наше и ближайшее время

Загуглив это мне стало немного весело от некоторых пунктов. По мнению авторов статьей сейчас должны быть востребованы профессии:
⁃ Создатель искусственных частей тела
⁃ Наномедик
⁃ Виртуальный учитель
⁃ Хирург по увеличению памяти
⁃ Гид по космическому туризму, пилот и архитектор
⁃ Специалист по изменению климата
⁃ Полицейский по изменению погоды
⁃ Электрозаправщик
⁃ Инженер-композитчик

Конечно, многие профессии начинают выглядеть весьма обыденными, хотя тогда такими не казались, например Виртуальный учитель, но для большинства профессии из статей, кажется еще далековато

Нужно ли программисту знать английский

Я бы сказал, что необязательно и вот почему

Когда говорят, что программисту необходимо знать английский язык, то называют следующие причины:
1. В коде используются английские слова и если ты их знаешь, то писать его намного легче
2. Большинство материалов о программировании есть только на английском языке
3. Если хочешь работать зарубежом, а не в России, то английский необходим

Теперь я попытаюсь ответить на эти аргументы:
1. Слов, которые используются в программировании не так много, и для того чтобы запомнить, что «if» это «если», необязательно учить весь язык
2. Есть много материалов и на русском и для новичка его точно хватит, плюс сейчас есть переводчики, которые, конечно, справляются не идеально, но в большинстве случаев их возможностей достаточно
3. Мне пока и тут хорошо)

Этим постом я не пытаюсь сказать, что английский совсем не нужен, я бы и сам его с радостью знал, если бы хватило сил его выучить. Эти постом я пытался показать, что без знания английского можно стать полноценным разработчиком и найти работу, и если стоит выбор «Какой язык выучить», то лучше чтобы это был язык программирования (после русского конечно)


А какое у вас мнение на этот счет?

Отчет об интернет-технологиях с интересными цифарками

Типо интеллектуалы

Сегодня в 19:00 с ребятами с сообщества ityoutubers играем в СВОЮ ИГРУ (отвечаем на разные вопросики и получаем баллы)

Будут:

@cleannetcode

@svyatamesto

@gmoreva

@vyacheart

Ну и я)


Кто-то из ребят (а может и все) будут стримить игру, поэтому если хотите посмотреть (а вы хотите посмотреть), то переходите на их каналы для поиска ссылки на стрим

Тут у ребят «Нас уволили» вышел новый выпуск подкаста.

В этом выпуске рассуждали о том стоит ли все таки выпускать релизы в пятницу или ждать понедельника?

Что лучше галера или продуктовая компания и множество других тем

Переходите по ссылке и поддержите начинающий подкаст

https://youtu.be/VrUH33Z0tvQ

Теперь канал называется NOdata Миша - Not Only Data Миша.

Я не хочу ограничивать свой канал только data технологиями, да я и так это не делал, получается кроме названия ничего не поменялось)