Инжиниринг Данных
23.5K subscribers
1.98K photos
56 videos
192 files
3.2K links
Делюсь новостями из мира аналитики и карьерными советами.

15 лет в Аналитике и Инжиниринге Данных, 10 лет в MAANG

🛠️ dataengineer.ru | 🏄‍♂️ Surfalytics.com

№5017813306

Реклама:
https://almond-rule-130.notion.site/1199f595f76a8030ba1be1e607c9a8ce
Download Telegram
This media is not supported in your browser
VIEW IN TELEGRAM
❤‍🔥46👨‍💻5🍾2🗿2🫡1
Slalom - это консалтинг компания, я раньше про нее много писал, из всех компаний это моя самая любимая, даже RYD я многое с них копировал. Кстати они выросли из маленькой компании по бухгалтерии. А потом стали внедрять Snowflake, Tableau и другие современные штуки. Одно время я хотел пойти к ним в Ванкувере на Director Data Practice, но в итоге денег предложили мало ( я еще не знал, что Канада и много денег вещи не сопоставимые).

Все увольнения всегда обходили стороной консалтинги, но вот и до Slalom добралось, возможно причина таже - наняли много народу в ковид. Возможно сейчас компании стали экономить на подрядчиках.

Компания всегда славилась хорошей корпоративной культурой, и возможно там даже кто-то говорил, что они одна большая "семья". Но как обычно бывает:

After extensively exploring and debating every option possible with our senior leaders, executive committee, and board of directors on how to best position our company during this time of significant shifts within our industry and to plan for the future, we have made the painful decision to restructure COMPANY NAME. This will result in approximately XX% of our team members leaving the company.

Интересно конечно что за изменения в индустрии консалтинга он имеет ввиду. Но в целом, Бред подтвердил еще раз не принимайте близко к сердцу любой корпоративный bullshit. В первый день работы уже можно начинать поиск новой работы и изучать востребованные скилы на рынке, а то потом нечем будет платить за Flat White в Starbucks.
💯36🌚9
Как продвигается Surfalytics? Пока никак, но есть немножко фоток.

Идея простоя сделать глобальное сообщество, с контентом datalearn и фокусом на людей кто хочет:

1. Начать карьеру в дата и находится в Северной Америке (стек для Европы и Азии тоже подойдет, но не знаю как там с доходами) или планирует там оказаться (мир большой и только в Индии и Китае 3млрд людей, надо выбрать тех кто хочет жить в западной части мира и заразить их идеей красивой жизни)

2. Помочь подняться на следующий уровень с фокусом на доход, а не условный титул в вакансии.

3. Собрать маленькое сообщество high performers and achievers, чтобы создать благоприятную среду для своего развития. Доход тут имеет большое значение, или хотя бы планы его иметь, это про работу 7 дней в неделю, и долгие часы, не для всех, но reward должен быть соответствующий. И обязательно реинвестировать доход. Все должно быть направлено на личный (семейный) рост. Нужно знать чего хотеть и добиваться этого. Большинство предпочитает комфорт и их все устраивает, но есть люди кто тянется вверх и тянет других за собой, вот с такими и хочется общаться но в рамках схожей специализации вокруг данных, условное стартап сообщество где люди много работают но шансы заработать хорошие деньги очень маленькие и не предсказуемые.

4. Просто собрать большую аудиторию и попробовать монетизировать ее через вендоров.

5. Помогать компания внедрять лучшие решения (типа консалтинг и advisory)

6. Замутить реальный boot camp по серфингу в Тофино (на фотках). В этом году было только 3 человека на моем 3х дневном буткемпе и только один из них работает с данными.

7. Ну и самое главное заниматься тем чем нравится - учить других и помогать им быть успешными.
Вот разгребусь и займусь всем этим, советы легко раздавать другим, а вот самому начать сложней.
❤‍🔥12921🎄7🍾5🌚2🫡2
Understanding the Experience of Code Review.pdf
603.4 KB
Небольшое чтиво про code review - Understanding the Experience of Code Review:
Misalignments, Attention, and Units of Analysis

Code review is a common practice in software development and
numerous studies have described different aspects of the process;
its characteristics, the expectations on that process, issues around
reviewer allocation, and more. However, one aspect that has not
been studied to a large extent is the experience of the developers
in the code review process. This is unfortunate given the signifi cant amount of time that developers spend on this activity, where
problems that degrade developers’ experience on a daily basis can
create work environment issues.
In this paper, we present an extended analysis of an exploratory
mixed-method study where we focus on developers’ experience of
code review. We use semi-structured interviews to gather data from
two multi-national companies and conduct a follow-up survey. Our
results suggest that developers are frequently bothered by misalign ments in the code review tooling and process which is hindering
them in carrying out their code review tasks effectively. We present
an initial characterization of misalignments that may hamper the
developer experience. Based on our findings, we propose directions
for further exploration to improve the developer experience.
7🌚1👨‍💻1👾1
Недавно я подписался на рассылку от Олега про dbt tips. Все четко и по делу, если вы используете dbt, то вам пригодятся его советы.
❤‍🔥26🙈1
На edX появилось 2 новых курса от Databricks:

Databricks: Large Language Models: Application through Production
Databricks: Large Language Models: Foundation Models from the Ground Up

Теперь вы сможете удивлять своими познаниями на собеседованиях про LLM из 🧱

PS Databricks готов к новому раунду инвестиций и они планируют выйти в положительный кэш фло в 2025. Думаю многие сотрудники databricks неплохо обкешатся рано и поздно.

Вот у snowflake тоже акции были дорогие на IPO но потом упали (явно были переоценены), посмотрим как у databricks.
❤‍🔥17🐳2😭2
На работе я часто видел ссылки про data contracts и посты на эту тему от Chad Sanderson. С одной стороны темы data consumers/data producers не нова, а с другой стороны раз есть бизнес проблема, то почему бы не предложить решение. Товарищ запустил компанию и полчил 7лям для старта.

Уверен тема и проблема уже мусолилась в стартапах. Поэтому аудитория то очень важная составляющая для успешного запуска компании.
🍌6❤‍🔥4🤷3🤷‍♂1🌚1
Сегодня был замечательный день, сразу отражает всю индустрию.

Утром слушал о миграции с Azure Databricks на Snowflake. 👏

В обед слушал о миграции с AWS Snowflake на Databricks, тут я бы даже сказал это не миграция, а больше как добавление еще одного продукта, который делает тоже самое.😔

А под вечер я ковырял Redshift, где делаю прототип миграции AWS Athena на Redshift. 👨‍💻

При этом абсолютно везде одинаковые проблемы - дорого/медленно/качество данных/legacy&tech debt. Вообще такие решения принимаются сверху. Меня вообще нигде не спросили, хотят я книгу написал про Snowflake, и 3 года внедрял Databricks, и с Redshift мы вообще знакомы с 2014 года.
Please open Telegram to view this post
VIEW IN TELEGRAM
🦄29🤷19🗿32🎄2🍌1
Шо за биг дата?

Алексаднр Сайков — мой коллега по дата инженерному цеху, выступил с презентацией про биг дату — что это вообще такое, чем там занимаются, на кой нужон дата инженер и вот это вот всё.

Если тема интересует, а маркетинговые видосы с баззвордами надоели — смотрите запись его годного выступления на ютубе!
❤‍🔥356🍾3🌭1
Forwarded from Книжный куб (Alexander Polomodov)
Крутое интервью Андрея Стыскина, директор в Amazon, ex-CEO Яндекс.Поиск

В этом видео Дмитрий Грац взял интервью у Андрея Стыскина, в котором они поговорили про подход к менеджменту в Amazon и чем он отличался от Яндекса. Андрей поделился своими впечатлениями от процессов найма, онбординга, принятия решений на основе письменной культуры (ревью документов). Напоследок была тема про жизнь в Лос-Анджелесе, куда переехал Андрей в феврале 2023 года. И чем жизнь там отличается от Москвы. В общем, это интересное интервью, после которого я решил в скором времени прочитать книгу "Working backwards", в которой можно подробнее узнать про культуру Amazon (пока я читал токльо Invent and Wander, про которую рассказывал раньше)

#Interview #Management
❤‍🔥275🐳5🍌1🦄1
Привет!

Подскажите мне по технике для записывания видео, если есть опыт? Мне бы хотелось немного проапгрейдить вариант, когда я записываю на телефон. По идее нужно:

- камера и объектив
- микрофон без проводной
- свет
- может есть еще чего из необходимого?

Какие-то громоздкие штуки не хочу рассматривать, в идеале, чтобы было все мобильно.
🙈2🍾1
Давненько деньги никуда не инвестировались, и вот снова видим, как одни компании готовятся выйти на биржу (IPO), в другие компании в data инвестируются млны. А на картинке пост, на котором мы видим как две data компании получили денег почти одновременно.
6🍾2
В потоке информации про generative AI и LLM затерялась информация про Amazon Alexa. После выхода ChatGPT все колонки превратились в тыкву, даже Алиса была намного умней и веселей с самого начала. Мне как бывшему инженеру Alexa было обидно и я все ждал ну когда же. Вроде наконец они решили добавить LLM и сделать более правильное решение. Прошло уже много времени и видать это не так просто добавить свой LLM, вот и статья вышла https://www.amazon.science/blog/alexa-unveils-new-speech-recognition-text-to-speech-technologies
6
А это мощно - Cisco купил Splunk. Скорей всего будет как с Табло, когда душа продукта погибнет.

Splunk был такой же уникальный продукт с большим сообществом, крутыми конференциями, идеями. Да и сам продукт топ. Я даже в 2014 году прошел множество тренингов по нему и сдал экзамены, а потом, когда решил уволиться руководство компании cleverdata стало орать на меня и трясти с меня деньги за обучение обратно😅, хорошо, что обошлось без рукоприкладства😳

А в 2015 я даже хотел в Splunk пойти на работу в Торонто, но не прошёл собеседование👩‍💻

Наверно такая судьба ждет все крутые продукты😞
Please open Telegram to view this post
VIEW IN TELEGRAM
😭7🙈6🌚1
Последнее время все чащи возникают дискуссии у меня про жизнь в Канаде и США, всегда же интересно все сравнивать. Вот например статистика по Канаде из официального источника.

Медиана зп (кстати очень близко к среднему) 40к, то есть на семью из 2х человек это 80к. А 80к в год после налогов, это 4к-4.5к в месяц.

Если взять средний рент в большом городе, это будет 2.5к. Если взять тоже самое в ипотеку то это будет 4к. То есть ипотека уже не доступна. Но еще надо первоначальный взнос тысяч 100, а как накопить, если жить от ЗП до ЗП. А ведь есть еще расходы на еду, одежду, связь и развлечения. А если работает только один человек?

И самое интересно, компании, которые нанимают в Канаде абсолютно все будут low ball на ваш оффер. Однозначно, кто недавно приехал будет не просто и все в один голос говорят, что попали как будто в прошлое после удобных сервисов. Я сам лично недавно получил справку из полиции онлайн в Госуслугах за 3 дня, мне нужно было для Security Clearance на проект. Тут такое даже и не слилось, и так везде.

И для многих кажется, что можно немного потерпеть и все наладится в плане дохода, но потом оказывается, что потолок-то по зарплате очень реальный и это сильно демотивирует. Но как говорится, кто ищет, то найдет пути к преодолению всех препятствий и будет зарабатывать столько, сколько хочет😎 Очень сильно зависит от целей, мотивации и дисциплины.

Недавно я обнаружил, что я сместил фокус на мотивирующие видео, подписался на различных успешных людей и заряжаюсь у них! Думаю пришло время все записывать в блокнот и благодарить вселенную👨‍💻

А кто вас мотивирует? Как вы себя дисциплинируете?
Please open Telegram to view this post
VIEW IN TELEGRAM
❤‍🔥49👾6🐳4💯3🍌1🫡1
Кстати, у меня есть слайд из моей недавней презентации про рынок Северной Америке. На протяжении последних 8 лет я только и делал, что вечно искал работу, собеседовался и пытался нащупать, где и сколько платят. Все кто мне знает лично, знают, что мой любимый вопрос, а сколько ты получаешь. Именно, чтобы понять как вообще все работает и какие перспективы есть, а может быть их и нет, как на примере Канадского рынка.

Самое интересное, что ЗП в 200-300 в Канаде это реально, если например у вас удаленная работа + фриланс. Но конкуренция дикая, куча народа со всего мира приезжает в Канаду и готовы работать еду за 50т в год в нашей индустрии.

Поэтому у меня уже есть свой железобетонный рецепт для иммигрантов как быть, что делать и тп, вот его и хочу реализовать в Surfalytics. Так же планирую писать еженедельные отчеты про прогрессу.

🔠🔠🔠🔠🅰️🔠🔠🔠🔠🔠🔠

Пока больше все на стадии идей. Но совсем недавно вышел на сообщество аналитиков из LATAM и уже пропиарил им идею, в целом зашло хорошо, но у меня пока нет контента. Так же стал искать на Dribbble крутых content makers, чтобы сделать анимацию, телеграм стикерпак. Заказал еще футболок брендовых. Изучаю про свет для видео или думаю просто нанять профессионального оператора и заснять весь модуль один. Пока я совершаю главную ошибку - много думаю, мало делаю! Вообще же все просто, все что мы захотим и попросим у вселенной - все будет! Надо просто напоминать об этом!😆
Please open Telegram to view this post
VIEW IN TELEGRAM
41🦄11🌚5💯5❤‍🔥2🍌2🙈2