Данные по-большому
139 subscribers
327 photos
59 videos
204 links
И все остальное по-маленькому.

Успешный успех в сфере DE, DS, AI, ML и прочего бигтеха, а также лайфстайл, мемы и новости айтишки и не только
Download Telegram
Рукожопый дизайн путем многих миллионов лет перебора эволюционным путем vs. Разумный дизайн как он должен быть

#system_design
😁1
This media is not supported in your browser
VIEW IN TELEGRAM
Неоценимое преимущество надёжного мессенджера MAX - это селфи не только в лифте и на фоне Эйфелевой башни, а вообще везде.

Инста-бляди-богинюшки, налетаем и срочно устанавливаем!

#memes
This media is not supported in your browser
VIEW IN TELEGRAM
А можно ли так же, чтобы сразу техлидом DE/DS/ML стать?

#memes
😈4
Раз среди дата-инжиров в некоторых каналах становится модным раздавать инвестиционные советы, то вот мои советы:
- Копим побольше, ибо после повышения НДС станет жить сильно немного дороже.
- Влошиваемся во все связанное с космической энергией и ЦОДами.
- Дополнительно можно влошиться в производителей запчастей для роботов. Но для этого надо изучить и компоненты, и поставщиков для конкретных моделей.
- В крипту можно, но стрёмно.

Такие вот советы от гуру инвестиций.

#инвестиции
Джунов будут доить на бабло по-полной.

Минфин предложил повысить льготный тариф страховых взносов для IT-компаний с 7,6% до 15%, следует из проекта бюджетной политики на 2026-2028 гг.

При этом для высокооплачиваемых специалистов-сеньоров (с доходом от 2,7 млн рублей в год) ставка 7,6% сохранится.
Повышение приведет к росту налоговой нагрузки примерно на 204 тыс. рублей на одного специалиста с зарплатой ниже установленного порога. В Минцифры и среди части экспертов считают меру оправданной, отмечая, что даже повышенный тариф для IT остаётся ниже стандартного (30%).

Ой чую крутить теперь будут не три года опыта, а все десять.

#новости
This media is not supported in your browser
VIEW IN TELEGRAM
ИИ в российском госуправлении ВСЁ

«Заменить депутатов и чиновников на роботов невозможно, потому что у искусственного интеллекта нет совести», заявил председатель Госдумы натурал Вячеслав Викторович Володин

#новости
Выручка продавцов лопат в период массового мора "ручных" кодеров
🎓 Kaggle и Google проведут бесплатный 5-дневный интенсив по ИИ-агентам — на нём будут ежедневные онлайн-лекции, домашние задания и даже выпускной проект для портфолио.

Расписание:

День 1 — введение в ИИ-агенты, базовые концепции и архитектуры
День 2 — Tool Use, MCP, API
День 3 — контекст-инженеринг, разные типы памяти и увеличение контекста
День 4 — качество агентов, метрики, критерии оценок и оптимизации
День 5 — создание первой мультиагентной системы по протоколу Agent2Agent

Бесплатно, под руководством топовых инженеров Google, без отбора, для всех, с 10 по 14 ноября.

Регистрация — тут.
В Стэнфорде запускают новый образовательный курс, который объединяет искусственный интеллект и науку о долголетии. Программа называется AI & Longevity Lab Certificate Series и стартует уже в следующем месяце. Её цель - дать студентам знания о биологии старения, продлить здоровую жизнь с помощью новых технологий и научить использовать ИИ для анализа данных, поиска лекарств и создания прогнозов.

Вместо обычных лекций курс строится на практике: участники будут не только изучать материалы, но и создавать собственные AI-инструменты - от образовательных сервисов до прототипов систем, предлагающих новые методы вмешательства. Программа рассчитана на широкую аудиторию, в том числе на новичков без опыта в ИИ или биологии старения.

Курс состоит из трёх независимых модулей по 4 недели: AI Longevity Explorer, AI Longevity Researcher и AI Longevity Futurist. Каждый стоит около 500 долларов, а полный цикл длится примерно полгода. Итогом каждого модуля станет проект: например, ИИ-ассистент для исследований или "дорожная карта" по продлению здоровья.

Организаторы, профессора Майкл Снайдер и Ронджон Наг, считают, что такой подход поможет ускорить переход от теории к практике. Снайдер подчёркивает, что долголетие стало "наукой о данных" и сегодня огромные объёмы информации можно собирать с помощью носимых устройств и анализировать с помощью ИИ. Наг отмечает, что ИИ идеально подходит для работы со сложной биологией и уже показал успехи в разработке лекарств.

В первый год ожидается около 100 студентов и до 100 проектов. Главная задача - не только обучить, но и внести вклад в развитие отрасли. Авторы программы делают упор на доступность: вместо десятков тысяч долларов за степень курс обойдётся примерно в 1500, со скидками для студентов.

Долгосрочная цель - создать сообщество, где тысячи участников будут обмениваться знаниями, проектами и данными. Это может ускорить открытия и помочь собрать крупномасштабные данные о влиянии образа жизни, чего пока не хватает в науке о долголетии.

https://snyderlabs.stanford.edu/gene-229/
Решил с наскока пройти пробный экзамен Databricks Certified Data Engineer Associate.
Решил 40% вопросов. Нужно минимум 70% для зачёта, а ведь есть ещё уровень Professional...
Буду как обычно с утра читать книжки по нему ибо синтаксис там немного другой, а опций очень много.
Ну и в канал как всегда обзоры на книги выложу.
👍1
БИГДАТА-МУТАНТ ВТОРГНЕТСЯ В НАШУ ЖИЗНЬ ОЧЕНЬ СКОРО

Кажется, Google готовится объединить SQL, Python и Spark в рамках Colab Enterprise

По слухам, поисковый гигант намерен создать единую среду для специалистов по машинному обучению, объединив SQL, Python и Apache Spark в одном месте.

Ясмин Ахмад, управляющий директор Google Cloud по обработке данных, отметил, что главным препятствием для эффективности в ML является необходимость переключаться между средами: получать данные с помощью SQL в базах данных и хранилищах, затем экспортировать их, загружать в блокнот и настраивать отдельный кластер Spark.

Как вы понимаете, это крайне неудобно. Поэтому Google представляет ряд улучшений для своих блокнотов Colab Enterprise в BigQuery и на платформе Vertex AI.

Кроме того, компания анонсировала следующие преимущества для разработчиков в блокнотах Colab Enterprise:
Предварительный просмотр собственных ячеек SQL.
Интеграцию собственного Data Science Agent, призванного помогать в анализе и разработке моделей.

#новости
Please open Telegram to view this post
VIEW IN TELEGRAM
Чем больше я начинаю погружаться в западный вендорский софт, тем больше понимаю, что дивергенция видов ПО (опенсорс и проприетарка), начавшаяся в 2022 году, будет только усиливаться.
И лет через 5-10 у нас будет такое же расхождение по начинке как у советских и американских ЭВМ, а может даже больше. По тому же пути идёт и Китай, создавая свои виды железа, ОС и дата/BI инструментов.

С каждым годом придется делать более осознанный выбор, вкатываться в "наш родной" опенсорс или пытаться перекатиться в их западные бездуховные решения. Потому что чем раньше вкатишься, тем легче будет преодолеть расхождения между софтом, языками и организационными подходами.
ОТЛИЧИЯ В РАБОТЕ В БАНКЕ/КОНСАЛТИНГЕ И В IT

В банке, даже если ты студент-стажер аналитик из ВШЭ/Плешки/Финашки за 30к в месяц, ты носишь костюм и каждое утро идёшь в офис в Москва-Сити под Huey Lewis и группу News.

В айти ты за 200-300к одеваешься как чухан и не ходишь в офис (или ходишь иногда), но утро начинается с "Ёклмн, опять очередной микросервис сломался, бизнес бабки теряет, а меня стопудово вздрючат на очередном дейлике и уволят"

#лайфстайл
Топ сертификатов для дата-инженера, которые просто имба:

- AWS
- Databricks
- GCP
- DBT
- Astronomer Airflow
- CKAD (без Кубера никуда)
- Confluent Kafka

Всё яндекс.практикумы лучше засунуть в одно место - сплошная трата денег с посадкой на Yandex.Cloud, не котирующийся в мире. Исключение - сертификация по Clickhouse, но это тоже опционально и она только в 2025 году появилась

С собранным набором хотя бы 4 из 7 сертификатов на изи залететь в FAANG, заботав алгосы. Но так как рабочие визы всё, то надо ещё поднапрячься на визу талантов.

И лишь после всех этих мытарств #эмиграч оправдан.
This media is not supported in your browser
VIEW IN TELEGRAM
Ездить в офис - это счастье и вообще правильно! Сразу становишься более счастливым и продуктивным!
Вот, например, сегодня в Москве целая ветка метро встала, и тысячи офисных работников стали ближе друг к другу. У дистанционных работников такого контакта нет, поэтому работа плохо идёт.

#режим_работы #сарказм
🤩1
Работа мечты.
Офис в Москва-сити, престижно!
👍2
#оффтоп #прогнозы

Прогнозы - дело неблагодарное, и их обычно делают в конце года, но я сделаю сегодня.

Профессиональные прогнозы:
- Через год агенты будут сами настраивать DE-пайплайны. Агенты будут везде и повсюду.
- Вендорские решения окончательно достроят уровень абстракции из фильма "Идиократия", сделав работу DE простой. Деды как всегда будут ныть что вот раньше машинными кодами писали, а сейчас...
- Зарплаты DE снизятся на фоне превращения пайплайнов в конструктор в песочнице.

Политические прогнозы:
- Админ алармист. На горизонте 5 лет, а скорее раньше большая война в Европе неизбежна. Даже если вдруг Путин умрет, то все остальные руководители России в Европе помечены как "военные преступники", и им почти нечего терять. В самой Европе цены на топливо скакнули до исторических максимумов и дефицит квалифицированной рабочей силы, поэтому если в России все станет плохо, то им выгодно чтобы квалифицированные кадры ехали к ним, а нефть поступала почти даром после большой войны. США выгодно продать новый план Маршала и Европе и России после большой войны и списать госдолг.
Большая война случается когда в ней заинтересованы все стороны, и поэтому я убежден что она неизбежна.
- Китаю выгодна своя большая война с Тайванем из-за отставания в гонке ИИ. Начнется она одновременно с войной в Европе.
- Хорошо будет только тем, кто панует или в США или в странах Океании и вовремя эвакуировался.

Такой прогноз.