⁉️ Что нового в Spark 4.0?

Apache Spark продолжает развиваться и в версии 4.0 готовит для нас несколько важнейших обновлений. Хотите узнать, как эти изменения улучшат обработку данных и повлияют на вашу работу? Присоединяйтесь к открытом вебинару 9 сентября в 20:00!

— Обзор Spark 4.0: главные нововведения и улучшения.
— Производительность и оптимизации: что ускорилось и как этим пользоваться?
— Новые API и функции: возможности для разработчиков и аналитиков.
— Интеграция с Kubernetes, облачными платформами и Data Science инструментами.
— Практические кейсы: как применять нововведения в реальных задачах.

👨‍💻🛠👨🏻‍💻 Если вы дата-инженер, аналитик, разработчик или DevOps-специалист, этот вебинар точно для вас.

➡️Присоединяйтесь и получите скидку на курс «Spark Developer»: https://vk.cc/cPk7lh

Реклама. ООО «Отус онлайн-образование», ОГРН 1177746618576

⁉️ Spark-запросы тормозят? Пора разобраться, как сделать их в разы быстрее

На открытом вебинаре мы разберём проверенные техники оптимизации, которые используют ведущие дата-инженеры. Покажем, как находить узкие места, ускорять join-операции и выжимать максимум из ресурсов кластера.

Вы получите конкретные приёмы — от оптимального партиционирования данных и управления кэшированием до выбора лучших форматов хранения. Всё на реальных примерах.

➡️ Присоединяйтесь 17 сентября в 20:00 МСК. Урок проходит в преддверии старта курса «Spark Developer», все участники получат скидку на обучение. Регистрация открыта: https://vk.cc/cPwOvy

Реклама. ООО «Отус онлайн-образование», ОГРН 1177746618576

Не пропустите! 23 сентября в 20:00 пройдет бесплатный урок “SQL против бардака в данных: поиск по шаблону и регулярные выражений” от онлайн-курса “SQL для разработчиков и аналитиков”. Запись: https://otus.ru/lessons/sql/?utm_source=telegram&utm_medium=cpm&utm_campaign=sql_dev&utm_term=sqlquestions&utm_content=mql_lesson-23-09-2025_usp-sql_sql_text_no-headline_aida_long_aibanner_no-banner-hl_no_standart&erid=777#event-6155

На этом занятии вы научитесь находить, фильтровать и проверять текстовые данные в базе с помощью SQL. Мы разберём, как использовать поиск по шаблону и регулярные выражения для борьбы с бардаком в данных — просто, понятно и на практике.

Что будет рассмотрено на открытом уроке:

- Основы поиска по шаблонам и LIKE.
- Регулярные выражения в PostgreSQL.
- Практическое применение: поиск ошибок в данных, проверка форматов (телефоны, e-mail), выделение нужных фрагментов текста.

Какие результаты на выходе:

- Вы будете уверенно использовать простые регулярные выражения в SQL-запросах.
- Сможете быстро находить ошибки, проверять и извлекать нужные данные из больших текстовых полей.
- Поймёте, как использовать регулярные выражения для повседневных задач, экономя своё рабочее время.

Записывайтесь на урок и получите спец предложение: https://vk.cc/cPEePg

Реклама. ООО «Отус онлайн-образование», ОГРН 1177746618576

Что делает следующий запрос?

SELECT product_id, SUM(quantity) OVER (PARTITION BY product_id) AS t_s FROM order_detail;

Схема БД и код для генерации данных находятся в шапке канала.

Запрос не выдает число или конкретную категорию. Просто опишите результат своими словами в комментариях. А для тех, кто предпочитает тесты, опубликуем тест с вариантами ответа в следующем посте.

Если вам понравился вопрос - зашарьте его друзьям 👉 SQLQuestions

PostgreSQL — ваш ключ к экспертности в управлении базами данных!

Хотите научиться развертывать отказоустойчивые кластеры PostgreSQL в облаках, оптимизировать запросы и работать в различных средах? На курсе «PostgreSQL для администраторов баз данных и разработчиков» от OTUS вы получите знания от эксперта с 20-летним опытом, освоите облачные решения и автоматизацию инфраструктуры.

Создайте отказоустойчивый кластер, научитесь работать с Patroni, Kubernetes, Terraform и сократите затраты на администрирование!

До старта остались считанные дни! Регистрируйтесь сейчас и откройте новые возможности работы с PostgreSQL: https://vk.cc/cPMXuA

Реклама. ООО «Отус онлайн-образование», ОГРН 1177746618576

Какой запрос вернет самый дорогой продукт?

1. SELECT MAX(price) FROM product;

2. SELECT TOP 1 price FROM product ORDER BY price ASC;

3. SELECT price FROM product WHERE price = MAX(price);

4. SELECT product_name FROM product WHERE price > ALL;

Схема БД и код для генерации данных находятся в шапке канала.

Для тех, кто предпочитает тесты, опубликуем тест с вариантами ответа в следующем посте.

Если вам понравился вопрос - зашарьте его друзьям 👉 SQLQuestions

5 ФАТАЛЬНЫХ ОШИБОК В ГРАФИКАХ, КОТОРЫЕ ПОДРЫВАЮТ ДОВЕРИЕ К ВАШЕМУ АНАЛИЗУ

Забирайте гайд с разбором основных ошибок в канале Сделай это красиво. Автор — Алексей Смагин, дата-журналист и аналитик Яндекса.

ГАЙД ПОДОЙДЁТ:

— аналитикам данных и продуктовым аналитикам
— научным сотрудникам и исследователям
— руководителям, которые работают с отчётностью
— всем, кто делает презентации с графиками

Умение анализировать — это круто. Но заказчики не видят вашу работу, они видят итоговые выводы. А от их оформления зависит, оценят ли результат.

Научиться делать графики — это быстро и легко. Достаточно исключить базовые ошибки — и ваша инфографика сразу будет выглядеть профессиональнее.

Подписывайтесь и забирайте гайд в закрепе: https://t.me/+WLW3vY2DmdUyM2Zi