SberProfi DWH/BigData
1.06K subscribers
320 photos
9 videos
361 links
Telegram-канал SberProfi DWH/BigData 💚
Наш чат: https://t.me/+6Vc_rNMJl8MzYzcy
Наша миссия: развивать компетенции по технологиям работы с данными, например, такими, как экосистема Hadoop, Teradata, Oracle DB, GreenPlum и др.
Download Telegram
Дорогие коллеги!
 
В этом году мы решили запустить рубрику #Обзорпрофильныхконференций, спикерами/ зрителями которых являются участники нашего комьюнити:
 
16 февраля 2022 года состоялась конференция «Качество данных – 2022. Стратегия, инструменты, практики, перспективы», одно из немногих мероприятий в нашей стране, целиком и полностью посвященное качеству данных, которое проходит ежегодно и в 2022 году собрало более 400 специалистов по работе с данными из разных областей: финансов и телекоммуникаций, транспорта и промышленности, ретейла и даже онлайн-дейтинга.
 
Наши коллеги из Сбера – Погосьян Александр и Калинов Алексей рассказали о подводных камнях при выстраивании процесса управления качеством данных: с чего начать, на что опираться, как поддерживать и измерять. Особое внимание уделили реализации собственного решения – инструменту Контроля качества данных.
 
Представители компании «Газпром Нефть» поделились своими успехами по выстраиванию системы мониторинга проверок качества данных, рассказав про процессы работы с инцидентами и проблемами качества данных.
 
Доклад «ВТБ» был нацелен на тиражирование практик управления качеством данных в дочерние компании: проведение первичной оценки зрелости и повышение культуры data-driven внутри.
 
Применение, распространение и стандартизация форматов отчетности поднадзорных организации – основная тема презентации регулятора «Банк России».
 
Об особенностях системы управления качества данных в розничном бизнесе, data-drivers и своем опыте работы с данными на международном уровне раскрыли представители «x5 Retail Group» и «Леруа Мерлен».
 
На конференции выступило большинство вендоров, представленных в России. Большая часть докладов была посвящена выбору методологии и инструменту работы с качеством данных.
 
Среди всех докладов прослеживаются похожие проблемы:
• Вовлечение бизнес-подразделений в процесс улучшения данных
• Выстраивание эффективного взаимодействия между подразделениями
• Экономическая целесообразность при выборе методологии и инструментария разработки проверок качества данных
• Общие подходы необходимо приземлять на то, что есть
• Ограничение ресурсов команд разработки проверок качества данных
 
Уровень зрелости процесса контроля качества данных в Сбере, запущенного ещё в 2016 году, находится в авангарде своей сферы. Процесс определен, управляем и постоянно улучшается. Модель со-ответственности за качество данных внедрена, а новые проверки качества данных тиражируются еженедельно.
В 2022 году запустилась модель тарификации проверок и инструментов качества данных, и смело можно заявить о том, что Сбер первый, где внедряется такая практика.
 
 
Материал подготовлен Арсеньевым Дмитрием (SberData, УКД).
 
 
 
С уважением,
команда DWH/BigData 💚
Дорогие коллеги!

🚀 11 марта 2022 года BI-команда DWH/BigData в рамках комьюнити организует круглый стол для обсуждения насущных проблем, с которыми коллеги столкнулись в последнее время.
Спикеры планируют поговорить о задачах, которые стоят перед командами, занимающимися аналитикой, и постараются определить ключевой функционал для успешного выполнения поставленных целей.

На встречу приглашены PO крупнейших инсталляций BI-решений, модератором выступит лидер подстрима BI Иван Коньков.

Начало в 13:30.

--- Ссылка для подключения ---


Как и всегда, вопросы будут приниматься в чате СберМитапа.

Напоминаем, что актуальную информацию о ближайших и прошедших мероприятиях нашего сообщества можно найти здесь 😊.


До скорой встречи!


С уважением,
команда DWH/BigData 💚
SberProfi DWH/BigData
Дорогие коллеги! 🚀 11 марта 2022 года BI-команда DWH/BigData в рамках комьюнити организует круглый стол для обсуждения насущных проблем, с которыми коллеги столкнулись в последнее время. Спикеры планируют поговорить о задачах, которые стоят перед командами…
Друзья!
Остается 5 минут до встречи за круглым столом, которую организует BI-команда нашего комьюнити.
Обсудим насущные проблемы 🚨.

Скорее подключайтесь
👉 Ссылка 👈


С уважением,
команда DWH/BigData 💚
Друзья, добрый день! ☀️🌷

Приглашаем вас посетить 23-й митап сообщества DWH/BigData, который запланирован на 21 марта 2022 года. Начало в 14:00.

Встреча целиком будет посвящена одной теме – Сервисам федеративного доступа.

Докладчики расскажут про:
• Подключение ПКАП к Сервисам федеративного доступа
• Линковку внешних данных через Waggle Dance для ПКАП’а
• Надежность сервисов
• Принципы работы прокси-подписок

Спикеры: Ильин Андрей, Гавриленко Александр, Фокин Алексей, Аносов Максим (все – SberData)

Ссылка для подключения.



До встречи!


С уважением,
команда DWH/BigData 💚
Друзья!
 
Из-за ухода ряда вендоров с российского рынка, Сбербанк существенно ускоряет разработку собственной сборки СУБД на основе GreenPlum и open source решений. Мы формируем штурмовой отряд, который в кратчайшие сроки сделает невозможное и позволит нашим потребителям технологий работы с данными работать на ПО отечественной сборки.
 
❗️Срочно нужны:

🔹Системный аналитик: https://hh.ru/vacancy/53688560?hhtmFrom=employer_vacancies
🔹Разработчик ядра СУБД: https://hh.ru/vacancy/53316330?hhtmFrom=employer_vacancies
🔹Эксперт Greenplum: https://hh.ru/vacancy/53809775?hhtmFrom=vacancy_restore
🔹Devops: https://hh.ru/vacancy/53809872?hhtmFrom=vacancy_restore
 
 
Мы будем вам крайне признательны за рекомендации профильных специалистов как на полную ставку, так и на частичную занятость!
 
Рекомендации направляйте в адрес:

🔸Селиванова Юрия Алексеевича Selivanov.Y.Al@sberbank.ru
🔸Доброва Дмитрия Александровича Dobrov.D.Al@sberbank.ru
🔸Солдатова Андрея Вадимовича Soldatov.A.Vad@sberbank.ru
 
Напоминаем, что в Сбербанке действует реферальная программа: сотрудники рекомендуют знакомых профессионалов в команду и получают вознаграждение до 100 000 рублей, когда новый сотрудник пройдёт испытательный срок 💰.

Посмотреть правила программы можно по внешней ссылке.


Заранее спасибо!


С уважением,
команда DWH/BigData 💚
Коллеги, привет! ☀️

11 марта 2022 года за круглым столом, который организовала BI-команда сообщества DWH/BigData, спикеры договорились о проведении митапа-демо по продукту SDP Analytics, созданного на базе Open Source BI SuperSet.
Не откладывая в долгий ящик, коллеги решили выполнить обещание и провести встречу уже в следующий четверг, 24 марта. Начало в 14:00.

Приглашаем присоединиться к мероприятию!

📣 Докладчики расскажут о способностях продукта и поделятся планами по его развитию.

Подключайтесь, пожалуйста, по ссылке.

Вопросы, как обычно, будут приниматься в чате СберМитапа.

Кроме того, есть возможность задать вопрос заранее. Просьба обращаться к Ивану Конькову Konkov.i.gr@sberbank.ru.



С уважением,
команда DWH/BigData 💚
Дорогие коллеги!🌥

Приглашаем вас посетить регулярную экспертную площадку, посвященную миграции на Hadoop 3 и OpenJDK.
Для формирования повестки просим оставлять свои вопросы здесь.

Мероприятие состоится 31 марта 2022 г. Начало в 16:00.

Повестка:

🔸 Орлов С.: Обзор релиза SDP Hadoop 3.5.2: Release notes, тестирование, план тиража
🔸 Тутринов В.: Как исправить проблему 1900 года: от проблемы к решению
🔸 Мартынов А.: Обзор инцидентов и решений с ПРОМ: zookeeper, delegation token, gss



👉 Ссылка для подключения 👈


С уважением,
команда DWH/BigData 💚
SberProfi DWH/BigData
Дорогие коллеги!🌥 Приглашаем вас посетить регулярную экспертную площадку, посвященную миграции на Hadoop 3 и OpenJDK. Для формирования повестки просим оставлять свои вопросы здесь. Мероприятие состоится 31 марта 2022 г. Начало в 16:00. Повестка: 🔸 Орлов…
Друзья, привет!
Через 5 минут встречаемся на экспертной площадке по миграции на Hadoop 3 и OpenJDK, которую традиционно лидирует эксперт нашего комьюнити по Hadoop и OpenSource  @samorlov 🙂

👉 Ссылка для подключения 👈

С уважением,
команда DWH/BigData 💚
Дорогие друзья! ☀️🌸

Спешим пригласить вас на ОЧНЫЙ митап, который состоится 13 апреля 2022 года.
Начало в 15:00.

Будем рады видеть вас в Грейт Холле по адресу: г. Москва, Новоданиловская набережная, 10к1, 2 этаж.

За время двухлетнего фриза на офлайн-встречи мы успели изрядно соскучиться по живому общению с вами!
Для тех, кто очень хотел бы, но никак не может, мы оставляем ссылку на онлайн-трансляцию (ссылка внешняя).

Повестка:
1. Добров Д./ Солдатов А.: «Миграция Teradata to Greenplum»
2. Лукин Т.: «Обзор технологии eBPF»
3. Головин А.: «Визуализация data lineage в Ab Initio MDH»



Вопросы можно будет задать в чате во время выступления докладчиков.

До встречи на митапе!


С уважением,
DWH/BigData 💚
SberProfi DWH/BigData
Дорогие друзья! ☀️🌸 Спешим пригласить вас на ОЧНЫЙ митап, который состоится 13 апреля 2022 года. Начало в 15:00. Будем рады видеть вас в Грейт Холле по адресу: г. Москва, Новоданиловская набережная, 10к1, 2 этаж. За время двухлетнего фриза на офлайн-встречи…
Дорогие коллеги!
Уже через 15 минут ждем вас в Грейт Холле (ДФ-2) на очный митап нашего комьюнити! 🥳

Для тех, кто очень хотел бы, но никак не может, мы оставляем ссылку на онлайн-трансляцию.

Повестка:
1. Добров Д./ Солдатов А.: «Миграция Teradata to Greenplum»
2. Лукин Т.: «Обзор технологии eBPF»
3. Головин А.: «Визуализация data lineage в Ab Initio MDH»


С уважением,
DWH/BigData 💚
Дорогие друзья!

Приглашаем вас на экспертную площадку DWH/BigData, которая запланирована на 22 апреля 2022 года.

Будем обсуждать опыт команд пакетной загрузки по загрузке данных в hdfs с формированием слоев snp, hist, diff.

Начало в 14:00

Приглашаем вас присоединиться к встрече!


👉 Ссылка для подключения 👈


Как обычно, вопросы по теме вы сможете оставить в чате СберМитапа, эксперты ответят на них в ходе встречи.

Напоминаем, что актуальную информацию о ближайших и прошедших мероприятиях Сообщества можно найти здесь 😊.


До встречи!

С уважением,
команда DWH/BigData 💚
Дорогие коллеги! 🐝

Приглашаем вас на регулярную экспертную площадку, посвященную миграции на Hadoop 3 и OpenJDK.
Для формирования повестки просим оставлять свои вопросы здесь.

Мероприятие состоится 29 апреля 2022 г. Начало в 14:00.

Повестка:

• Тутринов В.: “Финальная коммуникация по проблеме 1900 года”
• Орлов С.: “Что делать когда x86 КТС закончится? Наши попытки завестись на ARM”
• Ермекбаев З.: “SDP Compute: как будет работать и зачем мы это делаем?”


Платформа проведения встречи – СберМитап.
Ссылка для подключения.

Во время выступления спикеров вопросы можно будет задавать в чате.


Спасибо и до встречи!


С уважением,
команда DWH/BigData 💚
SberProfi DWH/BigData
Дорогие друзья! Приглашаем вас на экспертную площадку DWH/BigData, которая запланирована на 22 апреля 2022 года. Будем обсуждать опыт команд пакетной загрузки по загрузке данных в hdfs с формированием слоев snp, hist, diff. Начало в 14:00 Приглашаем вас…
Коллеги!
10 минут до начала нашей экспертной площадки по теме загрузки данных в SNP/HIST-слои.
Приглашаем присоединиться всех заинтересованных 👀.

👉 Ссылка для подключения 👈

С уважением,
команда DWH/BigData 💚