Какие существуют преимущества и риски работы со свободным программным обеспечением для организаций? Есть ли особенности применения открытого ПО как альтернативы проприетарным западным решениям? Какой вклад Arenadata вносит в разработку Open Source? Об этом и не только технический директор Arenadata Александр Ермаков рассказал в рамках доклада «Главные „рецепты“ в работе с Open Source», с которым выступил на ежегодном форуме «Управление данными».

Сегодня стартует второй день конференции по инженерии данных SmartData 2022 — Community Day.

В этот день можно получить свободный доступ ко всем онлайн-докладам сразу после регистрации на мероприятие!

И именно сегодня на SmartData выступит наш технический директор — Александр Ермаков:

▪️В 10:45 Александр прочтёт доклад на тему «Что такое Data Mesh и примеры реализации». Ссылка на трансляцию доклада здесь.

▪️В 12:40 ведущие SmartData 2022 возьмут у Александра интервью. Зададут каверзные и простые, серьезные и ироничные, прямолинейные и даже риторические вопросы. Присоединяйтесь и задавайте свои вопросы в чате!

Ссылка на трансляцию интервью здесь.

Регистрация на мероприятие по ссылке (нужно выбрать Community Day).

На телеканале «ПроБизнес» вышло интервью с нашим директором по консалтингу Антоном Балагаевым. Оно открыло большой спецпроект «Как найти своё ИТ» на актуальную сегодня тему — импортозамещение.

Ведущая спецпроекта — Наталия Софронова, директор по решениям импортозамещения в КРОК — узнала у Антона:
▪️на что обратить внимание при миграции на российские СУБД;
▪️как аналитические системы стали бизнес-критическими;
▪️почему инвестиции в узкоспециализированные решения не в приоритете в текущих условиях рынка?

Посмотреть первый выпуск цикла «Как найти своё ИТ» с Антоном Балагаевым можно здесь.

Arenadata и ИТ-компания Navicon провели совместный онлайн-семинар «КХД и BI в финансовой сфере — что делать после ухода глобальных игроков».

Своим опытом на мероприятии поделились эксперты компаний-заказчиков Arenadata:
▪️Александр Хохлов, начальник управления администрирования баз данных Департамента развития инфраструктуры Банка ВТБ;
▪️Сергей Крутяков, директор по сопровождению централизованных данных банка «Росбанк»;
▪️Максим Солопин, руководитель направления развития и сопровождения хранилища данных банка «Росбанк».

Александр Тарасов, архитектор департамента поддержки продаж Arenadata рассказал про основные сценарии и нюансы миграции на Arenadata, а также поделился примерами осуществлённых проектов.

Алексей Струченко, технический консультант Arenadata, и другие участники круглого стола обсудили, как получить производительность уровня Oracle Exadata c помощью Arenadata Greenplum? Существует ли реальная альтернатива Tableau, Qlik, Power BI? Импортозамещение и применение российских облаков — перспектива или препятствие для эффективной работы финансовых организаций?

Узнать ответы на эти и другие вопросы можно из видео.

Хотим рассказать вам о наиболее значимых для нас вакансиях, которые сейчас открыты в Arenadata. Напомним, что на наших сотрудников распространяются льготы, гарантированные российским ИТ-компаниям, аккредитованным Минцифры РФ.

Мы ищем в команду:

▪️C++ developer
▪️Presale-консультант/Архитектор
▪️Product Manager
▪️Team Lead Java
▪️Technical Account Manager/Архитектор
▪️Заместитель руководителя департамента технической поддержки
▪️Инженер поддержки Hadoop
▪️Разработчик СУБД (C/Python)
▪️Системный архитектор
▪️Старший системный аналитик
▪️Технический писатель

Другие наши вакансии вы можете посмотреть в разделе «Карьера» на сайте Arenadata. Будем рады видеть вас в нашей команде!

У Arenadata новый партнёр! Мы подписали соглашение с компанией «ФОРС Технологии», специализирующейся на поддержке программных продуктов и оборудования ведущих мировых вендоров.

Сотрудничество с «ФОРС Технологии» началось с интересного пилота: наш партнёр протестировал Arenadata Postgres (ADPG), Arenadata DB (ADB) и Arenadata Hadoop (ADH) на оборудовании архитектуры х86.

В рамках тестирования специалисты «ФОРС Технологии» сравнили различные конфигурации оборудования и эксплуатацию ADPG под управлением различных OS, провели анализ профиля нагрузки и внесли корректировки в настройки программных и аппаратных средств комплекса.

Параллельно специалисты «ФОРС Технологии» прослушали в учебном центре Arenadata курсы по ADB и ADH, а затем развернули оба продукта на собственной инфраструктуре.

Подробности читайте в новости.

12 ноября состоится ежегодная онлайн-встреча русскоязычных администраторов экосистемы Hadoop «Hadoop admins RU meetup #3».

От Arenadata в митапе примет участие Станислав Габдулгазиев. Он выступит с докладом «Arenadata Platform Security решение для корпоративной безопасности данных в Arenadata Hadoop и Arenadata Streaming».

На митапе вы сможете неформально пообщаться с представителями индустрии, получить бизнес-контакты и обсудить свои проекты. После завершения трансляции организаторы мероприятия планируют разослать презентации докладов и видеозаписи выступлений спикеров.

Мероприятие бесплатно для участников, необходима только предварительная регистрация. Пройти её можно здесь.

Представляем вашему вниманию дайджест продуктовых релизов Arenadata за сентябрь-октябрь. Мы обновили Arenadata DB, Arenadata Hadoop, Arenadata Cluster Manager и Arenadata Streaming.

В новом релизе Arenadata DB 5.x вышли минорные изменения в ядре Greenplum, в Arenadata DB 6.x добавлены поддержка российской ОС «Альт 8 СП», Arenadata Command Center 3.7.0 с дополнительными метриками, интеграция с Oracle/Teradata в PXF.

В Arenadata Hadoop обеспечены поддержка российской ОС «Альт 8 СП», интеграция с Kerberos средствами FreeIPA. В Arenadata Cluster Manager добавлена генерация аудит-логов безопасности в формате CEF, деактивация пользователей и новая документация. Для Arenadata Streaming обеспечена поддержка российской ОС «Альт 8 СП», добавлены поддержка Kafka Connect и ranger plugin для NiFi.

Подробности об изменениях и ближайших планах развития продуктов — в новости.

16 ноября в 11:00 Arenadata и «КРОК» проведут вебинар «Будь на гребне волны: меняем аналитические системы SAP на российские», посвящённый вопросам миграции с SAP BI и SAP BW на отечественное ПО.

Он будет интересен ИТ-директорам, директорам по работе с данными, бизнес-аналитикам. Обсудим такие вопросы, как:

- что ждёт компании при переходе на отечественную платформу КХД;
- что предлагает Arenadata для замены западных решений;
- как справиться с вызовами в ходе миграции;
- какая сложилась ситуация на рынке BI-систем.

На вебинаре выступят:

- Александр Тарасов, архитектор департамента поддержки продаж, Arenadata;
- Кристина Проскурина, руководитель направления Big Data&BI, «КРОК»;
- Наталия Софронова, директор по решениям импортозамещения, «КРОК».

Зарегистрироваться можно здесь.

25 ноября мы проведём третью партнёрскую конференцию «Технические преимущества продуктов Arenadata»!

Она пройдет в формате онлайн и будет состоять из серии технических сессий, каждая из которых раскроет актуальный функционал, roadmap и конкурентные преимущества продуктов Arenadata. На конференции выступят:

– Антон Мартынов, директор по работе с партнёрами Arenadata;
– Сергей Золотарёв, генеральный директор Arenadata;
– Станислав Габдулгазиев, Presales-архитектор Arenadata;
– Иван Иевлев, Product Owner Arenadata DB;
– Алексей Струченко, архитектор информационных систем Arenadata;
– Константин Осипов, сооснователь Picodata, Ярослав Дынников, руководитель группы разработчиков Picodata.

Регистрация на мероприятие по ссылке.

Поддержите проекты наших заказчиков на премии «Проект года»! Это ежегодный конкурс, консолидирующий знания о лучших практиках в области ИТ и цифровой трансформации нашей страны.

В этом году в «Проекте года» участвуют следующие заказчики Arenadata:
– ООО «ММК-Информсервис» (проект: Внедрение единого корпоративного хранилища данных);
– Зарубежнефть (проект: Создание корпоративной цифровой платформы управления данными «NESTRO DATA»);
– ПАО «ГМК «Норильский никель» (проект: Платформа «Озеро данных»);
– Х5 Group (проект: Импортозамещение SAP или Data Management Platform на отечественных компонентах);
– ПАО «Росбанк» (проект: Первый этап по созданию единого централизованного хранилища данных).

Проголосовать можно здесь. Для этого достаточно зарегистрироваться на сайте globalcio.

Уже в пятницу, 25 ноября, стартует наша третья партнёрская конференция «Технические преимущества продуктов Arenadata». Приглашаем представителей компаний-партнёров принять в ней участие.

В рамках конференции мы обсудим, чем продукты Arenadata отличаются от конкурентов и «ванильных» сборок? Как изменился их функционал в этом году? Какие мы проводим учебные курсы для архитекторов, инженеров и разработчиков, которые взаимодействуют с Arenadata?

Вас ждут доклады по стратегии развития Arenadata EDP, экосистеме Hadoop и Streaming, Arenadata DB и Arenadata QuickMarts, транзакционной СУБД Arenadata Postgres, функционалу и конкурентным отличиям Picodata.

Стартуем 25 ноября в 09:30. Принять участие в партнёрской конференции Arenadata можно бесплатно. Нужно лишь заполнить форму регистрации здесь.

25–27 ноября совместно с «МИРЭА — Российский технологический университет» мы проведём двухдневный хакатон «Современный ИТ-ландшафт». В его рамках десять команд старшекурсников решат задачи по разработке, интеграции и развёртыванию современного ПО для работы с данными промышленного уровня.

Наши эксперты прочитают для студентов лекции по технологическому стеку Arenadata среди которых: «Ландшафт данных современного предприятия», «Больше баз данных — хороших и разных», «Обзор ПО экосистемы Hadoop».

Командам-участникам предстоит разработать технологические кейсы. Проекты оценит экспертное жюри по таким критериям, как запускаемость кода, точность работы алгоритма, адаптивность/масштабируемость. Победит команда, набравшая наибольшее количество баллов.

Подробнее о нашем хакатоне читайте в новости.

Сегодня в 10:00 стартует наша третья партнёрская конференция!

Вас ждут доклады по стратегии развития Arenadata EDP, экосистеме Hadoop и Streaming, Arenadata DB и Arenadata QuickMarts, транзакционной СУБД Arenadata Postgres, функционалу и конкурентным отличиям Picodata.

Обязательно подключайтесь!

Все компоненты платформы Arenadata EDP теперь совместимы с сертифицированной ФСТЭК операционной системой «Альт СП» («Альт 8 СП»).

Результаты тестирования, которое провели Arenadata и «Базальт СПО», показали, что все продукты Arenadata корректно работают с российской ОС «Альт 8 СП» на платформе х86_64. Совместимость программных продуктов подтверждена двусторонними сертификатами.

Новый программный комплекс Arenadata и «Базальт СПО» даст возможность государственным и коммерческим организациям перевести на российское ПО процессы сбора, хранения и обработки больших объёмов информации.

Подробности читайте здесь.

Мы обновили расписание курсов по продуктам Arenadata на 2023 год!

В следующем году приглашаем вас пройти обучение по Arenadata DB (ADB), Arenadata Hadoop (ADH) и Arenadata QuickMarts (ADQM).

Обратите внимание!
Уже в январе стартует наш новый курс «Управление информационной безопасностью кластера Arenadata Hadoop». Он будет интересен для системных администраторов, архитекторов и инженеров, уже имеющих опыт работы с Arenadata Hadoop. Курс поможет получить практические навыки комплексной настройки безопасности и управления безопасностью в мультикластерной среде Arenadata Hadoop на базе платформы Arenadata Platform Security.

Узнать подробности о курсе «Управление информационной безопасностью кластера Arenadata Hadoop» и ознакомиться с расписанием курсов на 2023 год можно здесь.

Проект нашего заказчика — компании «Росбанк» — участвует в премии «Проект года». Поддержите его голосами, комментариями и вопросами!

Для этого нужно зарегистрироваться в профессиональном сообществе GlobalCIO в статусе «Профессионал». Право на него, как и право голосовать за проекты имеют руководители ИТ-подразделений или других крупных функциональных подразделений организации. Зарегистрироваться можно только с рабочего почтового адреса.

В рамках проекта «Первый этап по созданию единого централизованного хранилища данных» «Росбанк» использовал продукты Arenadata DB (ADB) и Arenadata Hadoop (ADH).

Проект решал сразу несколько задач:
- создать единое хранилище данных с единой корпоративной моделью данных;
- мигрировать хранилище розничного, малого и среднего бизнеса из отдельного хранилища в единое хранилище данных;
- отказаться от проприетарного зарубежного ПО;
- уменьшить стоимость поддержки всех хранилищ.

Ознакомиться подробнее с описанием проекта и проголосовать за него на премии можно по ссылке.

Наш заказчик — ПАО «ГМК «Норильский никель» — участвует в премии «Проект года» с проектом «Платформа "Озеро данных"». Это первое в «Норникеле» корпоративное smart platform сверхбольшого объёма структурированных и неструктурированных данных.

«Озеро данных» в «Норильском никеле» — единое место реализации всех инициатив, направленных на цифровизацию производства на базе цифровых двойников/советчиков/аналитических отчётов. Единая точка доступа к данным и один из основных компонентов платформы — Arenadata DB.

Использование «Озера данных» позволило «Норникелю»:
- сократить время time-to-market реализации цифровых проектов за счёт отсутствия необходимости проектировать и реализовывать интеграционные инструменты;
- снизить аналитическую нагрузку на системы управления/диспетчеризации производства.

Поддержите проект «Норникеля» своими голосами и вопросами!

Для этого нужно с рабочего почтового адреса зарегистрироваться в сообществе GlobalCIO в статусе «Профессионал». А затем проголосовать по ссылке.

Как ускорить бэкап и сэкономить место в хранилище?

Рассказываем об этом на примере ArenadataDB ddboost и СХД Dell EMC Data Domain в нашей новой статье на «Хабре»! Системный архитектор Arenadata Андрей Савицкий написал об интеграции решения логического резервного копирования и восстановления gpbackup/gprestore с ПАКом Dell EMC DD.

Этой задачей наша команда разработки занималась в 2022 году. Итогом её решения стало появление плагина-коннектора для нативного использования системы хранения данных в задачах резервного копирования и восстановления данных — ArenadataDB ddboost.

С декабря 2022 года мы поставляем этот коннектор в Enterprise Edition Arenadata DB.

Текст статьи можно прочитать по ссылке. Будем рады ответить на ваши вопросы в комментариях!

Представляем вашему вниманию дайджест продуктовых релизов Arenadata за ноябрь — декабрь 2022 года. Мы обновили Arenadata DB, Arenadata Hadoop, Arenadata Cluster Manager и Arenadata Streaming.

В новом релизе Arenadata DB 6.x вышли Arenadata DB Backup Manager версии 1.0; новый пользовательский интерфейс Arenadata Command Center 4.0 с ADBBM и ресурсными группами; важные доработки в бандле и минорные изменения в ядре Greenplum и его компонентах (включая патчи из репозиториев Arenadata).

В Arenadata Hadoop вышло обновление версий компонент Hbase и Flink, а также был добавлен новый сервис AirFlow 2 и компонент Livy версии 0.7.1 c поддержкой работы со Spark версии 3.3.0 на Scala 2.13. В Arenadata Cluster Manager появилась возможность просмотра аудит-логов через интерфейс, улучшение функционала maintenance mode и выгрузка архива логов «по одной кнопке». В Arenadata Streaming добавлена поддержка плагина для NiFi registry и возможность управлять всеми параметрами через ADCM.

Подробности читайте в новости.

Поддержите, пожалуйста, своими голосами, комментариями и вопросами проект нашего заказчика — X5 Group, который участвует в премии «Проект года»!

Проект X5 Group — «Импортозамещение SAP или Data Management Platform на отечественных компонентах». В компании существовала SAP BW on HANA как часть DMP, размещённая в облаке SAP РФ. В конце февраля SAP прекратила обслуживание ЦОД в РФ.

В ходе проекта был перенесён расчёт более 600 аналитических показателей на Arenadata DB. В результате X5 Group:
- увеличила количество пользователей BI-аналитики в два раза (до 10 тысяч человек);
- выполнила архивацию 50% исторической отчетности в системе SAP BW;
- переключила интегрированные с BW системы на работы с новым источником данных без потери в уровне доступности.

Это позволит X5 Group существенно сэкономить средства и снизить затраты на поддержку (в расчёте на 1 пользователя до 20 раз), перестав оплачивать дорогостоящую аренду оборудования.

Узнать о проекте X5 Group подробнее и проголосовать за него можно здесь.