Традиционные СУБД зачастую не очень эффективно справляются с современными аналитическими нагрузками — простаивает BI, дорожает time-to-market. Решить проблему поможет Arenadata QuickMarts (ADQM) — высокопроизводительная аналитическая СУБД.

👤О том, какие возможности даёт ADQM и как помогает крупным организациям в аналитике, рассказал Антон Коваленко, руководитель департамента продуктового маркетинга Группы Arenadata.

💡Из статьи вы узнаете:

⏯Чем ADQM отличается от классического ClickHouse
⏯Какие возможности даёт новый компонент ADQM Control
⏯В каких сценариях ADQM особенно эффективна
⏯Как продукт работает в связке с Arenadata DB

💼 Кейсы из практики:

🔺МегаФон: ускорил аналитику больших данных без перегруза DWH
🔺Вкусно — и точка: перешла на онлайн-обработку OLAP-запросов с ADQM

#ArenadataQuickMarts #ADQMControl

⚙️Arenadata Prosperity активно наращивает интеграционные возможности. Каждое новое подтверждение совместимости открывает для заказчиков дополнительные варианты построения надёжных и импортонезависимых ИТ-ландшафтов.

ADP + Luxms BI

👩‍💻Тесты подтвердили: платформа бизнес-аналитики Luxms BI полностью совместима с высокопроизводительной универсальной СУБД Arenadata Prosperity. Решение сочетает хранение и обработку данных с аналитикой и визуализацией в реальном времени.

ADP + «Галактика»

👩‍💻Проверена совместимость «Галактика ERP», «Галактика EAM» и «Галактика MES» с ADP. Совместное использование обеспечивает ускоренную обработку больших данных и управление ключевыми бизнес-процессами.

💘Хотите увидеть примеры внедрения в вашей отрасли? Оставьте заявку >>

#ArenadataProsperity

6️⃣ В нашем блоге на Хабре вышла статья о мажорном релизе Apache Spark 4.0. Архитектор департамента поддержки продаж Arenadata Станислав Габдулгазиев разобрал ключевые фичи и сравнил новую версию с 3.0, чтобы помочь командам оценить целесообразность возможного апгрейда.

💡Вы узнаете:

⏯О ключевых изменениях Spark 4.0: полноценная реализация UDTF, Spark Connect, VARIANT для JSON/Avro, ANSI SQL по умолчанию, переход на Scala 2.13, Java 17/21, новые версии PySpark.
⏯Где ждать прироста производительности: Python-ворклоады, полуструктурированные данные, ML и stateful-стриминг.
⏯С какими вызовами можно столкнуться при миграции: строгий SQL-режим, новые версии Python/Scala/Java, изменения Pandas API on Spark.

⭐️Кому будет полезно?

🚼Data/ML/Platform-инженерам, архитекторам, тимлидам — всем, кто поддерживает Spark-платформы, пишет пайплайны и готовит апгрейд.

💘Полный текст — на Хабре: обсуждайте, задавайте вопросы и делитесь своим опытом в комментариях.

#Spark #ArenadataHabr #Habr

🧰 Группа Arenadata в августе выпустила обновления для ключевых продуктов своей дата-платформы

Новые релизы:

⏯Arenadata QuickMarts Control (ADQM Control) v. 1.1.0
⏯Arenadata DB (ADB) v. 6.27.1. 67
⏯Arenadata QuickMarts (ADQM) v. 25.3.2. 39
⏯Arenadata Catalog (ADC) v. 0.8.4
⏯Picodata Ansible v. 25.3.2

⚙ В новых версиях улучшена производительность, исправлены ошибки, добавлен новый функционал и дополнительные возможности.

💘Полный текст обзора и ссылки на описания всех релизов — на сайте >>

#ArenadataРелизы

Arenadata Harmony MDM внесена в реестр российского ПО

Система управления мастер-данными Arenadata Harmony MDM официально зарегистрирована в Едином реестре российского программного обеспечения (№28587 от 23.06.2025)

⚡️Это подтверждает соответствие решения требованиям Минцифры России и открывает новые возможности для бизнеса, которому нужны надежные и импортонезависимые инструменты для работы с данными

«Современные импортонезависимые решения для работы с данными, такие как Arenadata Harmony MDM, выводят компании на новый уровень эффективности. Наша система повышает результативность сквозных бизнес-процессов за счет улучшения качества мастер-данных, увеличивает маржинальность и оптимизирует операционную деятельность бизнеса. При этом мы постоянно развиваем продукт, чтобы обеспечить удобную работу с данными любой сложности»

Евгений Обелов, технический директор Arenadata Harmony MDM

Подробнее о возможностях решения читайте в статье ⬅️

Любой незапланированный простой в промышленности стоит слишком дорого: падает выручка, срываются планы, растут риски для людей и экологии.

📹 Как перевести «аварийность» в управляемые метрики и плановые ремонты, можно узнать 10 сентября на вебинаре «Промышленная надёжность для предприятий добычи: снижение количества отказов оборудования».

📞Эксперты покажут, как с помощью продуктов Arenadata собирать промышленные данные, контролировать их качество и быстро запускать пилотные проекты на реальном оборудовании.

➡️В связке с решениями наших партнёров это помогает снижать расходы на обслуживание и повышать эффективность за счёт предиктивного управления надёжностью.

Программа и регистрация >>

🗓 10 сентября | 🕔 11:00 (мск)

Мы подготовили трёхдневную программу обучения по ключевым аспектам работы с Arenadata Streaming (ADS) и безопасности ETL-конвейеров.

Участники научатся:

✔️ устанавливать и настраивать Arenadata Streaming и Arenadata Platform Security;
✔️администрировать и эксплуатировать Apache NiFi;
✔️создавать и поддерживать ETL-конвейеры;
✔️обеспечивать безопасность NiFi-кластеров с использованием инструментов Arenadata Platform Security.

📌 Формат: живой вебинар с преподавателем + итоговое тестирование.
👥 Кому полезно: дата-инженерам, сисадминам и специалистам по ИБ (базовые знания 🖥 + опыт работы с SQL).
🗓 Даты ближайшего курса: 24–26 ноября.

💘 Регистрация по ссылке >>

Наш партнёр — компания Navicon — подготовил большой видеопроект о внедрении систем управления мастер-данными (MDM) в организациях.

▶️ Эта серия вебинаров, в которых на примере Arenadata Harmony MDM рассказывается обо всех аспектах такого процесса, начиная от оценки необходимости внедрения до настройки конкретных параметров и анализа результатов.

👥 В спецпроекте приняли участие эксперты компаний Navicon, Arenadata Harmony MDM, «Технологии Доверия» и «Айсорс».

В этих видео вы найдёте ответы на вопросы:

✔️ Что необходимо для успешного проекта внедрения MDM-системы и как быстро проект окупится?
✔️ Каковы ключевые требования к MDM-системе?
✔️ Как устроена Arenadata Harmony MDM, какие есть нюансы в её настройке и какие задачи она позволяет решить?

Также вы увидите тестовый прогон установленной системы и услышите оценку результатов проекта от ведущих экспертов рынка ИТ-консалтинга.

Смотреть все серии проекта:
VK ➡️
RuTube ➡️

#Navicon #ArenadataHarmonyMDM #MDM

Merge — межрегиональная IT-конференция, которая проходит 12 и 13 сентября в Оренбурге. Всех, кто уже к ней присоединился или только планирует, приглашаем послушать доклад нашего эксперта.

📅 13 сентября
⏱️ 14:10 (местное время)
🗺 Кинозал №2

Сергей Гонцов, технический владелец Arenadata Prosperity (продукт на базе PostgreSQL) выступит с докладом «Кластеризация PostgreSQL: между мечтой и реальностью».

Основные тезисы:
✅ Почему так оказалось, что в PostgreSQL нет штатного кластера
✅ Связь mvcc и репликации
✅ Особенности синхронной и асинхронной репликации
✅ Задачи управления кластером
✅ Доступные инструменты для построения кластера на базе PostgreSQL
✅ Кластеры PostgreSQL на базе Patroni
✅ Обновление кластеров и иные особенности эксплуатации

➡️ Не будет на конференции, но интересны тема доклада или Arenadata Prosperity? Напишите нам

#ArenadataProsperity #PostgreSQL

⚡️ Группа Arenadata выпустила новый релиз системы управления корпоративными данными Arenadata Catalog (ADC) 0.8.4. В нём содержится более 120 улучшений, среди которых ключевым стал функционал — «Реестр справочников», предназначенный для централизованного управления референс-данными (RDM).

Это расширение функциональности позволяет обеспечивать согласованность, точность и доступность критически важной справочной информации для всех заинтересованных сторон, что напрямую влияет на эффективность процессов и качество аналитики.

Новый модуль решает одну из ключевых задач организаций — унификацию разрозненных данных.

«Реестр справочников» поддерживает:
✔️внутренние данные (уникальные коды продуктов, классификаторы подразделений),
✔️внешние (общепринятые отраслевые стандарты).

Данные можно импортировать или интегрировать из любых источников без ограничений на объем.

✅ В этой статье разбираем на практических примерах, какую пользу «Реестр справочников» может принести бизнесу.

#ArenadataCatalog #DataGovernance

6️⃣ В нашем блоге на Хабре вышла статья о Spark Connect — клиент-серверной архитектуре Apache Spark, появившейся ещё в версии 3.4. Архитектор департамента поддержки продаж Arenadata Станислав Габдулгазиев разобрал, как она устроена и в каких случаях может серьёзно упростить работу со Spark.

💡Вы узнаете:

⏯Почему классическая схема с драйвером создаёт проблемы с зависимостями, отладкой и стабильностью.
⏯Как работает Spark Connect: тонкий клиент, удалённый spark-сервер, gRPC, Protocol Buffers и Apache Arrow.
⏯Какие плюсы даёт разделение клиента и сервера и какие есть ограничения.

⭐️Кому будет полезно?

⏯Data/ML/Platform-инженерам, архитекторам, тимлидам — всем, кто поддерживает Spark-кластеры, пишет пайплайны и ищет способы сделать их стабильнее и проще в сопровождении.

Полный текст — на Хабре
Обсуждайте, задавайте вопросы и делитесь своим опытом в комментариях!

#Spark #SparkConnect #ArenadataHabr #Habr