Arenadata

🎥 26 мая в 11:00 (мск) на вебинаре про новые возможности Arenadata Streaming покажем, как ADS помогает управлять Kafka-кластерами и выстраивать потоковую интеграцию оперативных БД с DWH, Data Lake и lakehouse-платформами.

💡Обсудим «многослойное» хранение на базе Kafka Tiered Storage, CDC с Debezium, управление метаданными без ZooKeeper с помощью KRaft, а также балансировку и масштабирование кластеров через Cruise Control.

В программе:

🔹новые функции ADS и сценарии применения;
🔹Kafka Tiered Storage для «многослойного» хранения;
🔹CDC с Debezium и работа с Iceberg Sync Connector и NiFi ADB Connector;
🔹Kafka Raft (KRaft) вместо ZooKeeper;
🔹Cruise Control для балансировки и масштабирования Kafka-кластеров;
🔹live-demo пайплайна загрузки данных в DWH и lakehouse;
🔹планы развития ADS на 2026 год.

📆 26 мая
⏱️ 11:00 мск
➡️ Регистрация >>

#ArenadataStreaming

☑️Продукты Группы Arenadata помогают Москве превращать большие массивы данных в основу для управленческих решений, прогнозов и городских сервисов

Ежегодно Москва генерирует более 1 ПБ данных из городских систем и инфраструктуры. В Цифровом двойнике доступно более 9 тыс. слоёв данных, а в управлении городом уже используется более 130 проектов с ИИ.

📞 О том, как большие данные и искусственный интеллект помогают управлять мегаполисом, прогнозировать развитие инфраструктуры и создавать сервисы для миллионов жителей, рассказал Владислав Шишмарёв, заместитель руководителя Департамента информационных технологий города Москвы.

Из интервью вы узнаете:

🔹 почему большие данные стали основой управления современным мегаполисом;
🔹 как продукты Группы Arenadata помогают Москве работать с данными для дальнейшего анализа;
🔹 как Москва превращает информацию из городских систем в решения и прогнозы;
🔹 как ИИ помогает городу в транспорте, медицине, госуслугах, проектировании и контроле городской среды.

Подробнее >>

Когда киберриски растут, а требования к защите данных становятся строже, бизнесу важно не просто наращивать инструменты ИБ, а выстраивать системный подход к данным.

🎤26 мая в 11:00 мск на митапе «Как усилить ИБ: управление данными и ML-технологии для защиты бизнеса» эксперты Arenadata, «Аксель Про» и «Инфосистемы Джет» покажут, как использовать ML-подходы и инструменты Data Governance для усиления информационной безопасности.

В программе митапа:

🔹 реальные кейсы сбора данных в ИБ и организации хранения логов;
🔹практика применения решений Arenadata и «Аксель Про»;
🔹тренды рынка ИБ и технологии, которые набирают популярность;
🔹ML-кейсы для ИБ в реальной ИТ-среде — от анализа логов до задач с LLM;
🔹дата-контракты, карта данных, профилирование и другие инструменты управления данными для специалистов ИБ.

📆 26 мая
⏱️ 11:00 мск
➡️ Регистрация >>

#DataGovernance

🧰 Группа Arenadata в апреле выпустила обновления Arenadata Catalog (ADC), Picodata (PD), Arenadata Streaming Control (ADSC) и Arenadata Prosperity (ADP).

Новые релизы:

🔹Arenadata Catalog 1.0.0
🔹Picodata Sirin 1.2.0
🔹Picodata Radix 1.0.0
🔹Arenadata Prosperity 16.3.6
🔹Arenadata Streaming Control 2.7.0.b

⚙️ В новых версиях улучшена производительность, исправлены ошибки, добавлен новый функционал и дополнительные возможности.

➡️Полный текст обзора и ссылки на описания всех релизов >>

#ArenadataРелизы

Коллеги, всем привет! На связи Дмитрий Плужников ☕️

Помните, мы рассказывали о добавлении поддержки Greengage DB в DBeaver и обещали продолжить интеграции с другими популярными клиентами?

Выполняем обещание 👍

Теперь Greengage DB поддерживается в Beekeeper Studio - это современный кроссплатформенный SQL-клиент с открытым исходным кодом.

Документация по подключению доступна на их сайте.

Следите за новостями! 😉

Ваша команда Greengage DB 🌳

👍Группа Arenadata — на страницах первого печатного номера Russian Business

Как за 10 лет пройти путь от стартапа до ИТ-экосистемы из 15 продуктов, провести IPO на Московской бирже, достичь выручки 8,8 млрд ₽ и вырасти до 190+ клиентов? Об этом — статья в первом печатном номере Russian Business.

В материале освещены:

🔹Эволюция экосистемы: масштабирование портфеля от первого релиза Arenadata Hadoop до интеграции решений дочерних компаний.
🔹Функциональные задачи: использование продуктов Arenadata для импортозамещения, построения КХД, бизнес-аналитики и управления метаданными.
🔹Практические кейсы: миграция хранилища ПАО «Мосэнерго», управление метаданными в ММК и создание централизованной платформы для бизнес-аналитиков в Россельхозбанке.

📞 Екатерина Арланова, директор по внешним коммуникациям и связям с инвесторами Группы Arenadata:

Сегодня Группа Arenadata — полноценная дата‑платформа с продуктами и сервисами, не имеющая аналогов на российском рынке. Накопленный опыт реализации проектов во всех секторах экономики, зрелые продукты и органический рост объёма данных — основные драйверы роста и основа инвестиционного кейса компании. Группа растёт как органически, так и неорганически, расширяя продуктовый портфель самыми востребованными решениями на рынке. При этом для финансирования мы используем исключительно собственные ресурсы, что особенно актуально в период высокой стоимости фондирования.

➡️Печатную версию журнала можно найти на ключевых деловых площадках: ЦИПР, ПМЭФ, Неделе российского ритейла в Москве, форуме недвижимости «Движение» в Сочи, ВЭФ во Владивостоке, региональных мероприятиях Альфа-Банка, а также в Alfa Only Lounge — зонах отдыха Альфа-Банка.

📱 До 30% ИИ-проектов закрываются уже после пилотной стадии из-за проблем с данными. При этом утечки корпоративных данных через нейросети за год выросли в 30 раз, а к 2028 году 70% организаций могут столкнуться с атаками deepfake.

📞 В новой статье Алексей Журавлев, заместитель генерального директора Arenadata, разобрал, почему качество данных, Data Governance и правила использования ИИ становятся критически важными для бизнеса и особенно для организаций КИИ.

Из статьи вы узнаете:

🔹почему ИИ не исправляет проблемы в данных, а воспроизводит и усиливает их;
🔹как низкое качество данных влияет на судьбу ИИ-проектов;
🔹почему утечки через нейросети становятся новым контуром риска для компаний;
🔹зачем организациям нужны понятные политики и манифест ИИ;
🔹почему в КИИ искусственный интеллект нельзя внедрять без строгих рамок и контроля.

💡Главный вывод: ИИ даёт бизнесу преимущество только там, где данные приведены в порядок, управление ими выстроено системно, а сценарии применения технологий находятся под контролем.

Подробнее >>

#ArenadataМнениеЭксперта

⚡️Эксплуатация Arenadata Hyperwave: больше практики и реальных сценариев

Центр обучения Arenadata обновил курс «Эксплуатация Arenadata Hyperwave. Часть 1: Базовые компоненты». Обновлённая версия курса стала более прикладной и глубже охватывает задачи, с которыми специалисты сталкиваются при эксплуатации hadoop-кластера в промышленной среде.

Курс дополнен темами:

🔹квоты HDFS;
🔹Erasure Coding в HDFS в части объяснения алгоритма;
🔹YARN Preemption — вытеснение ресурсов;
🔹YARN Node Labels — метки узлов.

🔍 По темам YARN Preemption и YARN Node Labels в программу добавлены лабораторные работы. Это позволит слушателям на практике освоить механизмы управления ресурсами кластера и настройки распределения вычислительной нагрузки.

📆Ближайшие группы:

🔹18–22 мая
🔹6–10 июля
🔹3–7 августа
🔹5–9 октября
🔹9–13 ноября
🔹7–12 декабря

➡️Подробнее о курсе и регистрация — по ссылке >>

#ArenadataКурсы

🎥19 мая в 11:00 (мск) на вебинаре «Новая ступень развития Arenadata Catalog: версия 1.0, домены данных и дата-продукты» подробно расскажем о новом релизе Arenadata Catalog и его ключевых изменениях.

💡Покажем, как дата-продукты в связке со встроенными тестами качества на базе Arenadata Catalog Data Quality Framework (DQF) превращают данные из «актива» в управляемый продукт.

В программе:

🔹представим ключевые изменения релиза Arenadata Catalog v1.0: домены и дата-продукты, обновлённый интерфейс и применение ИИ-агентов;
🔹расскажем, что нового в модуле Arenadata Catalog Data Quality Framework (DQF);
🔹продемонстрируем новый функционал релиза;
🔹ответим на ваши вопросы.

📆 19 мая
⏱️ 11:00 мск
➡️ Регистрация >>

#ArenadataCatalog #ArenadataCatalogDQF

Разработка программного обеспечения, облачные решения и кибербезопасность — три ключевых направления, определяющих развитие IT-индустрии сегодня. О том, как они влияют на инвестиционную привлекательность сектора и какие технологические тренды трансформируют рынок в настоящий момент, мы поговорили с Сергеем Айрапетовым, управляющим партнером инвестиционно-банковской группы Aspring Capital, и Екатериной Арлановой, директором по внешним коммуникациям и связям с инвесторами Группы Arenadata.

Слушайте на сайте Forbes

И на других стримингах

* Реклама, ПАО "ГРУППА АРЕНАДАТА"

📊 Разные подразделения считают одни и те же показатели по-разному — и в какой-то момент бизнес перестаёт понимать, где «правильная» цифра. Отчёты расходятся, решения затягиваются, доверие к информации падает.

📞 О том, как перейти от разрозненных показателей к единой экосистеме управления данными, в новой статье рассказал Игорь Моисеев, директор по развитию бизнеса DataCatalog.

Из статьи вы узнаете:

🔹почему локальные инициативы — отдельные витрины, очистка справочников или ускорение выгрузок — не решают проблему хаоса в данных;
🔹как связка MDM, Data Catalog и Data Quality Framework помогает выстроить единую экосистему управления данными;
🔹зачем компаниям нужны владельцы данных, правила «золотой записи» и единый язык показателей;
🔹с чего начать внедрение на практике — от инвентаризации источников до контроля качества;
🔹какой бизнес-эффект даёт комплексный подход: прозрачность, согласованность, ускорение процессов и масштабируемость.

Подробнее >>

#DataGovernance

👍 Два проекта Россельхозбанка, реализованные с использованием решений Группы Arenadata, вошли в число номинантов премии Data Award

Россельхозбанк представил на премию два проекта в области данных и ИИ: единую платформу для аналитиков Data Research Platform на базе Arenadata DB и платформу продвинутой аналитики и MLOps полного цикла RAISA, интегрированную с Lakehouse-архитектурой банка на базе Arenadata Hyperwave и Picodata.

Единая «песочница» для аналитиков

Платформа Data Research Platform объединила разрозненные аналитические ресурсы банка в единый управляемый контур.

Проект в цифрах:

🔹10 000+ таблиц из различных источников консолидированы в одном кластере;
🔹~1,5 часа требуется на ежедневное обновление более 5 000 объектов;
🔹500+ аналитиков получили удобный инструмент self-service;
🔹100 Тбайт — объём кластера Arenadata DB с возможностью дальнейшего расширения.

➡️ Подробнее о проекте — в интервью Кристины Проскуриной, управляющего директора управления бизнес-анализа данных Блока больших данных РСХБ.Цифра

ИИ и аналитика на единой платформе — RAISA

RAISA стала единой промышленной платформой для продвинутой аналитики и ИИ: от исследования данных и проверки гипотез до обучения, внедрения и мониторинга моделей в защищённом контуре банка.

Проект в цифрах:

🔹3 000+ сотрудников банка и организаций группы используют платформу;
🔹40+ интеграций настроено в едином контуре;
🔹3 000+ дата-продуктов реализовано на платформе;
🔹100+ моделей ИИ разработано Лабораторией ИИ;
🔹8,8 млрд ₽ — ожидаемый совокупный экономический эффект на горизонте до конца 2029 года.

➡️ Подробнее о проекте — в интервью Даниила Потапова, руководителя Лаборатории искусственного интеллекта Департамента больших данных РСХБ

#ArenadataКейсы

⚡️Центр обучения Arenadata открыл регистрацию на новый курс по эксплуатации ADB

Открыта регистрация на двухдневный практико-ориентированный курс «Эксплуатация Arenadata DB, часть 2: модернизация платформы, эксплуатационный контроль». Он рассчитан на администраторов и инженеров, которые уже работают с ADB или хотят систематизировать знания по эксплуатации дата-платформы.

☑️Курс продолжает программу «Эксплуатация Arenadata DB» и фокусируется на задачах, с которыми команды сталкиваются в продакшене: обновлениях и миграциях, резервном копировании и восстановлении, мониторинге, диагностике и автоматизации.

☑️Часть курса посвящена практическому подходу к траблшутингу распределённой СУБД, где слушатели научатся уверенно действовать в нештатных ситуациях. Блок посвящён диагностике сбоев, восстановлению работоспособности кластера и разбору типовых проблем, возникающих в эксплуатации.

💡Вы научитесь:

🔹выполнять обновление ADCM до версии 2.11, включая перенос на другой сервер и переход на внешнюю базу данных;
🔹разворачивать стенд ADB в Ubuntu, включая установку компонентов через офлайн-пакеты;
🔹настраивать мониторинг с собственными метриками, алертингом и уведомлениями;
🔹управлять кластером ADB в расширенных сценариях;
🔹работать с ADB Control и ADB Backup Manager, разбирать сценарии восстановления после сбоев и базовые подходы Disaster Recovery.

⏱️Ближайшие группы: 3–4 июня, 16–17 июля, 10–11 сентября, 1–2 декабря.

➡️Подробнее о курсе и регистрация — по ссылке >>

#ArenadataКурсы

Arenadata pinned a photo

🏆Группа Arenadata — лидер российского рынка СУБД по итогам исследования ЦСР

Согласно новому исследованию Центра стратегических разработок (ЦСР), Группа Arenadata стала лидером рынка систем управления и обработки данных, продемонстрировав самую высокую рыночную долю и самые высокие темпы роста среди ключевых игроков.

Главное из отчёта ЦСР:

🔹российский рынок СУБД вырос до 101,9 млрд ₽ (+13,9%) и к 2032 году может достичь 281 млрд ₽;
🔹доля вендоров к 2032 году может вырасти до 60%;
🔹спрос формируют импортозамещение, безопасность, рост данных, ИИ и облачные архитектуры;
🔹ключевые сценарии по отраслям: антифрод, предиктивная аналитика, персонализация, real-time логистика;
🔹растёт отдельный сегмент решений для защищённой обработки данных.

📞 Александр Ермаков, директор по продуктам Arenadata:

Технологические тренды сегодня формируются под влиянием стремительного роста объёмов данных, расширения сфер их применения, перехода к обработке в режиме реального времени и удорожания вычислительных ресурсов. В этих условиях в ближайшие годы ожидается активное внедрение архитектуры Lakehouse. К концу пятилетнего горизонта на передний план выйдет архитектура Streamhouse как ответ на растущую потребность в эффективной работе с потоковыми данными и поддержке сценариев, связанных с развитием ИИ-агентов. На горизонте десяти лет прогнозируется становление архитектуры Lakebase, стирающей границы между транзакционными и аналитическими системами и формирующей основу для AI-native-приложений2. Lakehouse, Streamhouse и Lakebase образуют технологический паттерн построения целостных платформ данных для решения большинства типов задач. Параллельно будут развиваться инструменты, раскрывающие ценность данных как экономического актива и обеспечивающие их безопасное совместное использование между участниками рынка (конфиденциальные вычисления).

Все подробности и ссылка на исследование — на нашем сайте >>

Arenadata в MAX

Всем привет, на связи Дмитрий Плужников☕️

📣 Я к вам с новостями нашего проекта Greengage DB:

🔜мы завершили большой пласт работ по апгрейду мажорной версии постгреса, результатами которых частично поделимся уже этим летом
🔜основную информацию расскажем на нашей большой осенней конференции ArenaTech - анонс которой будет чуть позже
🔜также будет выпущен ряд статей с результатами исследований на нашем блоге на Хабр

🔥 Как вы знаете, для нас невероятно важна качественная документация - как один из ключевых индикаторов зрелости продукта. На прошлой неделе у нас вышло важное обновление документации Greengage DB 6 сразу на двух языках - на английском и русском (не на китайском):

✅ добавлен новый раздел Справочники с описанием доступных в Greengage DB SQL-команд, системных каталогов, утилит, типов данных, переменных окружения и конфигурационных параметров (GUC)
✅ описана установка Greengage DB из пакета (доступная с версии Greengage DB 6.29.2)
✅ добавлены новые статьи на тему аутентификации (PAM, Ident) и интеграции с HDFS
✅с полным списком изменений можно ознакомиться в наших релизах

🔖В настоящее время мы приступаем к описанию новых фичей, находящихся в разработке (о которых расскажем и в статьях, и на ArenaTech осенью), а также продолжаем работу над документацией Greengage DB 7.

Оставайтесь на связи!
Ваша команда Greengage DB 🌳

Продукты Arenadata выбирают организации из разных отраслей, в том числе за пределами России. В их числе — сеть магазинов электроники «5 Элемент» из Белоруссии, которая объединила разрозненные данные из множества систем в КХД на базе Arenadata DB. Проект вошёл в число номинантов премии Data Award.

💡Особенность проекта — создание единого источника правды для анализа продаж, персонализации предложений клиентам и оптимизации логистических цепочек. Новое КХД стало основой для перехода ритейлера к полноценному data-driven подходу.

Проект в цифрах:

🔹в 2–3 раза сократилось время построения отчётов;
🔹332 таблицы с данными загружено в корпоративное хранилище;
🔹70+ витрин данных собрано для 10+ аналитических приложений;
🔹> 1 Тбайт составляет суммарный объём данных в системе.

Из интервью Максима Клиша, начальника отдела управления данными «5 Элемент», вы узнаете:

🔹как перенос расчёта показателей из BI-платформы в КХД помог ускорить работу с данными;
🔹почему при выборе СУБД команда остановилась на Arenadata DB;
🔹зачем понадобился единый источник правды по данным и как он помог выстроить работу с отчётностью и аналитикой;
🔹как компания планирует развивать КХД: внедрять ИИ, интегрировать ML-процессы и усиливать клиентскую аналитику.

➡️ Читать интервью >>

#ArenadataDB

⚡️Вышел релиз 1.2.0 плагина Picodata Sirin

Sirin — коммерческий плагин для распределенной СУБД Picodata с поддержкой API Apache Cassandra (CQL и протокол Cassandra v4). Релиз 1.2.0 плагина содержит новую функциональность и значительные улучшения производительности.

❕Ключевым изменением релиза стало появление механизма анонса токенов через системные таблицы system.local, system.peers и system.peers_v2, как в Apache Cassandra.

Что ещё нового:

🔹полноценная поддержка авторизации: аутентификация по CQL, проверка прав доступа, управление ролями и правами без переподключения;
🔹удаление отдельных колонок без удаления всей строки;
🔹тип inet для IPv4 и IPv6;
🔹функции mintimeuuid и maxtimeuuid для выборки по диапазону времени.

👆 Релиз 1.2.0 проходит сертификацию ФСТЭК.

🔍В следующих релизах — расширение команд авторизации, поддержка статических колонок, GROUP BY и агрегатных функций.

Подробнее >>

Документация плагина >>

#Picodata

🏭 Промышленность уходит от «цифры ради цифры» к прагматичной цифровой трансформации: теперь от технологий ждут не формального внедрения, а решения конкретных задач и измеримого эффекта. Но масштабирование по-прежнему сдерживают качество данных, стоимость инфраструктуры и сложность встраивания ИИ в производственный контур.

📞 Экспертным комментарием для издания «Промышленные страницы» о том, какие решения уже доказали свою эффективность в промышленности и что мешает дальнейшей цифровой трансформации, поделился директор по работе с корпоративным сектором Группы Arenadata Максим Власюк.

Что важно:

🔹 для крупных и части средних промышленных предприятий системы мониторинга, видеоаналитика, предиктивное обслуживание и автоматический контроль качества уже стали необходимым минимумом;
🔹 наиболее понятные и быстроокупаемые сценарии ИИ в промышленности связаны с обработкой визуальных данных и интеллектуальными системами поддержки решений;
🔹 эффект от внедрения уже подтверждается практикой: у «Северстали» точность решений систем компьютерного зрения за два года выросла более чем на 30%, а цифровой контроль качества охватывает около 60% продукции комбината;
🔹 один из главных барьеров — не выбор нейросети, а неподготовленные данные: отсутствие единого контура сбора, нормализованных справочников, контроля качества и понятных правил доступа и ответственности;
🔹 дополнительное ограничение для масштабирования ИИ в промышленности — высокая стоимость инфраструктуры: камер, датчиков, вычислительных мощностей, сети и модернизации контуров.

Подробнее >>

#ArenadataМнениеЭксперта

🚀 Вышел релиз Arenadata Catalog 1.0.0

В новой версии Arenadata Catalog появились домены и дата-продукты, обновлён интерфейс Data Lineage, расширены возможности Data Quality, поиска, кастомизации и администрирования. Всего в релиз вошло 120+ улучшений, которые упрощают навигацию, поиск и работу с данными.

Что нового:

🔹Домены и дата-продукты — помогают структурировать активы по бизнес-областям, сделать владение данными явным и упростить повторное использование данных.
🔹Сертификация объектов — рейтинг и уровень сертификации помогают контролировать актуальность, качество и полноту ведения объектов каталога.
🔹Data Quality — теперь алгоритмы проверок можно расширять и настраивать через интерфейс системы.
🔹Data Lineage — доступны детальный и обзорный режимы просмотра, архивация потоков и экспорт S2T-файла с настроенным представлением происхождения данных.
🔹Расширенный поиск — теперь доступен поиск по хранимым SQL-процедурам, BI-моделям, схемам баз данных и базам данных.
🔹Интеграция с DQF и AI Data Steward — расширены сценарии управления качеством данных и доступны AI-функции для генерации описаний таблиц и колонок.

📞 Игорь Моисеев, директор по развитию бизнеса DataCatalog:

Организации переходят от разрозненных инициатив к системной работе с данными как с продуктом. Поэтому центром этого релиза стали доменная модель, дата-продукты, качество данных и интеллектуальные инструменты. Эти функции каталога жизненно необходимы для команд, внедряющих подходы Data Mesh. Наша задача — сделать работу с данными управляемой и при этом удобной для всех участников процесса: от инженеров до бизнес-пользователей

Подробнее >>

#ArenadataCatalog