DataTalks

Что такое дата-кластер?

➡️ Дата-кластер Ростелекома — это экосистема компаний ДЗО Ростелекома, которые специализируются на разработке решений для работы с данными и ИИ: TData, IQMen, Спутник и Platforma.

Компании дата-кластера обладают набором решений по обработке больших данных, защите чувствительной информации, глубокой аналитике и ИИ, которые могут закрыть любые потребности в компании любого размера.

В рамках экосистемы дата-кластера технологии работы с данными становятся кубиками конструктора, из которых каждый может собрать уникальные решения для любых задач и реализовать свои замыслы.

Начнем наше знакомство с команды DataOffice, которая занимается управлением данных Ростелекома.

Это подразделение внутри ИТ-блока, которое развивает и эксплуатирует крупнейшее хранилище данных в стране.

DataOffice активно участвует в дата-сообществе России, проводя митапы и конференции, включая собственную площадку DataTalks.

➡️ Подробности смотрите в видео и читайте в карточках. А если хотите у нас работать – ловите подборку вакансий.

📢 Cписок актуальных вакансий:

Разработчик интеграционных решений

Архитектор AI/ML решений

Data аналитик

Project/product менеджер ИИ

🔥 Наш канал DataTalks существует уже 1.5 года!

За это время у нас существенно прибавилось подписчиков и кажется пришло время заново познакомиться и рассказать о себе.
Этим мы и будем заниматься в ближайшие 2 недели.

Канал DataTalks принадлежит дата-кластеру Ростелекома. Мы создавали DataTalks, как площадку на которой эксперты будут делиться своими знаниями о работе с данными. В нашем ТГ канале мы стараемся публиковать только полезный и содержательный контент про работу с данными и планируем публикации таким образом, чтобы это было интересно и начинающим специалистам, и профессионалам управления данными.

📢 А еще мы ведем каналы на Rutube и Youtube. В ближайшие дни мы расскажем вам, что такое дата-офис Ростелекома, что такое дата-кластер Ростелекома и какие компании в него входят, а также поделимся актуальными вакансиями.

А пока давайте познакомимся. 🙂

Напишите в комментариях к этому посту – в какой компании вы работаете?

🏆 Наши коллеги из компании TData и T2 стали лауреатами престижной награды Tadviser IT Prize в номинации «Управление данными в экосистемах» за решение Data Sharing Platform (DSP). Награждение прошло 28 ноября 2024 года на традиционном мероприятии Tadviser Summit.

DSP — это уникальная масштабируемая платформа для управления данными в экосистемах компаний. Она основана на продуктах RT.DataGovernance и RT.Streaming и позволяет организовать защищенные каналы передачи информации между юридическими лицами по единым стандартам. На данный момент к платформе DSP подключены 3 дочерние организации «Ростелекома», обмен осуществляется по ~270 атрибутам данных. Около 500 сотрудников «Ростелекома» уже пользуются преимуществами DSP, что существенно снизило время на запрос и обработку данных.

➡️ Подробнее об этом проекте коллеги рассказывали на DataTalks

В этом году сразу два проекта на базе данных Ростелекома и компании из Дата-кластера Ростелекома Platforma участвуют в экспертном конкурсе лучшей рекламы в России "ИТОГИ ГОДА 2024" на Составе ✨

Сейчас там проходит народное голосование. Давайте поддержим Platforma в народном голосовании и продвинем наши совместные активности по ссылкам ниже ⬇️

⚡️ Кейс "Как увеличить знание о застройщике и конверсию в покупку недвижимости"
Задачей команды стала разработка подхода, который способен эффективно донести ценность бренда до высокодоходной аудитории с максимально возможными охватами, обеспечивая измеримость и прозрачность оценки медиаканалов с точки зрения продаж. Для достижения стратегических целей ФСК команда проекта выбрала охватное in-stream-размещение в рамках Streaming Ads с фокусом на Smart TV.

⚡️ OLV-видеоролик для «Самолета»
Использовался наш инновационный инструмент — ТВ-ретаргетинг. Такой метод позволяет оптимизировать охват и затраты, достраивая аудиторию на основе данных о просмотрах ТВ-рекламы. По всей воронке продаж были получены впечатляющие результаты.

🏆 Проект TData - победитель премии ПРИОРИТЕТ-2024

ИТ-холдинг Fplus получил национальную премию в области промышленных технологий «ПРИОРИТЕТ-2024: 10 лет» за внедрение аналитического хранилища данных на платформе RT.Warehouse компании TData.

Национальная премии за внедрение аналитического хранилища подтверждает успех проекта и его влияние на конкурентоспособность ИТ-холдинга Fplus.

➡️ Вот три ключевых факта о проекте:

1. Стратегическое преимущество: Эффективное использование решений Big Data помогло компании улучшить стоимость владения, качество технической поддержки и функциональные возможности, что, в свою очередь, подчеркивает важность стратегии, основанной на данных.

2. Минимизация рисков: Переход на платформу TData исключил связанные с использованием open source решений риски, такие как уязвимости и лицензионные проблемы. Это обеспечило стабильную и безопасную среду для работы с данными не только для аналитиков, но и для бизнес-пользователей, что способствовало доступности и прозрачности данных в компании.

3. Оптимизация работы с данными: Внедрение аналитического хранилища данных на платформе RT.Warehouse позволило значительно улучшить процесс обработки и анализа больших объемов данных в ИТ-холдинге Fplus. Это способствовало переходу от использования неэффективных инструментов, таких как Excel, к более мощным решениям, что изменило культуру работы с данными и повысило эффективность принятия решений.

Подробнее о проекте читайте в интервью CDO Fplus Ярослава Назарова.

Мы подобрали интересные статьи, которые помогут разобраться в современных трендах обработки данных и технологий, связанных с ними.

➡️ "Ландшафт Open Source Data Engineering в 2024 году: место России и мировые тенденции"

В статье авторы анализируют последние достижения в области Open Source дата-инжиниринга. 2023 год стал годом активного развития, и новые инструменты открывают двери для дата-инженеров. Важность выбора правильных инструментов становится ключевым навыком, а обзор таких ресурсов, как MAD Landscape и State of Data Engineering, помогает понять текущие тренды в мире технологий.

Читайте статью по ссылке


➡️ "Загрузка и обработка видеофайлов посредством Minio, REST и FFmpeg"

Статья посвящена практическим аспектам работы с видео. Авторы описывают, как реализовать загрузку и обработку видеофайлов с помощью Minio и FFmpeg, решая распространенные проблемы, с которыми сталкиваются пользователи. Несмотря на наличие готовых решений, такой подход позволяет обойти ограничения существующих сервисов и предлагает собственные решения для обработки видео.

Узнайте подробнее о процессе и его реализации по ссылке

72% организаций уже используют ИИ для автоматизации процессов и поиска креативных решений. Искусственный интеллект помогает в клиентской поддержке, аналитике и создании контента.
➡️ Ключевые тренды развития корпоративного ИИ хорошо систематизированы в этой статье

Тест Тьюринга давно пройден, а тест Возняка пока недостижим. Стандартные бенчмарки для оценки ИИ часто не дают полезной информации, но, кажется, игры могут стать эффективным инструментом для тестирования искусственного интеллекта.Компьютерные игры обеспечивают визуально понятный способ анализа поведения и производительности ИИ, демонстрируя их умение понимать формы, цвета. Например, Minecraft используется для оценки способности моделей LLM к рассуждениям.
➡️ О преимуществах игровых тестов для оценки искусственного интеллекта читайте в статье


Разработана система LucidSim , которая использует искусственный интеллект для виртуальных тренировок роботов. ChatGPT генерирует текстовые описаний условий среды, а на их сонове создаются 3D-симуляции с физическим моделированием. Разработчики утверждают, что роботы, обученные с помощью LucidSim, показывают лучшие результаты в сравнении с традиционными методами.
➡️ Подробности по ссылке

Подборка интересных статьей на Хабре:

📝 В статье рассматривается, как правильно выбрать паттерн проектирования в зависимости от источников данных и технологий, а также какие ключевые компоненты составляют эффективный конвейер и как создать масштабируемую и высокопроизводительную систему?

📝 Аналитика трансформирует не только бизнес-процессы корпораций но игровой бизнес. Разработчики игр используют инструменты, для улучшения геймплея и балансировки механик. Для этого собирается множество метрик: взаимодействие игроков, их предпочтения и обратная связь. Это помогает выявлять проблемы, повышать стабильность игр и персонализировать опыт игроков с помощью адаптивных решений и динамичных элементов сюжета. Читайте статью , чтобы узнать, как аналитика влияет на все этапы разработки, от альфа-тестирования до поддержки после релиза.

📝 А в этой статье мы погружаемся в мир тепловых карт (heatmaps) — мощного инструмента для анализа поведения игроков и оптимизации дизайна игровых уровней. В игровой индустрии тепловые карты используют для выявления закономерностей в игровом взаимодействии, улучшения баланса и увлекательности уровней.