​​Как мы научились управлять данными глобального масштаба: кейс разработки Супермаркета Данных 🛒

🟩 Многие компании считают информацию своим главным богатством, потому что она нужна для развития бизнеса, повышения качества сервиса и разработок новых продуктов. Но не всегда данные бывают централизованы и снабжены удобным способом обмена между их владельцами и потребителями. И поэтому важно иметь решение, которое автоматизирует процессы по работе с ними и позволит иметь удобный доступ. За эту амбициозную задачу, которую до этого никто не решал, взялась объединенная команда Сбера и ADV/web-engineering.

🟩 Рассматривалась идея «Супермаркета данных», которая есть у других компаний, однако проанализировав рынок, мы поняли, что единственное правильное решение — разрабатывать его самим. За 2 года объединенная продуктовая команда запустила сервис, позволяющий оптимизировать и стандартизировать процессы получения данных, с учетом централизованного контроля доступа к разным типам информации. Интерфейс сервиса реализован в формате интерактивного каталога, где пользователи могут заказывать данные и оформлять на них подписку для выполнения различных бизнес-задач.

🟩 Сегодня «Супермаркет данных» используется для ряда промышленных трактов и снабжает информацией из более чем 300 источников — витрины и аналитические решения бизнес-блоков Сбера. Ежедневно через сервис проходит около 3 ПБ данных, включающих более 70 тыс. таблиц и миллиона атрибутов. И эти цифры продолжают расти.

Читайте об этом кейсе на Хабре.