Любая компания накапливает массивы данных, которые могут стать источниками полезных инсайтов. Но от 40 до 90% корпоративных данных остаются «тёмными» — собираются, но не используются. Всё потому, что часто они хранятся разрозненно и никто не управляет ими как единым активом. Тот, кто мог бы извлечь из массива данных пользу, может даже не знать о его существовании. 

Решить проблему может Data Fabric — подход, превращающий разрозненные данные компании в единый материал.

Что такое Data Fabric

Data Fabric — архитектура и набор технологий, которые объединяют разнородные источники данных и делают их доступными так, будто они хранятся в одном месте. Через неё любой авторизованный пользователь может получить доступ к нужной информации. 

Data Fabric работает как инфраструктурная надстройка над существующими облаками, «озёрами данных», базами данных SQL и другими источниками, связывая их. 

В чем плюсы такого подхода?

🔴Сокращает время на аналитику. Data Fabric позволяет запрашивать данные из разных систем без предварительного копирования — через data virtualization и федерацию запросов.

🔴Упрощает развёртывание ИИ и ML-решений. Подход обеспечивает им чистые данные и единые политики доступа. 

🔴Вписывает данные в широкий контекст через knowledge graph. Этот инструмент описывает сущности и связи между ними, вплетая данные в контекст. Разрозненные факты превращаются в единую картину. 

🔴Сокращает дублирование разработки. Часто, если данные хранятся разрозненно, отделы нередко повторяют одни и те же действия для работы с ними. Например, дублируют очистку или фильтрацию данных. С Data Fabric этого не происходит.

🔴Повышает безопасность данных. Data Fabric позволяет внедрить сквозные политики безопасности и в автоматическом режиме осуществлять их. 

Как внедрить?

Data Fabric можно собрать на Yandex Cloud. 

Так, для хранения и обработки инфрмации подойдут сервисы Платформы данных, а аналитику и визуализацию данных обеспечивает Yandex DataLens, который подключается к различным источникам, создаёт модели данных и дашборды без копирования данных.

Подписывайтесь 👉 @yab2btech