United Airlines связала Redshift и Databricks без копирования данных

15 сентября United Airlines и AWS раскрыли архитектуру федеративного доступа: Redshift Serverless читает таблицы из Databricks Unity Catalog непосредственно в S3. Метаданные запрашиваются через Iceberg REST API, а временные права выдаёт Lake Formation.

В промышленной среде уже подключены 30 таблиц, ещё 70 внедряются. Около 100 аналитиков получили доступ к данным без новых конвейеров синхронизации, а расходы на дублирующую ETL-инфраструктуру сократились примерно на $30 тысяч в месяц.

Для инженеров это рабочий пример мультидвижковой архитектуры с единым набором данных. Нюанс: для таблиц Delta нужно включить UniForm, а скорость запросов зависит от секционирования и регулярного уплотнения файлов.

Пруф: AWS и United Airlines — 15 сентября 2026 года

#amazonredshift #databricks #apacheiceberg #datalakehouse #datafederation #dataengineering

@data_engi