Floe: SQL-сервис для современного data lakehouse

Floe — SQL-сервис, спроектированный для современных lakehouse-архитектур.
Он объединяет три ключевых компонента:

FloeSQL — вычислительный движок для выполнения сложных SQL-запросов поверх открытых табличных форматов

Floecat — open-source каталог каталогов, который объединяет метаданные из экосистем Apache Iceberg и Delta Lake

Floescan — сервис индексации, обеспечивающий точечное пропускание данных (data skipping) внутри файлов Apache Parquet

Floe появился как ответ на фрагментацию современного lakehouse-стека — разные форматы таблиц, каталоги и query-движки часто плохо сочетаются между собой.

Объединяя высокопроизводительное выполнение запросов, единый доступ к метаданным и файловую индексацию, Floe переносит проверенные архитектурные подходы в открытую data-экосистему.

Результат, более быстрый и консистентный аналитический доступ к данным в lakehouse-среде.

♾️YouTube♾️

@tldr_data