Floe — это система обслуживания таблиц на основе политик для Apache Iceberg.
Floe автоматизирует compaction, snapshot expiration, orphan cleanup и оптимизацию манифестов с помощью декларативных политик.
Вместо написания кастомных скриптов или ручного запуска Spark job вы определяете политики, которые указывают, какое обслуживание выполнять, на каких таблицах, и при каких условиях запускать выполнение.
Floe берёт на себя остальное: планирование, выполнение через Spark или Trino, и отслеживание результатов.
@tldr_data
Post #9
49