Iceberg защитил каталог от двойных коммитов

В Apache Iceberg 1.11 REST Catalog получил поддержку стандартного заголовка Idempotency-Key для изменяющих операций.

Теперь повторный запрос после сетевого тайм-аута — создание таблицы, удаление или коммит — гарантированно не выполнится дважды. Раньше клиент мог не получить ответ и повторить уже успешно завершённую операцию, создавая лишние снимки или повреждая состояние каталога.

Для тебя, как инженера, это важный шаг к нормальной семантике повторных попыток: сбой сети больше не должен превращаться в сбой данных.

#apacheiceberg #lakehouse #dataengineering #idempotency #dataintegrity #reliability #restapi

@data_engi