Написали большой хабрапост о внутрянке формата айсберг.
Постарался раскрыть вопросы
1️⃣Как перейти от навала файлов в S3/HDFS до хорошего Data Lake[House]
2️⃣Зачем нужны все эти сложности с вложенной древовидной метадатой
3️⃣Откуда берется ACID в не ACID-ном хранилище S3.
4️⃣Какие процедуры поддержки требуется применить к DLH на айсберге.
Вопросы как всегда можно задать в коментах.
Post #305
1.34K