dbt + Flink для batch и streaming одновременно
Вышел коннектор dbt для Flink.
Теперь можно писать трансформации один раз и запускать их и в batch, и в streaming режиме.
Раньше для batch и streaming нужны были разные инструменты и разные модели.
Что работает для batch, не работает для streaming без переписывания.
Теперь просто пишешь трансформацию один раз, и она работает и для batch, и для streaming.
Плюс все ваши модели остаются версионированными и протестированными.
Так же интересно посмотреть на CLAUDE.md, который используют в адаптере.
Думаю, что то можно взять и в свой проект.
@tldr_data
Post #18
47

- ❤ 3
- 🔥 1