TGViewer
Кухня данных | Руслан Мустафин Кухня данных | Руслан Мустафин @etl_kitchen · 894 subscribers
Post #157 780
Кухня данных | Руслан Мустафин watermark
Если не сталкивались с понятием watermark
Watermark (водяной знак) в инженерии данных — это механизм, используемый в потоковой обработке (streaming) для обработки данных, поступающих с задержкой или не по порядку. Он представляет собой метку времени, которая сообщает системе: "данные с более ранним временем возникновения уже гарантированно получены, можно завершать вычисления для этого периода".

Если кратко — отметка времени, которая означает, что данные ДО уже залиты.
Например, если watermark принимает значение 20-04-2026, то это значит, что данные до 20-04-2026, уже залиты.
  • 👍 4
  • ❤‍🔥 1
More from @etl_kitchen
  1. Apr 29, 2026Задачка 🤪 Есть таблица-источник, которую мы грузим инкрементально. В таблице есть два важ…
  2. Apr 16, 2026Когда лид сказал, что в легаси подробная документация к коду. Тем временем документация 🤪…
  3. Apr 14, 2026Ларчик-то просто открывался Когда-то рассказывал, что у меня есть мой домашний сервер для…
  4. Apr 8, 2026У вас есть только 10 рублей, соберите себе идеальный конвейер данных 🤪 🟢Источник не меня…
  5. Apr 6, 2026Закрывал глаза в пятницу, открыл, а уже понедельник(( Заходи учиться, все бесплатно ➡️ htt…
  6. Apr 4, 2026Когда всю неделю на работе разбираешься с парсингом XML, а на выходных решаешь просто отдо…
Threads Profile ViewerView any public Threads profile without an account.Open ThreadLook →Writing with AI? Make it sound human.Metric37 rewrites AI drafts so they read naturally. Free AI detector, 1,500 words free.Try Metric37 →