#заметкинаполях #depatterns

Чтение о книги о шаблонах движется пока очень медленно, тем не менее, разговор продолжаем.

«Фигура вторая, инкрементальная…» (квиз по советским фильмам не отпускает)

Используется, если есть нечто, что позволяет отделить новые данные от уже обработанных. Это может быть колонка в таблице или же отдельный файл/партиция. Сей шаблон позволяет значительно уменьшить объемы передаваемых данных.

Но…

Если в источнике данные удаляются, то вы об этом вряд ли узнаете.

Ежели вам все же хочется знать об удалениях или же сократить интервалы между «поглощениями» данных, то вашим выбором может стать шаблон под номером 3, именуемый Change Data Capture, а народе же более известный как CDC.

Суть сего метода заключается в подключении непосредственно к внутреннему журналу транзакций базы данных, что, в свою очередь, обеспечивает высокоскоростной доступ к измененным данным. Однако за все надо платить. Чем платить, автор тоже подробно рассказывает.

Продолжение следует…