#depatterns #заметкинаполях

Возвращаемся DE Patterns. Семейство шаблонов под номером 4 называется репликацией данных. Суть их всех сводится к простому копированию из одной локации в другую. Применяется при движении данных между однородными хранилищами, в идеале с сохранением атрибутов метаданных (первичных ключей в БД, к примеру), но «в действительности все не так, как на самом деле».

Итоги про репликацию от Data Whisperer

Шаблон под номером 5 предназначен для решения «проблемы маленьких файлов», известной инженерам с незапамятных практически времен. Решение очевидно - хранить меньше файлов, но большего размера. Впрочем, см сюда...

Следующий шаблон снова отсылает нас к ресторанной тематике: «Вам по готовности или все сразу?» Его задача помочь определить правильный момент для начала процесса поглощения данных. Как узнать, что загрузка какого-либо закончена, и можно запускать последующие процессы обработки?
В объектных хранилищах решение может быть легко реализовано при помощи флаг-файлов, таким как многим знакомый _SUCCESS, например.

Но и здесь не обошлось без подводных камней…

Продолжение следует…