Завершаем неделю подборкой статей о современных технологиях и инструментах, используемых для обработки больших данных, включая управление качеством информации и выбор форматов.

➡️ В поисках потерянных данных: переход со StreamSets на Data Boring
Статья рассказывает о миграции с устаревшего программного обеспечения на более современное решение Luxms Data Boring, что иллюстрирует важность обновления технологий в обработке данных.

➡️ Инфраструктура для Data-Engineer форматы файлов
Статья рассматривает различные форматы файлов, используемые в дата-инженерии, их преимущества и недостатки, помогая выбрать наиболее подходящий для конкретной задачи.

➡️ Как обеспечить Data Quality терабайтов данных и зачем: опыт СИБУРа
Статья затрагивает создание и развитие сервиса качества данных в компании СИБУР, который обеспечивает надежность и точность данных, что критически важно для рентабельности бизнеса в условиях современного производства.