Привет!

Одним из процессов, с которым всегда работают на data-проектах - это ETL/ELT разработка.

ETL (extract, transform, load) - процесс извлечения, обработки и загрузки данных между системами или хранилищами данных.

Написал пост про применение Airflow для управления ETL/ELT процессами, так как этот продукт ОЧЕНЬ часто используется на проектах.