Сегодня вечером ждём вас на стрим! Валерия Елпатьевская, инженер данных в Альфа-Банке, разберёт, как настроить регулярную загрузку файлов из Telegram-канала через API и обойтись без Airflow. Валерия соберёт рабочую оркестрацию на тасках: покажет, куда и как складывать сами файлы и как собрать метаданные к ним.
Что сделаем:
1️⃣ Настроим таски, которые по расписанию забирают новые файлы из Telegram-канала через API;
2️⃣ Разложим файлы в S3-подобное хранилище, а метаданные сохраним отдельно;
3️⃣ Соберём всё в рабочую оркестрацию — без единой строчки Airflow.
Заодно покажем, как обойти ограничение Telegram на выдачу API-ключа — без танцев с бубном.
📆 24 июля, 19:00 МСК, онлайн
➡️ Поставить напоминание в календарь
📈 Симулейтив | 📱 ВК | 📱 YouTube | 📱 Канал о DS