📌 О чем канал

Привет, я Дмитрий Кузьмин. Работаю Data Engineer и пишу для тех, кто уже знаком с SQL, но хочет лучше понимать весь путь данных: от источника и загрузки до проверок, витрины и BI.

Здесь я разбираю рабочие ситуации и показываю конкретные артефакты. Почему DAG может быть зелёным, а данные неправильными. Как повторно запустить batch и не получить дубли. Где проверять grain, что искать в Spark UI и как понять, что пайплайн действительно дал корректный результат.

Начни с разборов:

SQL и проверки данных
Как начать карьерный путь в Data Engineering
Почему RAG-бот иногда должен сказать «не знаю»

Если хочешь пройти этот путь руками

12 октября стартует шестой поток DE-практикума. На нём ты собираешь один локальный проект: Docker, загрузка данных, RAW / STG / CORE, проверки качества, Spark, Airflow, витрины и BI.

Практикум рассчитан на тех, кто уверенно использует SELECT, JOIN, GROUP BY и CTE, может прочитать простую Python-функцию и готов поставить Docker. Нагрузка составляет 6–8 часов в неделю. Стоимость участия 40 000 ₽. Доступ к Stepik и GitHub остаётся навсегда, проверка и поддержка продолжаются до завершения проекта.

На странице собраны программа, реальные сдачи, отзывы, бесплатное демо и короткая диагностика входа:

⏩ Посмотреть программу и проверить вход

Если не уверен, подходит ли тебе практикум с текущим уровнем, напиши мне @dim4eg91

🟢 Забирай стикеры канала - DE-медведь