#outstaff

Ищем 1 Senior Data инженера
(ID 53750)

📌 Требования:
- Опыт построения ETL-пайплайнов с частой выгрузкой (каждые 5 минут);
- Навыки работы с разными источниками: JDBC (PostgreSQL, Oracle и т.д.), SFTP (CSV/XML), REST API;
- Умение трансформировать данные: дедупликация, нормализация, обогащение по справочникам;
- Опыт загрузки данных в целевую систему через REST API (например, CSV-файлами);
- Обязательно знание ОДНОГО из стеков: Airbyte (CDC, коннекторы) + ClickHouse (обработка) + Airflow (оркестрация) ЛИБО Kafka Connect (источники) + Kafka (поток) + Kafka Streams (трансформация).

Задачи:
- Проектирование и реализация логики трансформации (дедупликация, нормализация, обогащение);
- Подготовка CSV-выгрузок под требования целевого REST API;
- Организация надёжной отправки данных в целевую систему;
- Внедрение мониторинга качества данных и метрик пайплайна;
- Координация работы команды и валидация результатов.

О проекте:
Конечный заказчик - ГОС структура.
4 часа в день, парт тайм.

Необходим специалист, способный:
- Разработать технический roadmap реализации проекта.
- Выбрать и обосновать оптимальный технологический стек.
- Реализовать ключевые компоненты архитектуры.
- Контролировать работу Middle-инженеров и валидировать промежуточные результаты.

📍Локация: РФ и дружественные страны
Гражданство: РФ и дружественные страны
Срок привлечения: 1,5-2 месяца

📨 Регистрируйтесь, загружайте резюме на https://skillstaff.ru и оставляйте отклик на запрос
❗️Все актуальные запросы — https://skillstaff.ru/actual-requests/