Post #3368
227
#outstaff
Ищем 1 Senior Data инженера
(ID 53750)
📌 Требования:
- Опыт построения ETL-пайплайнов с частой выгрузкой (каждые 5 минут);
- Навыки работы с разными источниками: JDBC (PostgreSQL, Oracle и т.д.), SFTP (CSV/XML), REST API;
- Умение трансформировать данные: дедупликация, нормализация, обогащение по справочникам;
- Опыт загрузки данных в целевую систему через REST API (например, CSV-файлами);
- Обязательно знание ОДНОГО из стеков: Airbyte (CDC, коннекторы) + ClickHouse (обработка) + Airflow (оркестрация) ЛИБО Kafka Connect (источники) + Kafka (поток) + Kafka Streams (трансформация).
Задачи:
- Проектирование и реализация логики трансформации (дедупликация, нормализация, обогащение);
- Подготовка CSV-выгрузок под требования целевого REST API;
- Организация надёжной отправки данных в целевую систему;
- Внедрение мониторинга качества данных и метрик пайплайна;
- Координация работы команды и валидация результатов.
О проекте:
Конечный заказчик - ГОС структура.
4 часа в день, парт тайм.
Необходим специалист, способный:
- Разработать технический roadmap реализации проекта.
- Выбрать и обосновать оптимальный технологический стек.
- Реализовать ключевые компоненты архитектуры.
- Контролировать работу Middle-инженеров и валидировать промежуточные результаты.
📍Локация: РФ и дружественные страны
Гражданство: РФ и дружественные страны
Срок привлечения: 1,5-2 месяца
📨 Регистрируйтесь, загружайте резюме на https://skillstaff.ru и оставляйте отклик на запрос
❗️Все актуальные запросы — https://skillstaff.ru/actual-requests/
skillstaff.ru SkillStaff — cервис по аренде и аутстаффингу специалистов Вакансия Data инженер для специалистов компаний-партнеров по аутстаффингу, предпринимателей и самозанятых. Большая база предложений с полной и частичной занятости, проектной работой в IT, маркетинге, финансах, юриспруденции, HR и других сферах. SkillStaff… Ищем 1 Senior Data инженера
(ID 53750)
📌 Требования:
- Опыт построения ETL-пайплайнов с частой выгрузкой (каждые 5 минут);
- Навыки работы с разными источниками: JDBC (PostgreSQL, Oracle и т.д.), SFTP (CSV/XML), REST API;
- Умение трансформировать данные: дедупликация, нормализация, обогащение по справочникам;
- Опыт загрузки данных в целевую систему через REST API (например, CSV-файлами);
- Обязательно знание ОДНОГО из стеков: Airbyte (CDC, коннекторы) + ClickHouse (обработка) + Airflow (оркестрация) ЛИБО Kafka Connect (источники) + Kafka (поток) + Kafka Streams (трансформация).
Задачи:
- Проектирование и реализация логики трансформации (дедупликация, нормализация, обогащение);
- Подготовка CSV-выгрузок под требования целевого REST API;
- Организация надёжной отправки данных в целевую систему;
- Внедрение мониторинга качества данных и метрик пайплайна;
- Координация работы команды и валидация результатов.
О проекте:
Конечный заказчик - ГОС структура.
4 часа в день, парт тайм.
Необходим специалист, способный:
- Разработать технический roadmap реализации проекта.
- Выбрать и обосновать оптимальный технологический стек.
- Реализовать ключевые компоненты архитектуры.
- Контролировать работу Middle-инженеров и валидировать промежуточные результаты.
📍Локация: РФ и дружественные страны
Гражданство: РФ и дружественные страны
Срок привлечения: 1,5-2 месяца
📨 Регистрируйтесь, загружайте резюме на https://skillstaff.ru и оставляйте отклик на запрос
❗️Все актуальные запросы — https://skillstaff.ru/actual-requests/