AWS Data Engineer

🏢 Компания: CLERA
💰 ЗП: $65/hr (W2)
🌍 Формат: Удалёнка, глобально (100% remote)
🕒 Занятость: Полная занятость

О компании:

Это hands-on роль инженера данных в рамках инициативы по построению data‑infrastructure в крупном предприятии. Ожидается самостоятельная ответственность за полный цикл AWS‑прайплайнов и доставку готовых для потребления наборов данных.

Задачи:

• Стримить и обрабатывать данные из мейнфреймов и legacy‑систем, загружая их в AWS S3.
• Проектировать и реализовывать ETL/ELT‑флоу с помощью AWS Glue.
• Проводить сверки данных, проверки качества и валидацию.
• Кураторство и трансформация данных, поставка чистых датасетов в AWS Aurora / RDS (PostgreSQL).
• Управлять хранением в S3: политики хранения, архивирование и lifecycle‑правила.
• Автоматизировать обработки и деплой через GitHub и GitHub Actions CI/CD.

Требования:

• 5+ лет опыта в Data Engineering с реализацией пайплайнов и ETL/ELT.
• Практический опыт AWS Glue в продакшене.
• Уверенные знания AWS (S3, RDS/Aurora, Glue).
• Опыт построения стриминг‑пайплайнов с Kafka.
• Опыт реализации проверок качества данных и процессов reconciliation.
• Владение GitHub и GitHub Actions для автоматизации CI/CD.

Будет плюсом:

• Опыт работы с данными из мейнфреймов или интеграции legacy‑систем.
• Знание MongoDB или других NoSQL баз.

Стек:

AWS Glue, S3, Aurora/RDS, PostgreSQL, Kafka, GitHub, GitHub Actions, MongoDB, NoSQL, AI tools, mainframe

Условия:

• Оплата $65/hr на W2.
• Полная удалённая занятость.

📩 Откликнуться