DataOps Engineer (Python, AWS, Airflow) / Luminaria
Remote
Salary: $2500 - $4500

Luminaria — разрабатывают систему прогнозирования цен на сельхоз продукцию на рынке США, строят полный пайплайн от сбора и обработки данных (GEFS, CFS, спутниковые снимки, отчеты USDA) до предсказания урожайности и итоговой рыночной стоимости для торгов на бирже.

Требования к кандидату:
- Опыт работы с обработкой данных на Python
- Знание стека технологий: Python, Docker, Airflow
- AWS: практический опыт работы с ECS, EC2, IAM; плюсом опыт с MWAA;
- Понимание DevOps: CI/CD, IaC
- Понимание параллельных вычислений
- Библиотеки обработки данных: pandas, numpy; плюсом xarray, polars, pyspark;
- Глубокое понимание DAG'ов в Airflow
- Опыт работы с ETL-процессами
- Опыт настройки окружения в разных средах выполнения

Читать подробнее:
→ Откликнуться тут

Для связи и отправки резюме:
TG: @sindq

Хотите разместить вакансию?
→ Отправить вакансию (бесплатно в дайджест)