Data Engineer, до 250 000 gross
Группа компаний АСНА (https://hh.ru/employer/688647)
Требуемый опыт работы: 2+ года
Полная занятость, удаленная работа
Что мы делаем:
- Строим Data Lake для вывода обработки данных в компании на новый уровень
- Переосмысливаем работу с данными
- Доводим модели до production-ready
Обязанности:
- Писать код
- Выводить модели дата-аналитиков в продакшн
- Создавать CI/CD процессы
- Решать ETL задачи
- Настраивать Hadoop, Apache Airflow, NiFi
- Исследовать и интегрировать новые источники данных в DataLake
Требования:
- Уверенное владение Python. Плюсом будет знание Java/Scala/Golang/Rust
- Linux/bash
- Понимание форматов хранения данных
- Понимание основ SRE, health checks, SLA
- Понимание построения инфраструктуры (AWS/GCE). Плюсом будет знание provisioners (ansible/terraform)
Наш стэк:
- NiFi, Hadoop, Airflow
- Scipy/Numpy/Pandas/Spark
- MinIO
- Kubernetes
Контакты: Сергей Полянин, Технический директор АСНА @spolyanin
Post #108
1.01K