#работа #job #вакансия #Data_Engineer #Innopolis #Moscow #remote #офис #fulltime

Вакансия: Data Engineer
Компания: S7 TechLab🛩
Формат: удаленка, но также есть офисы в Москве, Новосибирске, Иннополисе и Краснодаре.
ЗП: middle 150-280к гросс (обсуждаемо)

В команду Dynamic Pricing ищем Data Engineer уровня middle.

Наш продукт занимается тем, что подбирает цены на авиабилеты и транслирует их в каналы продаж через собственное API. Для того, чтобы правильно рассчитать цены, нам необходимо регулярно готовить, обрабатывать и следить за качеством большого количества разнообразных данных, которые в разном виде поступают к нам в продукт для расчета цен. Поэтому мы ищем опытного дата инжинера, который хорошо разбирается в данных, умеет настраивать пайпланы обработки данных, мониторинги качества данных, умеет оптимизировать скрипты загрузки и т.д.

✈️Задачи:
— Развитие пайплайнов данных в продукте: работа с различными источниками и типами данных s3, Kafka, MySQL, Postgres, HDFS, parquet, avro
— Оптимизация пайплайнов;
— Разработка мониторингов на качество данных;
— Настройка интеграции с новыми источниками данных;

🧠Пожелания к кандидату:
— Уверенное знание SQL (умение написать сложный запрос и его оптимизировать)
— Уверенное знание Python;
— Пайплайны и стримы со Spark, Kafka, Kafka Connect, Airflow
— Понимание, как работает parquet, avro
— Опыт работы с Kubernetes
— Понимание, зачем нужен DQ

Если вы кроме дата инженерных задач не чужды DevOps, продукт поможет развиться в этой области. Также можно рассмотреть смежные области и попробовать себя в задачах аналитики и BI.

По условиям:
— ДМС со стоматологией;
— Профессиональное развитие: проходить обучение в компаниях-партнерах, участие и выступление в конференциях. И да! У нас есть партнёр, который готовит к выступлениям (поможет определиться с тематикой, посылом, составить доклад и подготовит к выступлению);
— Скидки на авиаперелеты для тебя и членов семьи;
— Корпоративные скидки в PrimeZone: скидки в рестораны, на обучающие курсы, товары и тд.

💌Контакты: @miavel, m.chentsova@s7.ru