Middle Data Engineer [Golden Record] Big Data
#удаленка #офис #middle
Компания: МТС
🔹Что нужно делать
-Процессить данные, собирать витрины с помощью pyspark на хадуп-кластере (постановка – от аналитиков)
-Выстраивать регламенты обработки данных (Airflow)
-Настраивать ETL процессы загрузки данных через стриминги (kafka)
-Решать проблемы с качеством данных: матчинг сущностей, дедупликации, нормализации
-Осуществлять работы по повышению отказоустойчивости и скорости работы дата части сервисов

🔹Кого мы ищем
-Знание и опыт работы с Python
-Знание и опыт работы с SQL
-Опыт работы с Spark, Hive, Hadoop
-Знание PostgeSQL
-Знание Git
-Желателен опыт работы с Kafka
-Будет плюсом опыт с Cassandra, Scylla
-Будет плюсом знакомство с библиотекой onETL- https://github.com/MobileTeleSystems/onetl

🔹Что предлагаем
-График работы: плавающее начало рабочего дня, гибридный график (или возможность работать из дома)
-ДМС с 1 месяца работы, куда включены: стоматология, страхование жизни и страховка при поездках за рубеж
-Десятки курсов и тренингов в Корпоративном университете МТС и Собственная виртуальная библиотека
-Корпоративный психолог и карьерный коуч
-Спорт: спортзал в офисе, компенсация фитнес-абонемента, бассейна, скидка в «Alex fitness», «Spirit fitness», «World class» и др.
-Well-being: бесплатный фреш-бар, массажный кабинет, массажные кресла и массаж на рабочем месте
-Бесплатная сотовая связь, выгодные тарифы для ваших близких, промокод на онлайн-кинотеатр KION и бесплатная подписка на МТС Premium
-Программа «Invite IT» (реферальная программа поощрения за рекомендацию ИТ-специалиста)
Контакты: https://job.mts.ru/vacancy/middle-data-engineer-golden-record-big-data-379164142038159176

https://t.me/devs_it