Data Engineer
#удаленкарф
Компания: BSS
🔹Чем нужно будет заниматься:
-Разработка ETL-процессов на базе прототипов и технических требований;
-Изменение существующих ETL-процессов, согласно меняющимся бизнес-требованиям;
-Продуктивизация кода, DQ-проверок, постановка на регламент, контроль работы ETL-процессов;
-Оптимизация и рефакторинг кода на уровне запросов и конфигураций (SQL/Python/Spark/HDFS);
-Взаимодействие с Системными аналитиками, Инженерами данных, Второй линией поддержки, DevOps, другими смежными подразделениями;
-Оперативное решение инцидентов на уровне третьей линии поддержки;
-Работа с Централизованным OLAP-хранилищем (Hadoop) и слоем репликации витрин данных (Greenplum). Также возможна работа с PostgreSQL, Teradata, Clickhouse и другими БД.

Что мы ждём от кандидата:
-Коммерческий опыт Data Engineer от 3-ёх лет;
-Опыт разработки и сопровождения ETL-процессов в проде (batch-пайплайны, регламентная загрузка, поддержка после запуска);
-Практический опыт работы с Hadoop-экосистемой: HDFS, Hive как SQL-движок, Spark (DataFrame / Spark SQL);
-Уверенное владение SQL, включая оптимизацию запросов под большие объёмы данных (CTE, оконные функции, работа с большими объёмами, понимание explain / планов выполнения);
-Умение использовать Python как инструмент ETL (data-скрипты, orchestration, transformations);
-Опыт оркестрации пайплайнов в Airflow (DAG’и, retries, SLA, backfills);
-Опыт анализа и устранения инцидентов в продуктивной среде (инциденты, падения джоб, анализ логов);
-Понимание принципов построения DWH / Data Lake / Lakehouse.

🔹Будет плюсом:
-Опыт работы с MPP-БД (Greenplum, ClickHouse, Teradata);
-Опыт внедрения DQ-проверок;
-Понимание принципов data governance и data security.

🔹Что мы предлагаем:
-Полное соблюдение ТК РФ c первого дня работы и своевременная выплата заработной платы;
-Удалённый формат работы по РФ;
-Расширенный ДМС со стоматологией;
-Бесплатное обучение английскому языку вам и вашим детям;
-Скидки в фитнес-клубы;
-Предоставляем всю необходимую технику для работы.
Контакты:hr_bss@bssys.com

🔥 Подписаться на наши каналы / @best_itjob / @it_rab