Ищу Data Engineer в edTech-компанию
Задачи:
⚫️Работа с базами данных - обработка, проверка, загрузка, контроль качества и консистентность данных;
⚫️Разработка и последующее сопровождение Data-продуктов на основе ETL и ELT-процессов; (Разработка и оптимизация процессов извлечения, загрузки и преобразования данных (ETL), их оркестрация и поддержка);
⚫️Построение DWH, данных для BI-систем и БД (данных) для обучения ML моделей.
Наш стек:
ClickHouse; PostgreSQL; Greenplum; Kafka; Kubernetes; Java/ Scala; SQL; AirFLow; Jira; Confluence; Git.
Ожидаем от кандидата:
⚫️Опыт работы от 2х лет с одной или несколькими СУБД: ClickHouse, PostgreSQL, Greenplum, Oracle, СУБД стэка Bigdata;
⚫️Знание инструментов оркестрирования: Apache Airflow;
⚫️Высшее техническое образование;
⚫️Опыт работы с хранилищами данных от 2х лет;
⚫️Уверенное знание SQL: сложные запросы, аналитически функции, понимание физической реализации join’ов, оптимизация производительности запросов;
⚫️Знание одного или нескольких языков программирования: PL/SQL, T-SQL, Java, Python, Scala на уровне переменных, процедур, функций, циклов, условных операторов;
⚫️Знание ETL-инструментов: Apache Airflow
Приветствуется:
⚫️Понимание принципов организации хранилищ данных, подходов к проектированию логической и физической моделей, понимание основной проблематики хранилищ и подходов к решению;
⚫️Опыт проектирования, создания и внедрения аналитических систем и хранилищ данных.
Пишите @ax_makarov
Post #645
3.9K