Data Engineer

Описание

Мы — Addamant (ADM). Уже более 14 лет разрабатываем и поддерживаем цифровые решения для российского бизнеса: от крупных федеральных компаний до известных дизайн‑студий. Нужен Data Engineer, который будет строить надёжные пайплайны и платформу данных.

Задачи

• Разрабатывать и поддерживать ETL/ELT пайплайны и витрины данных (RAW/DDS/CDM);
• Оптимизировать сложные SQL запросы (Greenplum, PostgreSQL, ClickHouse);
• Делать потоковую обработку данных на Apache Kafka;
• Оркестровать процессы в Apache Airflow;
• Работать с Apache Spark и участвовать в проектировании DWH/Data Lake.

Требования

• 4+ года Data Engineer / ETL разработчиком;
• Сильный SQL и опыт работы с MPP СУБД;
• Опыт с Kafka, Airflow и, желательно, Spark;
• Понимание архитектуры DWH/Data Lake и CI/CD для данных.