Data Engineer (Инженер сопровождения, Контроль качества данных)

ID 2708
Локация : РФ, удаленная работа по РФ❗️ (часовой пояс по Мск❗️)
Data Engineer

Описание вакансии
Инженер сопровождения_Контроль качества данных
Обязанности
- Сопровождение и анализ существующих процессов загрузки
- Разбор технических контролей качества данных
- Тестирование и установка доработок в продуктивный контур

Описание проекта
Контроль качества данных для департамента продвинутой аналитики.

Какие требования самые критичные?
- SQL , Spark, Hadoop, Airflow/oozie, понимание ETL , Airflow/oozie, , умение читать код (чтобы понимать как данные из одного места транслируются в другое)

P.S. прошу учитывать, что кандидатам с опытом разработки наименее интересны задачи сопровождения, поэтому дополнительно стоит отметить, что наша команда занимается задачами сопровождения дата продуктов.

Требования к кандидатам:
ЯП: SQL, Python
Технологический стек: Apache Spark, Hadoop\S3\S3-like, Apache Airflow, Parquet\ORC. Знание Apache Iceberg будет плюсом
Навыки работы с: Jira + Confluence или аналогичное, Git, CI/CD, XML, JSON
Навыки системного анализа, тестирования
Базовое знание работы с РСУБД, Kafka

🔎 Вопросы/резюме - в ЛС @veroneko