
Мы ищем инженера, который будет развивать корпоративную платформу данных и DWH компании: модернизировать ETL-ландшафт, переводить процессы с SSIS на Apache Airflow 3 и внутренний Python-фреймворк, а также делать работу с данными надежнее и…
Сейчас мы ищем Data Engineer
Мы ищем инженера, который будет развивать корпоративную платформу данных и DWH компании: модернизировать ETL-ландшафт, переводить процессы с SSIS на Apache Airflow 3 и внутренний Python-фреймворк, а также делать работу с данными надежнее и удобнее для аналитических команд.
Какие задачи тебя ждут:
Развивать корпоративную платформу данных и DWH;
Переводить существующие ETL-процессы с SSIS на Apache Airflow 3 и внутренний YAML-driven Python-фреймворк;
Разрабатывать и поддерживать надежные data-пайплайны;
Обеспечивать стабильную промышленную эксплуатацию: retry, backfill, идемпотентность, дедупликацию и корректную обработку сбоев;
Развивать проверки качества данных;
Оптимизировать SQL и работу с Microsoft SQL Server;
Развивать CI/CD-процессы для работы с данными;
Создавать переиспользуемые инструменты и self-service решения для аналитических команд;
Участвовать в развитии архитектуры DWH и подходов к моделированию данных.
Твоя суперсила:
Опыт работы Data Engineer от 3 лет;
Уверенный SQL и практический опыт работы с Microsoft SQL Server;
Python: ООП, модульная архитектура, type hints, тестирование, логирование, работа с REST API и БД;
Опыт работы с Apache Airflow или другим промышленным оркестратором;
Опыт работы с dbt или аналогичным SQL transformation framework;
Понимание ETL/ELT, batch- и near-real-time-обработки;
Умение строить надежные и отказоустойчивые data-пайплайны;
Опыт Git и CI/CD;
Опыт реализации Data Quality-проверок;
Понимание архитектуры DWH и организации слоев данных;
Знание подходов к моделированию данных: Kimball, Inmon, Data Vault, Anchor Modeling.
С нас:
HireSeeker собирает вакансии со всех площадок и присылает только релевантные. Бесплатно.