IT – Архитектор (Data-инженер) (Python, TypeScript)

iFuture – продуктовая IT-компания, мы разрабатываем собственный международный продукт с многомиллионной аудиторией в сфере спортивной аналитики и развлечений уже на протяжении 29 лет.

Мы ищем опытного инженера данных, который будет играть ключевую роль в построении и поддержке архитектуры хранения и обработки данных.
Если вы умеете работать с большими объемами информации, сложными системами и стремитесь к постоянному улучшению процессов - мы будем рады видеть вас в команде :)

Основные задачи позиции:

• Разработка и поддержка конвейеров обработки данных в рамках существующей архитектуры DWH
• Реализация и оптимизация ETL/ELT-процессов
• Разработка моделей данных и трансформаций на DBT
• Работа с аналитиками: уточнение требований, подготовка витрин, контроль качества данных
• Поддержка метаданных, схем и моделей данных по принятым в команде стандартам
• Участие в код-ревью и agile-процессах команды​​​​​​​

Мы ожидаем:

• Опыт в Data Engineering от 3 лет
• Опыт работы с ClickHouse: движки таблиц, партиционирование, написание эффективных запросов
• Уверенный SQL: оконные функции, CTE, чтение планов запросов
• Python для разработки data pipeline'ов
• Опыт работы с Apache Airflow: написание и поддержка DAG'ов
• Понимание принципов DWH: слои, схемы, SCD
• Опыт работы с DBT или готовность быстро освоить​​​​​​​

Будет плюсом:

• Опыт работы с Apache Spark и/или Kafka
• Опыт работы с BI-инструментами (Tableau, Power BI, Superset)
• Опыт внедрения тестов и проверок качества данных (dbt tests, Great Expectations)
• Участие в миграции данных или построении хранилища
• Базовое понимание data governance: доступы, lineage, каталогизация
• Умение документировать техническое решение​​​​​​​

​​​Мы предлагаем:

• Конкурентоспособную заработную плату
• Гибкую и понятную систему роста между ролями и грейдами, постоянные performance review
• Помощь опытного ментора в период адпатации, индивидуальный план онбординга
• Оформление по ТК РФ с первого рабочего дня в аккредитованную IT-компанию
• Корпоративный ДМС + Стоматология
• Компенсацию занятий любым спортом/фитнесом, корпоративные скидки в сеть фитнес клубов
• Изучение английского языка с преподавателем в офисе или онлайн
• Оплату профильного обучения (курсы, конференции, вебинары, учебники и пр.)
• Гибкий график работы: присутственные часы с 11 до 17 (GMT+3)
• Удобный формат работы – из дома или в комфортном офисе (в 5 минутах от ст.м. Старая Деревня (Санкт-Петербург)

Компания ООО ИЦ «АЙ-ТЕКО» - ведущий российский системный интегратор и поставщик информационных технологий для корпоративных заказчиков. Активно действует на рынке IT России с 1997 года, входит в ТОП-400 крупнейших российских компаний, ТОП-10 крупнейших IT-компаний России.

В связи с активным развитием проектов в компании открыта вакансия Data Engineer.

ВАМ ПРЕДСТОИТ:

• Проектировать и разрабатывать новые, а также поддерживать существующие data pipeline’и в облачной среде;
• Заниматься тюнингом и оптимизацией производительности пайплайнов (написание эффективного кода, работа с "горячими" точками, распределенные вычисления);
• Настраивать мониторинг, алертинг и участвовать в создании дашбордов для отслеживания здоровья данных;
• Внедрять и развивать практики Data Quality и DataOps;
• Поддерживать и развивать техническую документацию.

НАШИ ОЖИДАНИЯ ОТ УСПЕШНОГО КАНДИДАТА:

• Опыт работы от 3х лет (Обязательно);
• Отличные знания SQL: умение писать сложные запросы, оптимизировать их, читать и понимать планы выполнения (execution plans), знать внутреннюю работу движка (алгоритмы джойнов, распределение данных, индексы);
• Опыт промышленной разработки на Scala от 2 лет (или уверенный Python/PySpark, если ты готов(а) работать с нашим Scala-ядром;
• Уверенное знание Apache Spark: понимание архитектуры, работы с памятью, оптимизации Spark-задач;
• Понимание архитектуры Lakehouse: знание концепций DWH и Data Lake, понимание слоев (Raw, Clean, Core, Mart), витрин и агрегатов;
• Опыт работы с оркестраторами: Airflow, Dagster или аналогичными планировщиками задач;
• Уверенная работа с Git, понимание принципов CI/CD для данных.

БУДЕТ ПЛЮСОМ:

• Опыт работы со стриминговым ETL: Kafka, Spark Structured Streaming или Apache Flink;
• Опыт работы с современными табличными форматами (Apache Iceberg, Delta Lake или Hudi);
• Понимание принципов работы Kubernetes (опыт деплоя Spark-приложений или Airflow в K8s);
• Опыт работы с инструментами Data Quality (dbt, Great Expectations и аналоги);
• Базовое понимание ML-процессов (как модели потребляют данные, feature store).

МЫ ПРЕДЛАГАЕМ:

• Работа в аккредитованной ИТ-компании;
• Оформление в соответствии с ТК РФ с первого дня работы;
• Формат работы: Офис/гибрид в Москве, также возможен полностью удаленный формат работы в пределах РФ;
• ДМС с первого дня работы (включая стоматологию);
• Корпоративный спорт: скидки на посещение фитнес-клубов, футбольная и волейбольная секции, собственный йога класс;
• Работа в команде, использующей гибкий подход к разработке;
• Работа в развивающемся IT-проекте с командой специалистов высокого уровня, возможность развития и обмена опытом.

Data Engineer Mid+

200000 ₽ за месяц на руки

ООО «Ростджоб» — ведущая аутсорсинговая IT-компания. Мы специализируемся на разработке масштабных корпоративных приложений и веб-сервисов. Компания аккредитована как IT-организация, с 2020 года успешно реализует проекты различной сложности. Мы объединяем команду профессионалов, работающих над созданием инновационных и надёжных продуктов.

Важно:

• Рассмотрим кандидатов ТОЛЬКО с Москвы, т.к. - важно, чтобы специалист смог пройти интервью ОЧНО в офисе в Москве;
• Загрузка парттайм - в начале 120-130чч, далее идет постепенно на убыль;
• Рассмотрим ТОЛЬКО тех кандидатов, у которых есть опыт по ВСЕМ пунктам из ключевых требований;

• В Вашем резюме ОБЯЗАТЕЛЬНО должна быть информация по требованиям к вакансии (т.е. в Ваших проектах, обязанностях должен отслеживать весь этот опыт/технологии и программы, который нам нужен). Если чего-то не будет хватать - нужно будет дополнять. Лучше сделать всё как нужно сразу;

• Обучение не предусмотрено;
• Формат работы — удалённо;
• Режим работы: часы работы приближены к интервалу с 9:00 до 18:00 по мск;
• Локация: Москва;
• Грейд: от миддл+.

Ключевые требования:

• Опыт построения ETL-пайплайнов от 3 лет;
• Знание Python, SQL;
• Опыт работы с озёрами данных и витринами данных;
• Понимание качества данных и валидации;
• Опыт создания промышленных витрин на Hadoop, PostreSQL.

Обязанности:

• Решением задач на применение Python и SQL на темы:
• создание ETL-процессов;
• оркестрация ETL-процессов;
• подключение к интерфейсам, для захвата/передачи данных;
• оптимизация запроса к СУБД;
• использование очередей;
• использование LLM.

Мы предлагаем:

• З/п 200000 руб. на руки;
• Полностью удалённый формат работы;
• Работу с крупной ИТ компанией;
• Работа с большой командой профессионалов.

Если вы готовы присоединиться к нашей команде и развиваться вместе с ООО "РостДжоб", отправляйте свое резюме.

Ждем вас!