x5 tech

Senior Data Engineer (Java)

Мы разрабатываем платформу для планирования и управления цепочками поставок, ядром которой становится собственная система IBP (Integrated Business Planning). Команда строит end-to-end дата-пайплайны, интегрирует внешние и внутренние источн…

x5 tech

↑ Вакансия с автоподнятием
Зарплата не указанаРоссияМоскваУдалёнка

Мы разрабатываем платформу для планирования и управления цепочками поставок, ядром которой становится собственная система IBP (Integrated Business Planning). Команда строит end-to-end дата-пайплайны, интегрирует внешние и внутренние источники данных и обеспечивает надёжное хранение и доступность данных в DWH — от качества этой инфраструктуры зависят точность планирования и миллионы управленческих решений в закупках, продажах и логистике.

🔹Задача

Развивать дата-платформу и собственную систему IBP: собирать данные из разных источников (онлайн- и офлайн-продажи, ERP, внешние API), очищать, трансформировать и готовить их для процессов планирования, обеспечивая стабильный и масштабируемый поток данных.

🔹Что предстоит делать:

  • Разрабатывать собственную систему IBP (Integrated Business Planning) и участвовать в развитии её архитектуры.
  • Разрабатывать и оптимизировать Spark-пайплайны для обработки данных в масштабе (200+ млн строк ежедневно).
  • Автоматизировать интеграцию данных из внешних и внутренних источников: продажи, акции, цены, остатки, погода, календари.
  • Настраивать хранение и доступность данных в DWH.
  • Делать платформу более надёжной, масштабируемой и удобной.

🔹Наш стек

  • PySpark{3,4} / Trino
  • Kubernetes / Minio / Iceberg / Clickhouse / PostgreSQL
  • Kafka / RabbitMQ
  • Airflow 2.11
  • Python3
  • Docker
  • Pytest

🔹Мы предлагаем:

  • Официальное оформление с белой ЗП, ежеквартальные премии по результатам работы.
  • Возможность работать удалённо или в гибридном формате.
  • Широкий пакет ДМС (включая выезд за рубеж и стоматологию), страхование жизни и здоровья.
  • Возможность учиться и развиваться за счёт компании: внешние тренинги и семинары по профессиональным тематикам, участие в крупнейших конференциях страны, программы развития цифровых и управленческих навыков (Цифровая академия, Школа Тимлидов), онлайн- и офлайн-мастер-классы, корпоративный университет «X5 Полка», школа наставников и многое другое.
  • Программы мотивации для спикеров и авторов: внутренняя школа Speak Up School, Write Up, ачивки и баллы за выступления, подготовка спикеров к крупнейшим конференциям страны, сообщество авторов на Хабре, возможность шерить опыт с комьюнити внутренних и внешних экспертов.
  • Обмен опытом через сообщества: 12 технических комьюнити от Java до DevOps.
  • Яркая корпоративная жизнь с большим количеством мероприятий, конкурсов и возможностей для творческой реализации: регулярные внутренние митапы, демо-дни, открытые микрофоны, День IT-специалиста, программы волонтёрства, корпоративное предпринимательство X5 Idea Challenge.
  • Забота о благополучии сотрудников: 7 спортивных сообществ (бег, футбол, волейбол, баскетбол, хоккей, лыжи, триатлон), ежегодная Неделя здоровья.
  • Скидки в экосистеме бизнесов Х5 («Пятёрочка», «Перекрёсток», «Много лосося», «Перекрёсток Впрок»).
  • Программа привилегий Prime-zone (скидки на товары и услуги и специальные предложения от компаний-партнёров).
  • Материальная помощь сотрудникам, попавшим в сложную жизненную ситуацию.

Присоединяйся к команде X5 Tech, чтобы создавать будущее ритейла вместе с нами!

Похожие вакансии Data Engineer

Соц.сети
I

Senior Data Engineer (Databricks)

intellias
Зарплата не указанаПольшаУдалёнка

🚀 Senior Data Engineer (Databricks) | Remote | Poland

I'm currently looking for a Senior Data Engineer to join an international team building modern cloud-based data platforms and analytics solutions.

If you have experience with:

✅ Databricks

✅ PySpark & Spark

✅ Azure Cloud

✅ Data Warehousing & ETL/ELT

✅ Large-scale data processing

this could be a great opportunity for you.

✨ What we offer:

• Long-term cooperation

• Challenging data projects

• International environment

• Remote-first setup

• Opportunity to influence architecture and technical decisions

Whether you're actively looking or just curious about the market, I'd be happy to connect and share more details.

📩 Feel free to message me directly or tag someone who might be interested.

#Hiring #DataEngineer #SeniorDataEngineer #Databricks #Azure #PySpark #Spark #DataEngineering #BigData #CloudEngineering #AnalyticsEngineering #DataPlatform #RemoteJobs #TechJobs #PolandJobs #EuropeanJobs #OpenToWork #Intellias

hh.ru
alif uzbekistan

Middle Data Engineer

alif uzbekistanАвтоподнятие
Зарплата не указанаУзбекистанТашкентОфис

О команде:

Команда Data Engineering занимается развитием и поддержкой корпоративного хранилища данных (DWH) для основных продуктов компании: платежной системы, маркетплейса и сервиса рассрочки. Наша задача — обеспечить компанию надёжными и актуальными данными для внутренней аналитики и реализации требований регулятора (RegTech). Сейчас команда развивает архитектуру хранилища данных, переходит на ELT-подход и стандартизирует технологический стек на базе ClickHouse, dbt, Apache Airflow и Kafka Connect. Мы также совершенствуем инженерные практики, уделяя особое внимание надёжности, качеству данных и автоматизации процессов.

Чем вы будете заниматься:

  • Поддерживать и развивать дата-пайплайны: сопровождать существующие batch- и near-real-time потоки из микросервисов (PostgreSQL, MySQL, API), рефакторить legacy-процессы и переносить вычисления из Python/Pandas в SQL.
  • Оптимизировать стек данных: настраивать ClickHouse, Kafka Connect и CDC (Debezium, DLQ, Schema Registry), оптимизировать Airflow DAG-и и управление параллелизмом.
  • Развивать DWH и внедрять dbt: переносить бизнес-логику и витрины в dbt, использовать Jinja и макросы, развивать архитектуру Bronze / Silver / Gold.
  • Обеспечивать качество данных: автоматизировать DQ-проверки, сверять данные с источниками, настраивать мониторинг и алертинг, выстраивать Data Lineage.
  • Автоматизировать инфраструктуру и CI/CD: управлять конфигурациями пайплайнов, DDL-миграциями и доступами через код; развивать процессы на базе GitLab CI, werf, Docker и Kubernetes.
  • Использовать AI-инструменты: ускорять работу с legacy-кодом, генерацию тестов, оптимизацию SQL-запросов и подготовку документации с помощью Cursor, Copilot, ChatGPT и Claude.

Чего мы ожидаем от вас:

  • SQL: уверенное владение SQL, умение писать сложные аналитические запросы, понимание принципов оптимизации;
  • Python: хороший уровень (requests, работа с API, базовый Pandas), умение писать чистый, поддерживаемый код;
  • Airflow: опыт написания DAG-ов, понимание базовых принципов работы шедулера, операторов, хуков;
  • Архитектура DWH: понимание концепций построения хранилища и моделей данных; идеологии ELT vs ETL, OLAP vs OLTP;
  • Инфраструктура: базовое понимание контейнеризации (Docker / Kubernetes), уверенная работа с Git;
  • Уверенное использование AI-инструментов: активное применение в ежедневной работе (ChatGPT, Claude, Cursor, GitHub Copilot или аналоги) для ускорения написания рутинного кода, помощи в рефакторинге, генерации SQL/документации и быстрого онбординга в новую кодовую базу.

Будет большим плюсом:

  • Опыт работы с ClickHouse в продакшене (знание особенностей MergeTree движков, партиционирования);
  • Практический опыт работы с dbt (Data Build Tool);
  • Понимание принципов работы брокеров сообщений (Kafka) и CDC-инструментов (Debezium);
  • Опыт деплоя приложений в Kubernetes (Gitlab / Github CI).

Почему вам будет интересно с нами:

  • Работа в продуктовой финтех-компании;
  • Современная архитектура и сложные инженерные задачи;
  • Профессиональная команда, взаимная поддержка и обмен опытом;
  • Возможность карьерного роста;
  • Культура, открытая к новым идеям и улучшениям процессов;
  • Выстроенная адаптация с сопровождением HR, тимлида и ментора;
  • Уроки английского с носителями языка;
  • Компенсация обучения (постоянный доступ к корпоративным материалам, специализированные курсы, внутренние митапы);
  • Насыщенная корпоративная жизнь;
  • Добровольная медицинская страховка;
  • Офис в центре города в Tashkent - City;
  • График 5/2 с 9:00 до 18:00;
  • Конкурентная заработная плата (обсуждается по итогам собеседования).

О компании:

Alif — одна из крупнейших и самых быстрорастущих финтех-компаний Центральной Азии с проектами в Узбекистане, Таджикистане и Пакистане. Компания была основана в 2014 году Абдулло Курбановым, Фирдавсом Мирзоевым и Зухуршо Рахматуллоевым.

Наши достижения:

  • Alif - одна из самых динамичных и дорогих финтех-компаний региона, оценённая более чем в $100 млн.
  • В Узбекистане компания работает с 2019 года и за это время стала одним из лидеров рынка.
  • Общая аудитория пользователей превысила 9 миллионов человек.
  • Сегодня команда Alif насчитывает более 300 квалифицированных специалистов, которые создают и развивают полноценную финтех-экосистему.
  • Компания является резидентом IT-Park с 2019 года и активно расширяет своё присутствие на рынке.
  • Alif занимает передовые позиции на рынке BNPL-решений и продолжает уверенно развиваться.

Мы в Alif, обеспечиваем равные возможности, и приветствуем заявки от всех квалифицированных лиц, включая людей с ограниченными возможностями, ветеранов и людей из разных слоёв общества.

Соц.сети

Data Engineer

Зарплата не указанаРоссияМоскваОфис

#junior #офис

••••••••
Data Engineer
Полная занятость
Формат работы: офис (Москва)

☑️ Чем предстоит заниматься
-Проводить аналитику новых источников, реплику автоматизированных систем (АС). (Hadoop, spark)
-Разрабатывать витрины данных
-Строить прототипы, передавать прототипы в разработку. (SQL)
-Поддерживать текущий функционал, дорабатывать текущий функционал в рамках новых требований
-Формировать проверки контроля качества данных

☑️ Наши пожелания к кандидатам
-Уверенное знание SQL (HQL). Оконные функции, multiple join, cte, оптимизация
-Опыт работы с hadoop, hdfs, hive, yarn, spark (понимание как физически лежат данные в hadoop, партиционирование таблиц и т.д.)
-Опыт работы с большими данными (от 10млн записей в партиции)
-Опыт работы с банковскими данными (Общее понимание продуктов банка)

Контакты: ••••••••

🔥 •••••••• / •••••••• / ••••••••

HireSeeker собирает вакансии со всех площадок и присылает только релевантные. Бесплатно.