fido-biznes

Data Engineer (Python)

Направление: Data Engineering / DWH / ETL

fido-biznes

Зарплата не указанаУзбекистанТашкентОфис

Senior Data Engineer

Направление: Data Engineering / DWH / ETL
Уровень: Middle+ / Senior
Опыт работы: от 3 лет в Data Engineering или смежных направлениях.

Ищем Data Engineer для разработки и развития инфраструктуры обработки данных и корпоративного хранилища (DWH).

Специалист будет отвечать за построение ETL/ELT-процессов, интеграцию данных из банковских систем, автоматизацию загрузок, обеспечение качества и доступности данных.

Основные обязанности

  • Разработка процессов получения данных из Oracle через CDC (Debezium, Kafka, Kafka Connect).

  • Разработка и поддержка DAG в Apache Airflow для автоматизации загрузки и обработки данных.

  • Проектирование слоёв данных: Staging, исторические данные (SCD2), Data Marts.

  • Разработка и оптимизация ETL/ELT-процессов с использованием SQL и PL/SQL.

  • Интеграция данных из различных источников в корпоративное хранилище (DWH).

  • Организация выгрузки данных в объектные хранилища (S3, MinIO).

  • Контроль качества данных, мониторинг загрузок и обработка ошибок.

  • Настройка мониторинга и алертинга для контроля актуальности данных и работы пайплайнов.

  • Подготовка технической документации, описание структур данных и Data Lineage.

Обязательные требования

  • Опыт работы Data Engineer от 3 лет.

  • Уверенное владение SQL: сложные запросы, оконные функции, оптимизация.

  • Глубокие знания Oracle и PL/SQL: пакеты, индексы, планы выполнения, работа с большими объёмами данных.

  • Опыт разработки на Python и автоматизации обработки данных.

  • Практический опыт работы с Apache Airflow или аналогичными оркестраторами.

  • Знание Apache Kafka, Kafka Connect и принципов CDC.

  • Опыт работы с Debezium или аналогичными инструментами.

  • Понимание моделирования данных: Fact/Dimension, SCD2, инкрементальная загрузка и идемпотентность.

  • Опыт работы с Git, Code Review и Docker.

Будет преимуществом

  • Опыт CDC-интеграции с Oracle: LogMiner, Redo/Archive Logs, SCN, Oracle GoldenGate.

  • Знание PostgreSQL / Postgres Pro и PL/pgSQL.

  • Опыт работы в банковской или финансовой сфере, понимание АБС и банковской отчётности.

  • Опыт оптимизации загрузки и обработки больших объёмов данных.

  • Практический опыт работы с GitLab CI/CD.

  • Знание инструментов мониторинга Prometheus, Grafana, Zabbix.

Личные качества

  • Аналитическое мышление и умение находить первопричины технических проблем.

  • Способность самостоятельно разбираться в сложных задачах.

  • Готовность уточнять требования и задавать вопросы при необходимости.

  • Ответственность, самостоятельность и открытая коммуникация с командой.

Условия:

  • Конкурентоспособная заработная плата
  • Корпоративное обучение и развитие;
  • Удобное месторасположение офиса;
  • Тренажерный зал, шахматы, мафия
  • Врач в штате (мед.осмотр каждый день)
  • График работы 5/2, с 9.00 до 18.00;
  • Трудоустройство согласно ТК РУЗ.
  • Тимбилдинги и праздники.
  • Участие в конференциях и форумах.
  • Современное здание и офис в стиле High-tech

Перед тем, как откликаться на вакансию, просим внимательно ознакомиться с требованиями, если Вы тот самый то мы вас ждем.

С уважением, HR Департамент

Похожие вакансии Data Engineer

hh.ru
островок.ostrovok!tech

Senior Data Engineer

островок.ostrovok!tech
Зарплата не указанаРоссияМоскваУдалёнка
Обязанности:
  • Разработка и оптимизация архитектуры Хранилища данных, проектирование слоев данных;
  • Создание, поддержка и оптимизация высоконагруженных ETL-процессов;
  • Интеграция данных из внутренних/внешних источников (API, файловые хранилища, БД);
  • Работа с BigData и стримингом;
  • Коммуникация с бизнес-аналитиками и формализация требований, дата-инженерами и архитекторами;
  • Проведение код ревью и шеринг экспертизы с коллегами (проведение митапов, техническая консультация).
Требования:
  • Опыт в разработке и поддержке хранилищ данных от 5 лет;
  • Отличные знания SQL, опыт оптимизации сложных запросов и работы с большими объёмами данных;
  • Опыт проектирования и разработки ETL-процессов;
  • Опыт разработки real-time и near real-time pipeline’ов обработки/загрузки данных;
  • Глубокие знания и практический опыт работы с Hadoop (HDFS, Hive, Spark);
  • Опыт работы с Airflow и Docker;
  • Опыт работы с GIT;
  • Уверенные знания Python.
hh.ru
Альфа-Селлер Технологии

Data Engineer

Альфа-Селлер Технологии
Зарплата не указанаРоссияМоскваГибрид

Альфа-Селлер — платформа для управления онлайн-бизнесом от Альфа-Банка. Она собирает интернет-магазин, маркетплейсы, рекламу, логистику и финансовые продукты в единый контур. Вместо десятка разрозненных кабинетов — одно место, где предприниматель ведёт бизнес.

Платформу усиливают технологии таких сервисов, как AdvantShop, MarketGuru, Flocktory, WhoIsBlogger и Digital Chief. Команда создаёт единую архитектуру: синергию решений и новые сценарии роста для селлеров, которых ни один инструмент по отдельности не даёт.

Мы делаем не очередной сервис на рынке, а единую систему для онлайн-торговли. Работаем с бизнесом любого масштаба — от локальных продавцов до федеральных компаний. Наша цель — забрать на себя рутину, чтобы предприниматели занимались продуктом и клиентами.


Сейчас в нашей команде открыта позиция Data Engineer.


Обязанности:

  • Архитектура и реализация витрин данных для аналитики,
  • ML и AI-агентов.
  • Проектирование и внедрение API на python (fastapi, flack).
  • Поддержка и написание пайплайнов ETL/ELT Airflow /
  • Spark / Kafka / ClickHouse / PostgreSQL / S3 etc..
  • Проектирование архитектуры данных в Data Lake и Data LakeHouse.
  • Мониторинг качества данных в Openmetadata.

​​​​​​​​​​​​​​Требования:

  • 3+ лет опыта в области Data Engineering, Data Governance, Data Quality или Data Platform.
  • Отличное знание SQL, уверенное владение Python.
  • Опыт внедрения и поддержки data catalog / data lineage (OpenMetaData).
  • Опыт написания ETL на БД Clickhouse.
  • Опыт внедрения фреймворков для валидации и контроля качества данных.
  • Опыт работы с инструментами: Great Expectations, Deequ, Soda, Monte Carlo, dbt tests.
  • Навыки построения документации и стандартов по качеству данных, SLA, ownership моделей.

Будет преимуществом:

  • Опыт работы в компаниях с распределенной архитектурой данных

  • Опыт с генеративным ИИ - структурирование и валидация входных/выходных данных для LLM.

Условия:

  • Официальное трудоустройство по ТК РФ.
  • Работа в аккредитованной ИТ-компании.
  • Карьерный рост: ты будешь понимать, что нужно сделать для перехода на другой уровень.
  • Заботу о твоем здоровье: программа ДМС, куда входит стоматология и обслуживание в лучших клиниках города, скидки на абонементы в фитнес-клубы, неформальные спортивные сообщества. Также есть фитнес-зал в офисе.
  • Гибридный формат работы 5/2 . Удобное рабочее место: наш современный офис находится в банковском кластере в 3-х минутах ходьбы от метро Технопарк. Рядом большой выбор кафе и ресторанов, где ты сможешь разнообразно пообедать с коллегами, сменить обстановку и “перезагрузиться”.
  • Возможности для разнообразного досуга: скидки на услуги туристических агентств, продукты питания, в рестораны и бары, в магазины и салоны красоты.
hh.ru
lamoda tech

Руководитель группы больших данных

lamoda techАвтоподнятие
Зарплата не указанаРоссияМоскваУдалёнка

Мы в поиске Team Lead в направление BigData, который будет руководить командой по разработке инструментов и пайплайнов данных для DS и ML команд. Команда работает в различных кросc-функциональных проектах в области DS и поддерживает такие продукты как: ранжирование, навигация, персонализация и прайсинг.

Чем предстоит заниматься:

  • управлять командой из 4 человек (оценка производительности, мотивации, развитие, найм);
  • выстраивать процессы команды и настраивать взаимодействие со смежными командами;
  • определять (и отстаивать) архитектуру решений обработки данных, техническая декомпозиция до понятных команде эпиков;
  • совместно работать с командой над задачами из бэклога, помогать в критических направлениях;
  • обеспечивать качество и надежность производимых командой решений;
  • строить инструменты и ETL пайплайны данных;
  • развивать практику и культуру работы с данными в компании;
  • участвовать в исследованиях и принимать решения по использованию новых инструментов для обработки данных в компании;
  • организовывать и проводить собеседования.

Наш технологический стек: Hadoop, Trino, Spark, Spark Streaming, Airflow, Hudi / Iceberg, Python, Scala.

Мы ожидаем:

  • опыт управления командой от 1 года и готовность решать управленческие кейсы;
  • опыт в организации найма и построения команды;
  • желание быть техническим лидером для команды (не бояться погружаться в детали и помогать достигать целей);
  • готовность управлять сроками и ожиданиями бизнеса;
  • опыт выстраивания процессов с 0, подкрепленный метриками;
  • понимание принципов организации хранилищ данных;
  • уверенное знание SQL, умение строить сложные запросы и оптимизировать производительность;
  • уверенное знание одного из языков программирования: python, java, scala;
  • экспертность в Data Engineering, хорошие знания технологий (hadoop, kafka, spark, trino, airflow).

Мы предлагаем:

  • ДМС со стоматологией, телемедициной и программой поддержки ментального здоровья;
  • Страхование жизни;
  • Ежемесячные промокоды на Lamoda: два по 25%, два по 15% и в день рождения — 40%;
  • Программа привилегий и скидок от BestBenefits;
  • До 15 дней больничного в год оплачиваем в размере 100% от действующего оклада;
  • Бесплатные юридические консультации;
  • Дополнительные выходные в случае важных событий;
  • Яркие мероприятия и много неформального общения.

Развитие для каждого:

  • Опытный наставник для каждого новичка;
  • Обучение и участие во внешних конференциях;
  • Помогаем развивать личный бренд, выступать на конференциях и писать статьи;
  • Performance Review дважды в год, чтобы развиваться системно;
  • Проводим митапы и demo-дни для обмена знаниями;
  • Погружаем в fashion и каждый сезон знакомим с модными трендами.

HireSeeker собирает вакансии со всех площадок и присылает только релевантные. Бесплатно.