winline. it & tech

Data Engineer / Инженер данных (Python)

реализация в тандеме с архитектором физического уровня архитектуры данных в DWH для всех слоев (raw data layer, core data layer, data mart layer);

winline. it & tech

Зарплата не указанаРоссияМоскваОфис
Обязанности:
  • реализация в тандеме с архитектором физического уровня архитектуры данных в DWH для всех слоев (raw data layer, core data layer, data mart layer);
  • реализация ETL-пайплайнов передачи данных из различных внутренних и внешних ИТ-систем, используя разные подходы получения данных из источника;
  • построение эффективной системы оркестрации ETL-пайплайнов обеспечивающей обновление данных в DWH согласно обозначенным бизнес требованиям;
  • реализация и поддержка прикладных решений для контроля качества данных в DWH;
  • реализация и поддержка прикладных решений для управления метаданными DWH;
  • участие в R&D для выбора инструментов для построение отдельных частей платформы данных.
Требования:
  • Опыт работы от 3х лет;

  • базовые навыки в области инженерии данных;

  • системное аналитическое инженерное мышление;

  • умеренный перфекционизм и внимание к деталям;

  • понимание концепций проектирования DWH;

  • продвинутый уровень знания SQL;

  • высокий уровень владения Python для обработки данных;

  • опыт работы с оркестраторами и понимание концепции DAG;

  • опыт разработки и поддержки end-to-end пайплайнов данных;

  • опыт получения данных из различных типов API;

  • опыт работы с потоковой обработкой данных;

  • умение работать с GIT.

Условия:
  • график работы: на испытательном сроке офис 5/2, далее гибрид;
  • ежегодная индексация зарплаты, компенсация питания, премии по результатам работы, доплаты за больничный, материальная помощь в сложных ситуациях;
  • релокация из любой точки мира.

Похожие вакансии Data Engineer

hh.ru
островок.ostrovok!tech

Senior Data Engineer

островок.ostrovok!tech
Зарплата не указанаРоссияМоскваУдалёнка
Обязанности:
  • Разработка и оптимизация архитектуры Хранилища данных, проектирование слоев данных;
  • Создание, поддержка и оптимизация высоконагруженных ETL-процессов;
  • Интеграция данных из внутренних/внешних источников (API, файловые хранилища, БД);
  • Работа с BigData и стримингом;
  • Коммуникация с бизнес-аналитиками и формализация требований, дата-инженерами и архитекторами;
  • Проведение код ревью и шеринг экспертизы с коллегами (проведение митапов, техническая консультация).
Требования:
  • Опыт в разработке и поддержке хранилищ данных от 5 лет;
  • Отличные знания SQL, опыт оптимизации сложных запросов и работы с большими объёмами данных;
  • Опыт проектирования и разработки ETL-процессов;
  • Опыт разработки real-time и near real-time pipeline’ов обработки/загрузки данных;
  • Глубокие знания и практический опыт работы с Hadoop (HDFS, Hive, Spark);
  • Опыт работы с Airflow и Docker;
  • Опыт работы с GIT;
  • Уверенные знания Python.
hh.ru
Альфа-Селлер Технологии

Data Engineer

Альфа-Селлер Технологии
Зарплата не указанаРоссияМоскваГибрид

Альфа-Селлер — платформа для управления онлайн-бизнесом от Альфа-Банка. Она собирает интернет-магазин, маркетплейсы, рекламу, логистику и финансовые продукты в единый контур. Вместо десятка разрозненных кабинетов — одно место, где предприниматель ведёт бизнес.

Платформу усиливают технологии таких сервисов, как AdvantShop, MarketGuru, Flocktory, WhoIsBlogger и Digital Chief. Команда создаёт единую архитектуру: синергию решений и новые сценарии роста для селлеров, которых ни один инструмент по отдельности не даёт.

Мы делаем не очередной сервис на рынке, а единую систему для онлайн-торговли. Работаем с бизнесом любого масштаба — от локальных продавцов до федеральных компаний. Наша цель — забрать на себя рутину, чтобы предприниматели занимались продуктом и клиентами.


Сейчас в нашей команде открыта позиция Data Engineer.


Обязанности:

  • Архитектура и реализация витрин данных для аналитики,
  • ML и AI-агентов.
  • Проектирование и внедрение API на python (fastapi, flack).
  • Поддержка и написание пайплайнов ETL/ELT Airflow /
  • Spark / Kafka / ClickHouse / PostgreSQL / S3 etc..
  • Проектирование архитектуры данных в Data Lake и Data LakeHouse.
  • Мониторинг качества данных в Openmetadata.

​​​​​​​​​​​​​​Требования:

  • 3+ лет опыта в области Data Engineering, Data Governance, Data Quality или Data Platform.
  • Отличное знание SQL, уверенное владение Python.
  • Опыт внедрения и поддержки data catalog / data lineage (OpenMetaData).
  • Опыт написания ETL на БД Clickhouse.
  • Опыт внедрения фреймворков для валидации и контроля качества данных.
  • Опыт работы с инструментами: Great Expectations, Deequ, Soda, Monte Carlo, dbt tests.
  • Навыки построения документации и стандартов по качеству данных, SLA, ownership моделей.

Будет преимуществом:

  • Опыт работы в компаниях с распределенной архитектурой данных

  • Опыт с генеративным ИИ - структурирование и валидация входных/выходных данных для LLM.

Условия:

  • Официальное трудоустройство по ТК РФ.
  • Работа в аккредитованной ИТ-компании.
  • Карьерный рост: ты будешь понимать, что нужно сделать для перехода на другой уровень.
  • Заботу о твоем здоровье: программа ДМС, куда входит стоматология и обслуживание в лучших клиниках города, скидки на абонементы в фитнес-клубы, неформальные спортивные сообщества. Также есть фитнес-зал в офисе.
  • Гибридный формат работы 5/2 . Удобное рабочее место: наш современный офис находится в банковском кластере в 3-х минутах ходьбы от метро Технопарк. Рядом большой выбор кафе и ресторанов, где ты сможешь разнообразно пообедать с коллегами, сменить обстановку и “перезагрузиться”.
  • Возможности для разнообразного досуга: скидки на услуги туристических агентств, продукты питания, в рестораны и бары, в магазины и салоны красоты.
hh.ru
lamoda tech

Руководитель группы больших данных

lamoda techАвтоподнятие
Зарплата не указанаРоссияМоскваУдалёнка

Мы в поиске Team Lead в направление BigData, который будет руководить командой по разработке инструментов и пайплайнов данных для DS и ML команд. Команда работает в различных кросc-функциональных проектах в области DS и поддерживает такие продукты как: ранжирование, навигация, персонализация и прайсинг.

Чем предстоит заниматься:

  • управлять командой из 4 человек (оценка производительности, мотивации, развитие, найм);
  • выстраивать процессы команды и настраивать взаимодействие со смежными командами;
  • определять (и отстаивать) архитектуру решений обработки данных, техническая декомпозиция до понятных команде эпиков;
  • совместно работать с командой над задачами из бэклога, помогать в критических направлениях;
  • обеспечивать качество и надежность производимых командой решений;
  • строить инструменты и ETL пайплайны данных;
  • развивать практику и культуру работы с данными в компании;
  • участвовать в исследованиях и принимать решения по использованию новых инструментов для обработки данных в компании;
  • организовывать и проводить собеседования.

Наш технологический стек: Hadoop, Trino, Spark, Spark Streaming, Airflow, Hudi / Iceberg, Python, Scala.

Мы ожидаем:

  • опыт управления командой от 1 года и готовность решать управленческие кейсы;
  • опыт в организации найма и построения команды;
  • желание быть техническим лидером для команды (не бояться погружаться в детали и помогать достигать целей);
  • готовность управлять сроками и ожиданиями бизнеса;
  • опыт выстраивания процессов с 0, подкрепленный метриками;
  • понимание принципов организации хранилищ данных;
  • уверенное знание SQL, умение строить сложные запросы и оптимизировать производительность;
  • уверенное знание одного из языков программирования: python, java, scala;
  • экспертность в Data Engineering, хорошие знания технологий (hadoop, kafka, spark, trino, airflow).

Мы предлагаем:

  • ДМС со стоматологией, телемедициной и программой поддержки ментального здоровья;
  • Страхование жизни;
  • Ежемесячные промокоды на Lamoda: два по 25%, два по 15% и в день рождения — 40%;
  • Программа привилегий и скидок от BestBenefits;
  • До 15 дней больничного в год оплачиваем в размере 100% от действующего оклада;
  • Бесплатные юридические консультации;
  • Дополнительные выходные в случае важных событий;
  • Яркие мероприятия и много неформального общения.

Развитие для каждого:

  • Опытный наставник для каждого новичка;
  • Обучение и участие во внешних конференциях;
  • Помогаем развивать личный бренд, выступать на конференциях и писать статьи;
  • Performance Review дважды в год, чтобы развиваться системно;
  • Проводим митапы и demo-дни для обмена знаниями;
  • Погружаем в fashion и каждый сезон знакомим с модными трендами.

HireSeeker собирает вакансии со всех площадок и присылает только релевантные. Бесплатно.