S

Senior Data Engineer (Python)

We’re looking for a Senior Data Engineer to join an enterprise Data Warehouse project in the insurance domain.

symfa

Зарплата не указанаНе указана странаЛокация не указанаУдалёнка

We’re looking for a Senior Data Engineer to join an enterprise Data Warehouse project in the insurance domain.

What you’ll do:

Build data ingestion, transformation and orchestration pipelines

Clean and validate data across the Bronze and Silver layers

Develop dimensional data models in the Gold layer

Optimize Azure Synapse Dedicated SQL Pool for analytical workloads and reporting

Help deliver reliable, analytics-ready data for Power BI and other BI tools

Must have:

✅ International project experience with English as the working language

✅ 5+ years of overall experience, including 2–3 years with Azure

✅ Azure data stack

✅ Python/PySpark, SQL

✅ DWH, ETL/ELT

✅ English B2, Russian C1

Tech stack: MS SQL/T-SQL, Python/PySpark, Azure, Azure Synapse Analytics, Azure Data Lake Storage, Synapse Pipelines/Azure Data Factory, Delta Lake, SQL Server, Azure SQL Database, Power BI

📍 Remote

Interested? Just DM me for more details 📩

Похожие вакансии Data Engineer

hh.ru
т-банк. ит. разработка

Дата-инженер

т-банк. ит. разработкаАвтоподнятие
Зарплата не указанаРоссияСаратовГибрид

В Т‑Банк большое и продвинутое хранилище данных: это 8000 объектов, 800 ТБ в Greenplum и 110 ТБ в Clickhouse.

С данными активно работают более 16 тысяч пользователей из бизнес-команд — они ежедневно принимают десятки решений с опорой на них. А наша команда делает все, чтобы доступ к данным был простым и ими было удобно пользоваться. Мы постоянно совершенствуем подходы к работе и стараемся быть новаторами на рынке технологий.

Мы ищем в команду дата-инженера. В Т‑Банке вы сможете развиваться в одном из двух направлений — системном анализе и ETL-разработке. Или совмещать их, если вам интересны оба.

Обязанности

  • Участвовать в формировании модели данных

  • Проектировать и разрабатывать витрины и потоки данных на основе потребностей бизнес-пользователей

  • Участвовать в проектах по развитию Data Platform

  • Писать скрипты SQL и Python

  • Прорабатывать интеграции с внешними системами для Data Platform

Требования

  • Свободно владеете SQL

  • Работали с DWH в качестве аналитика или разработчика минимум 5 лет

  • Понимаете теорию СУБД- и ETL-процессов

  • Знаете Python или другой язык программирования

  • Есть опыт проектирования объектов БД на основании бизнес требований

Мы предлагаем

  • Гибридный график
  • Достойную зарплату — обсудим ее на собеседовании
hh.ru
teez

Data Engineer

teez
Зарплата не указанаКазахстанАлматыОфис

Почему открыта вакансия

Teez быстро растет, и объем данных, который проходит через наши системы, постоянно увеличивается. Нам нужен Data Engineer, который поможет строить надежную инфраструктуру данных, развивать пайплайны и обеспечивать качественную доставку данных для аналитики, ML и бизнес-команд.

В этой роли предстоит работать с batch-и streaming-данными, развивать хранилища и витрины и участвовать в архитектурных решениях.

Чем предстоит заниматься

  • Разрабатывать и поддерживать ETL/ELT и CDC-пайплайны для batch-и streaming-данных.

  • Интегрировать различные источники данных и развивать слой хранения и витрин.

  • Работать с PostgreSQL, ClickHouse, S3 / lakehouse.

  • Обеспечивать качество и надежность data-пайплайнов: тестирование, мониторинг, алертинг и разбор инцидентов.

  • Развивать оркестрацию и CI/CD для data-процессов.

  • Участвовать в проектировании архитектуры data-платформы и технических решениях.

  • Проводить code review и улучшать существующие решения.

  • Документировать пайплайны, модели данных и правила их эксплуатации.

  • Оптимизировать производительность и надежность процессов обработки данных.

Кого ищем

Нам нужен Data Engineer, который:

  • имеет 2+ года опыта в Data Engineering в production-среде;

  • уверенно владеет SQL и Python;

  • понимает принципы моделирования данных и построения DWH / lakehouse;

  • имеет практический опыт работы с PostgreSQL и/или ClickHouse;

  • работал с Airflow и Kafka;

  • понимает принципы CDC, партиционирования, идемпотентности и контроля качества данных;

  • умеет работать с Git, Docker и CI/CD;

  • способен самостоятельно находить причины сбоев и проблем производительности data-пайплайнов.

Будет плюсом

  • dbt

  • Debezium / Flink CDC

  • S3-совместимые хранилища

  • Apache Spark

  • Kubernetes

  • Опыт работы с высокими объемами данных и streaming-системами.

Что предлагаем

  • Работу в быстрорастущем казахстанском marketplace.

  • Реальные задачи по построению и масштабированию data-инфраструктуры.

  • Современный стек и возможность влиять на архитектуру data-платформы.

  • Тесное взаимодействие с Data Scientists, Data Analysts, разработчиками и бизнес-командами.

  • Сильную инженерную культуру и минимум бюрократии.

  • Возможность развиваться в направлении Data Engineering / Big Data / Data Platform.

  • Комфортный офис в Алматы.

Сайты компаний
СБЕР

Дата инженер (Кредитные продукты и процессы)

СБЕРАвтоподнятие
Зарплата не указанаРоссияМоскваОфис

В Департамент ИТ блока «Корпоративно-инвестиционный бизнес» в команду «1,5 КГ отличного ЮЛ» открыта позиция Дата инженера.

Мы занимаемся анализом жизненного цикла Клиента в Банке, а также оценкой и прогнозом его финансового положения.

Текущая реализация на микросервисной архитектуре.

У Вас будет возможность поработать с богатыми и интересными данными. Стать частью быстрорастущего DS сообщества Сбербанка. Возможность писать на современном стеке (Python + Spark) и проникнуться всеми нюансами работы в большой технологической компании.

  • взаимодействие с PO и аналитиками для согласования требований

  • проектирование и разработка аналитических витрин данных

  • конфигурирование сборки, поставки на стенд, витрин данных и интеграций (API, ТФС)

  • определение очередности расчетов

  • разработка и поддержка спецификаций

  • проведение интеграционного, unit, регрессионного тестирования

  • мониторинг и оптимизация работы витрины: взаимодействие с сопровождением hadoop кластера и разработчиками Core-сервисов.

  • опыт работы дата-инженером от 2 лет

  • опыт работы с Hadoop и Apache Spark Scala

  • отличные знания SQL (JOINы, агрегаты, группировки, вложенные запросы, индексы, оконные функции)

  • знание основных алгоритмов и структур данных

  • опыт разработки в парадигме ООП, знаете его основные принципы

  • знание форматов данных: сsv, json, yaml, parquet

  • знание OLTP, OLAP, ACID, Теорема CAP

  • понимание процессов ETL, ELT

  • знание инструментов для организации и автоматизации работы: IDE, Git, Jira, Confluence.

Будет плюсом:

  • навыки работы с CI/CD

  • знание bash: базовые команды для работы с файлами и процессами, знаете как происходит процесс подключения к нодам - нужно для работы на кластере

  • представление о монолитных и распределенных системах: знаете принципы их работы и отличия, цели применения

  • навыки работы с генеративными AI-моделями.

  • комфортный современный офис рядом с м. Кутузовская, формат работы - офис

  • оформление на декретную ставку

  • корпоративный спортзал и зоны отдыха

  • более 400 образовательных программ СберУниверситета для профессионального и карьерного развития

  • расширенный ДМС, льготное страхование для семьи и корпоративная пенсионная программа

  • подписка Прайм с возможностью совместного использования на трёх близких

  • вознаграждение за рекомендацию друзей в команду Сбера.

Эта вакансия также есть на:hh.ru

HireSeeker собирает вакансии со всех площадок и присылает только релевантные. Бесплатно.