H

Lead Data Engineer (Python)

Лидерство и менторинг: Развивать инженеров данных в команде, регулярно предоставлять конструктивную обратную связь, мотивировать и выстраивать индивидуальные треки карьерного и профессионального роста.

Halyk Bank

↑ Вакансия с автоподнятием
Зарплата не указанаКазахстанПавлодарОфис
Основные обязанности: Управление командой и процессами:
Лидерство и менторинг: Развивать инженеров данных в команде, регулярно предоставлять конструктивную обратную связь, мотивировать и выстраивать индивидуальные треки карьерного и профессионального роста.
Здоровье команды: Поддерживать высокий уровень доверия и прозрачную коммуникацию внутри коллектива, оперативно разрешать конфликты и обеспечивать качественный онбординг для новых сотрудников.
Delivery Management: Контролировать сроки, объемы и качество выполнения задач команды в Jira.
Приветствуется эффективное использование современных инструментов автоматизации (включая AI-ассистентов) для оптимизации рутины.

Архитектура, разработка и качество (Engineering & Quality):
Data-инфраструктура: Проектировать, администрировать и развивать масштабируемые банковские системы сбора, хранения и обработки больших данных. Обеспечивать их отказоустойчивость и бесперебойную работу.
Стандарты качества: Внедрять и поддерживать стандарты разработки (определять критерии чистого кода, проводить code review, контролировать актуальность технической документации).
Технический долг: Инициировать архитектурные обсуждения, закладывать лучшие инженерные практики и системно работать над снижением технического долга.
Аналитика и развитие (R&D & Business Analysis):
Анализ систем: Регулярно проводить аудит действующих систем и процессов обработки данных, формировать предложения по их оптимизации и модернизации.
R&D и инновации: Исследовать новые технологии, инструменты и архитектурные подходы на ИТ-рынке, оценивать целесообразность их внедрения в контур банка.
Проектирование решений: Активно участвовать в сборе требований, составлении технических заданий (ТЗ) для новых и существующих систем, отвечая за верхнеуровневую оценку сроков и архитектурную осуществимость. Основные требования: Hard Skills:
Python: Продвинутые навыки написания чистого кода для высоконагруженной загрузки, трансформации и сложной обработки данных.
Базы данных и SQL: Глубокая экспертиза в работе с нереляционными и реляционными СУБД такие как Oracle, PostgreSQL, Greenplum и т.д. Продвинутый навык глубокого анализа планов SQL-запросов (EXPLAIN), оптимизации сложных скриптов и повышения производительности БД.
DWH & Масштабирование: Отличные знания методологий проектирования и построения корпоративных хранилищ данных (КХД / DWH) и аналитических баз данных. Практический опыт проектирования и оптимизации витрин данных.
Оркестрация и ETL/ELT: Уверенный опыт автоматизации, построения и контроля стабильности сквозных ETL-пайплайнов с помощью современных оркестраторов.
Потоковая обработка: Опыт интеграции систем и построения процессов обработки данных в реальном времени с использованием брокеров сообщений.
Observability: Практический опыт настройки систем журналирования (логирования) и мониторинга (Grafana и связанные стеки) для контроля за стабильностью инфраструктуры данных.

Soft & Management Skills:
Scrum & Agile: Опыт работы и управления процессами по гибким методологиям разработки; понимание того, как выстраивать эффективный процесс работы.
People Management: Умение лидить команду, мотивировать, менторить, развивать технические навыки коллег и обеспечивать высокое качество их работы.
Планирование и декомпозиция: Продвинутые навыки декомпозиции комплексных архитектурных задач, их точной оценки по срокам и контроля своевременного выполнения спринтов. Условия: •Заработная плата и бонусы: конкурентоспособная оплата труда благодаря системе грейдирования, премии ко Дню Независимости и годовой бонус.
•Социальный пакет: ДМС и страхование жизни, мобильная связь и скидки от партнеров.
•Отпуск и отдых: 26 дней отпуска с возможностью взять дополнительные дни при наступлении важных событий.
•Бонусы за рекомендации.
•Рабочие условия: льготные условия на паркинг, свободный стиль одежды (smart casual).
•Обучение и развитие: тренинги, вебинары и доступ к корпоративной библиотеке, четкая система карьерного роста.
•Корпоративная культура: открытая и дружеская рабочая атмосфера, спортивные турниры и активная корпоративная жизнь.
•Инициативы и проекты: возможность участия в социальных проектах, реализация идей в новых проектах группы «Halyk» с использованием современных digital-инструментов.
•Команда: творческая и поддерживающая команда для реализации ваших идей.
Присоединяйтесь к нам и становитесь частью команды «Halyk»!
Эта вакансия также есть на:hh.ru

Похожие вакансии Data Engineer

Соц.сети

Data Engineer

Неизвестный работодатель
170k–190k ₽РоссияУдалёнка

Data Engineer
Длительность: долгосрок
Вилка: 170-190
Формат работы: удаленный
Локация, гражданство РФ

Проектирование и разработка пайплайнов обработки данных, поддержка и развитие DWH/ETL-процессов, рефакторинг кода, аналитика и миграция источников данных в отчетности.

Требования:
Общий опыт коммерческой разработки от 3 лет.
MSSQL: уверенное владение (T-SQL, оптимизация запросов, хранимые процедуры).
Python: от 2 лет.
Airflow: от 1 года (построение и сопровождение DAG, планирование, мониторинг).
Понимание принципов построения ETL/ELT-пайплайнов, работы с большими объемами данных, обеспечения отказоустойчивости и идемпотентности загрузок.
Git, уверенное владение SQL.
Опыт проектирования и разработки пайплайнов данных с нуля, участие в архитектурных решениях.
Опыт рефакторинга существующего кода, оптимизации производительности запросов, повышения отказоустойчивости.
Умение разбираться в чужом коде, самостоятельная проработка технических решений, декомпозиция сложных задач.
Опыт работы с инцидентами.
Опыт аналитических задач по изменению источников данных в отчетности (переключение с одной мастер-системы на другую), сверка данных, валидация результатов миграции.

Будет плюсом:
Опыт работы в e-com.

Системы учета задач и документации:
Jira, Confluence, GitLab.

🍂Резюме нужно прислать сегодня
В резюме должен быть отражен опыт, указанный в вакансии

••••••••

Сайты компаний
Зарплата не указанаРоссияМосква

Привет! Это команда разработки операционной аналитики.
Наша логистика доставляет миллионы товаров в сутки. Чтобы делать это быстро и качественно, всем точкам нашей сети доставки важно получать оперативную и качественную аналитику.

Задача нашей команды – предоставлять real-time и около real-time аналитику для тысяч наших пользователей на сортировочных центрах, расположенных по всей стране, оперируя терабайтами данных, получаемых от множества внутренних систем.

Наш стек

  • ClickHouse, Kafka, Airflow, Grafana, Superset, GitLab.

Вы будете

  • Создавать real-time отчетность для сортировочных центров и различных команд в логистике.

  • Настраивать интеграцию данных с другими базами данных и сервисами.

  • Разрабатывать новые схемы хранения данных и подходы к их обработке, участвовать в оптимизации имеющихся схем.

  • Создавать стабильные отказоустойчивые и масштабируемые аналитические сервисы.

  • Развивать внутренний инструментарий команды.

Нам важно

  • Опыт работы с обработкой больших данных и колоночными СУБД.

  • Продвинутое знание SQL.

  • Опыт разработки на Python.

  • Опыт в оптимизации производительности запросов и ETL процессов.

  • Уверенный технический бэкграунд (вы представляете себе, что такое контейнеры, K8s, Kafka, CI/CD и т. д).

Будет плюсом

  • Опыт работы с ClickHouse.

  • Опыт работы с Airflow.

  • Опыт работы с Prometheus.

hh.ru
navio

Инженер данных

navio
Зарплата не указанаРоссияМоскваГибрид

Чем предстоит заниматься:

  • Писать пайплайны на Python: от сырых данных с проездов до витрин и обучающих датасетов;
  • Считать метрики автономии: удержание в полосе, локализация, качество восприятия;
  • Собирать датасеты для нейросетей: фильтры, баланс, авторазметка, шаринг между командами;
  • Гонять инференс в проде на десятках GPU — авторазметка, эмбеддинги, каскады моделей;
  • Ускорять тяжёлую обработку;
  • Развивать внутренние библиотеки.

Что мы ждём от кандидата:

  • Опыт промышленной разработки на Python: читаемый production-код, ревью, тесты;
  • Хорошее знание SQL (джойны, оконные функции) и опыт работы с колоночными СУБД — у нас основной склад аналитики ClickHouse;
  • Опыт работы с объектным хранилищем (S3 / совместимым): чтение/запись больших объёмов, партиционирование, работа с путями и метаданными;
  • Опыт построения или поддержки data-пайплайнов в оркестраторах (Airflow, Dagster, Argo);
  • Готовность разбираться в доменных данных (rosbag / сенсоры / логи машин) и доводить пайплайны до стабильного продакшена.

Будет плюсом:

  • Практический опыт со Spark;
  • Опыт с Kubernetes (джобы, ресурсы, дебаг падений подов) и/или Docker;
  • Запуск инференса / ML-шагов в пайплайнах: GPU, батчи, ClearML / аналог, torch;
  • Разработка внутренних Python-библиотек или data-platform компонентов;
  • знакомство с ROS / LiDAR.

Примеры реальных задач:

  • Спроектировать систему сбора и хранения данных для обучающего датасета с версионированием, с возможностью частичного пересчета, а также использованием преагрегатов и заданным SLA на обработку;
  • Синхронизировать данные, идущих с разной частотой: IMU 100 Гц, видео 30 Гц и лидар 10 Гц;
  • Реализовать систему семантического поиска похожих ситуаций с использованием эмбеддингов и векторных баз данных.

HireSeeker собирает вакансии со всех площадок и присылает только релевантные. Бесплатно.