Lead Data Engineer / Data Platform Lead (Python)

GigaDataGateway - единая точка доступа ко всем данным, знаниям и AI-возможностям - от поиска и инференса моделей до автономных агентов. Мы проектируем систему так, чтобы она одновременно обслуживала десятки внутренних команд и поддерживала процессы оптимизации моделей на основе накопленного опыта работы с внешними и внутренними источниками инференса.

• разработка и развитие сервисов GigaDataGateway на Python

• проектирование и реализация REST/gRPC API для внутренних клиентов

• интеграция с различными источниками данных (базы, стриминговые системы, аналитические движки, llm-агенты, поисковые движки)

• разработка модулей авторизации, аутентификации, контроля доступа и логирования

• работа над производительностью, отказоустойчивостью и масштабируемостью.

• участие в код-ревью, формирование best practices команды

• опыт коммерческой разработки на Python от 7 лет

• глбокие знания FastAPI / aiohttp / gRPC

• опыт проектирования архитектуры сервисов и API-шлюзов

• отличное понимание многопоточности, асинхронности, очередей и распределённых систем

• опыт работы с высоконагруженными системами и оптимизации производительности

• хорошее знание SQL и навыки работы с аналитическими СУБД (ClickHouse, PostgreSQL)

• опыт построения масштабируемых решений на Kafka / RabbitMQ

• знание и применение DDD, Clean Architecture, SOLID

• опыт менторства и технического лидерства в команде

• навыки CI/CD, Kubernetes, мониторинг (Prometheus/Grafana, ELK/ClickHouse + Metabase).

Будет плюсом:

• опыт построения универсальных API-шлюзов или data API

• опыт работы с ML/AI сервисами (встраивание моделей в API)

• опыт интеграции с внешними системами через REST API/gRPC/GraphQL

• участие в проектировании корпоративных дата-платформ.

• участие в новом стратегическом проекте компании

• возможность влиять на архитектуру и стек технологий

• современный процесс разработки (CI/CD, GitLab, Docker/K8s)

• гибридный формат работы

• ежегодный пересмотр зарплаты, годовая премия

• корпоративный спортзал и зоны отдыха

• более 400 образовательных программ СберУниверситета для профессионального и карьерного развития

• расширенный ДМС, льготное страхование для семьи и корпоративная пенсионная программа

• вознаграждение за рекомендацию друзей в команду Сбера

Обязанности:

• Участие в разработке единой модели данных DWH, картина «сверху вниз» и связная модель данных по всем измерениям (домены, типы потребления, слои хранения)
• Организация сбора данных с разных источников в т.ч. внешних систем по API
• Обработка информации на языке программирования Python
• Создание отчетов в платформе PowerBI

Требования:

• Продвинутые знания SQL
• Отличное знание языков программирования DAX, Python, VBA
• Отличное знание платформы PowerBI
• Умение использовать технологию API для сбора данных из внешних источников
• Понимание и применение на практике принципов разработки в высоконагруженных информационных системах.
• Опыт работы с ETL инструментами

Плюсом будет

• Опыт работы с SQL/NoSQL базами данных (PostgreSQL, ClickHouse, S3)
• Опыт работы с AirFlow

Условия:

• Работу в аккредитованной ИТ-компании
• График гибрид (дни обсуждаем)
• Поддержка менторов и наставников, помощь в поиске точек роста и карьерном развитии
• Корпоративные мероприятия и дружный коллектив
• Скидки на фитнес, на продукцию для сотрудников компании
• Достойную Вашего профессионального уровня зарплату
• Официальное трудоустройство по ТК РФ, оплачиваемый отпуск, больничный

ЛОКАЦИЯ СТРОГО - САНКТ - ПЕТЕРБУРГ !!

Ищем в команду Data Engineer с опытом от 2-х лет. Привлечение до конца года.

Проект: Миграция аналитической отчетности BI на импортонезависимую платформу (Задачи предполагаются однотипные)

Обязанности:

• Разработка ETL
• Миграция данных в DWH

Требования:

• Высшее образование;
• Стаж работы по направлению не менее 2-х лет.
• Опыт работы с PostgreSQL, Airflow, построения ETL/ELT
• Опыт использование таск трекеров и систем контроля версий

Будет преимуществом опыт:

• MS SQL, Clickhouse
• Python или другие скриптовые языки
• Опыт построения DWH и витрин данных

Условия:

• График 5/2, офисный формат работы

• Оформление: по ТК РФ и/или ИП, оплачиваемые отпуска по графику и проч.