Старший BI-инженер (Superset) (Python)

Проект реализация DWH и BI в области противодействия мошенническим операциям.

Цель проекта: обеспечение целевых подразделений антифрода инструментами аналитики и подготовки принятия решений для задач предотвращения мошенничества.

ЧТО ВАС ЖДЕТ:

• Высокая автономность: вы будете исследовать и развивать сквозной процесс от множественных источников данных до форм представлений непосредственным пользователям.
• Разнообразие данных: для задач домена используются данные практически всех направлений внутри банка и много внешних специфичных данных.
• Передовой технологический стек и нетривиальные задачи: Графовая аналитика и Graf RAG; Feature Store с возможностью его переиспользования для in-line задач, интеграции результатов AI в бизнес аналитику и так далее.
• Влияние и бизнес-импакт: у нас высокий спрос на качественные данные как в аналитических задачах, так и в области машинного обучения.

СТЕК:

• Greenplum (GPDB)
• Data Vault 2.0
• Data Warehouse
• Data Architecture
• PowerDesigner
• SQL
• Data Modeling
• Banking Data Model
• General Ledger
• Data Governance
• MPP Database
• ETL Architecture

ЧЕМ ПРЕДСТОИТ ЗАНИМАТЬСЯ:

• Принимать участие в проработке архитектуры ETL и интеграций аналитического хранилища данных (DWH);
• Проектировать и обеспечивать реализацию потоков ETL в соответствии с выбранной методологией;
• Управлять физической моделью данных корпоративного хранилища;
• Формировать стандарты в области данных и контролировать их соблюдение, обеспечивать историзацию и правила качества данных;
• Взаимодействовать с владельцами данных, бизнес и системными аналитиками;
• Оптимизировать архитектуру хранилища и обеспечивать ее масштабируемость;
• Готовить и согласовывать обязательную документацию.

НАШИ ОЖИДАНИЯ ОТ КАНДИДАТА:

• Опыт работы главным/ведущим инженером ETL/ELT от 3 лет;
• Глубокое понимание архитектуры корпоративных хранилищ данных;
• Практический опыт проектирования хранилищ с использованием Greenplum (GPDB), Postgres, Hadoop;
• Понимание архитектуры Greenplum: распределение, партиционирование, планы выполнения, оптимизация хранения и обработки больших объемов данных;
• Результативный опыт анализа проектных решений, моделей, ETL/ELT-процессов, BI-витрин и технической документации;
• Практический опыт работы с отечественными BI решениями;
• Отличное знание SQL и принципов оптимизации запросов в MPP-системах;
• Экспертиза и применение архитектурных паттернов загрузки, инкрементальности, CDC, дедупликации, историчности, отслеживаемости и разграничения доступа;
• Опыт в проектировании и применение Spark, Impala, Trino, Airflow, Java/Python в промышленном ландшафте данных;
• Понимание принципов CI/CD, работа с системами контроля версий;
• Уверенное владение инструментами проектирования:
  - разработка физических моделей;
  - управление репозиторием моделей;
  - поддержка корпоративных стандартов моделирования.

БУДЕТ ПЛЮСОМ:

• Опыт работы с данными в антифрод-подразделении банка или фин. организации;
• Опыт проектирования CDM/LDM/PDM в крупных банках;
• Опыт построения Data Lake / Lakehouse совместно с DWH;
• Знание подходов Data Governance и Data Quality;
• Понимание принципов MDM;
• Опыт работы с StarRocks;
• Опыт работы с PXF;
• Знание Agile-подходов к разработке;
• Экспертиза в банковской предметной области. Вы должны хорошо ориентироваться в банковских данных и понимать структуру основных предметных областей.

ЧТО МЫ ПРЕДЛАГАЕМ:

• Обучение за счет компании (посещение конференций, курсов, помощь в написании статей на Хабр и т.д.);
• Вертикальное и горизонтальное развитие: регулярные тренинги, вебинары, митапы;
• Забота о вашем здоровье: ДМС с первого месяца работы, куда входит стоматология;
• Прозрачный доход: оклад (по итогам интервью) + ежеквартальные премии по результатам KPI;
• Гибридный формат работы (2 дня офис, 3 дня удаленно) в Сколково;
• Дополнительные бонусы от Россельхозбанка для сотрудников группы компаний (Скидки на спортзалы, рестораны, маркетплейсы и т.д.).

Задачи:

• разработка, оптимизация и поддержка процедур (PL/SQL) для обработки информации в корпоративном хранилище данных на СУБД Oracle;
• написание сложных SQL-запросов для формирования данных под отчетность и интеграции с внешними системами (1С, B2B и др.);
• обеспечение корректности, целостности и производительности процессов загрузки (ETL) данных из различных источников в хранилище;
• участие в создании и поддержке внутренних веб-сервисов и инструментов с использованием стеков React (Frontend), Java или Python (Backend);
• разработка сервисов для бизнес-задач: планирование бюджета, управление метаданными, расчетные модели для продуктов компании;
• взаимодействие с бизнес-заказчиками и аналитиками: сбор, анализ и согласование требований к доработкам хранилища и витрин данных.

Нам важно:

• высшее образование;

• опыт работы с хранилищем данных от 6 месяцев;

• продвинутый уровень SQL(Oracle): написание сложных запросов и процедур, навык работы с оптимизаторами;

• будет преимуществом опыт работы с Java, Python, React, Spark, ML.

Мы предлагаем:

• официальное трудоустройство по ТК РФ, фиксированный доход, годовой бонус;
• график работы 5/2 с 9:00 до 18:00, в пятницу — сокращенный рабочий день до 16:45, обсуждаем гибридный формат работы после прохождения испытательного срока;
• встречи с экспертами в различных сферах — от финансов и карьеры до развлечений и ЗОЖ (в рамках корпоративного проекта «Успех рождается в Согласии»);
• обучение, отдых, фитнес и многое другое — на выгодных условиях от партнеров;
• развитое спортивное комьюнити: беговой клуб, футбольная и баскетбольная команды;
• страховую защиту от критических заболеваний после прохождения испытательного срока;
• денежный бонус за трудоустройство друзей по вашей рекомендации.