Вакансии Data Engineer и инженера данных
Построение потоков данных, хранилищ и ETL/ELT-пайплайнов. Анализ данных и моделирование представлены в соседних разделах. Обновляется каждый час. Найдено: 107 вакансий за последнюю неделю.
- Вакансий за неделю:
- 107
- Медиана:
- 300 000 ₽
- Вилка:
- 200 000 ₽ — 395 000 ₽
Зарплаты — по 109 вакансиям с указанной вилкой за 30 дней
Поиск вакансий
HireSeeker — агрегатор вакансий. Собираем вакансии со всех основных площадок и показываем по вашей специальности. Подпишитесь на ежедневную подборку только релевантных.
- разработка, сопровождение и оптимизация ETL/ELT-пайплайнов на базе Apache Airflow;
- проектирование и развитие схем данных в ClickHouse (основное хранилище);
- поддержка PostgreSQL на базовом уровне;
- интеграция данных из различных источников: S3, RabbitMQ, внешние API, внутренние сервисы;
- написание и оптимизация SQL-запросов;
- контроль качества данных: профилирование, мониторинг полноты и консистентности, отладка пайплайнов;
- настройка и сопровождение мониторинга процессов и инфраструктуры: Grafana, Loki, Alertmanager, OpenSearch;
- работа с контейнеризированной инфраструктурой: Docker, Portainer;
- ведение задач и документирование решений в Jira/Wiki;
- взаимодействие с командой разработки и аналитиками для уточнения требований к данным.
- уверенное владение Python (pandas, обработка и трансформация данных);
- опыт построения и сопровождения ETL/ELT-пайплайнов в Apache Airflow или аналогах;
- опыт проектирования и сопровождения хранилища данных в ClickHouse: движки таблиц, партиционирование, оптимизация запросов;
- базовые навыки работы с PostgreSQL: проектирование схем, DDL/DML, индексы;
- опыт работы с объектным хранилищем (S3 и аналоги);
- опыт работы с брокерами сообщений: предпочтителен RabbitMQ, опыт с Apache Kafka и NATS также рассматривается;
- базовое понимание систем мониторинга и сбора журналов: Grafana, Loki, Alertmanager, OpenSearch или аналоги;
- понимание контейнеризации: Docker, Portainer;
- уверенная работа с системой контроля версий Git;
- опыт приёма и обработки IoT-телеметрии от датчиков и оборудования (работа с потоками временных рядов);
- опыт разработки приложений потоковой обработки данных на Apache Flink или аналогах (Kafka Streams, Spark Streaming);
- от 2 лет в роли Data Engineer или аналогичной позиции.
- конкурентный уровень з/п (обсуждается индивидуально);
- работа в крупной и стабильной компании – в структуре самой большой ОЭЗ в Европе;
- транспорт до работы из г. Елабуга, г. Набережные Челны, г. Нижнекамск;
- полис добровольного медицинского страхования;
- предоставление платного жилья для иногородних;
- гарантия профессионального роста;
- амбициозная, проектно-ориентированная команда;
- командные и спортивные игры, реализация нестандартных задач;
- карьерный рост при наличии и обретении в процессе работы необходимых компетенций.
- разработка, сопровождение и оптимизация ETL/ELT-пайплайнов на базе Apache Airflow;
- проектирование и развитие схем данных в ClickHouse (основное хранилище);
- поддержка PostgreSQL на базовом уровне;
- интеграция данных из различных источников: S3, RabbitMQ, внешние API, внутренние сервисы;
- написание и оптимизация SQL-запросов;
- контроль качества данных: профилирование, мониторинг полноты и консистентности, отладка пайплайнов;
- настройка и сопровождение мониторинга процессов и инфраструктуры: Grafana, Loki, Alertmanager, OpenSearch;
- работа с контейнеризированной инфраструктурой: Docker, Portainer;
- ведение задач и документирование решений в Jira/Wiki;
- взаимодействие с командой разработки и аналитиками для уточнения требований к данным.
- уверенное владение Python (pandas, обработка и трансформация данных);
- опыт построения и сопровождения ETL/ELT-пайплайнов в Apache Airflow или аналогах;
- опыт проектирования и сопровождения хранилища данных в ClickHouse: движки таблиц, партиционирование, оптимизация запросов;
- базовые навыки работы с PostgreSQL: проектирование схем, DDL/DML, индексы;
- опыт работы с объектным хранилищем (S3 и аналоги);
- опыт работы с брокерами сообщений: предпочтителен RabbitMQ, опыт с Apache Kafka и NATS также рассматривается;
- базовое понимание систем мониторинга и сбора журналов: Grafana, Loki, Alertmanager, OpenSearch или аналоги;
- понимание контейнеризации: Docker, Portainer;
- уверенная работа с системой контроля версий Git;
- опыт приёма и обработки IoT-телеметрии от датчиков и оборудования (работа с потоками временных рядов);
- опыт разработки приложений потоковой обработки данных на Apache Flink или аналогах (Kafka Streams, Spark Streaming);
- от 2 лет в роли Data Engineer или аналогичной позиции.
- конкурентный уровень з/п (обсуждается индивидуально);
- работа в крупной и стабильной компании – в структуре самой большой ОЭЗ в Европе;
- транспорт до работы из г. Елабуга, г. Набережные Челны, г. Нижнекамск;
- полис добровольного медицинского страхования;
- предоставление платного жилья для иногородних;
- гарантия профессионального роста;
- амбициозная, проектно-ориентированная команда;
- командные и спортивные игры, реализация нестандартных задач;
- карьерный рост при наличии и обретении в процессе работы необходимых компетенций.
#middle #удаленка
••••••••
Data Engineer
Опыт работы: 3–6 лет
Полная занятость
График: 5/2
Формат работы: удалённо
☑️ Чем предстоит заниматься
-Проектирование интеграционных ETL процессов по загрузки данных из источников в Lakehouse
-определение источников и анализ данных в них
-написание прототипа select-запроса на отбор данных (SparkSQL)
-разработку документации(FSD , спецификации таблиц)
-определение критериев приёмки
-постановка задач на команду разработки
-приёмка результата
☑️ Наши пожелания к кандидатам
-
-1.Уверенное владение SQL (в приоритете диалекты Oracle, PostgreSQL),знание CTE и умение писать сложные запросы + DML запросы
-2. Знание SparkSQL (умение писать SELECT и смотреть план запроса )
-2.Понимание структуры DWH (слои). Владение одной из методологий построения DWH. Обязательный опыт работы с DWH
-3.Понимание процессов ETL/ELT
-4.Навыки системного анализа и ведения технической документации
-5.Навыки работы с Jira + Confluence или аналогичное
-Будет плюсом:
-1.Опыт работы с Greenplum или другой MPP БД
-2.Знание Python
-3.Опыт работы с Apache Airflow
-4.Знание PL\SQL или PgPL\SQL
Контакты: ••••••••
🔥 •••••••• / •••••••• / ••••••••
#vacancy #вакансия #B2B #DataEngineer
Ищем Middle+/Senior Data Engineer, 2 позиции, оформление B2B. Проект в энергетике:
🔹 Snowflake, dbt Core, Airflow, сильный SQL
🔹 Data Vault 2.0, Databricks
ЕС или nearshore, английский + немецкий будет плюсом. Старт с января 2027.
- разработка, сопровождение и оптимизация ETL/ELT-пайплайнов на базе Apache Airflow;
- проектирование и развитие схем данных в ClickHouse (основное хранилище);
- поддержка PostgreSQL на базовом уровне;
- интеграция данных из различных источников: S3, RabbitMQ, внешние API, внутренние сервисы;
- написание и оптимизация SQL-запросов;
- контроль качества данных: профилирование, мониторинг полноты и консистентности, отладка пайплайнов;
- настройка и сопровождение мониторинга процессов и инфраструктуры: Grafana, Loki, Alertmanager, OpenSearch;
- работа с контейнеризированной инфраструктурой: Docker, Portainer;
- ведение задач и документирование решений в Jira/Wiki;
- взаимодействие с командой разработки и аналитиками для уточнения требований к данным.
- уверенное владение Python (pandas, обработка и трансформация данных);
- опыт построения и сопровождения ETL/ELT-пайплайнов в Apache Airflow или аналогах;
- опыт проектирования и сопровождения хранилища данных в ClickHouse: движки таблиц, партиционирование, оптимизация запросов;
- базовые навыки работы с PostgreSQL: проектирование схем, DDL/DML, индексы;
- опыт работы с объектным хранилищем (S3 и аналоги);
- опыт работы с брокерами сообщений: предпочтителен RabbitMQ, опыт с Apache Kafka и NATS также рассматривается;
- базовое понимание систем мониторинга и сбора журналов: Grafana, Loki, Alertmanager, OpenSearch или аналоги;
- понимание контейнеризации: Docker, Portainer;
- уверенная работа с системой контроля версий Git;
- опыт приёма и обработки IoT-телеметрии от датчиков и оборудования (работа с потоками временных рядов);
- опыт разработки приложений потоковой обработки данных на Apache Flink или аналогах (Kafka Streams, Spark Streaming);
- от 2 лет в роли Data Engineer или аналогичной позиции.
- конкурентный уровень з/п (обсуждается индивидуально);
- работа в крупной и стабильной компании – в структуре самой большой ОЭЗ в Европе;
- транспорт до работы из г. Елабуга, г. Набережные Челны, г. Нижнекамск;
- полис добровольного медицинского страхования;
- предоставление платного жилья для иногородних;
- гарантия профессионального роста;
- амбициозная, проектно-ориентированная команда;
- командные и спортивные игры, реализация нестандартных задач;
- карьерный рост при наличии и обретении в процессе работы необходимых компетенций.
- разработка, сопровождение и оптимизация ETL/ELT-пайплайнов на базе Apache Airflow;
- проектирование и развитие схем данных в ClickHouse (основное хранилище);
- поддержка PostgreSQL на базовом уровне;
- интеграция данных из различных источников: S3, RabbitMQ, внешние API, внутренние сервисы;
- написание и оптимизация SQL-запросов;
- контроль качества данных: профилирование, мониторинг полноты и консистентности, отладка пайплайнов;
- настройка и сопровождение мониторинга процессов и инфраструктуры: Grafana, Loki, Alertmanager, OpenSearch;
- работа с контейнеризированной инфраструктурой: Docker, Portainer;
- ведение задач и документирование решений в Jira/Wiki;
- взаимодействие с командой разработки и аналитиками для уточнения требований к данным.
- уверенное владение Python (pandas, обработка и трансформация данных);
- опыт построения и сопровождения ETL/ELT-пайплайнов в Apache Airflow или аналогах;
- опыт проектирования и сопровождения хранилища данных в ClickHouse: движки таблиц, партиционирование, оптимизация запросов;
- базовые навыки работы с PostgreSQL: проектирование схем, DDL/DML, индексы;
- опыт работы с объектным хранилищем (S3 и аналоги);
- опыт работы с брокерами сообщений: предпочтителен RabbitMQ, опыт с Apache Kafka и NATS также рассматривается;
- базовое понимание систем мониторинга и сбора журналов: Grafana, Loki, Alertmanager, OpenSearch или аналоги;
- понимание контейнеризации: Docker, Portainer;
- уверенная работа с системой контроля версий Git;
- опыт приёма и обработки IoT-телеметрии от датчиков и оборудования (работа с потоками временных рядов);
- опыт разработки приложений потоковой обработки данных на Apache Flink или аналогах (Kafka Streams, Spark Streaming);
- от 2 лет в роли Data Engineer или аналогичной позиции.
- конкурентный уровень з/п (обсуждается индивидуально);
- работа в крупной и стабильной компании – в структуре самой большой ОЭЗ в Европе;
- транспорт до работы из г. Елабуга, г. Набережные Челны, г. Нижнекамск;
- полис добровольного медицинского страхования;
- предоставление платного жилья для иногородних;
- гарантия профессионального роста;
- амбициозная, проектно-ориентированная команда;
- командные и спортивные игры, реализация нестандартных задач;
- карьерный рост при наличии и обретении в процессе работы необходимых компетенций.
- разработка, сопровождение и оптимизация ETL/ELT-пайплайнов на базе Apache Airflow;
- проектирование и развитие схем данных в ClickHouse (основное хранилище);
- поддержка PostgreSQL на базовом уровне;
- интеграция данных из различных источников: S3, RabbitMQ, внешние API, внутренние сервисы;
- написание и оптимизация SQL-запросов;
- контроль качества данных: профилирование, мониторинг полноты и консистентности, отладка пайплайнов;
- настройка и сопровождение мониторинга процессов и инфраструктуры: Grafana, Loki, Alertmanager, OpenSearch;
- работа с контейнеризированной инфраструктурой: Docker, Portainer;
- ведение задач и документирование решений в Jira/Wiki;
- взаимодействие с командой разработки и аналитиками для уточнения требований к данным.
- уверенное владение Python (pandas, обработка и трансформация данных);
- опыт построения и сопровождения ETL/ELT-пайплайнов в Apache Airflow или аналогах;
- опыт проектирования и сопровождения хранилища данных в ClickHouse: движки таблиц, партиционирование, оптимизация запросов;
- базовые навыки работы с PostgreSQL: проектирование схем, DDL/DML, индексы;
- опыт работы с объектным хранилищем (S3 и аналоги);
- опыт работы с брокерами сообщений: предпочтителен RabbitMQ, опыт с Apache Kafka и NATS также рассматривается;
- базовое понимание систем мониторинга и сбора журналов: Grafana, Loki, Alertmanager, OpenSearch или аналоги;
- понимание контейнеризации: Docker, Portainer;
- уверенная работа с системой контроля версий Git;
- опыт приёма и обработки IoT-телеметрии от датчиков и оборудования (работа с потоками временных рядов);
- опыт разработки приложений потоковой обработки данных на Apache Flink или аналогах (Kafka Streams, Spark Streaming);
- от 2 лет в роли Data Engineer или аналогичной позиции.
- конкурентный уровень з/п (обсуждается индивидуально);
- работа в крупной и стабильной компании – в структуре самой большой ОЭЗ в Европе;
- транспорт до работы из г. Елабуга, г. Набережные Челны, г. Нижнекамск;
- полис добровольного медицинского страхования;
- предоставление платного жилья для иногородних;
- гарантия профессионального роста;
- амбициозная, проектно-ориентированная команда;
- командные и спортивные игры, реализация нестандартных задач;
- карьерный рост при наличии и обретении в процессе работы необходимых компетенций.
Вакансия предполагает работу в офисе, для каждой локации — своя карточка вакансии. Щёлкни по локации, чтобы перейти на её карточку.
- разработка, сопровождение и оптимизация ETL/ELT-пайплайнов на базе Apache Airflow;
- проектирование и развитие схем данных в ClickHouse (основное хранилище);
- поддержка PostgreSQL на базовом уровне;
- интеграция данных из различных источников: S3, RabbitMQ, внешние API, внутренние сервисы;
- написание и оптимизация SQL-запросов;
- контроль качества данных: профилирование, мониторинг полноты и консистентности, отладка пайплайнов;
- настройка и сопровождение мониторинга процессов и инфраструктуры: Grafana, Loki, Alertmanager, OpenSearch;
- работа с контейнеризированной инфраструктурой: Docker, Portainer;
- ведение задач и документирование решений в Jira/Wiki;
- взаимодействие с командой разработки и аналитиками для уточнения требований к данным.
- уверенное владение Python (pandas, обработка и трансформация данных);
- опыт построения и сопровождения ETL/ELT-пайплайнов в Apache Airflow или аналогах;
- опыт проектирования и сопровождения хранилища данных в ClickHouse: движки таблиц, партиционирование, оптимизация запросов;
- базовые навыки работы с PostgreSQL: проектирование схем, DDL/DML, индексы;
- опыт работы с объектным хранилищем (S3 и аналоги);
- опыт работы с брокерами сообщений: предпочтителен RabbitMQ, опыт с Apache Kafka и NATS также рассматривается;
- базовое понимание систем мониторинга и сбора журналов: Grafana, Loki, Alertmanager, OpenSearch или аналоги;
- понимание контейнеризации: Docker, Portainer;
- уверенная работа с системой контроля версий Git;
- опыт приёма и обработки IoT-телеметрии от датчиков и оборудования (работа с потоками временных рядов);
- опыт разработки приложений потоковой обработки данных на Apache Flink или аналогах (Kafka Streams, Spark Streaming);
- от 2 лет в роли Data Engineer или аналогичной позиции.
- конкурентный уровень з/п (обсуждается индивидуально);
- работа в крупной и стабильной компании – в структуре самой большой ОЭЗ в Европе;
- транспорт до работы из г. Елабуга, г. Набережные Челны, г. Нижнекамск;
- полис добровольного медицинского страхования;
- предоставление платного жилья для иногородних;
- гарантия профессионального роста;
- амбициозная, проектно-ориентированная команда;
- командные и спортивные игры, реализация нестандартных задач;
- карьерный рост при наличии и обретении в процессе работы необходимых компетенций.
Чем предстоит заниматься:
- Разрабатывать и сопровождать решения на Python для обработки данных, автоматизации процессов и интеграции информационных систем.
- Проектировать, развивать и оптимизировать ETL-процессы сбора, трансформации и загрузки данных.
- Разрабатывать сложные SQL-запросы и обеспечивать высокую производительность обработки данных.
- Анализировать большие массивы данных, выявлять аномалии и находить причины отклонений.
- Разрабатывать алгоритмы контроля качества данных и мониторинга процессов.
- Проектировать потоки данных, модели данных и интеграционные решения.
- Участвовать в расследовании инцидентов и обеспечении стабильной работы производственных процессов.
- Подготавливать и поддерживать техническую документацию.
- Проводить передачу знаний коллегам, участвовать в code review и обмене опытом внутри команды.
- Взаимодействовать с аналитиками, архитекторами, разработчиками и бизнес-заказчиками при внедрении новых решений.
- Участвовать в развитии платформ обработки данных и внедрении современных технологий, включая инструменты искусственного интеллекта.
Что важно для нас:
- Высшее техническое образование.
- Опыт коммерческой разработки на Python от 3 лет.
- Уверенное владение SQL и опыт работы с промышленными СУБД.
- Опыт разработки и сопровождения ETL-процессов.
- Понимание принципов построения конвейеров обработки данных и интеграции данных.
- Опыт анализа данных, поиска причин аномалий и расследования инцидентов.
- Опыт работы с Linux.
- Владение Git и практиками управления версиями.
- Навыки подготовки технической документации.
- Английский язык для чтения технической документации.
Будет преимуществом:
- Опыт работы с Oracle Database.
- Опыт использования Pandas, NumPy, SQLAlchemy.
- Опыт разработки REST API.
- Опыт работы с Flask или аналогичными Python-фреймворками.
- Опыт проектирования и сопровождения платформ обработки данных.
- Опыт разработки интеграционных решений.
- Опыт работы в телеком-индустрии.
- Опыт работы с форматами CSV, XML, JSON, ASN.1.
- Опыт использования Apache Airflow, Pentaho Data Integration (PDI) или других инструментов оркестрации.
- Понимание принципов информационной безопасности и управления доступом.
- Практический опыт использования AI-инструментов (Microsoft Copilot, ChatGPT, Claude, Gemini и др.) в разработке и анализе данных.
- Понимание возможностей и ограничений современных LLM.
У нас вы найдёте атмосферу доверия и возможностей.
Вакансия, планируемая к созданию и/или замещению (перспективная).
- Совместно с функциональными заказчиками выявлять и формулировать задачи оптимизации процессов , оценивать потенциал эффекта.
- Ставить бизнес-задачу, формировать функциональные и технические требования, критерии успеха пилота и методику подтверждения эффекта.
- Изучать технологические регламенты и ограничения оборудования, учитывать требования промышленной безопасности.
- Собирать и анализировать технологические данные (АСУ ТП, ЛИМС, MES, архивы): качество данных, аномалии, проверка гипотез. Разрабатывать прогнозные модели, виртуальные анализаторы (soft sensors), модели диагностики и обнаружения аномалий, цифровые двойники узлов.
- Разрабатывать рекомендательные системы (советчики оператора): оптимизационная постановка, целевые функции, ограничения, объяснимость рекомендаций.
- Проводить пилоты на установке (базовая линия, A/B-испытания), подтверждать экономический эффект.
- Совместно с архитектором ИИ выводить решения в эксплуатацию (интеграция с АСУ ТП/MES, интерфейсы операторов, мониторинг, переобучение).
- Тиражировать решения на предприятия; обеспечивать приживаемость (обучение операторов, обратная связь); поддержка от 2-го уровня.
- Ставить задачи проектной команде, проводить ревью моделей и кода; вести документацию; регистрировать РИД.
- Образование: высшее техническое, горное или математическое.
- Дополнительное образование в области Data Science / машинного обучения приветствуется.
- Методы ML (бустинг, нейронные сети, временные ряды), рекомендательные системы, оптимизация с ограничениями, MPC / APC, объяснимость (SHAP).
- Статистика: проверка гипотез, ANOVA, DOE, SPC; методика подтверждения эффекта (базовая линия, A/B).
- Понимание технологических процессов добычи и обогащения минерального сырья, химических процессов, устройства типичного производства и его ИТ-ландшафта (АСУ ТП, MES, ЛИМС).
- Понимание процессов закупок, продаж, планирования и данных ERP.
- Знание оборудования: основное технологическое оборудование непрерывных производств горнообогатительных комбинатов.
-
ТОП-5 Золотодобывающих компаний России в стадии роста и трансформации.
-
Работа в управляющей компании: более 10 операционных активов и большой портфель проектов развития.
-
Команда лидеров отрасли, владеющих лучшими производственными и управленческими практиками.
-
Инновационный подход и использование самых продвинутых технологий.
-
Возможность реализовать свой потенциал и построить карьеру.
-
Профессиональное обучение и развитие.
-
Пакет страхования: ДМС, страхование жизни и выезда за рубеж, онкострахование.
-
Программа "Кафетерий льгот": 11000 руб/мес. на одну из категорий: питание, транспорт, спорт, ДМС для родственника.
-
100% доплата до оклада в отпуске и командировках, а во время больничного до 10 дней в год.
-
Bestbenefits: доступ к специальным предложениям от наших партнеров и эксклюзивным скидкам.
-
Офис в Москва-Сити.
В Т‑Банк большое и продвинутое хранилище данных: это 8000 объектов, 800 ТБ в Greenplum и 110 ТБ в Clickhouse.
С данными активно работают более 16 тысяч пользователей из бизнес-команд — они ежедневно принимают десятки решений с опорой на них. А наша команда делает все, чтобы доступ к данным был простым и ими было удобно пользоваться. Мы постоянно совершенствуем подходы к работе и стараемся быть новаторами на рынке технологий.
Мы ищем в команду дата-инженера. В Т‑Банке вы сможете развиваться в одном из двух направлений — системном анализе и ETL-разработке. Или совмещать их, если вам интересны оба.
Обязанности
- Участвовать в формировании модели данных
- Проектировать и разрабатывать витрины и потоки данных на основе потребностей бизнес-пользователей
- Участвовать в проектах по развитию Data Platform
- Писать скрипты SQL и Python, это опционально
- Прорабатывать интеграции с внешними системами для Data Platform
Требования
- Свободно владеете SQL
- Работали с DWH в качестве аналитика или разработчика
- Понимаете теорию СУБД- и ETL-процессов
- Знаете Python или другой язык программирования
- Есть опыт проектирования объектов БД на основании бизнес требований
Условия
- Работу из офиса. График работы — гибридный
- Достойную зарплату — обсудим ее на собеседовании
В Т-Банке большое и продвинутое хранилище данных: это 8000 объектов, 800 ТБ в Greenplum и 110 ТБ в Clickhouse. С данными активно работают более 16 тысяч пользователей из бизнес-команд — они ежедневно принимают десятки решений с опорой на них. А наша команда делает все, чтобы доступ к данным был простым и ими было удобно пользоваться. Мы постоянно совершенствуем подходы к работе и стараемся быть новаторами на рынке технологий. Мы ищем в команду дата-инженера. В Т-Банке вы сможете развиваться в одном из двух направлений — системном анализе и ETL-разработке. Или совмещать их, если вам интересны оба.
Обязанности:
- Участвовать в формировании модели данных
- Проектировать и разрабатывать витрины и потоки данных на основе потребностей бизнес-пользователей
- Участвовать в проектах по развитию Data Platform
- Писать скрипты SQL и Python, это опционально
- Прорабатывать интеграции с внешними системами для Data Platform
Требования:
- Свободно владеете SQL
- Работали с DWH в качестве аналитика или разработчика минимум 5 лет
- Понимаете теорию СУБД- и ETL-процессов
- Знаете Python или другой язык программирования
- Есть опыт проектирования объектов БД на основании бизнес требований
Условия:
- Работа гибрид или удаленно — по договоренности
- Платформу обучения и развития «Т‑Банк Апгрейд». Курсы, тренинги, вебинары и базы знаний. Поддержку менторов и наставников, помощь в поиске точек роста и карьерном развитии
- Заботу о здоровье. Оформим полис ДМС со стоматологией и страховку от несчастных случаев. Предложим льготное страхование вашим близким
- Возможность работы в аккредитованной ИТ-компании
- Линейку льготных тарифов на продукты Т‑Банка
- Частичную компенсацию затрат на спорт
- Well-being-программу, которая помогает улучшить психологическое и физическое здоровье, а также разобраться с юридическими и финансовыми вопросами
- Три дополнительных дня отпуска в год
- Достойную зарплату — обсудим ее на собеседовании
Наш стек: Python, Airflow, ClickHouse, Trino, PostgreSQL, Vertica, Kafka, S3, Spark, Hadoop, Kubernetes, Helm, Superset, Prometheus, Grafana, GitLab, Jira, Confluence.
Вам предстоит
• разрабатывать и поддерживать пайплайны поставки данных в ClickHouse, Vertica и Trino
• проектировать и реализовывать фабрики data-пайплайнов
• обеспечивать своевременное обновление и поступление актуальных данных
• развивать систему Data Governance
• обучать аналитиков современным практикам работы с данными
• настраивать и поддерживать системы мониторинга и алертинга
• автоматизировать процессы разработки и аналитики с использованием AI-агентов и agentic development tools
• создавать AI-workflows для типовых инженерных задач и интегрировать их с внутренними инструментами
• стандартизировать технические процессы, проекты и workflows аналитиков данных
Для нас важно, что вы
• более 2 лет работаете с Python
• более 2 лет работаете Data Engineer: знаете Apache Spark (PySpark), понимаете принципы работы СУБД и умеете оптимизировать запросы
• умеете работать с ClickHouse, PostgreSQL и Trino
• понимаете принципы построения и работы хранилищ данных
• имеете практический опыт использования AI-агентов и agentic development tools (Claude Code / Codex / OpenCode или аналоги) для решения инженерных задач
• понимаете принципы работы с контекстом, инструкциями, tools/skills и многошаговыми agentic workflows
• умеете разрабатывать компоненты Airflow
• поддерживаете порядок в коде, Git и документации
• умеете и любите быстро учиться, применять новые знания на практике и самостоятельно находить ответы на сложные вопросы
• имеете высшее техническое образование
Будет плюсом, если вы
• имеете опыт работы с CI/CD
• умеете работать с Kubernetes, Prometheus, Superset и Helm
• имеете опыт взаимодействия с аналитиками и Data Scientists
• создавали собственных AI-агентов, skills/tools, MCP-интеграции или многошаговые AI-workflows для автоматизации инженерных процессов
Вакансия предполагает работу в офисе, для каждой локации — своя карточка вакансии. Щёлкни по локации, чтобы перейти на её карточку.
Что нужно делать?
- Разработка аналитических приложений и моделей данных на платформах QlikView / Qlik Sense / PowerBI включая сбор и анализ бизнес-требований, работа с источниками, проектирование и разработка хранилища и потоков данных;
- Разработка методологии проектирования ETL процедур, разработка интеграционных процессов с использованием инструментов SQL Server Integration Services;
- Работа по OLAP технологии (SSAS)
Что для этого требуется?
- Высшее образование;
- Умение работать в 1С;
- Опыт работы с jira, confluence, git;
- Знание принципов работы веб-сервисов (REST);
- Навыки проектирования и создания OLAP-кубов
- Опыт работы с NPrinting, разработка прикладных программ (Extension), настройка Server/Publisher;
- Знание и понимание принципов работы реляционных баз данных;
- Понимание принципов многомерного анализа данных
- Знание SQL (индексы, функции, умение читать планы запросов, оптимизация запросов, секционирование и.т.д.)
Что готовы предложить?
- Официальное трудоустройство в соответствии с ТК РФ;
- Белая заработная плата: оклад + годовой бонус;
- Широкий пакет ДМС с ведущими клиниками города, в который включена даже стоматология.
- Работа в команде профессионалов с возможностью роста;
- Программа наставничества, которая помогает адаптироваться новым сотрудникам;
- Компания предоставляет возможность обучать других сотрудников и стать самому наставником;
- Семинары и корпоративная библиотека курсов;
- Работа с современными цифровыми системами и возможность принять участие в проектах автоматизации функций;
- Насыщенная корпоративная жизнь: Ежегодные "Честные игры" (спортивно-интеллектуальный турнир, различные квизы, программа Амбассадорства и другие мероприятия);
- Компания осуществляет бронирование сотрудников в рамках норм действующего законодательства;
- Рабочее место находится на локации - Саратов, 2 - Краноармейский тупик 1А.
О команде:
Команда Data Engineering занимается развитием и поддержкой корпоративного хранилища данных (DWH) для основных продуктов компании: платежной системы, маркетплейса и сервиса рассрочки. Наша задача — обеспечить компанию надёжными и актуальными данными для внутренней аналитики и реализации требований регулятора (RegTech). Сейчас команда развивает архитектуру хранилища данных, переходит на ELT-подход и стандартизирует технологический стек на базе ClickHouse, dbt, Apache Airflow и Kafka Connect. Мы также совершенствуем инженерные практики, уделяя особое внимание надёжности, качеству данных и автоматизации процессов.
Чем вы будете заниматься:
- Поддерживать и развивать дата-пайплайны: сопровождать существующие batch- и near-real-time потоки из микросервисов (PostgreSQL, MySQL, API), рефакторить legacy-процессы и переносить вычисления из Python/Pandas в SQL.
- Оптимизировать стек данных: настраивать ClickHouse, Kafka Connect и CDC (Debezium, DLQ, Schema Registry), оптимизировать Airflow DAG-и и управление параллелизмом.
- Развивать DWH и внедрять dbt: переносить бизнес-логику и витрины в dbt, использовать Jinja и макросы, развивать архитектуру Bronze / Silver / Gold.
- Обеспечивать качество данных: автоматизировать DQ-проверки, сверять данные с источниками, настраивать мониторинг и алертинг, выстраивать Data Lineage.
- Автоматизировать инфраструктуру и CI/CD: управлять конфигурациями пайплайнов, DDL-миграциями и доступами через код; развивать процессы на базе GitLab CI, werf, Docker и Kubernetes.
- Использовать AI-инструменты: ускорять работу с legacy-кодом, генерацию тестов, оптимизацию SQL-запросов и подготовку документации с помощью Cursor, Copilot, ChatGPT и Claude.
Чего мы ожидаем от вас:
- SQL: уверенное владение SQL, умение писать сложные аналитические запросы, понимание принципов оптимизации;
- Python: хороший уровень (requests, работа с API, базовый Pandas), умение писать чистый, поддерживаемый код;
- Airflow: опыт написания DAG-ов, понимание базовых принципов работы шедулера, операторов, хуков;
- Архитектура DWH: понимание концепций построения хранилища и моделей данных; идеологии ELT vs ETL, OLAP vs OLTP;
- Инфраструктура: базовое понимание контейнеризации (Docker / Kubernetes), уверенная работа с Git;
- Уверенное использование AI-инструментов: активное применение в ежедневной работе (ChatGPT, Claude, Cursor, GitHub Copilot или аналоги) для ускорения написания рутинного кода, помощи в рефакторинге, генерации SQL/документации и быстрого онбординга в новую кодовую базу.
Будет большим плюсом:
- Опыт работы с ClickHouse в продакшене (знание особенностей MergeTree движков, партиционирования);
- Практический опыт работы с dbt (Data Build Tool);
- Понимание принципов работы брокеров сообщений (Kafka) и CDC-инструментов (Debezium);
- Опыт деплоя приложений в Kubernetes (Gitlab / Github CI).
Почему вам будет интересно с нами:
- Работа в продуктовой финтех-компании;
- Современная архитектура и сложные инженерные задачи;
- Профессиональная команда, взаимная поддержка и обмен опытом;
- Возможность карьерного роста;
- Культура, открытая к новым идеям и улучшениям процессов;
- Выстроенная адаптация с сопровождением HR, тимлида и ментора;
- Уроки английского с носителями языка;
- Компенсация обучения (постоянный доступ к корпоративным материалам, специализированные курсы, внутренние митапы);
- Насыщенная корпоративная жизнь;
- Добровольная медицинская страховка;
- Офис в центре города в Tashkent - City;
- График 5/2 с 9:00 до 18:00;
- Конкурентная заработная плата (обсуждается по итогам собеседования).
О компании:
Alif — одна из крупнейших и самых быстрорастущих финтех-компаний Центральной Азии с проектами в Узбекистане, Таджикистане и Пакистане. Компания была основана в 2014 году Абдулло Курбановым, Фирдавсом Мирзоевым и Зухуршо Рахматуллоевым.
Наши достижения:
- Alif - одна из самых динамичных и дорогих финтех-компаний региона, оценённая более чем в $100 млн.
- В Узбекистане компания работает с 2019 года и за это время стала одним из лидеров рынка.
- Общая аудитория пользователей превысила 9 миллионов человек.
- Сегодня команда Alif насчитывает более 300 квалифицированных специалистов, которые создают и развивают полноценную финтех-экосистему.
- Компания является резидентом IT-Park с 2019 года и активно расширяет своё присутствие на рынке.
- Alif занимает передовые позиции на рынке BNPL-решений и продолжает уверенно развиваться.
Мы в Alif, обеспечиваем равные возможности, и приветствуем заявки от всех квалифицированных лиц, включая людей с ограниченными возможностями, ветеранов и людей из разных слоёв общества.
Присоединяйся к команде крупнейшего пищевого производителя с известными брендами! Работа в АО МПБК Очаково это ценность каждого сотрудника и стабильный заработок!
Нужна уверенность в завтрашнем дне? Работай с нами!
Спасибо за отклик! Если ваше резюме соответствует вакансии, мы свяжемся с вами в ближайшее время.
Мы разрабатываем аналитические системы на базе единой платформы, которые позволяют безопасно работать с данными независимо от их формата, метода хранения и эксплуатации. Платформа основана на концепции Infrastructure as Code (IAC) и состоит из нескольких независимых программных продуктов и сервисов на базе Scala и Kubernetes. Она обеспечивает высокий уровень потоковой обработки и хранения данных, управления доступом и метаданными, а также контролем их использования в периметре частных облачных сред.
Основные задачи:
- Реализация процессов загрузки данных на платформу из различных источников (s3, hdfs, samba, sftp) в различных форматах (csv, parquet, json, xml) в разные точки назначения (scylla, postgres, opensearch, clickhouse, nebula)
- Определение и согласование нефункциональных требований к процессам построения витрин
- Декомпозиция задач, оценка сроков выполнения
- Выполнение Code review и контроль правильности реализации принятых технических решений
- Участие в процессе автоматизации SDLC с помощью LLM
Технологический стек:
- Хранение и обработка данных: Scylla, S3, Kafka, Spark, Nifi, Airflow, PostgreSQL, Clickhouse, Opensearch
- Мониторинг и логирование: Grafana, Victoria Metrics, Prometheus
- Прочие технологии и фреймворки: Docker, Kubernetes(Openshift), Helmwave, ScalaTest, GitlabCI, Typelevel (Cats Effect, Circe, Doobie, Weaver)
Наши ожидания:
- Опыт работы по специальности от 3 лет
- Опыт разработки на Scala от 2 лет
- Знание особенностей реализации различных алгоритмов и структур данных
- Опыт работы в команде
Что мы предлагаем:
Здоровье и спорт:
- ДМС со стоматологией
- Корпоративные скидки в сети фитнес-клубов World Class
- Корпоративный тариф на абонементы FITMOST
- Программа корпоративных скидок Best Benefits – на спорт и не только
- Спортивные мероприятия (турниры по футболу, волейболу, киберспорт, забеги, шахматы)
Обучение и развитие:
- Курсы английского языка, в том числе с носителем языка
- Сообщества по интересам: вместе читаем книги, ходим на интересные мероприятия и делимся маршрутами путешествий
- Внешние профессиональные курсы и конференции, сертифицированное обучение, которые вы выбираете сами
- Профильные митапы – организовываем, проводим и принимаем участие
- Билеты со скидкой в Музей криптографии для сотрудников и их семей
А также:
- Работа в офисе или в гибридном формате
- Комфортные офисы в Москве, Санкт-Петербурге и Нижнем Новгороде с кофе-поинтами и разнообразными снеками каждый день
- Насыщенные и яркие корпоративные праздники
- Классный мерч
Доступно в нескольких локациях — формат работы уточняется в карточке.
Мы разрабатываем аналитические системы на базе единой платформы, которые позволяют безопасно работать с данными независимо от их формата, метода хранения и эксплуатации. Платформа основана на концепции Infrastructure as Code (IAC) и состоит из нескольких независимых программных продуктов и сервисов на базе Scala и Kubernetes. Она обеспечивает высокий уровень потоковой обработки и хранения данных, управления доступом и метаданными, а также контролем их использования в периметре частных облачных сред.
Основные задачи:
- Реализация процессов загрузки данных на платформу из различных источников (s3, hdfs, samba, sftp) в различных форматах (csv, parquet, json, xml) в разные точки назначения (scylla, postgres, opensearch, clickhouse, nebula)
- Определение и согласование нефункциональных требований к процессам построения витрин
- Декомпозиция задач, оценка сроков выполнения
- Выполнение Code review и контроль правильности реализации принятых технических решений
- Участие в процессе автоматизации SDLC с помощью LLM
Технологический стек:
- Хранение и обработка данных: Scylla, S3, Kafka, Spark, Nifi, Airflow, PostgreSQL, Clickhouse, Opensearch
- Мониторинг и логирование: Grafana, Victoria Metrics, Prometheus
- Прочие технологии и фреймворки: Docker, Kubernetes(Openshift), Helmwave, ScalaTest, GitlabCI, Typelevel (Cats Effect, Circe, Doobie, Weaver)
Наши ожидания:
- Опыт работы по специальности от 3 лет
- Опыт разработки на Scala от 2 лет
- Знание особенностей реализации различных алгоритмов и структур данных
- Опыт работы в команде
Что мы предлагаем:
Здоровье и спорт:
- ДМС со стоматологией
- Корпоративные скидки в сети фитнес-клубов World Class
- Корпоративный тариф на абонементы FITMOST
- Программа корпоративных скидок Best Benefits – на спорт и не только
- Спортивные мероприятия (турниры по футболу, волейболу, киберспорт, забеги, шахматы)
Обучение и развитие:
- Курсы английского языка, в том числе с носителем языка
- Сообщества по интересам: вместе читаем книги, ходим на интересные мероприятия и делимся маршрутами путешествий
- Внешние профессиональные курсы и конференции, сертифицированное обучение, которые вы выбираете сами
- Профильные митапы – организовываем, проводим и принимаем участие
- Билеты со скидкой в Музей криптографии для сотрудников и их семей
А также:
- Работа в офисе или в гибридном формате
- Комфортные офисы в Москве, Санкт-Петербурге и Нижнем Новгороде с кофе-поинтами и разнообразными снеками каждый день
- Насыщенные и яркие корпоративные праздники
- Классный мерч
Сейчас мы усиливаем усиливаем продуктовую команду и ищем Ведущего инженера данных, который будет отвечать за организацию и подготовку данных для AI-решений (от подключения внешних источников и проектирования модели данных до подготовки данных для поиска и RAG).
КАКИЕ ЗАДАЧИ НЕОБХОДИМО РЕШАТЬ:
- Определять источники данных для AI-решений: базы данных, документы, API, файловые хранилища, внешние системы и потоки обновлений;
- Проектировать модели данных: сущности и связи, версии, метаданные, lineage, права доступа и правила актуализации;
- Организовывать сбор и обработку данных из внешних источников: очистку, нормализацию, дедупликацию, классификацию и разметку;
- Формировать единое эталонное представление объекта (golden record) при объединении данных из нескольких источников;
- Подготавливать данные для поиска и RAG: chunking, embeddings, индексация, векторный и гибридный поиск;
- Настраивать retrieval и reranking, обеспечивать обновление индексов при изменении исходных данных;
- При необходимости готовить датасеты для обучения или дообучения моделей, если задача не решается с помощью RAG;
- Определять показатели качества данных и retrieval, организовывать их мониторинг: полнота, актуальность, precision/recall, latency и другие показатели;
- Взаимодействовать с LLM-инженерами, аналитиками и разработчиками при проектировании AI-решений.
НАШИ ОЖИДАНИЯ:
- От 4 лет опыта в Data Engineering, Data Platform, Data Architecture или смежной области;
- Уверенное знание SQL и реляционных баз данных;
- Опыт построения ETL/ELT-процессов и data pipelines;
- Опыт интеграции данных из различных источников: БД, API, файлов и внешних систем;
- Практический опыт проектирования моделей данных и работы с качеством данных, метаданными и версиями;
- Практический опыт подготовки данных для поиска, ML или LLM/RAG-систем;
- Понимание принципов chunking, embeddings, vector search и hybrid search;
- Опыт работы с векторными хранилищами или поисковыми системами;
- Умение самостоятельно разбираться в структуре и качестве новых источников данных.
БУДЕТ ПЛЮСОМ:
- Опыт разработки и эксплуатации RAG-систем в production;
- Опыт оптимизации retrieval и reranking;
- Python для обработки данных и разработки data pipelines;
- Kafka или другие системы потоковой обработки данных;
- Airflow или аналогичные инструменты оркестрации;
- PostgreSQL, ClickHouse, Elasticsearch/OpenSearch, векторные хранилища и аналогичные технологии;
- Опыт подготовки датасетов для supervised learning / fine-tuning;
- Понимание метрик оценки RAG: retrieval quality, groundedness, faithfulness, coverage.
В ПРОЦЕССЕ РАБОТЫ НЕОБХОДИМО
- Разработка API для получения данных из витрин отчетности
- Рефакторинг утилиты по тестирования SQL кода
- Работа с хранилищами данных (MS SQL, MySQL, PostgeSQL)
- Работа с неструктурированными данными
- Разработка API для интеграции с внутренними и внешними сервисами с использованием языка python
- Создание пайплайнов для обработки и анализа данных
- Сбор и анализ требований
- Работа с системой контроля версий (GitLab)
- Подготовка документации
- Работа с брокерами сообщений
- Автоматизация и оптимизация бизнес процессов
- Создание, поддержка, рефакторинг ETL\ELT процессов
- Создание процессов автоматического тестирования и валидация данных.
ЧТО БУДЕТ ВАШИМ ПРЕИМУЩЕСТВОМ
- Умение и понимание работы с SQL
Требования к кандидату по python:
- опыт работы с базами данных из python (в контексте любых проектов, но желательно ETL/ELT)
- опыт работы с различными API (отправка запросов, обработка ответов)
- опыт работы с брокерами (любыми: RabbitMQ/Kafka/NATS) на уровне чтения/записи
- опыт разработки API как преимущество.
Дополнительные инструменты:
- - отслеживание версионности: git
- - управление окружениями: anaconda3(miniconda3) / uv
- - docker/docker-compose на уровне написания сборки простых контейнеров (как преимущество).
ДЛЯ ВАС МЫ ПРЕДЛАГАЕМ
- Официальное трудоустройство: оформление с полным пакетом социальных гарантий, включая отпуск и больничные
-
Комфортные кафе и столовые: уютные пространства для общения с коллегами за чашкой кофе, обсуждения совместных проектов и последних корпоративных новостей
-
Уникальная атмосфера в команде: разнообразие поколений и культур, способствующее созданию вдохновляющей рабочей среды
-
Инвестиции в ваше будущее: повышение компетенций и внедрение лучших мировых практик для вашего профессионального роста
-
Возможность посещения бизнес-мероприятий: участие в мероприятиях, способствующих расширению профессиональных связей и знаний
-
Корпоративные фитнес-услуги: на площадке корпорации доступны фитнес-залы, залы для занятий йогой, SPA-центры и массажные кабинеты с персональной скидкой для сотрудников
-
Поддержка на этапе адаптации: вас будет сопровождать наставник и руководитель, которые помогут вам бережно интегрироваться в коллектив.
В Департаменте информационных технологий компании ДРТ открыта вакансия Разработчика SAP DWHBI
Что ты будешь делать в этой роли:
В составе нашей опытной команды внедрения SAP-систем ты будешь участвовать в реализации проектов по внедрению систем бюджетирования, консолидации, прогнозирования и построения отчетности на всех этапах проекта.
Обязанности:
- Анализ бизнес-требований, документации, проведение обследований, анализ исходных данных;
- Подготовка и согласование проектной документации;
- Разработка Хранилищ Данных, процессов ETL/ELT загрузки, работа с BigData (SAP HANA, BW4HANA).
- Настройка интеграции с различными системами (SAP, не-SAP, БД, внешними агрегаторами, портальными приложениями, шиной данных итд)
- Мониторинг и оптимизация процессов загрузки;
- Разработка и настройка предиктивных моделей;
- Настройка ролевой модели;
- Проектирование и разработка интеграционных, семантических и аналитических витрин данных (SAP HANA,SQL);
- Разработка аналитических отчетов (SAP BO, PowerBI, Tableau и др);
- Взаимодействие с коллегами с других направлений (open-source, БА/СА, сотрудниками поддержки, стейкхолдерами)
- Проведение тестирования, ОПЭ, подготовка закрывающей проектной документации;
- Экспертная поддержка пользователей
- Работа с внутренними и внешними ИИ инструментами.
Требования к кандидатам:
- Знание основных понятий и концепций DWH моделирования, функциональности Баз Данных.
- Уверенные знание SQL (аналитические функции, подзапросы, хранимые процедуры, оптимизация производительности).
- Навыки реализации ETL-процессов как посредством инструментов, так и языков программирования (в том числе умение работать с API)
- Знание и понимание основ ООП.
- Желателен опыт работы c одним-несколькими продуктами SAP: BW/BI/HANA/BPC/ERP/S4;
- Желателен опыт работы с одним-несколькими продуктами аналитики PowerBI/ SAP BO/ Tableau/Qlik;
- Желателены знания SAP ABAP. Другие языки программирования приветствуются.
- Базовые навыки работы с ИИ в части поиска технической информации и имплементации.
Что мы предлагаем:
- оформление в соответствии с законодательством РБ;
- достойное вознаграждение по результатам собеседования и прозрачную систему карьерного и профессионального развития;
- комплексную программу страхования сотрудников, дополнительные выплаты по больничным листам, а также нашу уникальную программу по поддержке здорового образа жизни и благополучия сотрудников;
- обучение и развитие, поддержку в получении сертификатов профессиональной квалификации;
- дополнительные дни оплачиваемого отпуска;
- программы поощрения сотрудников;
- возможность работать по гибкому графику и удаленно;
- возможность получения дополнительного образования;
Ссылка на вакансию в ГСЗ:
- Участие в разработке новой Near-Realtime платформы данных;
- Развивать архитектуру DWH и LakeHouse, проектировать логическую модель данных;
- Обеспечивать качество данных: внедрять проверки, мониторинг, алерты, контроль полноты, актуальности и согласованности данных;
- Поддержка и развитие существующего DWH на базе GreenPlum;
- Проектировать, разрабатывать и поддерживать надежные и быстрые пайплайны обработки данных;
- Интеграция новых источников данных: транзакционные БД, стриминг, API, файлы;
- Оптимизировать SQL-запросы, модели данных, процессы загрузки и хранение данных;
- Сопровождать production-пайплайны, расследовать инциденты, устранять причины сбоев и предотвращать их повторение;
- Развивать каталог данных, документировать источники, бизнес-правила, lineage, SLA, структуру витрин и технические решения.
- Уверенно знаете SQL на уровне оптимизации запросов;
- Понимание принципов ETL/ELT, batch- и streaming-обработки данных;
- Опыт работы с промышленными СУБД и аналитическими хранилищами данных;
- Знание принципов моделирования данных: normal form, star/snowflake schema, Data Vault или аналогичные подходы;
- Опыт работы с оркестраторами пайплайнов, например Apache Airflow, Dagster, Prefect или аналогами;
- Понимание DevOps-практик: Git, CI/CD, контейнеризация, мониторинг, логирование;
- Умение разбираться в бизнес-требованиях и переводить их в надежные технические решения.
-
Конкурентоспособную заработную плату
-
Свободу в принятии решений и возможность карьерного роста в активно развивающейся международной компании
-
Интересные и разнообразные задачи и проекты, которые позволяют напрямую влиять на бизнес и развитие продуктов
-
Работа в дружелюбной и динамичной команде профессионалов
-
Постоянное обучение, тренинги, возможность посещения профильных конференций и корпоративные мероприятия
-
Различные бенефиты и уникальные предложения на продукты компаний Freedom Holding Corp
- Работа с BI-отчетностью: проектирование, разработка, актуализация дашбордов и отчетных форм. Обеспечение качества, достоверности и своевременности данных, а также техническая поддержка пользователей
- Интеграция данных и ETL: подключение к внутренним и внешним источникам данных; разработка, тестирование и сопровождение процессов извлечения, преобразования и загрузки данных (ETL/ELT); мониторинг производительности потоков данных
- Управление доступами: предоставление, изменение и отзыв прав доступа к данным и аналитическим системам в соответствии с регламентами информационной безопасности
- Предиктивная аналитика: подготовка и обработка данных для построения прогнозных моделей; взаимодействие со специалистами по Data Science при внедрении моделей в бизнес-процессы и мониторинг их качества
- Работа с требованиями: проведение интервью и рабочих встреч с Заказчиками для выявления потребностей в аналитике; документирование, согласование и приоритизация требований
- Высшее образование в области информатики, математики, статистики, экономики или смежных технических дисциплин
- Опыт разработки ETL-процессов, анализа данных или бизнес-аналитики не менее года
- Практический опыт работы с языками программирования Python и SQL
- Владение инструментами визуализации данных и системами бизнес-аналитики (BI)
- Знание принципов работы реляционных и нереляционных СУБД, а также архитектур данных
- Знание основ теории вероятностей, математической статистики и методов анализа данных
- Знание методик сбора и формализации требований от заказчиков
- Место работы: Московская обл., Красногорский р-н, 26 км. Автодороги "Балтия", БЦ "Рига Ленд"
- Корпоративный транспорт от м. ул. 1905 года, м. Щукинская, м. Строгино, МЦД Красногорская
- Конкурентные условия оплаты труда
- Корпоративный пакет социальных льгот (ДМС, мобильная связь и другие)
Senior Data Engineer
Направление: Data Engineering / DWH / ETL
Уровень: Middle+ / Senior
Опыт работы: от 3 лет в Data Engineering или смежных направлениях.
Ищем Data Engineer для разработки и развития инфраструктуры обработки данных и корпоративного хранилища (DWH).
Специалист будет отвечать за построение ETL/ELT-процессов, интеграцию данных из банковских систем, автоматизацию загрузок, обеспечение качества и доступности данных.
Основные обязанности
-
Разработка процессов получения данных из Oracle через CDC (Debezium, Kafka, Kafka Connect).
-
Разработка и поддержка DAG в Apache Airflow для автоматизации загрузки и обработки данных.
-
Проектирование слоёв данных: Staging, исторические данные (SCD2), Data Marts.
-
Разработка и оптимизация ETL/ELT-процессов с использованием SQL и PL/SQL.
-
Интеграция данных из различных источников в корпоративное хранилище (DWH).
-
Организация выгрузки данных в объектные хранилища (S3, MinIO).
-
Контроль качества данных, мониторинг загрузок и обработка ошибок.
-
Настройка мониторинга и алертинга для контроля актуальности данных и работы пайплайнов.
-
Подготовка технической документации, описание структур данных и Data Lineage.
Обязательные требования
-
Опыт работы Data Engineer от 3 лет.
-
Уверенное владение SQL: сложные запросы, оконные функции, оптимизация.
-
Глубокие знания Oracle и PL/SQL: пакеты, индексы, планы выполнения, работа с большими объёмами данных.
-
Опыт разработки на Python и автоматизации обработки данных.
-
Практический опыт работы с Apache Airflow или аналогичными оркестраторами.
-
Знание Apache Kafka, Kafka Connect и принципов CDC.
-
Опыт работы с Debezium или аналогичными инструментами.
-
Понимание моделирования данных: Fact/Dimension, SCD2, инкрементальная загрузка и идемпотентность.
-
Опыт работы с Git, Code Review и Docker.
Будет преимуществом
-
Опыт CDC-интеграции с Oracle: LogMiner, Redo/Archive Logs, SCN, Oracle GoldenGate.
-
Знание PostgreSQL / Postgres Pro и PL/pgSQL.
-
Опыт работы в банковской или финансовой сфере, понимание АБС и банковской отчётности.
-
Опыт оптимизации загрузки и обработки больших объёмов данных.
-
Практический опыт работы с GitLab CI/CD.
-
Знание инструментов мониторинга Prometheus, Grafana, Zabbix.
Личные качества
-
Аналитическое мышление и умение находить первопричины технических проблем.
-
Способность самостоятельно разбираться в сложных задачах.
-
Готовность уточнять требования и задавать вопросы при необходимости.
-
Ответственность, самостоятельность и открытая коммуникация с командой.
Условия:
- Конкурентоспособная заработная плата
- Корпоративное обучение и развитие;
- Удобное месторасположение офиса;
- Тренажерный зал, шахматы, мафия
- Врач в штате (мед.осмотр каждый день)
- График работы 5/2, с 9.00 до 18.00;
- Трудоустройство согласно ТК РУЗ.
- Тимбилдинги и праздники.
- Участие в конференциях и форумах.
- Современное здание и офис в стиле High-tech
Перед тем, как откликаться на вакансию, просим внимательно ознакомиться с требованиями, если Вы тот самый то мы вас ждем.
С уважением, HR Департамент
X5 — российская розничная торговая компания, управляющая продуктовыми торговыми сетями «Пятёрочка», «Перекрёсток» и «Чижик», 5Post, «Много Лосося» и медиаплатформой Food.ru.
X5 Tech - IT-компания и основной цифровой партнер торговых сетей и бизнесов X5. Команда из более 6000 специалистов разрабатывает решения, которые помогают 372 тысячам сотрудников группы работать с максимальным технологическим комфортом, а миллионам покупателей быстро и удобно покупать свежие продукты.
В дирекции по управлению данными открыта позиция аналитик данных/инженер по качеству данных.
В нашей команде тебе предстоит:
- Сбор прототипов витрин данных;
- Разработка и оптимизация SQL-запросов для извлечения данных из различных источников;
- Анализ и интерпретация больших объемов данных для выявления тенденций, паттернов и инсайтов;
- Формирование и проверка гипотез;
- Документирование разработанных решений;
- Взаимодействие с командами разработки и продуктового менеджмента для определения требований к данным;
- Участие в проектах по улучшению качества данных и автоматизации аналитических процессов;
Мы ждём тебя, если ты имеешь:
- Релевантный опыт работы от 5 лет;
- Уверенное знание SQL и опыт работы с реляционными базами данных (PostgreSQL, MySQL, MS SQL и др.);
- Умение писать и оптимизировать сложные SQL-запросы (Оконные функции, Рекурсии, Функции и операторы для работы с массивами, Временные таблицы);
- Умение разбираться в чужом коде, проводить ревью;
- Знание и опыт работы с устройством хранилища данных (Data Vault 2.0);
- Опыт работы со стеком Greenplum, Hive, Clickhouse, S3, Trino;
- Хорошие коммуникативные навыки и умение работать в команде;
- Опыт работы в BI инструментах (Qlik Sense, Superset);
- Опыт работы с данными на Python (pandas, numpy, sqlalchemy, psycopg2, requests).
Будет дополнительным плюсом:
- Работа в Airflow, умения написание дагов и знание основных компонентов;
- Работа в Ataccama.
Мы предлагаем:
- Официальное оформление с белой ЗП, полугодовые премии по результатам работы;
- Возможность работать удалённо или в гибридном формате;
- Удобный офис рядом с м. «Добрынинская» / удобный офис с бесплатной парковкой на м. «Волгоградский проспект» / МЦД «Калитники»;
- Гибкий график работы;
- Широкий пакет ДМС (включая выезд за рубеж и стоматологию), страхование жизни и здоровья;
- Возможность учиться и развиваться за счёт компании: внешние тренинги и семинары по профессиональным тематикам, участие в крупнейших конференциях страны, программы развития цифровых и управленческих навыков (Цифровая академия, Школа Тимлидов), онлайн и офлайн мастер-классы, корпоративный университет «X5 Полка», школа наставников и многое другое;
- Программы мотивации для спикеров и авторов: внутренняя школа Speak Up School, Write Up, ачивки и баллы за выступления, подготовка спикеров к крупнейшим конференциям страны, сообщество авторов на Хабре, возможность шерить опыт с комьюнити внутренних и внешних экспертов;
- Обмен опытом через cообщества: 12 технических комьюнити от java до devops;
- Яркая корпоративная жизнь с большим количеством мероприятий, конкурсов и возможностей для творческой реализации: регулярные внутренние митапы, демо-дни, открытые микрофоны, день IT-специалиста, программы волонтерства, корпоративное предпринимательство X5 Idea Challenge;
- Забота о благополучии сотрудников: 7 спортивных сообществ (бег, футбол, волейбол, баскетбол, хоккей, лыжи, триатлон), ежегодная Неделя здоровья;
- Скидки в экосистеме бизнесов Х5 («Пятёрочка», «Перекрёсток», «Много лосося», «Перекресток Впрок»);
- Программа привилегий Prime-zone (скидки на товары и услуги и специальные предложения от компаний-партнёров);
- Материальная помощь сотрудникам, попавшим в сложную жизненную ситуацию.
Присоединяйся к команде X5 Tech, чтобы создавать будущее ритейла вместе с нами!
Смотрите также в каталоге
Хотите персональную подборку?
Введите свои критерии — мы отфильтруем вакансии по вашим требованиям
Найти подходящие вакансии →