Senior Data Engineer (Databricks)

О команде:

Команда Data Engineering занимается развитием и поддержкой корпоративного хранилища данных (DWH) для основных продуктов компании: платежной системы, маркетплейса и сервиса рассрочки. Наша задача — обеспечить компанию надёжными и актуальными данными для внутренней аналитики и реализации требований регулятора (RegTech). Сейчас команда развивает архитектуру хранилища данных, переходит на ELT-подход и стандартизирует технологический стек на базе ClickHouse, dbt, Apache Airflow и Kafka Connect. Мы также совершенствуем инженерные практики, уделяя особое внимание надёжности, качеству данных и автоматизации процессов.

Чем вы будете заниматься:

• Поддерживать и развивать дата-пайплайны: сопровождать существующие batch- и near-real-time потоки из микросервисов (PostgreSQL, MySQL, API), рефакторить legacy-процессы и переносить вычисления из Python/Pandas в SQL.
• Оптимизировать стек данных: настраивать ClickHouse, Kafka Connect и CDC (Debezium, DLQ, Schema Registry), оптимизировать Airflow DAG-и и управление параллелизмом.
• Развивать DWH и внедрять dbt: переносить бизнес-логику и витрины в dbt, использовать Jinja и макросы, развивать архитектуру Bronze / Silver / Gold.
• Обеспечивать качество данных: автоматизировать DQ-проверки, сверять данные с источниками, настраивать мониторинг и алертинг, выстраивать Data Lineage.
• Автоматизировать инфраструктуру и CI/CD: управлять конфигурациями пайплайнов, DDL-миграциями и доступами через код; развивать процессы на базе GitLab CI, werf, Docker и Kubernetes.
• Использовать AI-инструменты: ускорять работу с legacy-кодом, генерацию тестов, оптимизацию SQL-запросов и подготовку документации с помощью Cursor, Copilot, ChatGPT и Claude.

Чего мы ожидаем от вас:

• SQL: уверенное владение SQL, умение писать сложные аналитические запросы, понимание принципов оптимизации;
• Python: хороший уровень (requests, работа с API, базовый Pandas), умение писать чистый, поддерживаемый код;
• Airflow: опыт написания DAG-ов, понимание базовых принципов работы шедулера, операторов, хуков;
• Архитектура DWH: понимание концепций построения хранилища и моделей данных; идеологии ELT vs ETL, OLAP vs OLTP;
• Инфраструктура: базовое понимание контейнеризации (Docker / Kubernetes), уверенная работа с Git;
• Уверенное использование AI-инструментов: активное применение в ежедневной работе (ChatGPT, Claude, Cursor, GitHub Copilot или аналоги) для ускорения написания рутинного кода, помощи в рефакторинге, генерации SQL/документации и быстрого онбординга в новую кодовую базу.

Будет большим плюсом:

• Опыт работы с ClickHouse в продакшене (знание особенностей MergeTree движков, партиционирования);
• Практический опыт работы с dbt (Data Build Tool);
• Понимание принципов работы брокеров сообщений (Kafka) и CDC-инструментов (Debezium);
• Опыт деплоя приложений в Kubernetes (Gitlab / Github CI).

Почему вам будет интересно с нами:

• Работа в продуктовой финтех-компании;
• Современная архитектура и сложные инженерные задачи;
• Профессиональная команда, взаимная поддержка и обмен опытом;
• Возможность карьерного роста;
• Культура, открытая к новым идеям и улучшениям процессов;
• Выстроенная адаптация с сопровождением HR, тимлида и ментора;
• Уроки английского с носителями языка;
• Компенсация обучения (постоянный доступ к корпоративным материалам, специализированные курсы, внутренние митапы);
• Насыщенная корпоративная жизнь;
• Добровольная медицинская страховка;
• Офис в центре города в Tashkent - City;
• График 5/2 с 9:00 до 18:00;
• Конкурентная заработная плата (обсуждается по итогам собеседования).

О компании:

Alif — одна из крупнейших и самых быстрорастущих финтех-компаний Центральной Азии с проектами в Узбекистане, Таджикистане и Пакистане. Компания была основана в 2014 году Абдулло Курбановым, Фирдавсом Мирзоевым и Зухуршо Рахматуллоевым.

Наши достижения:

• Alif - одна из самых динамичных и дорогих финтех-компаний региона, оценённая более чем в $100 млн.
• В Узбекистане компания работает с 2019 года и за это время стала одним из лидеров рынка.
• Общая аудитория пользователей превысила 9 миллионов человек.
• Сегодня команда Alif насчитывает более 300 квалифицированных специалистов, которые создают и развивают полноценную финтех-экосистему.
• Компания является резидентом IT-Park с 2019 года и активно расширяет своё присутствие на рынке.
• Alif занимает передовые позиции на рынке BNPL-решений и продолжает уверенно развиваться.

Мы в Alif, обеспечиваем равные возможности, и приветствуем заявки от всех квалифицированных лиц, включая людей с ограниченными возможностями, ветеранов и людей из разных слоёв общества.

Присоединяйся к команде крупнейшего пищевого производителя с известными брендами! Работа в АО МПБК Очаково это ценность каждого сотрудника и стабильный заработок!