Data Engineer/Дата-инженер (Python)
Компания Zolla – крупная федеральная сеть магазинов мужской и женской одежды в связи с расширением отдела ищет себе в команду Data Engineer/Дата-инженера.
Компания Zolla – крупная федеральная сеть магазинов мужской и женской одежды в связи с расширением отдела ищет себе в команду Data Engineer/Дата-инженера.
ЗАДАЧИ, КОТОРЫЕ ПРЕДСТОИТ РЕШАТЬ:
- Разработка и поддержка ETL/ELT-пайплайнов для выгрузки данных из API внешних площадок (маркетплейсы, сервисы погоды, и прочие сервисы) в хранилище (MSSQL, PostgreSQL, ClickHouse);
- Оркестрация процессов с помощью Apache Airflow: миграция существующих cron-скриптов в управляемые DAG-и, настройка зависимостей, мониторинг и перезапуск процессов;
- Оптимизация производительности SQL-запросов и хранимых процедур: настройка индексов, партиционирование, анализ планов выполнения;
- Поддержка и в будущем миграция OLAP-кубов на базе Microsoft Analysis Services (SSAS Tabular) в DWH хранилище;
- Подготовка витрин данных для аналитиков и BI-систем: проектирование схем, наполнение данными, контроль качества;
- Настройка и сопровождение инфраструктуры для аналитиков: Jupyter Notebook/JupyterHub, обеспечение быстрого доступа к данным;
- Мониторинг состояния пайплайнов и отправка уведомлений (в различные каналы) о статусе выполнения задач.
НАШИ ОЖИДАНИЯ:
- Высшее, неоконченное высшее образование;
- Опыт коммерческой разработки ETL-процессов от 2-х лет;
- Уверенное знание SQL (сложные запросы с оконными функциями, CTE, оптимизация, хранимые процедуры, триггеры);
- Опыт работы с реляционными СУБД: MSSQL, PostgreSQL (администрирование на уровне запросов, настройка производительности);
- Практический опыт разработки на Python: написание ETL-скриптов с использованием pandas, SQLAlchemy, requests; интеграция с REST API;
- Опыт оркестрации процессов: Apache Airflow (понимание архитектуры DAG, Operators, Scheduler, настройка подключений);
- Навыки работы с BI-инструментами на уровне подключения и оптимизации датасетов (Yandex DataLens: подключение к БД, создание датасетов, оптимизация производительности запросов);
- Понимание жизненного цикла данных, принципов построения DWH (схемы «звезда», «снежинка», медленно меняющиеся измерения);
- Опыт работы с Git (GitLab) и командной разработкой (Code Review, CI/CD);
- Ответственность, проактивность, умение работать как самостоятельно, так и в команде с аналитиками и разработчиками.
Будет плюсом
-
Опыт работы с ClickHouse (знание движков таблиц, оптимизация запросов, распределённые таблицы);
-
Опыт администрирования JupyterHub в Docker-контейнерах;
-
Опыт работы с NoSQL-базами (MongoDB);
-
Понимание архитектуры потоковой обработки данных (Kafka, RabbitMQ).
МЫ ПРЕДЛАГАЕМ:
- Работу удаленно или в комфортабельном и уютном офисе в БЦ Кунцево Плаза в 5 минутах пешком от м. Молодежная;
- График работы 5/2 (гибкое начало рабочего дня);
- Оформление в соответствии с ТК РФ, официальную заработную плату (выплата 2 раза в месяц), оплачиваемый больничный лист, оплачиваемый отпуск 28 календарных дней;
- ДМС включая стоматологию (условия в зависимости от стажа работы);
- Дисконтную карту на продукцию компании, участие в распродажах в офисе;
- Корпоративные скидки на фитнес;
- Реальные перспективы профессионального и карьерного роста;
- А еще уютные лаундж-зоны, технологичные переговорные, просторные кухни и вкусный капучино.
Похожие вакансии Data Engineer
В Т‑Банк большое и продвинутое хранилище данных: это 8000 объектов, 800 ТБ в Greenplum и 110 ТБ в Clickhouse.
С данными активно работают более 16 тысяч пользователей из бизнес-команд — они ежедневно принимают десятки решений с опорой на них. А наша команда делает все, чтобы доступ к данным был простым и ими было удобно пользоваться. Мы постоянно совершенствуем подходы к работе и стараемся быть новаторами на рынке технологий.
Мы ищем в команду дата-инженера. В Т‑Банке вы сможете развиваться в одном из двух направлений — системном анализе и ETL-разработке. Или совмещать их, если вам интересны оба.
Обязанности
- Участвовать в формировании модели данных
- Проектировать и разрабатывать витрины и потоки данных на основе потребностей бизнес-пользователей
- Участвовать в проектах по развитию Data Platform
- Писать скрипты SQL и Python, это опционально
- Прорабатывать интеграции с внешними системами для Data Platform
Требования
- Свободно владеете SQL
- Работали с DWH в качестве аналитика или разработчика
- Понимаете теорию СУБД- и ETL-процессов
- Знаете Python или другой язык программирования
- Есть опыт проектирования объектов БД на основании бизнес требований
Условия
- Работу из офиса. График работы — гибридный
- Достойную зарплату — обсудим ее на собеседовании
В Т-Банке большое и продвинутое хранилище данных: это 8000 объектов, 800 ТБ в Greenplum и 110 ТБ в Clickhouse. С данными активно работают более 16 тысяч пользователей из бизнес-команд — они ежедневно принимают десятки решений с опорой на них. А наша команда делает все, чтобы доступ к данным был простым и ими было удобно пользоваться. Мы постоянно совершенствуем подходы к работе и стараемся быть новаторами на рынке технологий. Мы ищем в команду дата-инженера. В Т-Банке вы сможете развиваться в одном из двух направлений — системном анализе и ETL-разработке. Или совмещать их, если вам интересны оба.
Обязанности:
- Участвовать в формировании модели данных
- Проектировать и разрабатывать витрины и потоки данных на основе потребностей бизнес-пользователей
- Участвовать в проектах по развитию Data Platform
- Писать скрипты SQL и Python, это опционально
- Прорабатывать интеграции с внешними системами для Data Platform
Требования:
- Свободно владеете SQL
- Работали с DWH в качестве аналитика или разработчика минимум 5 лет
- Понимаете теорию СУБД- и ETL-процессов
- Знаете Python или другой язык программирования
- Есть опыт проектирования объектов БД на основании бизнес требований
Условия:
- Работа гибрид или удаленно — по договоренности
- Платформу обучения и развития «Т‑Банк Апгрейд». Курсы, тренинги, вебинары и базы знаний. Поддержку менторов и наставников, помощь в поиске точек роста и карьерном развитии
- Заботу о здоровье. Оформим полис ДМС со стоматологией и страховку от несчастных случаев. Предложим льготное страхование вашим близким
- Возможность работы в аккредитованной ИТ-компании
- Линейку льготных тарифов на продукты Т‑Банка
- Частичную компенсацию затрат на спорт
- Well-being-программу, которая помогает улучшить психологическое и физическое здоровье, а также разобраться с юридическими и финансовыми вопросами
- Три дополнительных дня отпуска в год
- Достойную зарплату — обсудим ее на собеседовании
HireSeeker собирает вакансии со всех площадок и присылает только релевантные. Бесплатно.