Программист группы BI и отчетность по направлению Data Engineer
ЭТМ — это комплексный федеральный поставщик инженерных систем, входящий в список 200 крупнейших* компаний России
ЭТМ — это комплексный федеральный поставщик инженерных систем, входящий в список 200 крупнейших* компаний России
Обязанности:
- Проектирование таблиц для фиксации первичных данных и производительных витрин данных для последующего BI-анализа (Vertica) с учетом требований на загрузку данных .
- Поддержка и расширение формата имеющихся таблиц и витрин.
- Настройка ETL/ELT процессов с акцентом на эффективность и отказоустойчивость.
- Мониторинг и оптимизация производительности (ETL/ELT процессов; выборки данных) .
- Проведение тестирования по итогу разработки таблиц/витрин.
- Сопровождение бизнес-тестирования витрин данных.
- Подготовка описаний ETL/ELT процессов.
- В качестве дополнения - формирование фоновой отчетности на основе данных аналитической СУБД.
- Участие в проектных совещаниях, предусмотренных по проектам.
- Участие в процессе ревью проектирования таблиц в разных ролях (автор или рецензент).
- Глубокие знания SQL, опыт работы с реляционными/не реляционными БД.
- Знание Python (базовые алгоритмы и структуры данных, работа с БД, с файлами).
- Понимание принципов построения хранилищ данных (Data Warehouse, Data Lake) на Vertica.
- Опыт работы с большими данными (Clickhouse, Greenplum, Vertica).
- Опыт работы с ETL/ELT инструментами (Apache AirFlow, NiFi и тд).
- Наличие минимальных представлений о cmd/bash shell (scheduler/cron).
- опыт работы с инструментами потоковой загрузки данных (Apache Kafka, Apache Spark Streaming).
- Навыки программирования Python (опционально JAVA, php).
- Опыт обеспечения надежности систем: обработка ошибок, мониторинг, тестирование.
- Использование инструментов командной разработки .
- Знание систем ведения задач проектов.
- Опыт сбора БТ на данные.
- Работа в аккредитованной российской IT-компании.
- Работа над масштабными, интересными проектами в управляющем центре крупной компании.
- Официальное трудоустройство с первого дня работы.
- Гарантии и льготы в соответствии с трудовым законодательством РФ.
- Современный офис в центре города (выделенные зоны приема пищи, обособленные места отдыха, корпоративный кофе).
- График: 5/2 с 08:30 до17:30 (в пятницу до 16:30);
- Бесплатные тренировки по футболу, тег-регби, настольному теннису, членство в беговом клубе.
- Скидки на матчи клуба "Зенит".
- Корпоративные скидки на изучение английского языка.
- Бесплатные билеты в Мариинский театр на ежемесячной основе.
Похожие вакансии Data Engineer
В Т-Банке большое и продвинутое хранилище данных: это 8000 объектов, 800 ТБ в Greenplum и 110 ТБ в Clickhouse. С данными активно работают более 16 тысяч пользователей из бизнес-команд — они ежедневно принимают десятки решений с опорой на них. А наша команда делает все, чтобы доступ к данным был простым и ими было удобно пользоваться. Мы постоянно совершенствуем подходы к работе и стараемся быть новаторами на рынке технологий. Мы ищем в команду дата-инженера. В Т-Банке вы сможете развиваться в одном из двух направлений — системном анализе и ETL-разработке. Или совмещать их, если вам интересны оба.
Обязанности:
- Участвовать в формировании модели данных
- Проектировать и разрабатывать витрины и потоки данных на основе потребностей бизнес-пользователей
- Участвовать в проектах по развитию Data Platform
- Писать скрипты SQL и Python, это опционально
- Прорабатывать интеграции с внешними системами для Data Platform
Требования:
- Свободно владеете SQL
- Работали с DWH в качестве аналитика или разработчика минимум 5 лет
- Понимаете теорию СУБД- и ETL-процессов
- Знаете Python или другой язык программирования
- Есть опыт проектирования объектов БД на основании бизнес требований
Условия:
- Работа гибрид или удаленно — по договоренности
- Платформу обучения и развития «Т‑Банк Апгрейд». Курсы, тренинги, вебинары и базы знаний. Поддержку менторов и наставников, помощь в поиске точек роста и карьерном развитии
- Заботу о здоровье. Оформим полис ДМС со стоматологией и страховку от несчастных случаев. Предложим льготное страхование вашим близким
- Возможность работы в аккредитованной ИТ-компании
- Линейку льготных тарифов на продукты Т‑Банка
- Частичную компенсацию затрат на спорт
- Well-being-программу, которая помогает улучшить психологическое и физическое здоровье, а также разобраться с юридическими и финансовыми вопросами
- Три дополнительных дня отпуска в год
- Достойную зарплату — обсудим ее на собеседовании
Обязанности
Исправлять существующие фичи: выявлять причины остановки наполнения, исправлять логику и ставить задачи технической команде
Создавать новые фичи: определять требования к данным, формулировать прототип и ставить задачи в бэклог
Оценивать финансовую эффективность применения фичей (количество выдач, время обработки заявок, точность прогнозов и другие показатели)
Документировать информацию о новых и изменённых фичах в Confluence
Организовывать контроли качества данных: готовить бизнес-описание проверок и писать простые SQL-скрипты
Требования
Базовые знания SQL, Python
Опыт работы с большими данными и знание программных инструментов для анализа данных
Базовые знания реляционных баз данных и понимание различий между типами СУБД
Аналитический склад ума и способность анализировать большой объём информации
Навыки межличностного общения для взаимодействия с разными отделами Банка
Понимание нормативных требований в области обработки данных, включая конфиденциальность и безопасность
Умение запрашивать и обрабатывать обратную связь от наставников
Будет преимуществом работа со Spark, HDFS, Airflow и опыт применения LLM в задачах
Условия
Трудоустройство по ТК
ДМС с топовыми клиниками с первого дня работы
Модный офис в Москве, Питере, Екатеринбурге и Сочи
Корпоративы, тусовки и фирменный мерч в подарок
Возможность поработать над продуктами с миллионной аудиторией
Поддержка и помощь персонального ментора
HireSeeker собирает вакансии со всех площадок и присылает только релевантные. Бесплатно.