сбербанк · Москва (ул. Вавилова) · 1 июн.
ID 2806
Data аналитик (Сбербанк)
Senior
Сбербанк
Гибрид 2-3 дня на Вакилова
ысокие шансы вывода
Грейд: Senior
Локация специалиста: г. Москва
Гражданство: РФ
Загрузка: Fulltime
Длительность: Долгосрочный проект
Примечание:
- Гибрид, 2-3 дня работы из офиса на ул. Вавилова❗️❗️❗️
- Отсутствие ИП,ООО у кандидата
- Оформленные только по ТК РФ, ГПХ
- Оформление совместительства на минимальную ставку в штат банка
❗️Обязательные данные по кандидату при подаче: ❗️
● ФИО
● Страна+Город
● Грейд
● Ставка
● Дата рождения
● Когда готов стартовать
Требования:
Java(Scala) под Spark обязательно
Опыт работы с Apache Spark от 1 года.
Опыт работы с СУБД (Greenplum, ClickHouse, PostgreSQL) от 2 лет
Опыт работы с Hadoop (HDFS, Hive)
Опыт проектирования и разработки потоков данных, алгоритмов загрузки и
обработки данных
Опыт оптимизации ETL-пайплайнов и SQL кода
Продвинутые знания SQL.
Понимание принципов работы распределенных систем.
Готовность осваивать Java для использования Spark
Будет плюсом
Опыт разработки на Java
Опыт работы в проектах, связанных с миграцией данных или BI-платформ.
Опыт работы в банковской сфере, понимание бизнес домена.
Опыт работы в крупных проектах с высокими требованиями к надежности
Задачи:
Разработка ETL на Apache Spark (Java стек)
Разработка ETL-пайплайнов (Apache Spark, HDFS (parquets), Hive, Greenplum,
ClickHouse);
Разработка витрин данных в Greenplum и ClickHouse
Оркестрация ETL-процессов.
Оптимизация ETL-процессов (батчинг, ретраи, SLA-контроль).
Взаимодействие с BI-разработчиками и DevOps для своевременной доставки
данных в Superset.
🔎 Вопросы/резюме - в ЛС @veroneko