Инженер сопровождения (SDP Hadoop)

SberData - департамент по управлению данными всего Сбербанка. SberData строит централизованное хранилище данных, объем которого уже превышает 100 ПБ. Это продуктово-ориентированная инженерная команда с функциями развития выделенных технологических направлений, отражающих новый подход Сбербанка к данным и к применению AI.

SDP Hadoop - это полноценный дистрибутив на базе Apache Hadoop, адаптированный для внутреннего использования, предназначенный для хранения и обработки слабоструктурированных и неструктурированных данных.

Первый этап отбора на эту вакансию – общение с AI-рекрутером. После отклика вам на почту придет приглашение пройти первичное интервью с ГигаРекрутером в Telegram. Диалог займёт примерно 10 минут. Его задача — уточнить недостающие детали и ускорить рассмотрение вашей кандидатуры. ГигаРекрутер только начинает свой путь, поэтому просим относиться с пониманием. Ваш опыт и участие помогут сделать его удобным и полезным!

Задачи

• обеспечение бесперебойной работы платформы Hadoop в Сбере: установка, настройка, обновление кластеров SDP Hadoop и связанной инфраструктуры

• участие в проектировании продукта SDP Hadoop со стороны сопровождения: написание ТЗ, описание и воспроизведение Дефектов

• автоматизация рутинных операций для повышения производительности и надежности систем

• анализ и оперативное устранение нештатных ситуаций, отказов приложений и исследование корневых причин их возникновения

• поддержка и совершенствование процессов CI/CD, релизного процесса, обеспечивая эффективную разработку и доставку

• создание эксплуатационной документации для сопровождаемых систем

• организация работ, взаимодействие со смежными командами, в части исправления выявленных недостатков

• контроль внесения изменений в промышленную среду.

• глубокие знания в troubleshooting'е и администрировании linux-систем, уверенное владение командами ОС семейства Linux

• понимание работы стека TCP/IP, опыт эксплуатации CI/CD систем: Jenkins/Github/TeamCity/etc

• опыт работы с системами мониторинга: Prometheus, Zabbix

• понимание технологий интеграции между системами - форматы сообщений xml, json, менеджеры очередей Kafka, RabbitMQ, IBM MQ, ActiveMQ)

• опыт автоматизации на скриптовых языках: shell/perl/python/etc

• опыт работы с централизованными системами по управлению идентификацией пользователей (RH IDM IPA, Active Directory), понимание принципов работы Kerberos, LDAP

• английский язык на уровне чтения технической документации

• опыт написания технической документации и технических заданий

• знание принципов работы реляционных БД и ITSM, ITIL

• высшее образование.

Будет плюсом:

• опыт в администрировании и troubleshooting'e Hadoop, а именно Hive, YARN, Oozie, Zookeper, Hue, Ambari, HBASE, Spark, HDFS, Druid, Flink, Solr, Ranger
• навыки работы с генеративными AI-моделями.

Условия

• комфортный современный офис: БЦ Даниловский форт, рядом с М.Тульская, Верхние котлы
• график работы – офис
• ежегодный пересмотр зарплаты, годовая премия
• корпоративный спортзал и зоны отдыха
• более 400 образовательных программ СберУниверситета для профессионального и карьерного развития
• расширенный ДМС, льготное страхование для семьи и корпоративная пенсионная программа
• гибкий дисконт по ипотечному кредиту, равный 1/3 ключевой ставки ЦБ
• бесплатная подписка СберПрайм+, скидки на продукты компаний-партнеров
• вознаграждение за рекомендацию друзей в команду Сбера.