Data Engineer / Инженер данных (Python)

Объединенное Кредитное Бюро – крупнейшее Бюро кредитных историй в России.

Мы не выдаем кредиты, мы храним и обрабатываем крупнейший в России массив данных о кредитных историях. Наш уникальный ресурс – самая большая база данных, в которой более 600 миллионов кредитных историй, и мы уделяем большое внимание не только количеству данных, но и качеству их обработки.
На данный момент ищем в команду Старшего инженера-программиста.
Команда занимается разработкой, тестированием и вводом в эксплуатацию ETL-процессов на базе Apache NiFi, а также созданием внутренних инструментов для автоматизации Бюро. Вы будете участвовать в полном жизненном цикле проектов: от разработки и тестирования до эксплуатации и оптимизации пользовательских и технологических процессов.

Задачи на проекте:

• Автоматизировать развертывание инфраструктуры IaC (Infrastructure as Code - Инфраструктура как код);
• Мигрировать и модернизировать инфраструктуру LLM (Large Language Models);
• Разрабатывать решения TextToSQL (преобразование текстового запроса в SQL);
• Поддерживать разработанные отделом проекты на всем жизненном цикле;
• Автоматизировать и оптимизировать пользовательские и технологические процессы Бюро.

Наши ожидания от кандидата:

• Опыт коммерческой разработки от 3 лет;
• Уверенное владение языками: Go, Python, (JavaScript - будет преимуществом);
• Глубокие знания SQL и опыт работы с СУБД PostgreSQL;
• Опыт проектирования и разработки REST API;
• Навыки работы с Docker и понимание принципов контейнеризации;
• Опыт работы с системами контроля версий (Git) и таск-трекерами (Jira).

Что мы предлагаем:

• Достойное вознаграждение: конкурентная заработная плата и годовой бонус;
• Профессиональное сообщество: работа с лучшими специалистами в области Big Data, Confidential Computing, федеративного обучения и ML;
• Непрерывное развитие: внешнее обучение и участие в конференциях, внутренние митапы и обмен опытом;
• Удобный формат работы: возможность работать из дома или в уютном офисе на Павелецкой;
• Забота о здоровье: расширенная ДМС со стоматологией и полисом путешественника c первого дня работы, дополнительные дни отпуска, компенсация фитнеса;
• Атмосфера и комьюнити: реферальная программа, командные активности, корпоративы и тематические встречи.

FunFlow - аккредитованная IT-компания, разработчик популярных мобильных игр и приложений. Уже более 15 лет мы помогаем миллионам людей скрасить свободное время, создавая топовые развлекательные игры и сервисы по всему миру.

Продукты, которыми мы гордимся:

• социальный игровой проект, который мы разрабатываем, растет на +20% каждый год! Наша аудитория – более миллиона пользователей ежедневно, которые совершают десятки тысяч покупок и более 50 000 000 сыгранных игр каждый день;

• социальная сеть, над который мы сейчас работаем, – одна из самых популярных в СНГ с ростом +50% в год и ежедневной аудиторией более 1 000 000 пользователей. Каждый день они отправляют больше 20 000 000 сообщений, проводят более 50 000 прямых трансляций, знакомятся с сотнями тысяч людей.

Немного о нашем подходе:

Мы быстро растем и адаптируемся под меняющийся рынок. Мыслим целями, а не задачами, ценим свободу в выражении идей и проактивность. Не боимся рисковать, тестируем новые инструменты и гипотезы. В компании собрано комьюнити из специалистов разных направлений, что дает вам возможность делиться опытом и вдохновляться интересными решениями.

На сегодняшний день наша система ETL обрабатывает более 100 тысяч сообщений в секунду, более 2 миллиардов сообщений в день, обеспечивая доступность новых данных в приближенным к real-time интервалах. Весь бэкенд системы ETL написан на Python. Наша команда дата инженеров работает в рамках developer and research, где разработка занимает более 80% времени специалиста.

Мы приветствуем использование современных технологий, поэтому предоставляем команде полный доступ к последним ИИ моделям для ускорения разработки, автоматизации рутины, написания бойлерплейтов, ресерча, анализа и выполнения нестандартных задач.

Сейчас мы расширяем нашу команду Big Data и ищем скиллового Python разработчика.

Чем предстоит заниматься:

• Разработкой и поддержкой систем доставки, обработки и загрузки больших данных (ETL);

• Исследованием и интеграцией новых источников данных в DWH;

• Исследованием и интеграцией существующих ETL систем в Airflow.

Для нас важны:

• Опыт написания на Python от 3х лет (примеры работ будут плюсом);

• Понимание принципов реляционных СУБД;

• Опыт работы с Key-value/NoSQL базами данных;

• Уверенные знания ООП и паттернов проектирования;

• Опыт работы со стандартными инструментами разработчика (Git, IDE, Ci/Cd, Docker, Bash).

Будем плюсом:

• Опыт написания multithreading/multiprocessing программ на Python;

• Понимание принципов асинхронного программирования;

• Опыт написания высоконагруженных приложений;

• Опыт использования Apache Hadoop (HDFS, Hive, Impala), Apache AirFlow, Kafka.

Мы предлагаем:

• Официальное оформление с первого рабочего дня и белую зарплату;

• Работу в просторном офисе с современным оборудованием;

• Гибкое начало рабочего дня с 9:00 до 11:00;

• ДМС со стоматологией, частичную компенсацию на сервис «Ясно» и онлайн-занятия в Skyеng, компенсацию расходов на спорт и обучение;

• Участие в профильных конференциях и курсах, корпоративные мероприятия и занятия в группах по направлениям: волейбол, падел-теннис, квизы, мафия и настольные игры.

Почему стоит работать с нами:

• Большая аудитория. Дневная аудитория продукта, над которым мы работаем, – более 1 000 000 пользователей. А значит, вы легко увидите результаты своей работы.

• Развитие скиллов. У нас сильная команда с различными компетенциями. Вы сможете улучшать свои скиллы в разных направлениях.

• Нет бюрократии. У нас нет утомительных бюрократических согласований. Мы умеем быстро превращать идею в гипотезу, гипотезу в тест, а результаты теста в решения. Много и хорошо тестируем идеи и подкрепляем данными.

• Возможность роста. У нас есть понятный вектор для роста разработчиков. Мы стремимся получить супер-профессионалов, которые будут отвечать за целые направления и получать новые зоны ответственности.

• Скорость разработки. Благодаря скорости нашей работы и миллионной аудитории вы сможете довольно быстро увидеть результат своей работы и не будете “работать в стол”.

• Прозрачность. Мы всегда делимся новостями и данными продуктов, не скрываем метрики, продаем команде разработки свои идеи, исходя из цифр и ожиданий, к чему каждый новый функционал приведет.