Data Engineer — свежие вакансии

Обязанности:

• Проектировать, разрабатывать и поддерживать ETL/ELT-процессы для загрузки, преобразования и передачи данных между корпоративными системами
• Подключать новые источники данных через БД, API, файловые обмены и другие доступные интерфейсы интеграции
• Проектировать структуры хранения данных, витрины и наборы данных для аналитики, отчетности и моделей искусственного интеллекта
• Обеспечивать очистку, нормализацию, дедупликацию и контроль качества данных; реализовывать автоматические проверки и обработку ошибок
• Настраивать оркестрацию, расписания, повторные запуски, журналирование и мониторинг data-пайплайнов
• Оптимизировать SQL-запросы и процессы обработки данных с учетом производительности, объема данных и доступности сервисов
• Обеспечивать стабильность и доступность данных для потребителей, участвовать в разборе инцидентов и устранении причин сбоев
• Вести техническую документацию по источникам, схемам, преобразованиям и правилам качества; взаимодействовать с аналитиками, разработчиками и ML-инженерами

• Высшее образование
• 2–4 года практического опыта в Data Engineering/разработке систем обработки данных. Опыт создания и поддержки ETL/ELT-процессов, интеграции источников и подготовки надежных наборов данных для аналитики и ИИ.
• Уверенный SQL, понимание индексов, планов выполнения, транзакций и оптимизации запросов. Практический опыт PostgreSQL или сопоставимых СУБД.
• Уверенный Python для интеграций, преобразований и автоматизации обработки данных; понимание структуры поддерживаемого production-кода.
• Практический опыт проектирования и поддержки ETL/ELT-пайплайнов; работа с Airflow/Prefect/Dagster или аналогичными средствами оркестрации.
• Понимание принципов DWH, Data Lake/Lakehouse, слоев хранения, витрин данных, схем данных и жизненного цикла наборов данных.
• Опыт работы с REST API, Git, Docker; умение организовать валидацию, мониторинг качества, обработку ошибок и воспроизводимость процессов загрузки данных.

• Работа в крупном агропромышленном холдинге
• Официальное трудоустройство и официальная заработная плата;
• Конкурентоспособный уровень заработной платы, который обсуждается индивидуально;
• Ежегодная индексация заработной платы
• График работы 5/2 (дневные с 08:00 до 17:00)
• Медицинское страхование в соответствии с законодательством РФ
• Возможность обучения, развития, карьерного и профессионального роста.
• Рабочее место, г. Ижевск, ул.Песочная, 11

Обязанности:
•Разработка и поддержка BI-решений Банка (разрабатывать модули приложений согласно FSD, НФТ, требованиям производительности, архитектуры и стандартам разработки)
•Исправление дефектов ПО
•Разработка дагов/потоков на ETL инструментах согласно требованиям по FSD
•Осуществление функциональной поддержки (3-я линия)

Требования:
•Опыт работы разработчиком SQL (GreenPlum, Oracle) - 3 года
•Опыт работы с ETL инструментами (AirFlow, Informatica IPC)
•Опыт работы с большим объемом данных (таблицы с триллионами записей)
•Желателен опыт работы в банковской сфере
•Опыт работы с кредитной историей (выгрузка информации в Бюро кредитных историй, опыт работы с кредитной историей на стороне Бюро
•Опыт работа с XML

Условия:
•Стабильный и прозрачный доход: размер заработной платы обсуждается по итогам собеседования + квартальная премия по результатам KPI
•Гибкий график работы: вы сможете планировать время так, как удобно вам и вашей команде
•Полную удалёнку или гибрид на выбор, а также уютный ИТ-хаб в Москве, Санкт-Петербурге, Екатеринбурге и сезонный коворкинг в Сочи
•Сложные и интересные задачи, современный стек технологий
•Заботу о вашем здоровье: программа ДМС с первых дней работы, куда входит стоматология, обслуживание в лучших клиниках города, страхование и компенсация 10-ти дней больничного
•Возможность вертикального и горизонтального карьерного роста: регулярно проходят тренинги, вебинары, митапы и демо-дни
•Оплату посещения профильных конференций и курсов, помогаем с подготовкой к публичным выступлениям и написанием статей на Хабр
•Доступ к бесплатным корпоративным библиотекам Alpina Digital, МИФ и бизнес-изданий

КОМПАНИЯ «АЙ-ТЕКО» - ведущий российский системный интегратор и поставщик информационных технологий для корпоративных заказчиков. Активно действует на рынке IT России с 1997 года, входит в ТОП-400 крупнейших российских компаний, ТОП-10 крупнейших IT-компаний России.

В связи с активным развитием проектов в компании открыта вакансия Data Engineer ОФИС В МСК

ФОРМАТ РАБОТЫ: ОФИС, МСК

Стек технологий: SQL, Hadoop, Spark, Hive

Основные обязанности:

• - Построение логических и/или физических моделей данных;
• - Опыт построения таблиц с версионированием данных (бизнес/техническая история , ескд2);
• - Знание etl процессов;
• - Проектирование алгоритмов загрузки (инит/архив, инкремент, выделение дельты изменений);
• - SQL - уверенные знания ;
• - Опыт работы с инструментарием Hadoop (Spark, Hive, HDFS, YARN);
• - разработка java дистрибутива etl процесса;
• - Работа с БД с использованием Spark java framework;
• - настройка параметров spark фреймворка (оптимизация Spark контекста);
• - Работа с датафреймами и датасетами;
• - Оптимизация плана запросов.
• - опыт со scala будет преимуществом

МЫ ПРЕДЛАГАЕМ:

• Работу в стабильной компании, "белую" заработную плату;
• Оформление в соответствии с ТК РФ с первого дня работы;
• Расширенный социальный пакет: ДМС (включая стоматологию), корпоративные скидки на посещение фитнес-клубов, футбольная и волейбольная секции;
• Профессиональное обучение и развитие;
• Яркая и насыщенная корпоративная жизнь;
• Снабжаем всей необходимой современной техникой: мощный ноут привезут прямо в день оформления.

ФОРМАТ РАБОТЫ: ОФИС, МСК

Команда DWH Лавки работает над хранилищем, которое поддерживает аналитику и ключевые операционные процессы бизнеса. В основе хранилища — зрелый batch‑контур. Он включает тысячи расчётов и зависимостей: сохраняет историю и предоставляет проверенные данные за прошедший день.

Сейчас мы развиваем направление RT/NRT‑данных для AI‑систем Лавки. Речь идёт о потоковых и микробатчевых поставках, единых контрактах и контроле качества. Оперативные данные позволяют быстро получать сигналы и контекст для принятия решений, а batch‑слой обеспечивает полноту данных, сохраняет историю и финальную версию информации. Нам требуется опытный инженер данных. Его задача — связать эти контуры и развить платформенную основу для AI‑продуктов, которые используют операционные и управленческие команды.

Роль инженерная, с полной ответственностью за результат. Нужно самостоятельно выбирать задачи, в которых RT/NRT‑данные будут действительно полезны, проектировать решения, запускать их в промышленную эксплуатацию и развивать вместе с продуктовыми командами.

Мы работаем со следующим стеком технологий:

* Python, SQL и YQL
* Внутренний Code Driven фреймворк DMP Suite
* YT, Greenplum и ClickHouse
* Apache Flink / Flink Flow и LogBroker для потоковой обработки
* Встроенные инструменты Data Quality, мониторинга и управления ETL‑процессами

Развитие поставок данных

Вы будете проектировать и развивать RT/NRT‑поставки данных для разных сценариев работы продуктовых команд — например, для жизненного цикла заказа, работы сотрудников, складских операций и отслеживания доступности товаров. При этом нужно тщательно продумать, как будут взаимодействовать оперативный и batch‑контуры, и подобрать архитектуру, которая обеспечит нужную скорость, полноту, стоимость и надёжность данных.

Проектирование RT‑данных

Вам предстоит помогать системным аналитикам и продуктовым командам проектировать RT‑данные: подбирать источники и способы обработки, определять модель событий, контракты, требования к свежести и качеству данных, а также прорабатывать правила работы с запаздывающими событиями и предварительными результатами.

Поиск возможностей по RT‑данным

Вам нужно будет искать новые способы работы с RT‑данными, разрабатывать универсальные подходы и помогать внутренним заказчикам разобраться, какие задачи можно решить с их помощью. При этом проектирование прикладных агентов и бизнес‑сценариев останется за продуктовыми командами.

Инженерные задачи и развитие DWH

В ваши обязанности войдёт ведение инженерных задач: исследование процессов и источников данных, запуск решений в промышленную эксплуатацию, контролирование их работы и безопасное развитие DWH, который имеет большой граф зависимостей.

Развитие AI‑агентов для DWH

Вы будете расширять возможности AI‑агентов в автономном DWH: предоставлять им качественный контекст и инструменты, устанавливать ограничения и проверки, оценивать результаты работы и превращать сложные случаи в новые сценарии автоматизации. Также вам предстоит работать с нетиповыми инцидентами — выявлять их системные причины и на этой основе создавать новые проверки, инструменты и возможности для агентов.

Больше о разработке в Яндексе — в канале Yandex for Developers

* Проектировали и поддерживали промышленные RT/NRT‑пайплайны, понимаете, чем их разработка и эксплуатация отличаются от batch‑обработки
* Занимались разработкой в крупном DWH или распределённой платформе, понимаете, как безопасно менять процессы с большим графом зависимостей
* Умеете проектировать надёжную обработку событийных данных с учётом задержек, повторной обработки и изменений источников
* Уверенно владеете Python и SQL, понимаете принципы моделирования данных, качества, наблюдаемости и надёжной эксплуатации
* Умеете превращать не до конца сформулированную бизнес‑задачу в модель данных и техническое решение, сравнивать архитектурные варианты, объяснять компромиссы и договариваться с владельцами источников
* Уже используете AI‑агентов в инженерной работе и хотите развивать подход, в котором человек управляет целями, качеством и архитектурой, а значительную часть реализации и поддержки выполняют агенты
* Готовы брать ответственность за результат поставки данных, а не только за написанный код

* Имели глубокий практический опыт работы с Apache Flink
* Практиковали построение lambda‑ или kappa‑архитектуры и объединение оперативного и batch‑контуров
* Запускали новое платформенное направление или развивали внутренние data‑продукты
* Практиковали проектирование data contracts и интеграцию нескольких продуктовых систем
* Разрабатывали инструменты, контекст, проверки или evaluation‑процессы для инженерных AI‑агентов

КОГО МЫ ИЩЕМ?

Стажера инженера по данным в продукт в Заявки телеком

ОПИСАНИЕ ПРОДУКТА
Аналитика для сервиса Заявки Телеком данных - продукт занимается выгрузками данных по телекому (начисления, трафик, услуги, тарифы) для внутренних заказчиков, работа с разными источниками (хадуп, гринплам, оракл, другие бд)

ЧЕМ ПРЕДСТОИТ ЗАНИМАТЬСЯ

• Выгрузки, обработка гео и телеком-данных (трафик, локации нахождения абонентов)
• Разработка простых ETL-процессов
• Выполнение ADHOC-задач на PySpark
• Создание сегментов пользователей
• Подготовка отчетности, обработка таблиц на PySpark

ОЖИДАНИЯ

• В том числе Студенты 3 и 4 курсов бакалавриата, специалитета или магистратуры

• Опыт работы с Python
• Базовое знание SQL

ЧТО ПРЕДЛАГАЕМ

• Cобственную платформу MTS Ocean для получения ИТ-ресурсов, а это значит, что деплой, мониторинг, observability — не будут для тебя проблемой, ты сможешь сосредоточиться на фичах;
• Профессиональные гильдии инженеров, где мы поддерживаем друг друга и помогаем стать лучше;
• Внутреннюю площадку TechTalks для обмена опытом, дискуссий, развития навыков самопрезентации;
• Полезные курсы и вебинары в корпоративном университете и электронную библиотеку.

А еще:

• Прием врачей общей практики и массаж в офисе;
• Мобильная связь за счет компании и льготные тарифы для близких;
• Подписка на онлайн-кинотеатр KION, сервис МТС Музыка, книжный сервис Строки от МТС, безлимитные мессенджеры и соцсети.

ОДИН ИЗ ЛУЧШИХ РАБОТОДАТЕЛЕЙ РОССИИ

Мы – Neoflex. Аккредитованная IT компания. За 20 лет работы мы создали 12+ готовых решений для бизнеса, так же занимаемся заказной разработкой программного обеспечения.

Приветствуем на странице нашей компании и благодарим за интерес к вакансии. Будем рады оказаться полезны друг другу.

Сейчас мы расширяем команду, занимающуюся проектом по миграции данных из 87 источников на единую платформу. Команда входит в Центр компетенций BDS - одно из сильнейших подразделений нашей Компании, экспертов в области работы с большими данными, построения DWH и использующих в работе современный стек BigData: Greenplum, Hadoop, NiFi, Hive, Spark/Scala, PostgreSQL, Informatica, Kafka, Apache Airflow, Apache Griffin.

ПРОЕКТ: Суть проектов связана с построением хранилищ, которые построены на различных базах данных Hadoop, GreenPlum, PosgreSQL. Работаем с витринами и занимаемся разработкой ETL процессов.

СТЕК: Spark, Hadoop, Hive, Hue, Jupyter.

Работа из офиса 5/2 Москва ул. Поклонная

Что нужно делать:

• заниматься определением источников, выявлением проблем с качеством данных в источниках;

• разработкой схем данных конечных витрин в Hive по утвержденному проекту;

• маппингами атрибутов источников на приёмник;

• разработкой ETL-процессов с помощью внутреннего фреймворка;

• реконсиляцией данных, написанием базовых тестов на качество данных.

Что мы хотели бы видеть:

• уверенный уровень sql (в пределах стандарта, без привязки к СУБД);
• представления о java / python;

Желательно:

• опыт работы с Hive, Spark;
• опыт работы с Оozie, Airflow;
• умение работать с Confluence;
• есть представление о работе с Jira, Git.

Что ты приобретёшь, присоединившись к нам:

• достойную оплату труда + компенсационные, стимулирующие и мотивационные выплаты, бонусы за участие в реферальной программе;
• работа в команде профессионалов готовых делиться экспертизой;
• официальное трудоустройство по ТК РФ, аккредитация IT, расширенный социальный пакет:

✔️ страховка ДМС (с 3-го месяца работы, стоматология, возможность подключения родственников, теле медицина, полис ВЗР),

✔️ сотрудникам со стажем в Neoflex более 3 месяцев при предоставлении листка нетрудоспособности устанавливается доплата до полного заработка за период болезни,

✔️ обучение детей сотрудников ИТ специальностям,

✔️ компенсация затрат на фитнес и занятия английским языком;

• обеспечиваем техникой для работы (ноутбук, наушники, мышь);
• профессиональное развитие - в Учебном Центре (курсы по работе с большими данными, видео лекции, тренажеры, карьерный коучинг, лекции, тренинги, конференции, участие в митапах);
• возможность пройти проф.сертификацию;
• прозрачную систему карьерного развития Performance Review;
• персонального наставника с первого дня работы;
• насыщенную корпоративную жизнь: яркие корпоративы, праздники для детей сотрудников, корпоративные спортивные мероприятия, мотивационные награждения;
• комфортную атмосферу в филиалах компании в городах: Москва, Санкт-Петербург, Нижний Новгород, Пенза, Воронеж, Саратов, Самара, Краснодар где есть лаунж и фотозоны, вендинги в кухнях, пространство для медитаций и другие секретные места, о которых знают только наши сотрудники.

Мечты и команды работают вместе. Мы будем рады, если ты станешь частью нашей команды! Откликайся ;)

Команда занимается сбором данных для различных процессов кредитования крупного бизнеса.

Задачи

• Анализ поступивших бизнес-требований к витринам данных.
• Общение с заказчиком по бизнес-требованиям.
• Построение прототипа проектируемого решения в Лаборатории данных.
• Сверка прототипа с эталоном, демонстрация решения заказчику.
• Разработка витрин данных согласно зафиксированным требованиям и прототипу.
• Тестирование разработанного решения.
• Подготовка сопроводительной документации для вывода решения в ПРОМ.
• Сопровождение внедренного решения (3 лс).

Требования

• Опыт работы в роли системного аналитика/разработчика витрин данных от 2 лет.
• Понимание процесса разработки витрин данных с нуля.
• Опыт разработки технической документации приветствуется.
• Хорошее знание SQL (аналитические функции, подзапросы, в идеале — оптимизация запросов).
• Понимание принципов проектирования реляционных БД.
• Понимание методологии проектирования витрин данных (ETL).
• Владение английским языком от уровня B2 и выше.
• Готовность работать в офисном формате.

Будет преимуществом

• опыт работы со стеком технологий больших данных (Hadoop, Spark, Hive/Impala).
• опыт работы в качестве Data Engineer / Data Analyst.
• знание и умение работы с wiki-системой Confluence, трекинговыми системами (Jira, Redmine и т. д.).
• знание банковской предметной области.

Условия и бенефиты

• Работа в современном комфортном офисе.
• Конкурентные условия труда (белая заработная плата, оклад, премии).
• Гибкий график, сокращенный рабочий день в пятницу (до 16.45).
• ДМС.
• Льготная ипотечная программа (после 6 месяцев работы в Сбере).
• Отличная программа софинансирования пенсионных накоплений.
• Широкий спектр дисконт-программ, скидок и привилегий от компаний-партнеров.
• Льготное кредитование в Сбербанке — возможность пользоваться премиальными продуктами Банка на специальных условиях.
• Возможность проходить обучение в лучшем Корпоративном Университете.

В ООО "Газпромнефть-Региональные продажи" требуется дата-инженер

Обязанности:

• Проектирование и реализация ELT/ETL-решений для загрузки сырых данных в Hadoop,
• проектирование и реализация хранилищ и витрин данных в Hive, Hbase, SQL Server, PostgreSQL, Clickhouse и соответствующих ETL,
• проектирование и реализация решений для межсистемной интеграции (rest, soap, MQ, ftp, etc) ,
• оптимизация MVP-решения команд data scientist для переноса их в продуктив,
• развитие архитектуры и оптимизация работы типовых решений на платформе,
• участие в апробации и оптимизации новых компонент платформы,
• анализ и оптимизация бизнес-требований, подготовка технической документации,
• решение инцидентов эксплуатации систем и модулей.

Требования:

• Опыт разработки решений на базе одной из СУБД: MSSQL Server,Oracle, PostreSQL, Clickhouse
• Опыт интеграции с различными источниками данных (rest, soap, api, ftp, dfs, http, rdbms)
• Участие в проектах построения корпоративного хранилища данных или BI системы для крупного бизнеса
• ПО: Hadoop HBase/Hive/Spark/Scala, Informatica DEI/BDM/PC, Kafka
• ЯП: SQL, Python
• Командные оболочки: Bash, PowerShell
• Devops: GitLab, Jira, Jenkins
• Аналитический склад ума,
• Умение работать в команде,
• Умение быстро принимать верные решения в критических ситуациях,
• Стремление к профессиональному росту

Условия:

• Достойную заработную плату, годовую премию по результатам работы
• Постоянный трудовой договор
• Качественную программу ДМС со стоматологией с первого месяца работ
• Неограниченный доступ к образовательному контенту на корпоративном портале знаний
• Подписка на лучшие электронные библиотеки.

ГК «Газпром бурение» — ведущий подрядчик в сфере строительства скважин для нефтегазовой отрасли. Мы ищем профессионала, готового присоединиться к нашей команде и внести вклад в реализацию масштабных проектов. Если Вы нацелены на работу в стабильной компании с чёткими перспективами роста — эта вакансия для вас.

Вакансия открыта в дочернем Обществе ГК "Газпром Бурение"

Обязанности:

• аудит существующих пайплайнов, архитектуры хранилища, качества данных, документации и формирование плана развития;

• разрабатывать ETL/ELT-процессы на Python и Low-code ETL для сбора данных из 1С (УХ, УПП, ЗУП и др.), CRM (Битрикс24) и внешних API;

• проектировать слои хранилища и витрины данных, оптимизировать тяжелые SQL-запросы;

• настройка алертинга и мониторинга пайплайнов;

• поддерживать документацию по архитектуре и пайплайнам, участвовать в управлении инцидентами.

Требования:

• средне специальное или высшее образование;

• опыт в роли Data Engineer от 1-3 года, в том числе с существующими системами, а не только с проектами с нуля;

• отличное знание SQL и Python;

• опыт работы с PostgreSQL, ClickHouse, MySQL на больших объемах.

Условия:

• официальное трудоустройство с первого рабочего дня по ТК РФ;
• выплаты заработной платы 2 раза в месяц;
• ДМС со стоматологией по истечении испытательного срока (3 месяца);
• график работы: 5/2 (пн-чт с 09:00 до 18:00, пт с 09:00 до 16:45);
• место работы: "г. Санкт-Петербург, Малоохтинский проспект, д.68, литера А, БЦ "Regul;
• возможность реализовать свой потенциал в Компании, являющейся локомотивом экономики всей страны.

Бонусы от компании для семьи сотрудника:

• материальная помощь cотруднику организации при наступлении значимых событий в семье(вступление в брак впервые, рождение ребёнка и т.д.);
• компенсация затрат на приобретение путевок на санаторий, детский лагерь и отдых для сотрудника и его семьи;
• новогодние подарки детям.

Мы передовое ИТ подразделение, создающее дата платформу на сотни петобайт данных для крупшейнего юнита банка.

Нами реализована загрузка, обработка и контроль качетсва разрозненных данных из сотен систем-истоников банка в единое хранилище в Data Lakehouse архитектуре на платформе Hadoop.

Ищем сильных и энергичных дата инженеров для развития нашей платформы в сторону обработки данных в режимах батчевой и потоковой загрузки.

Вы будете работать в сильной команде дата инженеров с сложными инженерными задачами, передовым стеком технологий и самыми большими объемами данных в Европе.

Задачи разработки и поддержки витрин данных в Hadoop (HDFS, Icberg, Hive), ETL - Spark, CTL - Oozie, CI/CD - Jenkins + BitBucket.

И NRT пайплайны, Kafka, dynamic tables.

языки - Python, Java, Scala.

• разработка DWH/DataLake/LakeHouse

• построение поставки данных в Batch/NRT/RealTime

• оптимизация ETL

• повышение актуальности данных

• снижение latency доступа к данным

• разработка и валидация архитектуры данных

• отличное знание SQL (join, CTE, оконные функции, фреймы и др.)

• опыт работы с Hadoop, Spark, Iceberg/Paimon

• опыт работы с Kafka и др. Брокерами

• опыт работы с оркестраторами (например, Airflow) и CI/CD

• опыт построения архитектуры данных (например, Data Vault, Инман, Кимбалл и др.)

• опыт кратной оптимизации ETL

• практическое знание python на уровне разработки ETL будет преимуществом

• практическое знание java/scala будет преимуществом

• практический опыт создания и защиты архитектуры данных будет преимуществом

• практический опыт разработки solution-архитектуры data-продуктов будет преимуществом

• офисный формат работы (м Кутузовская ул. Поклонная 3)

• годовая премия

• корпоративный спортзал и зоны отдыха

• более 400 образовательных программ СберУниверситета для профессионального и карьерного развития

• регулярные митапы и развитое DS-community

• расширенный ДМС, льготное страхование для семьи и корпоративная пенсионная программа

• гибкий дисконт по ипотечному кредиту, равный 1/3 ключевой ставки ЦБ

• подписка Прайм с возможностью совместного использования на трёх близких

• вознаграждение за рекомендацию друзей в команду Сбер.

Компания: Группа компаний Fordewind — быстрорастущая технологическая финансовая компания, основанная в 2017 году. Мы специализируемся на кредитовании и инвестиционно-банковских услугах для корпораций, малого и среднего бизнеса. Наша команда управляется опытными профессионалами финансовой отрасли с бэкграундом в крупнейших институтах (экс J.P. Morgan, UBS, ВТБ Капитал, Сбербанк CIB). Сегодня Fordewind — это международный бизнес с офисами в Дубае (ОАЭ), Москве (Россия), Алматы (Казахстан) и Лондоне (Великобритания).

Мы ищем опытного Python-разработчика в команду, которая занимается адаптацией внутренних скоринговых и аналитических инструментов под новые рынки.

Основная задача — брать существующие пайплайны, парсеры и backend-логику, которые работают в российском контуре, и адаптировать их под специфику новых стран: другие форматы данных, документы, отчётность, источники информации и локальные требования.

Что предстоит делать

• Кастомизация пайплайнов: адаптировать существующие Python-пайплайны и бэкенд-логику скоринга под форматы и специфику международных проектов;

• Развитие инструментов сбора данных: дорабатывать парсеры и внутренние инструменты для автоматизированной обработки файлов, документов и финансовых данных;

• Интеграция систем: интегрировать внутренние продукты с локальными CRM, системами учёта и внешними сервисами на новых рынках;

• Командное взаимодействие: работать совместно с DevOps, ML-инженерами и аналитиками над оперативным запуском скоринговых процессов в новых локациях;

• Рефакторинг и адаптация: разбираться в существующей кодовой базе, переиспользовать работающие решения и аккуратно настраивать их под новую специфику;

• Масштабирование инфраструктуры: участвовать в проектировании и построении гибкой технической базы для последующего быстрого вывода продукта на другие страны.

Общие требования

• Опыт и профиль: опыт работы в роли Python уровня Middle+/Senior в небольших сильных командах;

• Работа с кодовой базой: умение быстро разбираться в чужом коде, переиспользовать и аккуратно адаптировать существующие решения;

• Бэкенд и инфраструктура: опыт работы с API, ETL / Data Pipelines, а также с инструментами Celery, RabbitMQ, Docker / Docker-compose и Git;

• Сбор и обработка данных: практический опыт сбора и обработки данных (Selenium, BeautifulSoup, Numpy, Pandas);

• Базы данных и интеграции: уверенная работа с базами данных и опыт интеграции систем с CRM / ERP / Accounting systems;

• Доменная экспертиза: опыт работы со скорингом или банковскими продуктами (будет преимуществом).

Что мы предлагаем

• Работу над масштабируемыми и высоконагруженными сервисами;

• Возможность влиять на архитектуру и инфраструктуру проектов;

• Интеграцию с современными инструментами обработки данных;

• Гибкий стек технологий и участие в разнообразных задачах (от backend до DevOps);

• Возможность работы полностью удаленно из любой точки мира (часы работы по московскому времени);

• Конкурентная заработная плата и годовой бонус по результатам работы;

• Сильная и профессиональная команда.

• Разработка и поддержка ETL-процессов для сбора, очистки и фильтрации данных лабораторного кластера
• Интеграция данных из различных источников (лабораторные системы, базы данных, файловые хранилища, внешние источники)
• Оптимизация и автоматизация процессов обработки данных для дальнейшего анализа
• Обеспечение и контроль качества данных
• Разработка и поддержка скриптов для обработки и трансформации данных

• Высшее техническое образование в направлении: прикладная математика и информатика, информатика и вычислительная техника, информационные системы и технологии, прикладная информатика, программная инженерия или смежные специальности
• Уверенные знания Python, SQL
• Базовый опыт работы с MongoDB (приветствуется)
• Знание основ ETL-процессов
• Базовые знания Linux и работы в командной строке
• Понимание принципов работы и умение работать с большими объёмами данных
• Английский язык на уровне чтения технической документации

Будет преимуществом:

• Биологическое/агротехническое образование с подтверждёнными навыками программирования и работы с данными
• Опыт работы с лабораторными или биологическими данными
• Знание форматов данных, используемых в геномике
• Опыт работы с системами управления стадом (SELEX, DC305 и тд)
• Опыт работы с Git

• Работу в стабильной, инновационной и динамично развивающейся компании агропромышленного комплекса
• Возможность профессионального развития в команде с аналитиками, разработчиками, биоинформатиками и лабораторными специалистами
• Работу в команде профессионалов с высоким уровнем экспертизы, в молодом и дружном коллективе
• Собственные вычислительные мощности
• Возможность влиять на архитектуру данных и процессы их обработки
• Гибкие подходы к решению задач
• Гибридный формат работы после прохождения испытательного срока

Привет! Наша команда входит в состав направления продуктовой аналитики ИТ Маркетплейса. Мы создаём продукты и инструменты, которые улучшают рабочие процессы и расширяют аналитические возможности внутренних команд и сотрудников компании. Они помогают эффективно строить отчёты, разрабатывать модели и формулировать гипотезы, способствующие росту ключевых бизнес-показателей. Благодаря нашим решениям аналитические процессы становятся точнее, быстрее и глубже, что позволяет лучше понимать поведение пользователей и находить точки для роста.

Ты будешь

• Погружаться в продуктовые проекты команды.

• Участвовать в миграции дата-инженерных процессов в платформенные решения.

• Поддерживать и развивать потоковые и пакетные системы обработки данных.

• Участвовать в разработке микросервисов для обработки данных

• Разбираться в архитектуре и учиться у более опытных коллег.

Нам важно:

• Уверенное владение Python.

• Хорошее знание SQL: можешь строить запросы различной сложности (JOIN, агрегации, подзапросы и оконные функции).

• Базовое знакомство с ClickHouse и PostgreSQL, понимание принципов их работы.

• Понимание процессов Data Engineering: пайплайны, оркестрация, качество данных.

• Понимание Apache Airflow: знакомство с DAG, планировщиком и принципами оркестрации задач.

Наша команда работает над созданием единой модели данных и ролевой модели аналитической платформы для управления эффективностью организации. Данное решение позволит формировать стратегию и ставить цели, планировать, прогнозировать и контролировать исполнение планов, рассчитывать премии сотрудников.

Решение предназначено для более 10 тысяч пользователей, содержит сотни сервисов и десятки терабайт данных. Мы разрабатываем ядро аналитической платформы – общие технологические сервисы для разработчиков и low/no-code инструменты для аналитиков в части реализации бизнес-логики.

Целевой технологический стек: React, Java, Python, JavaScript, ClickHouse, GreenPlum, Spark, PostgreSQL, k8s, Apache SuperSet, а также ряд собственных готовых решений Сбера.

Задачи:

• брать на себя ответственность за:

- достижение бизнес и ИТ целей продукта

- технологическую составляющую продукта и его развитие

- техническое состояние, надежность и стабильность работы систем

• разработка и исполнение ИТ стратегии развития продукта
• повышение эффективности процессов разработки, тестирования, внедрения и сопровождения
• прототипирование решений и подходов
• планирование и контроль достижения целей
• выстраивание взаимодействия с кросс-командами, выявление и устранение проектных и кросс-проектных ИТ рисков
• коммуникация с командами и формирование видения целевой архитектуры
• cсинхронизация команд в части подходов, видения и стандартов проектирования и разработки
• выявление ИТ рисков и организация мероприятий по их митигации
• управление техническим долгом
• подбор, развитие компетенции сотрудников, управление их мотивацией и карьерными треками.

Мы ожидаем:

• опыт разработки или внедрения ПО от 5х лет в роли архитектора или руководителя команды в условиях взаимодействия с несколькими смежными командами
• опыт разработки концептуальной, логической и физической моделей функциональной, технологической архитектуры, архитектуры данных, архитектуры приложения аналитической системы (Big Data, Data Mining, Machine Learning, GreenPlum, MDM)
• опыт работы с классическими BI-системами (Tableau, QlikView, SAP BW, Hyperion, Cognos) или open-source решениями (Superset) или российскими BI-решениями
• опыт описания взаимодействия компонентов (Apache Airflow, Kafka cluster, Spark, хранилище данных).
• опыт создания шаблонов проектирования IT архитектуры по доменам архитектуры данных, архитектуры приложений, технологической архитектуры, архитектурных принципов в соответствии стандартам и рекомендациям методологии TOGAF для формирования единого подхода в архитектуре
• опыт руководства командой от 10 чел
• опыт внедрения AI PDLC – использования AI на разных шагах и этапах производственного процесса.

Мы предлагаем:

• конкурентная заработная плата: оклад + бонусы
• масштабные и интересные задачи в agile команде
• ДМС для сотрудников и скидки на медицинскую страховку для родственников
• бесплатный тренажерный зал и спортивные групповые занятия
• дисконт-программы от компаний партнеров: фитнес, страхование, туризм
• обучение и тренинги

профессиональный и позитивный коллектив.

Мы ищем разработчиков с уверенными знаниями Node.js и SQL (ключевая часть стека) и коммерческим опытом от 3 лет для усиления и масштабирования текущей команды разработки.

Вы будете участвовать в развитии наших коммерческих IT-продуктов в тесном взаимодействии с продуктовыми командами.

Максимальный упор на разработку:

• Неформальная атмосфера
• Минимальное кол-во бюрократии, никаких лишних встреч
• Задачи которые быстро идут в прод и напрямую влияют на бизнес.

Обязанности:

• Прямое участие в развитии наших IT продуктов.
• Написание и оптимизация большого кол-ва сложных SQL-запросов.

• Разработка и поддержка backend-микросервисов на NodeJS.

• Работа над уменьшением технического долга.

• Участие во внутреннем тестировании и code review.

• Взаимодействие с командой разработки и другими отделами.

Требования:

• Опыт коммерческой разработки на Node.js от 3 лет.

• Опыт коммерческой backend разработки от 3 лет.

• Отличные знания Javascript.

• Отличные знания SQL.

• Опыт работы с SQL базами данных (PostgreSQL, ClickHouse или другими).

• Умение читать техническую документацию на английском языке.

Будет плюсом:

• Опыт работы с ClickHouse.

• Навыки DevOps, Linux.

• Опыт интеграции внешних API и/или отстройки автоматического взаимодействия с различными CRM системами.

• Опыт менторства/лидерства.

• Опыт в доменных областях связанных с Аналитикой/Data engineering.

Условия:

• Полностью удалённый формат работы.

• График 5/2 с гибким началом рабочего дня.

• Испытательный срок — 3 месяца (возможно досрочное завершение).

• Абсолютный минимум бюрократии и других лишних процессов. Упор на разработку.

• Современный удалённый компьютер для комфортной работы.

• Возможности профессионального роста и развития внутри компании.
  
  *Планируемая к созданию и размещению (перспективная вакансия)

Ведение проектов по построению и корректировке КХД, разработка моделей и алгоритмов, дашбордов и автоматизации систем.

Условия:

• Прозрачная система мотивации по системе KPI (оклад + ежемесячная премия), совокупный доход обсуждается при собеседовании с успешными кандидатами;
• Трудоустройство в соответствии с ТК РФ;
• Высокая скорость профессионального развития и реальные перспективы карьерного роста;
• Большая команда единомышленников, которые развиваются вместе с компанией;
• График работы: пн – пт, 9:00 – 18:00;
• Корпоративная мобильная связь;
• Скидки на курсы по изучению английского языка;
• Скидки на продукцию компании;
• Скидки на фитнес;
• Корпоративные предложения от ведущих банков РФ;
• Частичная компенсация стоимости детского отдыха в летних лагерях;
• Обучение за счет работодателя в Корпоративном Университете;
• Перспектива профессионального и карьерного роста.

Ключевые задачи:

• Разработка статистических моделей и алгоритмов.
• Участие в проекте построения корпоративного хранилища данных и BI-системы на платформе Microsoft.
• Участие в разработке ETL-пакетов Integration Services.
• Разработка OLAP-кубов Analysis Services (Multidimensional или Tabular).
• Разработка дашбордов Power BI, отчетов Reporting Services.
• Участие в проектах по развитию информационно-аналитической системы компании.

Требования:

• Уверенные знания принципов и архитектур построения хранилищ данных и BI-систем.
• Опыт работы в качестве системного и/или бизнес-аналитика не менее 3-х лет.
• Опыт разработки ETL пакетов (SQL Server Integration Services) от 1 года.
• Опыт работы с BI-системами (Power BI) от 2-х лет.
• Профессиональное знание T-SQL (написание и оптимизация сложных процедур, функций, триггеров, CLR, умение читать план запроса).
• Опыт проектирования баз данных.
• Навыки разработки, сопровождения БД и опыт работы с SQL Server и T-SQL от 1 года.