всеинструменты.ру

Data Engineer (Python)

Мы - Ви.Тех, аккредитованная ИТ компания.

всеинструменты.ру

↑ Вакансия с автоподнятием
210k–355k ₽РоссияМоскваУдалёнка

Мы - Ви.Тех, аккредитованная ИТ компания.

Наша команда - 500+ счастливых сотрудников, это микс талантов, где каждый член важен, как ключевой элемент в коде.

Мы создаем решения для крупнейшей e-commеrce компании в России - ВсеИнструменты.ру.

"ВсеИнструменты.ру" – крупнейший интернет-магазин по продаже товаров для дома, дачи, строительства и ремонта.

О нас в цифрах:

  • 20 лет развития, роста и результата;
  • ТОП 6 сайтов категории Home and Garden в мире по Similarweb;
  • ТОП 30 лучших IT-работодателей России на Хабр Карьере;
  • 950+ магазинов - мы самая большая DIY-сеть в России;
  • 1,5 млн. товаров на сайте;
  • 1,78 млн. уникальных посетителей сайта ежедневно;
  • 8 место среди интернет-магазинов России по Data Insight

Сейчас мы ищем Data Engineer

Мы ищем инженера, который будет развивать корпоративную платформу данных и DWH компании: модернизировать ETL-ландшафт, переводить процессы с SSIS на Apache Airflow 3 и внутренний Python-фреймворк, а также делать работу с данными надежнее и удобнее для аналитических команд.

Какие задачи тебя ждут:

  • Развивать корпоративную платформу данных и DWH;

  • Переводить существующие ETL-процессы с SSIS на Apache Airflow 3 и внутренний YAML-driven Python-фреймворк;

  • Разрабатывать и поддерживать надежные data-пайплайны;

  • Обеспечивать стабильную промышленную эксплуатацию: retry, backfill, идемпотентность, дедупликацию и корректную обработку сбоев;

  • Развивать проверки качества данных;

  • Оптимизировать SQL и работу с Microsoft SQL Server;

  • Развивать CI/CD-процессы для работы с данными;

  • Создавать переиспользуемые инструменты и self-service решения для аналитических команд;

  • Участвовать в развитии архитектуры DWH и подходов к моделированию данных.

Твоя суперсила:

  • Опыт работы Data Engineer от 3 лет;

  • Уверенный SQL и практический опыт работы с Microsoft SQL Server;

  • Python: ООП, модульная архитектура, type hints, тестирование, логирование, работа с REST API и БД;

  • Опыт работы с Apache Airflow или другим промышленным оркестратором;

  • Опыт работы с dbt или аналогичным SQL transformation framework;

  • Понимание ETL/ELT, batch- и near-real-time-обработки;

  • Умение строить надежные и отказоустойчивые data-пайплайны;

  • Опыт Git и CI/CD;

  • Опыт реализации Data Quality-проверок;

  • Понимание архитектуры DWH и организации слоев данных;

  • Знание подходов к моделированию данных: Kimball, Inmon, Data Vault, Anchor Modeling.

С нас:

  • Возможность влиять на продукт, мы всегда открыты к новым идеям и обратной связи;
  • Возможность быть эффективным в любой точке мира, мы работаем удаленно, но это не мешает нам быть командой (при желании, можно работать из офиса - Москва, Нижний Новгород, Ковров, Владимир);
  • Дружелюбная атмосфера и открытость к новым знаниям, мы общаемся на "ты", устраиваем внутренние митапы, выступаем на конференциях, делимся опытом;
  • Возможность стать амбассадором ИТ бренда, у нас есть деврел :)
  • Счастливая и вовлеченная команда – держим высокий показатель удовлетворенности сотрудников (eNPS);
  • Перфоманс ревью 2 раза в год с премией до двух окладов и описанные грейды;
  • Забота о здоровье - для тебя есть расширенный ДМС со стоматологией, а семью можно подключить со скидкой;
  • Комфортное рабочее место - выдаем технику или можешь работать на своей.
Эта вакансия также есть на:Habr Career

Похожие вакансии Data Engineer

Сайты компаний

Data Engineer

Автоподнятие
Зарплата не указанаОАЭAbu Dhabi
Текст:
Оригинал доступен только пользователям с подпиской

Location

Abu Dhabi, with work in a modern cloud-based environment.

About the company

A regional innovator building AI-powered, domain-specific and industry-agnostic products on a strong research and development foundation. It operates as a core intelligence layer within a larger technology ecosystem, turning data and compute infrastructure into applied AI solutions with a focus on positive societal impact.

Responsibilities

  • Develop and deploy AI agents using Azure Agent Foundry, OpenAI, LangChain, and N8N.
  • Build RAG pipelines, embeddings, vector database integrations, and knowledge graph solutions.
  • Design scalable data pipelines, ETL/ELT workflows, APIs, and data services for AI and analytics workloads.
  • Optimize ML workflows on Azure Databricks, integrate with Azure Fabric, and support MLOps and DevOps processes including CI/CD and containerized deployments.

Requirements

  • Bachelor’s degree in Computer Science, Engineering, Data Science, or a related field, plus 3+ years in data, AI, or ML engineering.
  • Strong Python, SQL, and PySpark skills with experience in ML/AI frameworks and scalable cloud data solutions, preferably on Azure.
  • Hands-on experience with Azure Agent Foundry, OpenAI APIs, LLMOps, RAG systems, vector databases, Azure Databricks, and modern data platforms.
  • Knowledge of big data tools such as Spark, Hadoop, and Flink, SQL/NoSQL storage, REST/GraphQL APIs, Kafka/RabbitMQ, Docker/Kubernetes, and data modeling, ETL, and data quality best practices.
Сайты компаний

Middle BI Data Engineer

Автоподнятие
Зарплата не указанаКазахстанАлматы
Текст:
Оригинал доступен только пользователям с подпиской

Локация

Алматы, работа в офисе в центре города.

О компании

Крупнейшая мультикатегорийная e-commerce платформа Казахстана, обслуживающая сотни тысяч заказов ежедневно.

Команда занимается данными, оптимизацией и построением качественных BI-решений.

Что нужно делать

  • Собирать и анализировать бизнес-требования, разбираться в проблематике кейсов и обсуждать задачи и гипотезы с заказчиками
  • Проектировать витрины данных и модели отчётности, ставить задачи на разработку детальных витрин для BI-инструментов
  • Строить сводные таблицы, графики и интерактивные дашборды в Qlik Sense на основе детальных данных
  • Участвовать в тестировании решений и разборе инцидентов

Требования

  • Коммерческий опыт от 2 лет, уверенное владение SQL с оптимизацией запросов и написание PL/SQL процедур и функций
  • Понимание архитектуры Oracle БД, принципов нормализации и денормализации данных
  • Опыт построения витрин данных и ETL-процессов, понимание архитектуры BI-решений
  • Практика с Qlik Sense (скрипты загрузки, set analysis, master items, интерактивные визуализации) и Python (pandas, numpy, автоматизация ETL и интеграций)
Сайты компаний
СБЕР

ИТ лидер (Управление моделью данных)

СБЕРАвтоподнятие
Зарплата не указанаРоссияМоскваОфис

Наша команда работает над созданием единой модели данных и ролевой модели аналитической платформы для управления эффективностью организации. Данное решение позволит формировать стратегию и ставить цели, планировать, прогнозировать и контролировать исполнение планов, рассчитывать премии сотрудников.

Решение предназначено для более 10 тысяч пользователей, содержит сотни сервисов и десятки терабайт данных. Мы разрабатываем ядро аналитической платформы – общие технологические сервисы для разработчиков и low/no-code инструменты для аналитиков в части реализации бизнес-логики.

Целевой технологический стек: React, Java, Python, JavaScript, ClickHouse, GreenPlum, Spark, PostgreSQL, k8s, Apache SuperSet, а также ряд собственных готовых решений Сбера.

Задачи:

  • брать на себя ответственность за:

- достижение бизнес и ИТ целей продукта

- технологическую составляющую продукта и его развитие

- техническое состояние, надежность и стабильность работы систем

  • разработка и исполнение ИТ стратегии развития продукта
  • повышение эффективности процессов разработки, тестирования, внедрения и сопровождения
  • прототипирование решений и подходов
  • планирование и контроль достижения целей
  • выстраивание взаимодействия с кросс-командами, выявление и устранение проектных и кросс-проектных ИТ рисков
  • коммуникация с командами и формирование видения целевой архитектуры
  • cсинхронизация команд в части подходов, видения и стандартов проектирования и разработки
  • выявление ИТ рисков и организация мероприятий по их митигации
  • управление техническим долгом
  • подбор, развитие компетенции сотрудников, управление их мотивацией и карьерными треками.

Мы ожидаем:

  • опыт разработки или внедрения ПО от 5х лет в роли архитектора или руководителя команды в условиях взаимодействия с несколькими смежными командами
  • опыт разработки концептуальной, логической и физической моделей функциональной, технологической архитектуры, архитектуры данных, архитектуры приложения аналитической системы (Big Data, Data Mining, Machine Learning, GreenPlum, MDM)
  • опыт работы с классическими BI-системами (Tableau, QlikView, SAP BW, Hyperion, Cognos) или open-source решениями (Superset) или российскими BI-решениями
  • опыт описания взаимодействия компонентов (Apache Airflow, Kafka cluster, Spark, хранилище данных).
  • опыт создания шаблонов проектирования IT архитектуры по доменам архитектуры данных, архитектуры приложений, технологической архитектуры, архитектурных принципов в соответствии стандартам и рекомендациям методологии TOGAF для формирования единого подхода в архитектуре
  • опыт руководства командой от 10 чел
  • опыт внедрения AI PDLC – использования AI на разных шагах и этапах производственного процесса.

Мы предлагаем:

  • конкурентная заработная плата: оклад + бонусы
  • масштабные и интересные задачи в agile команде
  • ДМС для сотрудников и скидки на медицинскую страховку для родственников
  • бесплатный тренажерный зал и спортивные групповые занятия
  • дисконт-программы от компаний партнеров: фитнес, страхование, туризм
  • обучение и тренинги

профессиональный и позитивный коллектив.

HireSeeker собирает вакансии со всех площадок и присылает только релевантные. Бесплатно.