Data Engineer (Python)

Cairo, Egypt; the role is part of a global data platform team.

↑ Вакансия с автоподнятием
Зарплата не указанаЕгипетКаир
Текст:
Оригинал доступен только пользователям с подпиской

Location

Cairo, Egypt; the role is part of a global data platform team.

About the company

A large international technology company operating in 47 countries, building fair and accessible services for millions of users.

The data platform teams support marketing, growth, partner, and financial data domains.

Responsibilities

  • Build and operate batch and streaming ingestion into a layered BigQuery data warehouse using Airflow, Kafka-based CDC with Debezium and protobuf, Pub/Sub, and Dataflow.
  • Integrate external sources such as advertising platforms, payment providers, S3 buckets, and third-party APIs, including schema contracts, backfills, and reconciliation.
  • Develop the platform in Python: custom Airflow operators and connectors, Kafka Connect on Kubernetes, Cloud Functions, and API integrations.
  • Own pipeline reliability and governance: idempotency, deduplication, late data, monitoring, CI/CD and change management for BigQuery, IAM, PII controls, lineage, and disaster recovery.
  • Build internal data tools and services, including Streamlit apps, Slack bots, and LLM-based agents, and support analysts and business teams with data requests.

Requirements

  • Strong practical Python with clean, tested, well-structured code and solid software design skills (OOP, modularity, design patterns).
  • Experience building and operating services in a cloud environment (GCP, AWS or similar) with CI/CD, containerization, monitoring, and alerting; familiarity with Kubernetes and Terraform.
  • Hands-on experience with a cloud data warehouse such as BigQuery and confident SQL.
  • Clear communication with non-engineering stakeholders and demonstrated ownership of technologies or services.

Похожие вакансии Data Engineer

Другие площадки
СБЕР

Data engineer в команду GigaChat (TTS)

СБЕРАвтоподнятие
300k–800k ₽РоссияМоскваОфис

Наша команда отвечает за качество моделей TTS в GigaChat — той части нейросети, которая занимается звуком. Сейчас мы ищем ребят, которые будут работать над базовым качеством, мультимодальным Гигачатом и другими классными проектами.

Первый этап отбора на эту вакансию — общение с AI-рекрутером. После отклика вам на почту и в чат на платформе HeadHunter придет приглашение пройти первичное интервью с ГигаРекрутером в Telegram. Диалог займёт примерно 10 минут. Его задача — уточнить недостающие детали и ускорить рассмотрение вашей кандидатуры. ГигаРекрутер только начинает свой путь, поэтому просим относиться с пониманием. Ваш опыт и участие помогут сделать его удобным и полезным!

Обязанности

  • Писать пайплайны обработки аудио/видео данных.
  • Хотим обрабатывать десятки тысяч часов в день на кластере.
  • Инферить опенсорсные и внутренние модели на ГПУ (денойзер, распознавание, тулы для оценки качества аудио).
  • Поддержка сетевого хранилища данных.

Требования

  • Python и алгоритмы на хорошем уровне.
  • Опыт с multithreading и multiprocess.
  • Опыт обучения и/или инференса тяжёлых моделей на нескольких ГПУ.
  • S3, DVC, Git.

Условия

  • Гибридный или удалённый формат работы.
  • Ежегодный пересмотр зарплаты и годовая премия.
  • Корпоративный спортзал и зоны отдыха.
  • Более 400 образовательных программ СберУниверситета для профессионального и карьерного развития.
  • Расширенный ДМС, льготное страхование для семьи и корпоративная пенсионная программа.
  • Гибкий дисконт по ипотечному кредиту, равный 1/3 ключевой ставки ЦБ.
  • Бесплатная подписка СберПрайм+, скидки на продукты компаний-партнеров.
Эта вакансия также есть на:Сайт компании
Сайты компаний

Staff Data Engineer

Автоподнятие
Зарплата не указанаВеликобританияLondonГибрид
Текст:
Оригинал доступен только пользователям с подпиской

Location

London, United Kingdom; open to direct employment or contractor engagement.

About the company

A data platform company building jobs, skills and tasks intelligence for talent lifecycle management. Its solutions support recruitment, internal mobility, upskilling, workforce planning and diversity across large organizations, and the team is expanding native integrations and agentic AI capabilities.

Responsibilities

  • Set the long-term technical strategy and multi-quarter architecture for the data platform, sequencing delivery incrementally and building investment cases with engineering, product and design leadership.
  • Architect analytics, semantic and AI data layers, defining how business metrics, usage signals and skills intelligence are modelled, governed and exposed to BI, self-service and AI consumers.
  • Establish scalable architectural patterns, modelling conventions and data contracts that other teams adopt, and mentor senior engineers into stronger technical decision-makers.
  • Own platform reliability and trust, including observability, data quality, SLAs and incident response, leading root-cause analysis and systemic fixes for serious failures.

Requirements

  • Staff-level data engineering experience building and operating data platforms for internal and external consumers, with data warehousing, data lakes and real-time plus batch processing.
  • Proven ability to make hard tradeoffs in distributed, multi-tenant systems and to handle production issues under pressure, including tracing upstream failures to customer impact.
  • Experience leading cross-team initiatives without formal authority and making architectural decisions that others build on for years, while balancing modernisation against delivery risk.
  • Hands-on with dbt for large complex transformations, SQL and NoSQL schema design and multi-tenant isolation, Python backend engineering, streaming and CDC pipelines, data quality and observability practices, and Terraform and Kubernetes.
Сайты компаний

Lead Data Engineer

Автоподнятие
Зарплата не указанаКазахстанШымкентОфис
Текст:
Оригинал доступен только пользователям с подпиской

Локация

Алматы, работа в офисе банка.

О компании

Крупный банк, развивающий масштабную инфраструктуру сбора, хранения и обработки больших данных и аналитические системы.

Что нужно делать

  • Руководить командой инженеров данных: менторинг, обратная связь, развитие сотрудников, здоровый климат и онбординг новичков.
  • Контролировать сроки, объём и качество задач в Jira, выстраивать процессы по Agile и применять инструменты автоматизации, включая AI-ассистентов.
  • Проектировать и развивать отказоустойчивые масштабируемые системы обработки данных, внедрять стандарты разработки, code review и работу с техническим долгом.
  • Проводить аудит систем и процессов, исследовать новые технологии, участвовать в сборе требований и технических заданиях с оценкой сроков и архитектурной реализуемости.

Требования

  • Продвинутый Python для высоконагруженной загрузки, трансформации и сложной обработки данных.
  • Глубокая экспертиза в Oracle, PostgreSQL, Greenplum и других СУБД: анализ планов запросов через EXPLAIN, оптимизация скриптов и производительности.
  • Опыт проектирования корпоративных хранилищ и витрин данных, построения и контроля стабильности ETL/ELT-пайплайнов с оркестраторами, потоковой обработки через брокеры сообщений, настройки логирования и мониторинга в Grafana.
  • Опыт управления командой и процессами по Scrum/Agile, декомпозиции и оценки архитектурных задач, менторинга и обеспечения качества работы инженеров.

HireSeeker собирает вакансии со всех площадок и присылает только релевантные. Бесплатно.