H
HireSeeker
G

Data Engineer (Python)

We are looking for a Data Engineer who can build scalable data pipelines while also developing intelligent AI solutions using Azure Agent Foundry, OpenAI services, LangChain, Databricks, and modern cloud architectures. The ideal candidate…

G42

↑ Вакансия с автоподнятием
Зарплата не указанаОАЭAbu Dhabi
Открыть на сайте компании

Inception42, a G42 company, is the region’s leading innovator of AI-powered domain-specific as well as industry-agnostic products, built on a rich heritage of research and development. Within the G42 ecosystem, Inception functions as the core intelligence layer – transforming data and compute infrastructure into real-world, applied AI solutions. Beyond its commercial endeavors, Inception is committed to creating positive societal impact. For more information, please visit www.inception42.ai

Overview:

We are looking for a Data Engineer who can build scalable data pipelines while also developing intelligent AI solutions using Azure Agent Foundry, OpenAI services, LangChain, Databricks, and modern cloud architectures. The ideal candidate has strong data engineering foundations combined with hands-on experience designing and deploying enterprise-grade AI systems. 

 

Responsibilities:

What You’ll Own

  • Develop and deploy AI agents using Azure Agent Foundry, OpenAI, LangChain, and N8N.
  • Build RAG pipelines, embeddings, vector database integrations, and knowledge graph solutions.
  • Design and maintain scalable data pipelines, ETL/ELT workflows, and data architectures.
  • Build and maintain APIs and data services supporting AI and analytics workloads.Optimize ML workflows on Azure Databricks and integrate with Azure Fabric.
  • Ensure data quality, reliability, governance, and compliance across all systems.
  • Collaborate with data scientists, ML engineers, and product teams to deliver intelligent features.
  • Support MLOps and DevOps processes including CI/CD, model lifecycle management, and containerized deployments.

Qualifications:

What We’re Looking For

  • Bachelor’s in Computer Science, Engineering, Data Science, or related field.
  • 3+ years experience in Data Engineering, AI Engineering, or ML Engineering roles.
  • Experience delivering scalable AI/data solutions in cloud environments (Azure preferred).
  • Strong proficiency in Python, SQL, PySpark, and ML/AI frameworks.
  • Experience with Azure Agent Foundry, OpenAI APIs, LLMOps, RAG systems, and vector databases.
  • Hands-on experience with Azure Databricks, Azure cloud services, and data platforms.Knowledge of big data tools (Spark, Hadoop, Flink) and modern data storage (SQL, NoSQL).
  • Experience with REST/GraphQL APIs, Kafka/RabbitMQ, Docker/Kubernetes.
  • Solid understanding of data modeling, ETL, and data quality best practices.Strong problem-solving, communication, and cross-functional collaboration skills.

 

What We Look For
If you are a performance-driven, inquisitive mind with the agility to adapt to ambiguity, you will fit right in. You should be eager to explore opportunities to build meaningful collaborations with stakeholders and aspire to create unique customer-centric solutions. Bias for action and a passion to conquer new frontiers in the AI space is at the heart of the Inception42 community.
 
What Working At Inception42 Offers
 
Culture: An open, diverse and inclusive environment with a global vision that encourages personal growth and focuses on ground-breaking, industry-first innovations.
Career: Outstanding learning, development & growth opportunities via structured training programs and innovative, high-tech projects.
Rewards: A competitive remuneration package with a host of perks including healthcare, education support, leave benefits and more.
 
If you can confidently demonstrate that you meet the criteria above, please contact us as soon as possible.

 

Открыть на сайте компании

Статьи для Data Engineer

Похожие вакансии Data Engineer

Соц.сети

Middle Data Engineer — Snowflake / dbt / Azure

Неизвестный работодатель
600–800 $ (≈ 49k–66k ₽)УзбекистанУдалёнка

#middle #dataengineer #snowflake
Middle Data Engineer — Snowflake / dbt / Azure

We are looking for a Middle Data Engineer with strong Snowflake, SQL and dbt skills to build and support production data pipelines.

Salary: $600 – $800 (Net) + performance-based bonus
Format: Remote

Core Requirements
• 2+ years of data engineering experience
• Hands-on experience with Snowflake: streams, Time Travel, data sharing, and standard, transient, hybrid and Iceberg tables
• Advanced SQL skills (live coding in Snowflake is part of the interview)
• Experience with dbt: macros shared across projects, pre- and post-hooks, SCD Type 2
• Experience with Azure Data Factory or Azure Synapse Pipelines, including self-hosted integration runtimes
• Python and PySpark
• Git and pull-request workflows, code review and automated testing

Nice to Have
• Azure Function Apps and Logic Apps
• Microsoft Defender for scanning incoming files
• Databricks
• Orchestration tools (e.g. Airflow)

What You’ll Work On
• Hourly ingestion from SQL Server and 24/7 OLTP systems
• Ingesting files from customer NAS shares and APIs into Azure Blob Storage
• Building and maintaining dbt models in Snowflake
• Handling production issues: schema changes, failed hooks, missing files and jobs that fail halfway

What We Offer
• Fully remote work
• Performance-based bonus
• Professional growth opportunities

Hiring Process
1. Online coding assessment
2. Technical interview
3. Final discussion with the manager

AI tools and outside help are not allowed during interviews. Sessions are recorded.

Ready to apply? ••••••••

👉 ••••••••

Соц.сети

Data Engineer

Неизвестный работодатель
170k–190k ₽РоссияУдалёнка

Data Engineer
Длительность: долгосрок
Вилка: 170-190
Формат работы: удаленный
Локация, гражданство РФ

Проектирование и разработка пайплайнов обработки данных, поддержка и развитие DWH/ETL-процессов, рефакторинг кода, аналитика и миграция источников данных в отчетности.

Требования:
Общий опыт коммерческой разработки от 3 лет.
MSSQL: уверенное владение (T-SQL, оптимизация запросов, хранимые процедуры).
Python: от 2 лет.
Airflow: от 1 года (построение и сопровождение DAG, планирование, мониторинг).
Понимание принципов построения ETL/ELT-пайплайнов, работы с большими объемами данных, обеспечения отказоустойчивости и идемпотентности загрузок.
Git, уверенное владение SQL.
Опыт проектирования и разработки пайплайнов данных с нуля, участие в архитектурных решениях.
Опыт рефакторинга существующего кода, оптимизации производительности запросов, повышения отказоустойчивости.
Умение разбираться в чужом коде, самостоятельная проработка технических решений, декомпозиция сложных задач.
Опыт работы с инцидентами.
Опыт аналитических задач по изменению источников данных в отчетности (переключение с одной мастер-системы на другую), сверка данных, валидация результатов миграции.

Будет плюсом:
Опыт работы в e-com.

Системы учета задач и документации:
Jira, Confluence, GitLab.

🍂Резюме нужно прислать сегодня
В резюме должен быть отражен опыт, указанный в вакансии

••••••••

Сайты компаний
ozon

Data Engineer, Группа разработки операционной аналитики

ozon
Зарплата не указанаРоссияМосква

Привет! Это команда разработки операционной аналитики.
Наша логистика доставляет миллионы товаров в сутки. Чтобы делать это быстро и качественно, всем точкам нашей сети доставки важно получать оперативную и качественную аналитику.

Задача нашей команды – предоставлять real-time и около real-time аналитику для тысяч наших пользователей на сортировочных центрах, расположенных по всей стране, оперируя терабайтами данных, получаемых от множества внутренних систем.

Наш стек

  • ClickHouse, Kafka, Airflow, Grafana, Superset, GitLab.

Вы будете

  • Создавать real-time отчетность для сортировочных центров и различных команд в логистике.

  • Настраивать интеграцию данных с другими базами данных и сервисами.

  • Разрабатывать новые схемы хранения данных и подходы к их обработке, участвовать в оптимизации имеющихся схем.

  • Создавать стабильные отказоустойчивые и масштабируемые аналитические сервисы.

  • Развивать внутренний инструментарий команды.

Нам важно

  • Опыт работы с обработкой больших данных и колоночными СУБД.

  • Продвинутое знание SQL.

  • Опыт разработки на Python.

  • Опыт в оптимизации производительности запросов и ETL процессов.

  • Уверенный технический бэкграунд (вы представляете себе, что такое контейнеры, K8s, Kafka, CI/CD и т. д).

Будет плюсом

  • Опыт работы с ClickHouse.

  • Опыт работы с Airflow.

  • Опыт работы с Prometheus.

Открыть на сайте компании

HireSeeker собирает вакансии со всех площадок и присылает только релевантные. Бесплатно.

Посмотреть полный каталог →Свежие вакансии Data Engineer