Data Engineer (Python)

Привет! На связи ggsel 💚

Мы ищем Head of DWH - лидера, который сочетает глубокую техническую экспертизу в DWH/ClickHouse, архитектурное мышление и управленческие навыки.

Стек: ClickHouse, SQL, Python, Airflow, dbt, PostgreSQL, Docker, Git.

✅ Ключевые требования и задачи

- ClickHouse - основная экспертиза: проектирование MergeTree, партиционирование, TTL, оптимизация запросов, шардирование/репликация, бэкапы в S3.

- ETL/ELT и оркестрация: Airflow, dbt, data quality, тесты, мониторинг свежести данных, data contracts.

- Управление командой: найм, онбординг, развитие, performance review, процессы разработки, roadmap, OKR, бюджет.

- Бизнес и Data Governance: сбор требований, приоритизация, коммуникация с C-level, каталог данных, lineage, GDPR/152-ФЗ, разграничение доступа.

✅ Условия

- Удаленная работа из любой точки мира.

- Конкурентная зарплата + performance премия 2 раза в год.

- Гибкий график и фокус на результат.

- Оплата обучения, курсов и конференций.

- Возможность реально влиять на продукт и команду.

Узнать подробности и оставить отклик можно на нашем корпоративном портале

➡️ https://lnkd.in/euePmH7n

We are seeking a Senior Data Integration Engineer with expertise in data management, integration, and cloud-based technologies.

This role requires a solution-oriented professional passionate about creating and delivering advanced data systems. If you excel in cloud infrastructures and value precision, we encourage you to apply!

This position offers remote setup with the flexibility to work from any location in Kazakhstan, whether it's your home or well-equipped offices in Astana, Almaty or Karaganda.

Responsibilities

• Design Data Integration solutions leveraging classic, modern, or hybrid cloud data tools
• Collaborate with product and engineering teams to define requirements, evaluate new features, and make architectural decisions
• Address business challenges by developing technical solutions aligned with quality and technical standards
• Perform code reviews and execute testing processes to ensure alignment with technical specifications
• Deliver comprehensive documentation for architectural designs and technical implementations

Requirements

• Advanced knowledge of Data Integration tools such as Azure Data Factory, AWS Glue, and GCP Dataflow
• Background in working with relational databases and programming tools including SQL, Python, PySpark
• Proficiency in managing cloud platforms like AWS, Azure, or GCP to build scalable data environments
• Understanding of Data Security principles, modern Data Management practices, and CI/CD workflows
• Expertise in methodologies for data modeling, including OLAP, OLTP, ETL, and Data Warehousing
• Capability to articulate complex ideas effectively with proficiency in English

We offer

• We connect like-minded people: :
  • Delivering innovative solutions to industry leaders, making a global impact
  • Enjoyable working environment, whether it is the vibrant office or the comfort of your own home
  • Opportunity to work abroad for up to two months per year
  • Relocation opportunities within our offices in 55+ countries
  • Corporate and social events
• We invest in your growth:  :
  • Leadership development, career advising, soft skills and well-being programs
  • Certifications, including GCP, Azure and AWS
  • Unlimited access to LinkedIn Learning and Get Abstract
  • Free English classes with certified teachers
  • Discounts in local language schools, including online courses for the Kazakh language
• We cover it all: :
  • Participation in the Employee Stock Purchase Plan
  • Monetary bonuses for engaging in the referral program
  • Medical & family care package
  • Six trust days per year (sick leave without a medical certificate)
  • Coverage of psychology sessions of your choice
  • Benefits package (sports activities, a variety of stores and services)

EPAM is a team of technologists and innovators united by a passion for technology. In Kazakhstan, we operate across all cities with offices in Astana, Almaty, and Karaganda and work with the world's leading companies from different industries. In 2023, EPAM received the Export Excellence Award at the esteemed Digital Bridge Awards, showcasing our commitment to excellence and innovation.

Привет! Мы — онлайн-школа Тетрика, являемся одной из крупнейших EdTech-компаний России в сегменте школьного образования.
За 7 лет мы помогли уже тысячам школьников найти своего репетитора и провели более 2 млн занятий на собственной платформе.

Мы продолжаем расти, а значит, нам нужны новые таланты. Сейчас мы приглашаем в свою команду Мы ищем Дата инженера, который возьмёт на себя DWH, дата-платформу и вырастет в лида DE-направления. Вам предстоит навести порядок в данных, выстроить инженерные стандарты и определить, как будет развиваться направление. Вы будете работать напрямую с CDO и влиять на архитектуру и стратегию данных компании.

Чем предстоит заниматься:

• Завершить переезд аналитики на StarRocks: верифицировать данные и отключить старый контур PostgreSQL;

• Сделать данные надёжными: мониторинг свежести и полноты витрин, SLA, разбор инцидентов, проверки качества;

• Выстроить защиту от поломок при изменениях в продуктовой разработке: контракты, lineage, контроль изменений;

• Запустить каталог данных для ключевых витрин;

• Сформировать карту развития DE-направления и развивать команду из двух дата-инженеров.

Стек:

• StarRocks;

• Yandex Cloud (Managed PostgreSQL, S3);

• SQLMesh;

• Airflow;

• Python (для интеграций и вспомогательных задач);

• Metabase (BI-визуализация);

• GitLab CI/CD.

Что мы ожидаем от кандидата:

• 4+ года опыта в Data Engineering, опыт проектирования DWH и витрин;

• Уверенный SQL и навыки моделирования данных;

• Опыт с OLAP-хранилищами (StarRocks, ClickHouse или аналоги);

• Опыт с оркестрацией и инструментами трансформации (Airflow, Dagster, dbt, SQLMesh);

• Умение общаться с аналитиками и бизнесом на языке результата.

Будет плюсом:

• Опыт миграции хранилищ;

• Опыт выстраивания качества данных: тесты, data contracts, мониторинг;

• Наставничество, код-ревью или руководство небольшой командой.

Что мы предлагаем:

• Оформление по ТК РФ в аккредитованной ИТ-компании;

• Гибридный/удаленный формат работы с гибким началом рабочего дня с 9:00-11:00;

• ДМС со стоматологией после 3 месяцев работы;

• Возможность обучения сотрудника и его детей со скидкой 50% на нашей платформе;

• Корпоративные скидки от наших партнёров;

• Уютный офис в шаговой доступности от метро Курская на территории креативного кластера Artplay.

Процесс найма:

Видеоинтервью с рекрутером → техническое собеседование → видеоинтервью с руководителем → оффер.

Если тебе интересны новые задачи и постоянное развитие, смело отправляй отклик на вакансию. Пожалуйста, расскажи немного о себе и укажи зарплатные ожидания. Будем рады знакомству :)