ETL-разработчик / Data Integration Engineer

About the role

At ClickHouse, we believe in making product decisions grounded in data, not gut feelings. To support that, we've built a comprehensive internal data warehouse — read more about it on our blog. It powers analytics, forecasting, and decision-making across every team in the company.

Our stack centers on ClickHouse as the core storage and processing engine, complemented by dbt, Airflow, S3, AWS, Superset, and GitHub Actions. We ingest data from 30+ distinct external sources, process over 2.5 PB of data, and deliver most data marts to business consumers with a 1-hour end-to-end latency - a standard that demands highly optimized, rock-solid transformation pipelines.

We're looking for a Senior Data Engineer to help evolve the DWH platform, push its technical boundaries, and deliver reliable, high-performance data models to business users across the organization.

Key Responsibilities

1. DWH Platform Development

   • Design and develop reusable Airflow components - operators, connectors, and hooks - along with custom integrations tailored to our data architecture.

   • Build reusable dbt macros and abstractions: incremental strategies, ETL building blocks, and generic data quality tests, all optimized for ClickHouse-specific behavior and our data patterns.

   • Develop DataOps tooling - CI pipelines, data migration frameworks, and security controls - with a strong focus on reliability, self-service usability, and scale.

2. Team contributions

   • Conduct thorough code reviews for team members and other team contributors.

   • Actively participate in technical and architectural design discussions.

   • Drive technical leadership in specific areas of our stack.

   • Continuously improve the team's development environment, with a focus on automation - including AI-assisted workflows.

   • Contribute to platform stability through proactive troubleshooting and timely incident resolution.

3. Data modeling

   • Develop, refactor, and optimize business data models in line with our modeling standards and ClickHouse best practices.

   • Mentor and support contributors through code reviews and technical guidance.

   • Lead the design and implementation of the most technically demanding data marts - particularly those involving high data velocity, large volumes, or complex business logic.

Qualifications

Required:

• Exceptional SQL skills - this is non-negotiable.

• Strong hands-on experience with Airflow, dbt, and Python.

• Proven track record building and optimizing large-scale, high-throughput data pipelines.

• Solid understanding of data warehousing fundamentals: ETL/ELT, dimensional modeling, and data quality.

• Bachelor's degree in Computer Science or a related field.

• Comfortable thriving in a fast-paced startup environment — exciting and dynamic, but sometimes wonderfully chaotic.

Preferred:

• Hands-on experience with ClickHouse - a significant advantage.

• Familiarity with AWS or other cloud platforms.

• Experience with CI/CD development, especially using GitHub Actions.

Perks

• Flexible work environment - ClickHouse is a globally distributed company and remote-friendly. We currently operate in over 25 countries.

• Healthcare - Employer contributions towards your healthcare.

• Equity in the company - Every new eligible team member who joins our company receives equity.

• Time off - Flexible time off in the US, generous entitlement in other countries.

• A USD$500 Home office setup if you’re a remote employee.

• Global Gatherings – We believe in the power of in-person connection and offer opportunities to engage with colleagues at company-wide offsites.

Culture - We All Shape It

As part of a rapidly scaling start-up, you will be instrumental in shaping our culture.

Are you interested in finding out more about our culture? Learn more about our values here. Check out our blog posts or follow us on LinkedIn to find out more about what’s happening at ClickHouse.

Equal Opportunity & Privacy

ClickHouse provides equal employment opportunities to all employees and applicants and prohibits discrimination and harassment of any type based on factors such as race, color, religion, age, sex, national origin, disability status, genetics, protected veteran status, sexual orientation, gender identity or expression, or any other characteristic protected by federal, state or local laws.

Please see here for our Privacy Statement.

Мы — коммуникационная группа Okkam. Наша специализация — услуги в области маркетинга, рекламы и консалтинга. В России мы уже 25 лет создаем связи между брендами и людьми, профессионально объединяя медиа, креатив и технологии.

На данный момент мы в поисках стажера в команду Easy Commerce. Если это интересная для тебя сфера и ты готов начать свой путь в команде Аналитики под руководством лучших экспертов, мы будем рады пригласить тебя в нашу команду!

Тебе предстоит:

• Работать с базами данных (выгружать и изменять данные);
• Работать с dbt-моделями;
• Разрабатывать data-api.

Будет плюсом:

• Работа с dbt ;
• Понимание принципа работы с DWH;
• Работа с облачными сервисами.

От нас:

• Опытные наставники и желание тебя обучать;
• Оплачиваемая стажировка длительностью 6+ месяцев;
• Официальное оформление (срочный трудовой договор);
• Гибридный формат работы - вместе решим, когда из дома, а когда из нашего офиса в Москва-Сити;
• Занятость 30 часов в неделю, гибкий график выстраивается по договоренности с руководителем;
• Перспектива роста до штатного специалиста.

О компании и проекте

Крупная международная компания развивает направление BI-аналитики и корпоративной отчётности. Ищем BI Developer, который будет самостоятельно разрабатывать и совершенствовать аналитические решения на базе Power BI, работать с моделями данных и обеспечивать эффективную обработку больших объёмов информации.

В команде: Lead Developer и два разработчика. Каждый специалист отвечает за свой проект и проходит полный цикл разработки — от проработки задачи до реализации готового решения. На этапе адаптации Lead Developer помогает разобраться в архитектуре и требованиях.

Задачи

• Разработка и развитие аналитических отчётов и дашбордов в Power BI.

• Подключение к различным источникам данных, подготовка и преобразование данных с использованием Power Query (M).

• Разработка сложных вычислений и мер на DAX.

• Проектирование, создание и оптимизация моделей данных SSAS Tabular.

• Разработка и оптимизация SQL-запросов, представлений (VIEW), хранимых процедур.

• Разработка и совершенствование процессов загрузки и обработки данных (ETL/ELT).

• Анализ и устранение проблем производительности отчётов и моделей данных.

• Работа с большими объёмами данных: модели могут содержать 200–300 млн строк.

• Проверка корректности данных, анализ расхождений и реализация новых бизнес-показателей.

Обязательные требования

• Практический коммерческий опыт разработки в Power BI.

• Уверенное владение Power Query и понимание языка M.

• Хорошее знание DAX: меры, вычисляемые столбцы, контекст фильтрации и контекст строки, сложные вычисления.

• Понимание принципов построения моделей данных и связей между таблицами.

• Опыт работы с Import и DirectQuery.

• Уверенный SQL: JOIN, GROUP BY, WHERE, HAVING, UNION / UNION ALL, временные таблицы.

• Умение писать, анализировать и оптимизировать SQL-запросы.

• Опыт работы с MS SQL Server.

• Практический опыт разработки и оптимизации процессов загрузки данных.

• Способность самостоятельно вести задачу или проект от проработки требований до готового решения.

Будет преимуществом

• Опыт работы с SSAS Tabular: создание моделей с нуля и оптимизация существующих.

• Опыт работы с большими моделями данных (от 50 млн строк, преимущественно 200–300 млн).

• Понимание VertiPaq, кардинальности, партиционирования и инкрементального обновления данных.

• Опыт использования Performance Analyzer, DAX Studio, Tabular Editor, VertiPaq Analyzer и других инструментов диагностики.

• Опыт работы с Azure Analysis Services.

• Опыт работы с другими СУБД помимо MS SQL Server.

• Знакомство с Git, CI/CD и практиками code review.

Что важно для этой позиции

• Практический разработчик, который умеет не только создавать визуализации, но и работать с данными, моделями и вычислениями.

• Готовность самостоятельно разбираться в задаче и предлагать технические решения.

• Умение отвечать за результат и сроки реализации своего проекта.

• Открытость к улучшению архитектуры и процессов разработки.

Мы предлагаем:

• Официальное оформление в аккредитованной ИТ-компании.

• Полностью удалённый формат работы.

• Конкурентный уровень заработной платы, обсуждается индивидуально по результатам собеседования.