Remote work (6–8 hours overlap with PST).
· На сервисе с: 21.10.26 20:20
🔹 ••••••••
More details in Giovanna Guido's ••••••••.
🔹 ••••••••
More details in Aline Araujo's ••••••••.
•••••••• is a technology company building modern web applications for consumer products.
Remote work (6–8 hours overlap with PST).
Вакансия DA/DE в ••••••••. Вендорсакая ставка.
Требования:
• Опыт работы от 2-х лет на позициях DA/DE в области DWH/BI.
➡️Обязательные hard skills:
- Практический опыт работы с Apache Spark — ключевое требование
- Продвинутое знание SQL: сложные joins, оконные функции, CTE, агрегации, подзапросы и оптимизация запросов.
- Опыт оптимизации Spark-задач и SQL-запросов на больших объемах данных.
- Опыт работы с S3
- Опыт работы с Apache Iceberg или понимание его ключевых возможностей
- Понимание принципов построения хранилищ данных (DWH), ETL/ELT-процессов, нормализации данных и организации потоков обработки.
- Опыт работы с технической документацией (BRD, FSD), умение писать ее четко и структурированно.
- Опыт тестирования данных
- Опыт работы с системами контроля версий, включая Git.
➡️Ключевые soft skills:
- Системное аналитическое мышление
- Коммуникабельность
- Самостоятельность и ответственность
- Внимание к деталям и аккуратность
➡️ Будет плюсом:
- Понимание принципов работы с Oracle и Greenplum.
- Опыт работы в финансовой сфере (банк, страхование, финтех).
- Базовые знания Python для скриптинга и анализа данных.
- Понимание методологий управления проектами (Agile, Scrum, Kanban).
- Опыт работы с ClickHouse, Airflow, SuperSet, FineBI.
- Понимание принципов организации data lake и lakehouse-архитектуры.
☑️Обязанности:
• Анализ требований:
- Прием и анализ входящей документации от заказчиков
- Детальный разбор требований, их формализация, проработка неясных моментов.
- Оценка возможности реализации с учетом используемого стека
- Анализ влияния изменений на текущие процессы, модели данных, таблицы и связанные компоненты.
• Проектирование и прототипирование:
- Разработка и согласование концептуального и логического решения.
- Проектирование потоков обработки и трансформации данных с использованием Apache Spark.
- Работа с данными, размещенными в S3 и организованными с использованием Apache Iceberg.
- Написание SQL-кода в среде Apache Spark для создания прототипов, проверки гипотез и подтверждения корректности предлагаемой логики расчетов или моделей данных.
• Тестирование и выпуск изменений:
- Приемка и тестирование патчей от разработчиков на тестовых/предпродуктивных/продуктивных стендах.
- Проверка корректности Spark-задач, SQL-логики, загрузок в S3 и работы таблиц Iceberg.
- Подготовка и контроль выгрузки доработок в продуктивный контур.
⚠️Контакт для связи: ••••••••
Мы развиваем направление аналитики и работы с данными транзакционного бизнеса. Ищем в команду инженера по данным, который будет помогать строить дата-продукты с основным фокусом на разработку в Hadoop-экосистеме.
анализировать требования бизнеса по получению новых данных, оценивать наличие данных, сложности и риски
искать зависимости в данных различных источников с учетом бизнес-специфики их хранения
проектировать и разрабатывать аналитические витрины и ETL/ELT-пайплайны в Hadoop-экосистеме
разрабатывать и оптимизировать Hive/Spark SQL, SQL-запросы и прототипы
работать с HDFS, Hive, Spark, форматами хранения Parquet, партиционированием и бакетированием
тестировать ETL и выявлять баги при построении дата-продуктов.
участвовать совместно с владельцем продукта в процессе приемки витрин данных заказчиками
развивать экспертизу по вопросам работы с данными внутри команды
обеспечивать доступность, контроль качества и целостность данных.
опыт работы в роли DE/DA/ETL Developer не менее 1 года
практический опыт разработки на Hadoop: Hive, Spark, HDFS, понимание принципов MapReduce/Spark
отличное знание SQL: вложенные запросы, оконные функции, регулярные выражения, CTE
понимание MPP СУБД. Опыт Greenplum — будет преимуществом
знание основных понятий и концепций из области DWH
знание инструментов DevOps: Git, Nexus, Jenkins, SonarQube; любые IDE
как плюс — опыт работы с языками программирования: Scala, Java, Python
умение работать с большим количеством источников данных
Стек:
Hadoop, Hive, Spark, SQL, ETL, Git, Jira, IntelliJ IDEA, Jupyter Notebook.
Media Instinct Group — cодружество самостоятельных, операционно управляемых рекламных агентств, обладающих мощной стратегической и категорийной экспертизами. Агентства Media Instinct Group достигают выдающихся результатов по цене и качеству медийных сделок.
Media Instinct Group активно использует новые технические решения помогающие увеличить продажи Клиентов и снизить рабочую нагрузку наших сотрудников. Мы применяем инструменты глубокого анализа данных (GA4, Яндекс Метрика, Tableau, PBI, вся линейка продуктов Mediascope), позволяющие клиентам принимать качественные и своевременные решения.
Мы лидеры медиарынка России, №1 в рейтинге Adindex.
Media instinct Group включает в себя медийные агентства: Media Instinct, United Partners, MI10. Наши стратегические партнеры: медийные агентства Right и Media Pulse.
Наши Клиенты: Мегафон, Глория Джинс, Mitsubishi, МВидео, НСПК, Berlin-Chemie, АльфаСтрахование и др.
Media Instinct Group помогает растить бизнес клиентов и способствует развитию талантов сотрудников.
Подбор сотрудников осуществляет Универсальная Сервисная Компания (УСК) — сервисный партнер Media Instinct Group.
Сейчас мы в поиске Data Engineer.
Стек: MSSQL, Python, Prefect, DBT, SSIS, Clickhouse
Обязанности:
Требования:
Будет плюсом:
Будет плюсом опыт работы с Prefect или другими оркестраторами (Airflow, Luigi), опыт работы с Clickhouse
Опыт работы в интернет-маркетинге, веб-аналитике
Что мы предлагаем:
HireSeeker собирает вакансии со всех площадок и присылает только релевантные. Бесплатно.