DеvOps
локация ТОЛЬКО РФ
Cloud amp; Infra: Опыт развертывания и настройки managed-кластеров Spark (Yandex Data Proc, Google Dataproc, AWS EMR).Владение Terraform или Ansible, настройка VPC, VPN, Security Groups между Greenplum и Spark. Docker/Kubernetes. Big Data стек: Архитектура Greenplum и способы интеграции/выгрузки (gpfdist, PXF, JDBC). Архитектура Spark (Driver, Executor, History Server), управление ресурсами, оркестрация в Apache Airflow. Форматы Parquet, ORC, Avro. CI/CD amp; Monitoring: Prometheus, Grafana, ELK для Spark-джобов. Настройка GitLab CI / Jenkins. Скриптинг: Python (PySpark) или Scala для инфраструктуры/отладки, Bash.
Spark, Greenplum, gpfdist, PXF, JDBC, Parquet, ORC, Avro, PySpark, Scala, Airflow.-обязательно
Пишем сразу с резюме в ТГ!)
Tokhastik_hr
нужно СЕГОДНЯ)
#vacancy #job #вакансия #devops