Remote DataOps Engineer - Kubernetes, Airflow & Spark

Miractal; United States; Remote; USD 120,000 - 180,000; Full time

Benefits offered by this job

Ноутбук

Компенсация больничных

Скидка на изучение английского Skyeng

Job summary

Miractal ищет опытного DevOps/SRE специалиста для развертывания и сопровождения дата-платформ в Kubernetes. В обязанности входит поддержка Airflow, Spark, Helm-чартов и CI/CD, настройка мониторинга и резервного копирования, а также управление доступами и интеграцию со SSO.

Удаленная работа возможна; пакет обсуждается по итогам интервью. Кандидат должен иметь 5+ лет опыта в инфраструктуре, сильное владение Kubernetes, Linux и Docker, а также навыки IaC (Ansible, Terraform) и работы с data-стеком

Qualifications

• Опыт эксплуатации инфраструктуры 5+ лет (DevOps, SRE, платформенные команды).
• Kubernetes опыт 3+ лет: Helm, операторы, stateful-нагрузки, диагностика инцидентов.
• Уверенное владение Linux и Docker.
• Опыт IaC (Ansible, Terraform).
• Опыт эксплуатации data-процессов в Kubernetes: Airflow, Spark, Kafka или аналоги.
• Опыт работы с S3-совместимыми хранилищами (Ceph, MinIO, облачный S3).
• Python для автоматизации и разработки вспомогательных сервисов.
• Опыт настройки мониторинга (Prometheus, Grafana).
• Базовое администрирование PostgreSQL.
• Опыт работы с on-premise инфраструктурой.

Responsibilities

• Развёртывание и сопровождение компонентов дата-платформы в Kubernetes: Airflow, Spark, объектное хранилище, каталог Iceberg.
• Разработка и поддержка Helm-чартов, настройка операторов, построение CI/CD.
• Организация мониторинга, алертинга, резервного копирования и восстановления.
• Планирование мощностей.
• Управление доступами и разграничением прав, интеграция сервисов с корпоративным SSO.

Skills

Kubernetes

Airflow

Spark

Helm

CI/CD

Linux

Docker

IaC

Ansible

Terraform

PostgreSQL

Prometheus

Grafana

S3 storage

Tools

Terraform

Ansible

Docker

Job description

Miractal ищет опытного DevOps/SRE специалиста для развертывания и сопровождения дата-платформ в Kubernetes. В обязанности входит поддержка Airflow, Spark, Helm-чартов и CI/CD, настройка мониторинга и резервного копирования, а также управление доступами и интеграцию со SSO.

Удаленная работа возможна; пакет обсуждается по итогам интервью. Кандидат должен иметь 5+ лет опыта в инфраструктуре, сильное владение Kubernetes, Linux и Docker, а также навыки IaC (Ansible, Terraform) и работы с data-стеком