DevOps-инженер Data Lake — Remote, Big Data платформа

SkillStaff; United States; Híbrido; USD 120.000 - 180.000; Jornada completa

Ventajas ofrecidas por este puesto de trabajo

Удаленная работа

Офис в Москве

Descripción de la vacante

SkillStaff ищет специалиста по эксплуатации Data Lake и инфраструктуры для сопровождения Linux-систем, S3-хранилищ и кластеров Kubernetes. Роль предполагает взаимодействие с командами Data Engineering и инфраструктуры в рамках разнопроектной деятельности.

Кандидат должен владеть практическим опытом с компонентами Data Lake (Spark, Airflow, Flink, Kafka, Iceberg) и решениями хранения (MinIO). Офис в центре Москвы или удаленная работа доступны.

Formación

• Экспертный опыт администрирования Linux.

Responsabilidades

• Сопровождать и эксплуатировать Data Lake платформ.
• Поддерживать S3/Object Storage инфраструктуры.
• Мониторить, диагностировать и устранять инциденты.
• Сопровождать Kubernetes и компоненты Data Lake: Apache Spark, Airflow, Flink, Kafka, Apache Iceberg.
• Проведение RCA и анализ причин инцидентов, готовить меры по предотвращению их повторения.
• Автоматизировать эксплуатационные задачи.
• Взаимодействовать с командами Data Engineering и инфраструктуры.
• Сопровождать Big Data Platform.

Conocimientos

Linux administration

Distributed systems

S3/Object Storage

Kubernetes

Data Lake components

MinIO

Prometheus

Grafana

Ansible

Terraform

Python Bash

Herramientas

Apache Spark

Airflow

Flink

Kafka

Iceberg

Terraform

Ansible

Descripción del empleo

SkillStaff ищет специалиста по эксплуатации Data Lake и инфраструктуры для сопровождения Linux-систем, S3-хранилищ и кластеров Kubernetes. Роль предполагает взаимодействие с командами Data Engineering и инфраструктуры в рамках разнопроектной деятельности.

Кандидат должен владеть практическим опытом с компонентами Data Lake (Spark, Airflow, Flink, Kafka, Iceberg) и решениями хранения (MinIO). Офис в центре Москвы или удаленная работа доступны.