devops инженер Data Lake

Enfint; Deutschland; Hybrid; EUR 70.000 - 110.000; Vollzeit

Benefits dieser Stelle

Гибридный формат

Полная удалёнка

ДМС с первых дней

Сезонный коворкинг

Компенсация больничного

Обучение и конференции

Библиотеки Alpina Digital/MyBook

Спортивные залы

Скидки на услуги

AI-грамотность

Zusammenfassung

Enfint в Германии ищет специалиста по управлению и эксплуатации Data Lake и связанных компонентов. Ваша задача — сопровождение инфраструктуры S3/Object Storage, мониторинг и устранение инцидентов, а также работа с Kubernetes и инструментами Spark, Airflow, Flink и Kafka.

Требуется опыт Linux, распределённых систем, наблюдаемости (Prometheus/Grafana) и автоматизации (Ansible, Terraform, Bash, Python). Гибридная или удалённая работа, KPI-бонусы, обучение и доступ к ресурсам компании.

Qualifikationen

• Экспертный опыт администрирования Linux.
• Опыт сопровождения высоконагруженных распределённых систем.
• Глубокое понимание S3/Object Storage и архитектуры распределённых систем хранения.
• Опыт эксплуатации Kubernetes-платформ.
• Практический опыт эксплуатации компонентов Data Lake: Spark, Airflow, Flink, Kafka, Iceberg.
• Опыт эксплуатации MinIO и решений Object Storage.
• Понимание репликации, кодирования с устранением стираний, согласованности и отказоустойчивости.
• Практический опыт диагностики CPU, RAM, сети, дискового ввода-вывода, задержки и пропускной способности.
• Опыт работы со стеком наблюдаемости: Prometheus, Grafana; оповещения и анализ журналов.
• Опыт автоматизации с Ansible, Terraform, Bash и Python.
• Понимание управления инцидентами и проблемами, а также практик SRE.
• Навыки RCA, анализа postmortem и повышения надёжности платформ.

Aufgaben

• Сопровождать и эксплуатировать платформы Data Lake и связанные компоненты.
• Поддерживать инфраструктуру S3/Object Storage.
• Проводить мониторинг, диагностику и устранять инциденты.
• Выполнять диагностику производительности платформ и систем хранения.
• Сопровождать Kubernetes и компоненты Data Lake: Spark, Airflow, Flink, Kafka, Iceberg.
• Проводить RCA и анализ postmortem.
• Автоматизировать эксплуатационные задачи.
• Взаимодействовать с командами Data Engineering и инфраструктуры.

Kenntnisse

Linux

Distributed systems

RCA / Postmortems

Observability concepts

SRE practices

Tools

Kubernetes

Apache Spark

Apache Airflow

Apache Flink

Kafka

Iceberg

MinIO

Prometheus

Grafana

Ansible

Terraform

Bash

Python

Jobbeschreibung

Описание:

Описания нет

Задачи:

• Сопровождать и эксплуатировать платформы Data Lake
• Поддерживать инфраструктуру S3/Object Storage
• Проводить мониторинг, диагностику и устранять инциденты
• Выполнять диагностику производительности платформ и систем хранения
• Сопровождать Kubernetes и компоненты Data Lake: Apache Spark, Airflow, Flink, Kafka, Apache Iceberg
• Проводить RCA и анализ postmortem
• Автоматизировать эксплуатационные задачи
• Взаимодействовать с командами Data Engineering и инфраструктуры.

Требования:

• Экспертный опыт администрирования Linux
• Опыт сопровождения высоконагруженных распределённых систем
• Глубокое понимание S3/Object Storage и архитектуры распределённых систем хранения
• Опыт сопровождения Kubernetes-платформ
• Практический опыт эксплуатации компонентов Data Lake: Apache Spark, Airflow, Flink, Kafka, Apache Iceberg
• Опыт эксплуатации MinIO и решений Object Storage
• Понимание репликации, кодирования с устранением стираний, согласованности и отказоустойчивости
• Практический опыт диагностики CPU, RAM, сети, дискового ввода-вывода, задержки и пропускной способности
• Опыт работы со стеком наблюдаемости: Prometheus, Grafana, оповещения и анализ журналов
• Опыт автоматизации с Ansible, Terraform, Bash и Python
• Понимание управления инцидентами и проблемами, а также практик SRE
• Навыки RCA, анализа postmortem и повышения надёжности платформ.

Условия:

• Квартальная премия по результатам KPI
• Гибридный формат или полная удалёнка
• ИТ-хабы в Москве, Питере и Екатеринбурге
• Сезонный коворкинг в Сочи
• ДМС с первых дней работы, включая стоматологию и обслуживание в клиниках
• Компенсация 10 дней больничного
• Тренинги, вебинары, митапы и демо-дни для карьерного развития
• Оплата профильных конференций и курсов
• Доступ к корпоративным библиотекам Alpina Digital и MyBook
• Собственные спортзалы в Москве, Питере и Екатеринбурге
• Скидки на услуги туристических агентств, продукты питания, рестораны, бары и магазины
• Программа развития AI-грамотности.