DevOps инженер для потоковой обработки данных

БФТ-Холдинг; United States; Remote; USD 22,000 - 37,000; Full time

Job summary

БФТ-Холдинг ищет DevOps инженера (Flink) для проекта ГИС «Единая централизованная цифровая платформа в социальной сфере» — крупный федеральный проект по автоматизации социальной сферы.

Ключевые задачи: поддержка и развитие платформы потоковой обработки на Flink, настройка Flink/Kafka/Hadoop/OpenSearch, мониторинг и обеспечение высокой доступности. Требуется опыт эксплуатации Flink, знание Kubernetes/Docker/Linux и систем мониторинга.

Qualifications

• Опыт эксплуатации Apache Flink в production.
• Понимание архитектуры Flink и потоковой обработки.
• Опыт работы с Kafka, Hadoop и OpenSearch/Elasticsearch.
• Опыт работы с Kubernetes, Docker и Linux.
• Опыт эксплуатации и оптимизации распределённых систем.
• Навыки мониторинга Prometheus, Zabbix или Grafana.

Responsibilities

• Поддержка и развитие платформы потоковой обработки данных на базе Apache Flink.
• Настройка и администрирование Flink, Kafka, Hadoop и Elasticsearch/OpenSearch.
• Мониторинг работы платформы и контроль потоковых задач.
• Балансировка нагрузки и обеспечение высокой доступности.
• Анализ и устранение проблем производительности и инцидентов.

Skills

Flink

Kafka

Hadoop

OpenSearch/Elasticsearch

Kubernetes

Docker

Linux

Prometheus

Grafana

Zabbix

Tools

Kubernetes

Docker

Linux

Job description

Описание:

В настоящий момент находимся в поиске DevOps инженера (Flink) на проект ГИС «Единая централизованная цифровая платформа в социальной сфере» — крупнейший федеральный проект автоматизации и реинжиниринга социальной сферы, который позволит обеспечить комплексный подход к реализации всех процессов, необходимых для назначения и предоставления мер социальной поддержки (пенсионерам, инвалидам, матерям и т.д.).

Задачи:

Поддержкой, оптимизацией и развитием платформы потоковой обработки данных на базе Apache Flink, Настройкой и администрированием Flink, Kafka, Hadoop и Elasticsearch, Мониторингом работы платформы и контролем выполнения потоковых задач, Балансировкой нагрузки и оптимизацией использования вычислительных ресурсов, Обеспечением высокой доступности и бесперебойной работы системы, Анализом и устранением проблем производительности и инцидентов.

Требования:

Опыт эксплуатации Apache Flink в production, Понимание архитектуры Flink и принципов потоковой обработки данных, Опыт работы с Kafka, Hadoop и OpenSearch/Elasticsearch, Опыт работы с Kubernetes, Docker и Linux, Опыт эксплуатации и оптимизации высоконагруженных распределённых систем, Опыт работы с системами мониторинга Prometheus, Zabbix или Grafana.

Условия:

Работу в аккредитованной ИТ-компании с официальным трудоустройством по ТК РФ, Корпоративную технику для комфортной работы, ДМС после испытательного срока с возможностью страхования детей и родственников, Участие в корпоративных мероприятиях и праздниках в кругу профессионалов, где ценят вклад каждого, Реферальную программу с вознаграждением за рекомендации друзей в нашу команду, Оплату посещения профильных конференций и курсов, поддержку в подготовке к публичным выступлениям и написанию статей на Хабр, Удаленный формат работы.