Hadoop Administrator

Pasquali Solution; Nova Lima; Presencial; BRL 80.000 - 120.000; Tempo integral

Resumo da oferta

Uma empresa de tecnologia em Minas Gerais busca um Administrador de Cluster Hadoop especializado para otimizar e evoluir sua plataforma de dados. Espera-se experiência significativa com Cloudera, Linux e automação. O candidato ideal deve ter habilidades em gerenciamento de dados, suporte em ambientes de Big Data, e experiência com ferramentas como Python, Docker e Spark. Este é um papel crucial para a sustentação e segurança da infraestrutura de dados da empresa.

Responsabilidades

• Sustentar, otimizar e evoluir a plataforma de dados da empresa com foco em Big Data.
• Gerenciar clusters Hadoop, incluindo a administração de Cloudera.
• Implementar automação e pipelines de dados.

Conhecimentos

Administração de Cluster Cloudera / Hadoop

Administração de bancos relacionais e NoSQL

Administração de hosts Linux

Experiência com Ansible

Proficiência em Shell Script

Suporte em ambiente de Big Data em produção

Experiência em Business Intelligence

Experiência com Python

Experiência com Spark

Experiência com Docker

Experiência com Airflow

Experiência com NiFi

Ferramentas

Cloudera

Linux

Docker

Python

Spark

Airflow

NiFi

Descrição da oferta de emprego

Descrição da Vaga

Estamos buscando um Administrador de Cluster Hadoop altamente especializado para atuar na sustentação, otimização e evolução da plataforma de dados da empresa, com foco em Cloudera, Linux, automação, pipeline de Big Data e segurança.

Certificações desejáveis

• Administrador da Plataforma Cloudera (HDP, CDH ou CDP)
• Generalist Cloudera (CDH ou CDP)
• Data Engineer Cloudera (CDH ou CDP)

Requisitos desejáveis

• Administração de Cluster Cloudera / Hadoop.
• Administração de bancos relacionais e NoSQL.
• Administração de hosts Linux.
• Experiência com Ansible.
• Proficiência em Shell Script, AD e DNS.
• Suporte em ambiente de Big Data em produção.
• Experiência em Business Intelligence.
• Experiência com Python e Spark.
• Experiência com Docker.
• Experiência com Airflow e NiFi.