Especialista Cloudera

Leega

São Paulo

Presencial

BRL 312.000 - 469.000

Jornada completa

Hace 9 días

Consigue una respuesta de este empleador

Tu currículum y tu carta de presentación, adaptados exactamente a lo que buscan contratar.

Supera los filtros ATS

Descripción de la vacante

A Leega busca um Especialista Cloudera Sênior para atuar presencialmente em projeto estratégico de migração de plataforma de dados em instituição financeira de grande porte.

O foco é migrar de Cloudera na AWS para o Google Cloud, com cerca de 13 mil jobs Spark e PySpark, 2,5 PB de dados, e validação de políticas de segurança durante o processo.

Formación

  • Experiência mínima de 6 anos com ecossistema Hadoop, com pelo menos 4 anos em Cloudera (CDH/CDP).
  • Domínio de Spark e PySpark, Hive e Impala em produção de grande porte.
  • Conhecimento de segurança e governança no Cloudera (Ranger, Atlas, Kerberos).
  • Experiência com Google Cloud (Dataproc, BigQuery, Cloud Storage) de pelo menos 1 ano.

Responsabilidades

  • Analisar o ambiente Cloudera atual (CDP), seus serviços, configurações, dependências e jobs em produção.
  • Apoiar Discovery do inventário e da malha de dependências entre origens, jobs, tabelas e consumidores.
  • Mapear componentes Cloudera e indicar o equivalente no Google Cloud.
  • Apoiar migração de Spark, Hive, Impala, Kudu, HBase, Kafka e NiFi, incluindo versões legadas.
  • Investigar diferenças entre legado e destino e identificar a causa.
  • Apoiar migração de políticas de segurança e governança (Ranger, Atlas, Kerberos) para o Google Cloud.
  • Atuar junto aos especialistas do cliente no entendimento dos frameworks proprietários.
  • Documentar o conhecimento do legado para as equipes de engenharia.

Conocimientos

Cloudera CDH/CDP
Spark
PySpark
Hive
Impala
Kudu
HBase
Kafka
NiFi
Ranger
Atlas
Kerberos
Google Cloud
Dataproc
Airflow
CDE

Educación

Superior completo em Tecnologia/Engenharia

Herramientas

Airflow
CDE
Cloudera

Descripción del empleo

A Leega é uma empresa focada no atendimento eficiente e inovador em seus clientes.

Isso não poderia ser diferente com o nosso principal combustível: as pessoas!

Nossa cultura é inspiradora e nossos valores estão presentes no dia a dia: ética e transparência, excelência de qualidade, trabalho em equipe, responsabilidade econômica, social e ambiental, relações humanas e credibilidade.

Buscamos profissionais inovadores que sejam movidos por desafios e focados em resultados.

Se você busca uma empresa dinâmica e parceira e que investe em seus colaboradores através de capacitação constante, a Leega é o lugar para você!

A LEEGA É PARA TODOS, ficaremos muito felizes em ter você em nosso time. Venha fazer parte da nossa história e da construção do nosso futuro.

Responsabilidades e atribuições

Buscamos um Especialista Cloudera Sênior para atuar de forma presencial em um projeto estratégico de migração de plataforma de dados em uma instituição financeira de grande porte. O projeto é a migração de uma plataforma de dados de grande porte, hoje em Cloudera na AWS, para o Google Cloud, no modo lift and shift: cerca de 13 mil jobs Spark e PySpark, 2,5 PB de dados, streaming com CDC, centenas de modelos de Machine Learning e frameworks proprietários de ingestão e processamento, em 9 meses de migração por ondas mensais, seguidos de 3 meses de pós implantação.

Você será a referência técnica do ambiente legado: vai ler, explicar e destravar o que roda hoje no Cloudera, garantindo que a migração para o Google Cloud preserve o comportamento de cada componente.

Principais responsabilidades
  • Analisar o ambiente Cloudera atual (CDP), seus serviços, configurações, dependências e jobs em produção.
  • Apoiar o Discovery do inventário e da malha de dependências entre origens, jobs, tabelas e consumidores.
  • Mapear componentes e recursos específicos do Cloudera e indicar o equivalente ou a adequação necessária no Google Cloud.
  • Apoiar a migração de Spark, Hive, Impala, Kudu, HBase, Kafka e NiFi, incluindo versões legadas de Spark.
  • Investigar diferenças encontradas na comparação entre legado e destino e identificar a causa.
  • Apoiar a migração de políticas de segurança e governança (Ranger, Atlas, Kerberos) para o Google Cloud.
  • Atuar junto aos especialistas do cliente no entendimento dos frameworks proprietários que rodam sobre o Cloudera.
  • Documentar o conhecimento do legado para os times de engenharia.
Requisitos obrigatórios
  • Mínimo de 6 anos de experiência com ecossistema Hadoop, sendo pelo menos 4 anos com Cloudera (CDH ou CDP).
  • Domínio de Spark e PySpark, Hive e Impala em ambiente de produção de grande porte. Experiência com Kudu, HBase, Kafka ou NiFi.
  • Conhecimento de segurança e governança no Cloudera (Ranger, Atlas, Kerberos). Experiência com Google Cloud, mínimo de 1 ano, em projetos ou ambientes de dados (Dataproc, BigQuery, Cloud Storage).
  • Ensino superior completo em Tecnologia, Engenharia ou áreas correlatas.
Diferenciais
  • Experiência em projetos de migração de Cloudera ou Hadoop para nuvem.
  • Certificação Cloudera ou Google Cloud.
  • Experiência com Cloudera Data Engineering (CDE) e Airflow.
  • Experiência com Apache Flink e CDC (Debezium).
  • Experiência em instituições financeiras.
Competências comportamentais
  • Didática para explicar o legado a times e especialistas de diferentes níveis.
  • Investigação estruturada de problemas, com foco em causa raiz.
  • Colaboração próxima com especialistas do cliente.
  • Organização na documentação de conhecimento técnico.
  • Disponibilidade para atuar em janelas de implantação.
INDISPENSÁVEL Conhecimento/Atuação em:
  • Cloudera (CDH ou CDP) em produção
  • Atuação presencial

Modelo de atuação 100% PRESENCIAL, em instituição financeira localizada na Av. Paulista - São Paulo.

Consigue la evaluación confidencial y gratuita de tu currículum.

o arrastra y suelta tu archivo aquí

Similar jobs

Puestos de trabajo similares que vale la pena comparar

Especialista De Engenharia De Dados Sênior (Googlecloud)
Especialista De Engenharia De Dados Sênior (Googlecloud)

Leega Consultoria • São Paulo

Presencial
BRL 180.000 - 320.000
Engenheiro(a) de Dados Sênior(Google Cloud)
Engenheiro(a) de Dados Sênior(Google Cloud)

Leega Consultoria • São Paulo

Presencial
BRL 180.000 - 240.000
Plano de saúde
Plano odontológico
PLR
+8
Especialista De Engenharia De Dados Sênior (Google Cloud)
Especialista De Engenharia De Dados Sênior (Google Cloud)

Hunt It - Recrutamento Especializado Para Ti • São Paulo

Presencial
BRL 240.000 - 360.000
Especialista de Engenharia de Dados Sênior (Google Cloud)
Especialista de Engenharia de Dados Sênior (Google Cloud)

Leega • São Paulo

Presencial
BRL 360.000 - 480.000
Convênio médico
Convênio odontológico
PLR
+5
Especialista de Engenharia de Dados Sênior (Google Cloud) São Paulo - SP Full-time employee
Especialista de Engenharia de Dados Sênior (Google Cloud) São Paulo - SP Full-time employee

Leega Consultoria • São Paulo

Híbrido
BRL 300.000 - 520.000
Convênio Médico Porto Seguro
Convênio Odontológico Porto Seguro
Participação nos Lucros e Resultados (
+9
Engenheiro(a) de Dados Junior (Google Cloud)
Engenheiro(a) de Dados Junior (Google Cloud)

Leega Consultoria • São Paulo

Presencial
BRL 60.000 - 100.000
Convênio Médico Porto Seguro
Convênio Odontológico Porto Seguro
Participação nos Lucros e Resultados (
+5
Especialista De Engenharia De Dados Sênior (Google Cloud) - Presencial Em São Paulo
Especialista De Engenharia De Dados Sênior (Google Cloud) - Presencial Em São Paulo

Hunt Rh • São Paulo

Presencial
BRL 180.000 - 360.000
Especialista de Engenharia de Dados Sênior (Google Cloud)
Especialista de Engenharia de Dados Sênior (Google Cloud)

Leega Consultoria • São Paulo

Presencial
BRL 420.000 - 560.000
Convênio Médico Porto Seguro
Convênio Odontológico Porto Seguro
PLR
+8
Arquiteto de Soluções de Dados Especialista (Google Cloud e Aceleradores com IA)
Arquiteto de Soluções de Dados Especialista (Google Cloud e Aceleradores com IA)

Leega Consultoria • São Paulo

Presencial
BRL 300.000 - 550.000
Convênio Médico Porto Seguro
Convênio Odontológico Porto Seguro
PLR
+8
Arquiteto de Soluções de Dados Especialista (Google Cloud e Aceleradores com IA) São Paulo - SP Full-time employee
Arquiteto de Soluções de Dados Especialista (Google Cloud e Aceleradores com IA) São Paulo - SP Full-time employee

Leega Consultoria • São Paulo

Presencial
BRL 250.000 - 400.000
Plano de saúde Porto Seguro
Plano odontológico Porto Seguro
PLR
+8