Big Data Engineer - Spark & Hadoop | Hybrid Lisbon

Dellent; Lisboa; Hybrid; EUR 45,000 - 65,000; Full time

Benefits offered by this job

Seguro de saúde

Orçamento para formação

Onboarding remoto

Eventos de equipa

Descontos exclusivos

Cultura de proximidade

Job summary

A Dellent procura um Big Data Hadoop Developer para atuar em Lisboa, num regime híbrido, integrando projetos da área de investment banking e serviços financeiros.

Vai trabalhar com Spark 3, Scala 2, Hadoop (YARN/HDFS/Hive/Kafka) em ambiente on-premises Cloudera, com foco em desempenho, segurança e pipelines CI/CD.

A empresa oferece seguro de saúde, orçamento para formação, onboarding remoto, eventos de equipa e uma cultura de transparência.

Qualifications

• Experiência em pipelines CI/CD com Jenkins, XL Deploy e XL Release.
• Conhecimento sólido de Apache Spark 3 e Scala 2.
• Conhecimento do ecossistema Hadoop (YARN/HDFS/Hive/Kafka) em ambiente on-premises Cloudera.
• Conhecimento de mecanismos de segurança (Kerberos/Ranger) e boas práticas de codificação.
• Experiência com Control-M, Bitbucket/Git, Jira/Confluence, IntelliJ ou VS Code, e familiaridade com metodologias Ágil/Scrum.
• Inglês nível B2+ (C1 preferido) com boa comunicação e colaboração.

Skills

CI/CD pipelines

Spark 3

Scala 2

Hadoop YARN/HDFS/Hive/Kafka

Security best practices

English communication

Tools

Jenkins

XL Deploy

XL Release

Bitbucket/Git

Jira

Confluence

IntelliJ

VS Code

Job description

A Dellent procura um Big Data Hadoop Developer para atuar em Lisboa, num regime híbrido, integrando projetos da área de investment banking e serviços financeiros.

Vai trabalhar com Spark 3, Scala 2, Hadoop (YARN/HDFS/Hive/Kafka) em ambiente on-premises Cloudera, com foco em desempenho, segurança e pipelines CI/CD.

A empresa oferece seguro de saúde, orçamento para formação, onboarding remoto, eventos de equipa e uma cultura de transparência.