Big Data Engineer

Nimber; Lisboa; Presencial; EUR 55 000 - 75 000; Tempo integral

Resumo da oferta

A Nimber em Lisboa procura um Engenheiro de Big Data para desenhar, construir e manter soluções de processamento de dados em ambientes Big Data. Requer competências sólidas em desenvolvimento de software e paixão por dados.

Trabalhará com Spark On-Premise, Hadoop, Hive, Python e SQL; integrará APIs e Kafka; participará em pipelines de CI/CD, operações Linux, Git e práticas de DevOps, bem como XL Release/XL Deploy e CTRL-M. Colaboração com equipas internacionais é essencial.

Qualificações

• Experiência sólida em desenvolvimento de software.
• Experiência com Spark On-Premise, Python, Hadoop, Hive e SQL.
• Experiência em ambientes Linux.
• Conhecimentos de APIs e Kafka.
• Experiência com CI/CD e familiaridade com conceitos de DevOps.
• Experiência com Git.
• Conhecimentos de XL Release e XL Deploy.
• Experiência com CTRL-M.
• Inglês mínimo B2 (obrigatório).

Responsabilidades

• Desenvolver e manter soluções de processamento e transformação de dados em ambientes Big Data.
• Trabalhar com Spark On-Premise, Hadoop e Hive na implementação e evolução de soluções.
• Desenvolver soluções e componentes utilizando Python e SQL.
• Integrar sistemas e fluxos de dados através de APIs e Kafka.
• Participar na implementação e manutenção de pipelines de CI/CD.
• Trabalhar em ambientes Linux e contribuir para práticas de DevOps.
• Gerir código-fonte através de Git.
• Utilizar XL Release e XL Deploy nos processos de build, release e deployment.
• Gerir e acompanhar processos de scheduling através de CTRL-M.
• Identificar oportunidades de otimização e melhoria de performance das soluções.
• Colaborar com equipas internacionais e distribuídas, contribuindo para a evolução contínua das soluções.

Conhecimentos

Software development

English B2

Ferramentas

Spark On-Premise

Hadoop

Hive

Python

SQL

Linux

APIs

Kafka

CI/CD

DevOps

Git

XL Release

XL Deploy

CTRL-M

Descrição da oferta de emprego

Olá! Acredita que encontrou esta oportunidade por acaso?

Nós, na Nimber, não acreditamos em acaso.

Chamou sua atenção? Ótimo. Continue a ler...

Nós somos a Nimber, e não estamos apenas a preencher vagas; estamos a construir uma equipa pronta para transformar as coisas. Se está preparado para reescrever as regras e causar um impacto real, este é o seu momento. Junte-se a nós e vamos colocar o futuro onde ele pertence: nas mãos de pessoas apaixonadas.

Mas o que significa Nimber?

Na matemática e na teoria dos jogos, são números com propriedades especiais de adição e multiplicação. E o que realmente queremos é agregar valor aos projetos dos nossos clientes.

Posição: Big Data Engineer

Responsabilidades

• Desenvolver e manter soluções de processamento e transformação de dados em ambientes Big Data;
• Trabalhar com Spark On-Premise, Hadoop e Hive na implementação e evolução de soluções;
• Desenvolver soluções e componentes utilizando Python e SQL;
• Integrar sistemas e fluxos de dados através de APIs e Kafka;
• Participar na implementação e manutenção de pipelines de CI/CD;
• Trabalhar em ambientes Linux e contribuir para práticas de DevOps;
• Gerir código-fonte através de Git;
• Utilizar XL Release e XL Deploy nos processos de build, release e deployment;
• Gerir e acompanhar processos de scheduling através de CTRL-M;
• Identificar oportunidades de otimização e melhoria de performance das soluções;
• Colaborar com equipas internacionais e distribuídas, contribuindo para a evolução contínua das soluções.

Requisitos

• Experiência sólida em desenvolvimento de software;
• Experiência com Spark On-Premise, Python, Hadoop, Hive e SQL;
• Experiência em ambientes Linux;
• Conhecimentos de APIs e Kafka;
• Experiência com CI/CD e familiaridade com conceitos de DevOps;
• Experiência com Git;
• Conhecimentos de XL Release e XL Deploy;
• Experiência com CTRL-M;
• Experiência em otimização e melhoria de performance será valorizada;
• Inglês mínimo B2 (obrigatório).

Pronto para juntar-se a nós e ter sucesso?