Consultor(A) De Integração De Dados (Apache Nifi)

Noesis Portugal; Lisboa; Hybrid; EUR 42,000 - 62,000; Full time

Benefits offered by this job

Regime de trabalho híbrido

Job summary

Noesis Portugal procura um Consultor de Integração de Dados com experiência em Apache NiFi para colaborar num projecto no setor energético. O profissional irá analisar e adaptar fluxos entre aplicações, assegurar rastreabilidade da informação, e restabelecer operações com configurações seguras.

Responsável por desenvolver fluxos NiFi, ajustar end-points e credenciais, validar dados e apoiar a passagem para produção, com foco em documentação técnica e melhoria contínua.

Qualifications

• Experiência comprovada no desenvolvimento e manutenção de fluxos em Apache NiFi.
• Conhecimentos de NiFi Expression Language, parameter contexts e parametrização por ambiente.
• Conhecimentos de integração via HTTP/REST, SFTP, JDBC e Kafka.
• Experiência com JSON, XML, CSV e transformações de dados (inclui Jolt quando aplicável).
• Conhecimentos de data provenance, back pressure, filas e diagnóstico de falhas.
• Conhecimentos de segurança, gestão de credenciais e TLS.
• Capacidade de análise, resolução de problemas e colaboração com equipas técnicas.
• Inglês (falado e escrito) para colaboração técnica e documentação.

Responsibilities

• Levantar e documentar fluxos NiFi, processors, process groups, controller services e ligações a sistemas externos.
• Desenvolver, adaptar e parametrizar fluxos de ingestão, transformação e encaminhamento de dados.
• Reconfigurar endpoints, credenciais, certificados e parameter contexts.
• Implementar validações, tratamento de erros, retries e mecanismos de recuperação de fluxos.
• Analisar data provenance e dependências para identificar o percurso dos dados e os impactos das alterações.
• Otimizar filas, concorrência e configurações de back pressure, de acordo com os requisitos de processamento.
• Participar em testes, deployment, entrada em produção e estabilização, produzindo documentação técnica e operacional.

Job description

Procuramos um(a) Consultor(a) de Integração de Dados com experiência em Apache NiFi para participar num projeto de transformação tecnológica num cliente de referência do setor energético.

O profissional será responsável pela análise e adaptação de fluxos de dados entre aplicações, ficheiros e plataformas de integração, contribuindo para a rastreabilidade da informação, a segregação de configurações e acessos e a continuidade operacional.

Principais Tarefas e Responsabilidades:

• Levantar e documentar fluxos NiFi, processors, process groups, controller services e ligações a sistemas externos.
• Desenvolver, adaptar e parametrizar fluxos de ingestão, transformação e encaminhamento de dados.
• Reconfigurar endpoints, credenciais, certificados e parameter contexts.
• Implementar validações, tratamento de erros, retries e mecanismos de recuperação de fluxos.
• Analisar data provenance e dependências para identificar o percurso dos dados e os impactos das alterações.
• Otimizar filas, concorrência e configurações de back pressure, de acordo com os requisitos de processamento.
• Participar em testes, deployment, entrada em produção e estabilização, produzindo documentação técnica e operacional.

Requisitos:

• Experiência comprovada no desenvolvimento e manutenção de fluxos em Apache NiFi.
• Experiência com NiFi Expression Language, parameter contexts e parametrização por ambiente.
• Conhecimentos de integração através de HTTP/REST, SFTP, JDBC e Kafka.
• Experiência com JSON, XML, CSV e transformações de dados, incluindo Jolt quando aplicável.
• Conhecimentos de data provenance, back pressure, filas e diagnóstico de falhas.
• Conhecimentos de segurança, gestão de credenciais e comunicação TLS.
• Valorizada experiência com clusters NiFi e mecanismos de versionamento e promoção de fluxos entre ambientes.
• Capacidade de análise, resolução de problemas e colaboração com equipas técnicas.
• Domínio de inglês, oral e escrito, para colaboração e documentação técnica.

Join us. Let’s innovate together!

Todos os nossos processos de recrutamento e seleção baseiam-se na igualdade de oportunidades, valorizando a competência e o potencial de cada pessoa e garantindo que nenhum candidato ou candidata é discriminado com base em género, etnia, orientação sexual, idade, religião ou condição física.

- Anúncio criado ao abrigo da Lei n º 4 / 2019, de 10 de Janeiro

Regime de trabalho híbrido.