Senior Data Engineer

Habber Tec Portugal; Lisboa; Presencial; EUR 40 000 - 60 000; Tempo integral

Vantagens oferecidas por esta oferta de emprego

Subsídio de alimentação

Plano de progressão de carreira

Formação contínua

Dias de férias adicionais

Resumo da oferta

A Habber Tec Portugal busca um Engenheiro de Dados Sênior para atuar em projetos inovadores na área de Dados e Inteligência Artificial.

Este profissional desenhará e implementará arquiteturas de dados em ambientes cloud, otimizando pipelines de dados e colaborando em migrações de plataformas.

Os candidatos devem ter mais de 7 anos de experiência e dominar Python, Spark e ambientes Cloud, especialmente Google Cloud Platform.

Qualificações

• Mínimo de 7 anos de experiência em Engenharia de Dados ou Engenharia de Software.
• Forte experiência em Python em ambientes produtivos de elevada performance.
• Conhecimentos avançados de sistemas distribuídos e arquiteturas modernas de dados.

Responsabilidades

• Desenhar e implementar arquiteturas modernas de dados em ambientes cloud.
• Desenvolver e otimizar pipelines de dados batch e streaming.
• Participar em iniciativas de migração de plataformas legacy para soluções cloud-native.

Conhecimentos

Python

Spark

PySpark

Apache Kafka

Cloud Computing

Engenharia de Dados

DBT

Ferramentas

Snowflake

Databricks

Airflow

Descrição da oferta de emprego

A Habber Tec é uma organização com espírito de inovação e há mais de 20 anos a transformar o negócio de centenas de clientes na Europa, América e África. Como empresa internacional, somos especializados em Dados, Transformação Digital e Inteligência Artificial, incorporando a Cloud como peça estratégica do nosso negócio para alcançar a modernização tecnológica e a economia digital.

Os nossos clientes estão comprometidos com a inovação tecnológica para liderar os seus mercados e, por isso, o nosso principal objetivo é transformar os seus negócios através da tecnologia, melhorando processos e resultados. Projetamos, desenvolvemos e integramos soluções transformadoras para clientes de diversos setores, totalmente adaptadas às necessidades de cada organização.

Para apoiar o nosso crescimento, procuramos pessoas talentosas que queiram integrar um projeto com grande futuro na área dos Dados e Inteligência Artificial.

Senior Data Engineer para integrar um projeto de elevada complexidade tecnológica, focado na evolução e modernização de plataformas de dados empresariais.

Esta função terá um papel estratégico na conceção, implementação e migração de arquiteturas de dados modernas, contribuindo para iniciativas cloud-native e para a construção de plataformas escaláveis e orientadas a dados.

Responsabilidades

• Desenhar e implementar arquiteturas modernas de dados em ambientes cloud;
• Desenvolver e otimizar pipelines de dados batch e streaming;
• Participar em iniciativas de migração de plataformas legacy para soluções cloud-native;
• Construir e evoluir plataformas de dados baseadas em Snowflake ou Databricks;
• Desenvolver soluções de ingestão de dados através de APIs, CDC e streaming;
• Trabalhar com grandes volumes de dados estruturados e não estruturados;
• Garantir boas práticas de desenvolvimento, performance, observabilidade e escalabilidade;
• Colaborar com equipas multidisciplinares na definição de estratégias de dados.

Requisitos Obrigatórios

• Experiência mínima de 7 anos em Data Engineering ou Software Engineering;
• Forte experiência em Python em ambientes produtivos de elevada performance;
• Experiência sólida em Spark e PySpark;
• Conhecimentos avançados de sistemas distribuídos e arquiteturas modernas de dados;
• Experiência com Apache Kafka ou outras plataformas de streaming;
• Experiência em modelação de dados;
• Experiência em ambientes Cloud, preferencialmente Google Cloud Platform (BigQuery, Dataflow, Pub/Sub e Dataproc);
• Fluência em Inglês.

Requisitos Valorizados

• Experiência comprovada em migração de plataformas Cloudera (CDH/HDP) para Snowflake ou Databricks;
• Experiência em migração de workloads Hive e Impala;
• Experiência em migração de dados HDFS;
• Refatoração de ETLs legacy e modernização de plataformas de dados;
• Experiência na construção de plataformas de dados de raiz (greenfield);
• Conhecimentos em Snowpipe, Snowpipe Streaming, Tasks e Streams;
• Conhecimentos em Auto Loader, Delta Sharing e Unity Catalog;
• Experiência com Redis, Neo4j e bases de dados NoSQL;
• Conhecimentos de Airflow, dbt ou Talend;
• Experiência em práticas DevOps, Git e CI/CD;
• Conhecimentos em Machine Learning e workflows analíticos.

Competências Comportamentais

• Elevado sentido de responsabilidade e autonomia;
• Capacidade de liderança técnica;
• Forte capacidade analítica e de resolução de problemas complexos;
• Proatividade e orientação para resultados;
• Boa capacidade de comunicação e colaboração;
• Facilidade em trabalhar em ambientes exigentes e de elevada complexidade;
• Subsídio de alimentação pago em cartão (Edenred);
• Parcerias com escola de línguas, ginásios, farmácias e restauração;
• Plano de progressão de carreira e formação contínua;
• Prémios por objetivos e referência de novos colaboradores/projetos;
• Dias de férias adicionais;
• Flexibilidade de horário;
• Escritório no centro de Lisboa com excelentes acessos.