Data Engineer

Affinity; Portugal; Hybrid; EUR 60,000 - 90,000; Full time

Benefits offered by this job

Lifetime Experience

Plano de carreira

Ambiente acolhedor

Affinity Communities

Benefícios

Job summary

A Affinity procura um Data Engineer experiente para liderar a criação e operação de pipelines de dados em produção, integrando fontes diversas com arquiteturas Data Lake/Lakehouse/Warehouse. A posição envolve observabilidade, IaC, CI/CD e Data Contracts, trabalhando com equipas técnicas e de negócio para entregar soluções robustas.

O candidato ideal tem mais de 6 anos de experiência, domínio de SQL e Python, e experiência com Azure/AWS/GCP e plataformas de orquestração como Airflow, Dagster ou

Qualifications

• Licenciatura em Engenharia Informática e disponibilidade para residir em Portugal.
• Experiência superior a 6 anos como Data Engineer ou funções equivalentes.
• Prova de implementação de pipelines de dados em produção com SQL e Python.
• Domínio de plataformas Cloud (Azure/AWS/GCP) e ferramentas de orquestração.
• Conhecimentos de Data Lake, Lakehouse e Data Warehouse e CI/CD.
• Inglês C1 ou superior, comunicação eficiente com equipas técnicas.

Responsibilities

• Desenvolver e operar pipelines de dados escaláveis a partir de várias fontes.
• Projetar arquiteturas de Data Lake/Lakehouse/Data Warehouse com foco em custo e performance.
• Garantir observabilidade, monitorização e fiabilidade dos pipelines.
• Aplicar IaC, CI/CD e revisões de código para boas práticas de engenharia.
• Definir Data Contracts e gerir evolução de esquemas e qualidade dos dados.
• Colaborar com stakeholders para entregar soluções de dados de elevada qualidade.

Skills

SQL

Python

Cloud Platforms

Airflow

CI/CD

IaC

Data Contracts

Education

Engenharia Informática

Tools

Azure Data Factory

Dagster

Airflow

Job description

A nossa missão é ser uma parte significativa da carreira das nossas pessoas. À medida que crescemos, cresce também a determinação em oferecer a melhor experiência aos nossos colaboradores e clientes e é exatamente isso que nos move. Somos uma empresa portuguesa de consultoria tecnológica com escritórios em Lisboa, Porto e Óbidos e representações no Brasil e Tunísia. Contamos com mais de 14 anos de expertise no mercado, e hoje somos um universo de cerca de 500 pessoas a trabalhar em contexto presencial, remoto ou híbrido em projetos em mais de 20 países.

Acreditamos que grandes pessoas fazem empresas de sucesso e por isso mesmo defendemos a valorização, reconhecimento e crescimento dos nossos profissionais.

Não queremos ser mais uma linha do teu CV, queremos que conosco vivasuma Lifetime Experience. Apostamos em formações e certificações que confirmam a tua real progressão, na promoção de um saudável work-life balance e na oferta de benefícios com impacto na tua vida pessoal e carreira.

Principais Responsabilidades:

• Desenvolver e operar pipelines de dados escaláveis para ingestão de informação proveniente de bases de dados, APIs, eventos e sistemas externos;
• Projetar e otimizar arquiteturas de armazenamento em ambientes de Data Lake, Lakehouse e Data Warehouse, garantindo performance, eficiência de custos e escalabilidade;
• Garantir a observabilidade, monitorização e fiabilidade dos pipelines de dados através de mecanismos de orquestração, alertas e testes automatizados;
• Implementar boas práticas de engenharia, incluindo Infrastructure as Code, CI/CD, versionamento de código e code reviews;
• Definir e gerir Data Contracts, garantindo o controlo da evolução de esquemas, qualidade dos dados, acessos, retenção e rastreabilidade;
• Colaborar com equipas de negócio e equipas técnicas para assegurar a entrega de soluções de dados de elevada qualidade;
• Produzir documentação clara e detalhada que garanta a manutenção e evolução das soluções implementadas;
• Utilizar ferramentas de Inteligência Artificial para potenciar a produtividade e acelerar o desenvolvimento, mantendo elevados padrões de qualidade e revisão técnica.
• Licenciatura em Engenharia Informática ou área semelhante;
• Experiência profissional superior a 6 anos como Data Engineer ou em funções similares;
• Experiência comprovada na implementação e operação de pipelines de dados em ambiente de produção;
• Domínio avançado de SQL e Python;
• Experiência sólida com pelo menos uma plataforma Cloud: Azure, AWS ou GCP;
• Experiência com ferramentas de orquestração como Airflow, Dagster, Azure Data Factory ou equivalentes;
• Conhecimentos de modelação e arquitetura de dados em ambientes de Data Lake, Lakehouse e Data Warehouse;
• Experiência na implementação de mecanismos de monitorização, observabilidade e recuperação de pipelines;
• Capacidade de trabalhar diretamente com stakeholders técnicos e de negócio;
• Mentalidade orientada para qualidade, performance, escalabilidade e otimização de custos;
• Experiência na aplicação de boas práticas de engenharia, incluindo CI/CD, versionamento de código e Infrastructure as Code;
• Nível de inglês C1 ou superior, oral e escrito (obrigatório);
• Residência em Portugal (obrigatório), sendo que candidaturas de profissionais residentes fora de Portugal não serão consideradas para esta oportunidade.

Affinidade – Criares relações de proximidade e empatia com colegas, clientes e candidatos (e não apenas com tecnologias, linguagens e plataformas). Espírito de equipa e boa disposição;

Ambição – Quereres fazer mais e melhor. Vontade de exceder expectativas e evoluir pessoal e profissionalmente;

Ação – Energia para fazer acontecer. Mostrares proatividade e capacidade de iniciativa;

Aprendizagem – Vontade de evoluir individual e coletivamente e tornares-te um expert no mercado tecnológico.

Assertividade – Comunicares e agires com clareza, confiança e determinação. Tomares decisões focadas no melhor resultado para todos.

A tua LifetimeExperience

• Participar em projetos nacionais e internacionais numa empresa baseada em relacionamentos pessoais, na simplicidade e na eficiência, com uma ação disruptiva no mercado tecnológico;
• Aceder a um plano de carreira e formação personalizado e diretamente proporcional ao teu desempenho e interesse;
• Fazer parte de um ambiente acolhedor, de confiança, respeito e informalidade;
• Integrar as nossas Affinity Communities (de desporto, tecnologia, hobbies, etc.) e participar ativamente em projetos de responsabilidade social e ambiental;
• Tirar partido de um conjunto de benefícios, parcerias, descontos eventos e dinâmicas internas.

Para além da tua satisfação profissional queremos proporcionar-te oportunidades de lazer e convívio memoráveis e dignos de uma experiência Affinity.