Data Engineer (M/F) Venda do Pinheiro

Human Profiler - IT Outsourcing & Recruitment; Lisboa; On-site; EUR 55,000 - 85,000; Full time

Job summary

Human Profiler - IT Outsourcing & Recruitment procura um Data Engineer para desenvolver pipelines e produtos de dados escaláveis que suportem IA, analytics e automação inteligente.

O candidato ideal tem experiência sólida em Python, SQL e modelagem de dados, bem como conhecimento de Snowflake, Databricks, Spark e AWS Glue. Envolve-se em Data Quality, Orchestration e Data Governance para produzir soluções confiáveis.

Qualifications

• Experiência sólida em Python e SQL.
• Experiência em Data Modelling e desenvolvimento de pipelines ETL/ELT.
• Conhecimento de Snowflake ou plataformas de dados semelhantes.
• Conhecimentos de Data Quality, Orchestration, Observability e Data Governance.
• Experiência com integrações de dados em ambientes empresariais.
• Familiaridade com ferramentas de IA como GitHub Copilot, Cursor ou OpenCode.
• Experiência com Databricks, Spark, AWS Glue ou Apache Iceberg.
• Conhecimentos de bases de dados vetoriais e pipelines de RAG.
• Preparação de dados para aplicações de Generative AI.

Responsibilities

• Desenvolver e manter pipelines ETL/ELT.
• Criar produtos de dados reutilizáveis e preparados para produção.
• Implementar Data Quality, Data Lineage e monitorização.
• Integrar diferentes fontes de dados, APIs e plataformas empresariais.
• Trabalhar com Azure, Snowflake e AWS Glue quando aplicável.
• Desenvolver modelos de dados para IA e analytics.
• Garantir segurança, fiabilidade e governação dos dados.

Skills

Python

SQL

Data modelling

ETL/ELT pipelines

Snowflake

Data Quality

Orchestration

Observability

Data Governance

Data integrations

GitHub Copilot

Cursor

OpenCode

Databricks

Spark

AWS Glue

Apache Iceberg

Vector databases

RAG pipelines

Generative AI data prep

Tools

Snowflake

Databricks

Spark

AWS Glue

Apache Iceberg

Job description

Área: Data Engineering & AI

Tens experiência em Data Engineering e gostavas de trabalhar num projeto onde os dados são a base para soluções de Inteligência Artificial?

Estamos à procura de um(a) Data Engineer para desenvolver pipelines e produtos de dados robustos, escaláveis e preparados para suportar aplicações de IA, analytics e automação inteligente.

• Desenvolver e manter pipelines ETL/ELT.
• Criar produtos de dados reutilizáveis e preparados para ambientes de produção.
• Implementar mecanismos de Data Quality, Data Lineage e monitorização.
• Integrar diferentes fontes de dados, APIs e plataformas empresariais.
• Trabalhar com Azure, Snowflake e serviços AWS, quando aplicável.
• Desenvolver modelos de dados para aplicações de IA e analytics.
• Garantir segurança, fiabilidade e governação dos dados.

O que procuramos:

• Experiência sólida em Python e SQL.
• Experiência em Data Modelling e desenvolvimento de pipelines ETL/ELT.
• Experiência com Snowflake ou plataformas de dados semelhantes.
• Conhecimentos de Data Quality, Orchestration, Observability e Data Governance.
• Experiência com integrações de dados e ambientes empresariais.
• Familiaridade com ferramentas de desenvolvimento assistido por IA, como GitHub Copilot, Cursor ou OpenCode.
• Experiência com Databricks, Spark, AWS Glue ou Apache Iceberg.
• Conhecimentos de bases de dados vetoriais e pipelines de RAG.
• Experiência na preparação de dados para aplicações de Generative AI.
• Conhecimentos de dados operacionais ou logísticos.