GCP Data Engineer - Shape Scalable Pipelines (Hybrid)

Shore; Lisboa; Híbrido; EUR 45.000 - 65.000; Jornada completa

Descripción de la vacante

A Shore procura um GCP Data Engineer para se juntar à equipa de dados e liderar a concepção, construção e manutenção de pipelines de dados escaláveis na Google Cloud Platform. O/a candidato/a ideal tem forte experiência em GCP, BigQuery e pipelines ETL/ELT, com Python e SQL como bases.

Deverá trabalhar de forma colaborativa com data scientists, analysts e stakeholders, garantindo qualidade, governança e segurança dos dados, num ambiente internacional com modelo híbrido em Lisboa ou Porto.

Formación

• Experiência comprovada como Data Engineer ou função similar.
• Sólidos conhecimentos em Google Cloud Platform (GCP).
• Conhecimento sólido de BigQuery e soluções de data warehouse na nuvem.
• Experiência em pipelines de dados e processos ETL/ELT.
• SQL forte e Python como linguagem de programação.
• Experiência com Dataflow, Apache Beam, Cloud Composer/Airflow ou Dataproc.
• Domínio de modelação de dados, data warehousing e processamento distribuído.
• Gosto por CI/CD e práticas de Git.
• Bom entendimento de segurança na nuvem, IAM e governança de dados.
• Análise, resolução de problemas e trabalho em equipa internacional.

Responsabilidades

• Projetar, desenvolver e manter pipelines de dados escaláveis no GCP.
• Otimizar ingestão, transformação e fluxos de processamento.
• Trabalhar com BigQuery, Cloud Storage, Dataflow, Pub/Sub, Cloud Composer e Dataproc.
• Desenhar e manter ETL/ELT para dados estruturados e não estruturados.
• Garantir qualidade, consistência, segurança e governança dos dados.
• Otimizar pipelines e consultas para desempenho e custo.
• Colaborar com Data Scientists, Analysts e engenheiros.
• Implementar monitorização, logging e alertas para fiabilidade.
• Contribuir para arquitetura de dados e decisões técnicas.
• Aplicar melhores práticas de CI/CD, versionamento e automação de infraestruturas.

Conocimientos

GCP

BigQuery

Python

SQL

Data pipelines

Airflow/Composer

CI/CD

Data governance

IAM & security

Herramientas

Dataflow

Dataproc

Cloud Composer

Descripción del empleo

A Shore procura um GCP Data Engineer para se juntar à equipa de dados e liderar a concepção, construção e manutenção de pipelines de dados escaláveis na Google Cloud Platform. O/a candidato/a ideal tem forte experiência em GCP, BigQuery e pipelines ETL/ELT, com Python e SQL como bases.

Deverá trabalhar de forma colaborativa com data scientists, analysts e stakeholders, garantindo qualidade, governança e segurança dos dados, num ambiente internacional com modelo híbrido em Lisboa ou Porto.