Engenheiro(a) de Dados Sênior

Grupo Easy; Belgique; Remote; EUR 31,000 - 52,000; Part time

Job summary

Grupo Easy busca um engenheiro de dados para atuar remotamente, projetando, desenvolvendo e mantendo pipelines de dados na Google Cloud Platform. O foco está em integrar dados de Oracle, SQL Server e AWS, assegurando governança, qualidade e escalabilidade.

O profissional estruturará dados para apoiar equipes de ciência e analytics, com entrega organizada de pipelines, modelos analíticos e documentação de artefatos de dados.

Qualifications

• Engenheiro de dados com atuação em GCP para construir pipelines de dados.
• Conhecimento de orquestração de fluxos na nuvem e governança de dados.

Responsibilities

• Engenharia de dados na GCP: projetar, desenvolver, orquestrar e otimizar pipelines (batch e streaming).
• Integração Multicloud/Híbrida: conectar dados entre Oracle/OCI, SQL Server on-prem e AWS S3.
• Garantir qualidade, governança e monitoramento de dados; otimizar custos e escalabilidade.
• Preparar dados para equipes de Ciência e Análise de Dados.

Skills

ETL/ELT pipelines

GCP data engineering

BigQuery data modeling

Streaming & batch processing

Multicloud integration

Data governance

Data orchestration

Dataplex/Data Catalog

Oracle/SQL Server integration

Tools

BigQuery

Dataflow

Dataproc

Pub/Sub

Cloud Composer

Dataplex

Data Catalog

Job description

Local de atuação: 100% remoto Contratação: PJ ou Cooperado Tempo de Projeto: 12 meses

Principais responsabilidades:

• Engenharia de Dados na GCP: Projetar, desenvolver, orquestrar e otimizar pipelines de dados (batch e streaming) utilizando as principais ferramentas do ecossistema Google Cloud (BigQuery, Dataflow, Dataproc e Pub/Sub).
• Integração Multicloud e Híbrida: Conectar e integrar dados de ambientes diversos, incluindo Oracle (OCI), SQL Server (on-premises) e AWS (S3).
• Qualidade e Eficiência: Garantir a qualidade, governança e monitoramento dos dados, otimizando custos e escalabilidade.
• Colaboração Estratégica: Estruturar e preparar dados para apoiar os times de Ciência e Análise de Dados.

Requisitos técnicos

• Pipelines de Dados (Dataflow): Desenvolvimento de fluxos de ETL/ELT para extração de dados do Oracle e SQL Server, com transformação e carga automatizada no BigQuery.
• Arquitetura de Dados (BigQuery): Estruturação e organização de modelos analíticos divididos em quatro camadas de maturidade: Raw, Bronze, Silver e Gold.
• Orquestração de Fluxos (Cloud Composer): Implementação e agendamento dos pipelines com execução ordenada, monitoramento ativo e tratamento automatizado de falhas.
• Governança e Documentação: Catálogo completo de tabelas, metadados e ativos de dados utilizando as ferramentas Dataplex e/ou Data Catalog.

Entregas esperadas.

• Desenvolvimento de pipelines no Dataflow para extração de dados de Oracle e SQL Server, transformação e carga no BigQuery.
• Estruturação de modelos analíticos no BigQuery, organizados em camadas Raw, Bronze, Silver e Gold.
• Implementação de orquestrações no Cloud Composer, com execução ordenada, monitoramento e tratamento de falhas.
• Documentação de tabelas, metadados e ativos de dados utilizando Dataplex e/ou Data Catalog.

Diferenciais Experiência ou conhecimento em sistemas de informação hospitalar e de saúde, especialmente:

PEP / EMR / EHR; RIS (Radiology Information System); LIS (Laboratory Information System); sistemas de agendamento e regulação.