11089 - Engenheiro(a) de Dados | Google Cloud (GCP) - Sênior

Runtalent; Brasil; Remote; BRL 180,000 - 300,000; Full time

Job summary

Runtalent procura Engenheiro de Dados Sênior com experiência em Google Cloud para desenhar e manter pipelines de ingestão, transformação e orquestração na nuvem. Você trabalhará com Dataflow, Pub/Sub, BigQuery, Dataform/dbt e Airflow/Composer para garantir qualidade, confiabilidade e escalabilidade dos fluxos, incluindo integração com fontes externas e bancos relacionais.

Projeto de 12 meses, atuação remota no Brasil, colaborando com equipes de ciência de dados e analistas para entregar dados

Qualifications

• Ingestão de dados com Dataflow para pipelines ETL/ELT escaláveis.
• Ingestão em tempo real com Pub/Sub e batch com Storage Transfer
• Integração com Oracle/SQL Server/MySQL via JDBC
• BigQuery: modelagem, particionamento e clustering
• Data Lake em Cloud Storage com camadas (raw, bronze, silver, gold)
• Dataform/dbt para orquestração SQL no BigQuery
• Processamento batch e streaming (Beam, SQL streaming)
• Orquestração com Cloud Composer/Airflow/Workflows; integração com Cloud Functions/Cloud Run
• Python e Git com CI/CD
• Conhecimento de Dataplex/Data Catalog
• Desejáveis: Pacotes NoSQL (Dataproc/Bigtable/Firestore) e RI/PEP

Responsibilities

• Projetar pipelines de ingestão, transformação e orquestração de dados na Google Cloud.
• Garantir qualidade, confiabilidade e escalabilidade dos fluxos batch e streaming.
• Otimizar custos de armazenamento e processamento (BigQuery/Dataflow/Dataproc).
• Colaborar com cientistas de dados e analistas, entregando dados prontos para consumo.

Skills

Ingestão de dados

ETL/ELT

CI/CD

Colaboração com ciência de dados

Otimização de custos

Tools

Dataflow (Apache Beam)

Pub/Sub

Storage Transfer

BigQuery

Dataform

dbt

JDBC

Cloud Composer

Airflow/Workflows

Cloud Functions

Cloud Run

Python

Git CI/CD

Dataplex

Data Catalog

Dataproc

Bigtable

Firestore

Job description

11089 - Engenheiro(a) de Dados | Google Cloud (GCP) - Sênior

Oportunidade: Engenheiro(a) de Dados | Google Cloud (GCP) - Sênior

Requisitos

• Ingestão de dados com Dataflow (Apache Beam) para pipelines de ETL/ELT escaláveis, incluindo extração de origens externas como Oracle na OCI e SQL Server on-premise.
• Ingestão em tempo real com Pub/Sub e ingestão batch com Storage Transfer (a partir do próprio GCS ou de origens externas, como buckets S3 da AWS).
• Integração com bancos externos (Oracle, SQL Server, MySQL) via JDBC, Dataflow templates ou extração customizada.
• BigQuery: modelagem, otimização de queries, particionamento e clustering.
• Cloud Storage como Data Lake em camadas (raw, bronze, silver, gold).
• Dataform ou dbt para orquestração SQL no BigQuery, com boas práticas de modelagem dimensional.
• Processamento batch e streaming (Beam, SQL streaming).
• Orquestração com Cloud Composer (Airflow) ou Workflows, e integração com Cloud Functions / Cloud Run para tarefas serverless.
• SQL avançado (BigQuery SQL), Python (Dataflow, automações, ETL) e Git com CI/CD. Desejáveis
• Dataproc, Bigtable e Firestore (casos NoSQL).
• Documentação e catalogação de dados com Dataplex / Data Catalog.
• Conhecimento de sistemas da área da saúde:
• Prontuário Eletrônico do Paciente (PEP / EMR / EHR): histórico clínico, consultas, exames, prescrições e evolução do paciente.
• Sistemas de apoio diagnóstico: RIS (Radiology Information System, gestão de exames de imagem) e LIS (Laboratory Information System, gestão de exames laboratoriais).
• Sistemas de agendamento e regulação: controle de consultas, internações e centro cirúrgico

Atividades

• Projetar e implementar pipelines de ingestão, transformação e orquestração de dados na Google Cloud.
• Garantir qualidade, confiabilidade e escalabilidade dos fluxos de dados batch e streaming.
• Otimizar custos de armazenamento e processamento (BigQuery, Dataflow, Dataproc, Pub/Sub).
• Colaborar com cientistas de dados e analistas, entregando dados prontos para consumo.

Periodo: 12 meses

Modelo de atuação: remoto