Engenheiro(a) de Dados Sênior

Hvar Consulting; Rio de Janeiro; Hybrid; BRL 180,000 - 260,000; Full time

Job summary

A Hvar Consulting busca Engenheiro(a) de Dados Sênior com experiência sólida em Google Cloud Platform (GCP) para atuar em projetos estratégicos com alto volume de dados.

Você desenvolverá pipelines, modelagem e processamento de dados em ambientes Cloud, com foco em BigQuery, Airflow e DevOps/DataOps. O contrato é híbrido, com atuação no Rio de Janeiro/RJ.

Qualifications

• Mínimo de 3 anos de experiência com GCP.
• BigQuery, Pub/Sub, Cloud Storage e Cloud Composer/Apache Airflow.
• SQL avançado e Python para manipulação, transformação e orquestração de dados.
• Experiência com Apache Airflow ou ferramentas similares (Prefect | Dagster).
• Modelagem de dados analíticos, Data Lake e Data Warehouse.
• Práticas de DevOps/DataOps: Git, Docker, CI/CD, monitoramento e observabilidade.

Responsibilities

• Desenvolver e evoluir pipelines de dados em GCP.
• Otimizar consultas BigQuery, particionamento e clustering.
• Gerenciar Airflow/Cloud Composer para orkestrar fluxos de dados.
• Transformar dados com SQL e Python.
• Modelar dados para Data Lake/Warehouse e assegurar qualidade.
• Aplicar práticas de DevOps/DataOps, com monitoramento.

Skills

GCP

SQL

Python

Data modelling

Data Lake/Warehouse

DevOps/DataOps

Airflow

Docker

CI/CD

Dagster/Prefect

Tools

BigQuery

Pub/Sub

Cloud Storage

Cloud Composer/Apache Airflow

Git

Docker

CI/CD

Terraform

Dagster/Prefect

Job description

Estamos em busca de um(a) Engenheiro(a) de Dados Sênior com experiência sólida em GoogleCloud Platform (GCP) para atuar em projetos estratégicos com alto volume de dados. Oprofissional será responsável por desenvolver e evoluir soluções de dados, contribuindo para aconstrução de pipelines, modelagem e processamento de dados em ambientes Cloud.

Responsabilidades:

• Desenvolver e evoluir pipelines de dados em ambientes GCP;
• Atuar com BigQuery, incluindo otimização de consultas, particionamento e clustering;
• Desenvolver e gerenciar processos de orquestração utilizando Apache Airflow/CloudComposer;
• Construir soluções de transformação e processamento de dados utilizando SQL e Python;
• Atuar com modelagem de dados analíticos, Data Lake e Data Warehouse;
• Aplicar práticas de DevOps/DataOps, incluindo Git, Docker, CI/CD, monitoramento e observabilidade;
• Contribuir para a evolução e otimização das soluções de dados em projetos de alto volume.

Requisitos:

• Mínimo de 3 anos de experiência com GCP;
• Experiência sólida com BigQuery, Pub/Sub, Cloud Storage e Cloud Composer/ApacheAirflow;
• Domínio de SQL avançado e Python para manipulação, transformação e orquestraçãode dados;
• Experiência com Apache Airflow ou ferramentas similares, como Prefect e Dagster;
• Conhecimento em modelagem de dados analíticos, Data Lake e Data Warehouse;
• Experiência com práticas de DevOps/DataOps, Git, Docker, CI/CD, monitoramento eobservabilidade.

Diferenciais:

• Experiência com Infraestrutura como Código (IaC);
• Conhecimento em Terraform, CloudFormation ou Deployment Manager

Informações adicionais

• Localização: Rio de Janeiro – RJ;
• Modelo de trabalho híbrido – duas a três vezes por semana na região de Botafogo.