Engenheiro de Dados

Maitha Tech; São Paulo; Vor Ort; BRL 167.400 - 279.000; Vollzeit

Benefits dieser Stelle

Treinamentos e workshops

Gestão de bem-estar

Programa de pontos e premiações

TotalPass com diversas modalidades de atividade física

Zusammenfassung

Uma empresa de tecnologia em dados procura um profissional para projetar e otimizar arquiteturas de dados em larga escala utilizando GCP. O candidato ideal deve ter proficiência em serviços do Google Cloud, experiência na construção de Data Lakes e conhecimento sólido em Python. Este papel é fundamental para garantir eficiência e qualidade em um ecossistema de dados dinâmico.

Qualifikationen

• Proficiência em serviços e ferramentas do GCP.
• Experiência sólida em construção de Data Lakes e Data Warehouses.
• Domínio em Python e Pandas, para manipulação de arquivos Parquet.
• Experiência avançada com consultas e performance no BigQuery.
• Conhecimento em governança de dados.

Aufgaben

• Projetar e implementar arquiteturas de Data Lakes e Data Warehouses.
• Realizar extração e migração de dados de bancos legados.
• Desenvolver e otimizar rotinas de tratamento de dados em Python.
• Manipular grandes volumes de dados no BigQuery.
• Apoiar iniciativas de BI para geração de insights estratégicos.

Kenntnisse

Serviços e ferramentas do GCP

Construção de Data Lakes e Data Warehouses

Python e Pandas

Consultas e performance no BigQuery

Governança de dados

Tools

Google Cloud Platform

BigQuery

DataFlow

Airflow

Jobbeschreibung

Você será responsável por projetar, implementar e otimizar arquiteturas de dados em larga escala utilizando Google Cloud Platform (GCP). Atuará na construção de Data Lakes e Data Warehouses robustos, extração de dados de múltiplas fontes legadas e desenvolvimento de soluções de alto desempenho que suportem análises estratégicas. Seu trabalho será fundamental para garantir qualidade, governança e eficiência em todo o ecossistema de dados.

Responsabilidades:

• ✔ Projetar e implementar arquiteturas de Data Lakes e Data Warehouses em GCP
• ✔ Realizar extração e migração de dados de bancos legados para o GCP
• ✔ Desenvolver e otimizar rotinas de tratamento de dados em Python e Pandas
• ✔ Manipular e otimizar grandes volumes de dados no BigQuery
• ✔ Implementar e dar suporte à arquitetura medalhão
• ✔ Contribuir na criação e manutenção de Data Warehouses e relatórios analíticos
• ✔ Apoiar iniciativas de BI, contribuindo para geração de insights estratégicos

Requisitos:

• ✔ Proficiência em serviços e ferramentas do GCP (Cloud Storage, DataFlow, Composer, Airflow, CloudSQL, Dataplex e BigQuery)
• ✔ Experiência sólida em construção de Data Lakes, Data Warehouses e arquitetura medalhão
• ✔ Domínio em Python e Pandas, especialmente para manipulação de arquivos Parquet
• ✔ Experiência avançada com consultas e performance no BigQuery
• ✔ Conhecimento em governança de dados, incluindo catalogação e glossário

Diferenciais:

• ➕ Vivência com pipelines escaláveis de dados
• ➕ Conhecimento em práticas de DataOps
• ➕ Experiência com ferramentas de orquestração adicionais ou arquiteturas distribuídas
• ➕ Certificações GCP focadas em dados (ex: Professional Data Engineer)

Modelo de trabalho:

A combinar (remoto, híbrido ou presencial, conforme necessidade da empresa)

O que você encontrará na Maitha:

• 🚀 Experiência de Desenvolvimento Individual de soft skills e acompanhamento em toda a jornada;
• 🚀 Gestão de bem-estar com acompanhamento de métricas e indicadores sobre a evolução de satisfação;
• 🚀 Treinamentos, workshops e meetups para evolução de soft e hard skills;
• 🚀 Rewards com programa de pontos e premiações;
• 🚀 TotalPass com várias opções de planos e mais de 250 modalidades, como musculação, cross training, yoga, dança e muito mais;