Pessoa Engenheira De Dados (Python/Especialista)

buscojobs Brasil; Paraná; Presencial; BRL 120.000 - 160.000; Tempo integral

Resumo da oferta

Uma empresa líder em tecnologia no Brasil está em busca de um Engenheiro de Dados. O profissional será responsável por projetar arquiteturas para grandes volumes de dados, otimizar pipelines e assegurar a governança de dados. É exigido domínio em SQL, experiência com GCP e certificação Google Cloud Certified. O candidato ideal deve ter formação sólida em engenharia de dados e experiência prática em projetos complexos.

Qualificações

• Expertise em SQL e otimização de consultas.
• Experiência em bancos de dados e foco em desempenho.
• Capacidade de documentar processos e recursos.

Responsabilidades

• Compreensão e tradução de requisitos de negócio em soluções de dados.
• Projetar e implementar arquiteturas escaláveis para dados.
• Desenvolver e otimizar pipelines de dados.

Conhecimentos

Domínio da linguagem SQL

Experiência com bancos de dados relacionais (SQL) e não relacionais (NoSQL)

Experiência com Python e Jupyter Notebooks

Conhecimento em sistemas de controle de versão, especialmente Git

Familiaridade com consumo e criação de APIs

Conhecimento em Data Warehousing e tecnologias de Big Data

Capacidade de criar e manter documentações claras

Experiência com organização e entregas de projetos

Experiência com provedores de nuvem, especialmente GCP

Conhecimento em Terraform

Certificação Google Cloud Certified – Professional Data Engineer

Descrição da oferta de emprego

MISSÃO DO CARGO :

Oportunidade para atuar como Engenheiro de Dados na maior empresa de Tecnologia do Brasil!

O QUE VOCÊ VAI FAZER :

• Compreensão e tradução de requisitos : Identificar e priorizar requisitos de negócio, funcionais e técnicos, traduzindo-os em soluções nas plataformas de dados, utilizando as melhores práticas de engenharia de dados.
• Arquitetura e modelagem de dados : Projetar e implementar arquiteturas escaláveis para armazenar, processar e disponibilizar grandes volumes de dados com alta performance.
• Integração com Data Science : Trabalhar em parceria com o time de Data Science para projetar e implementar soluções baseadas em dados e Machine Learning.
• Pipelines e processamento de dados : Desenvolver e otimizar pipelines de ingestão, processamento e transformação de dados, garantindo qualidade, eficiência e governança.
• Orquestração de Pipelines de Dados : Implementar e gerenciar workflows de dados utilizando ferramentas como Apache Airflow, garantindo a automação e escalabilidade dos processos de ingestão e processamento.
• Melhores Práticas de DataOps : Aplicar conceitos de CI / CD para pipelines de dados, testes automatizados em ETLs, versionamento de dados e monitoramento contínuo da qualidade e confiabilidade dos dados.
• Segurança e Governança de Dados : Garantir boas práticas de proteção de dados, controle de acessos, auditoria e conformidade com regulamentos como LGPD e GDPR.
• Boas práticas e escalabilidade : Atuar como referência técnica na implementação de soluções em nuvem, promovendo as melhores práticas de engenharia de dados, segurança, confiabilidade e escalabilidade.

O QUE ESPERAMOS DE VOCÊ :

• Expertise em SQL : Domínio da linguagem SQL, incluindo melhores práticas, otimização de consultas e modelagem de dados eficiente.
• Bancos de dados : Experiência com bancos de dados relacionais (SQL) e não relacionais (NoSQL), com foco em desempenho e escalabilidade.
• Programação e notebooks interativos : Experiência com Python e Jupyter Notebooks para análise, processamento e manipulação de dados.
• Versionamento e colaboração : Conhecimento em sistemas de controle de versão, especialmente Git.
• Integração e APIs : Familiaridade com consumo e criação de APIs para manipulação e integração de dados.
• Processamento e análise de dados em larga escala : Conhecimento em Data Warehousing e tecnologias de Big Data para lidar com grandes volumes de dados.
• Documentação e suporte : Capacidade de criar e manter documentações claras e acessíveis para facilitar o uso dos recursos por outros usuários.
• Gerenciamento de projetos : Experiência com organização e entregas de projetos de alta complexidade em engenharia de dados.
• Cloud Computing : Experiência com provedores de nuvem, com foco em Google Cloud Platform (GCP) e serviços como Cloud Functions, BigQuery, Pub / Sub, Dataflow e Cloud Storage.
• Experiência com ferramentas de Data Science, incluindo bibliotecas e frameworks para modelagem e análise de dados.
• Familiaridade com sistemas ERP, especialmente TOTVS, em contextos de integração de dados corporativos.
• Infraestrutura como Código (IaC) e Automação : Conhecimento em Terraform para provisionamento e gerenciamento de infraestrutura na nuvem.
• Certificação Google Cloud Certified – Professional Data Engineer, demonstrando expertise em soluções de dados na nuvem.