Pessoa Engenheira de Dados (Sr/Especialista)

TOTVS; Manaus; Presencial; BRL 80.000 - 120.000; Tempo integral

Resumo da oferta

A leading technology company in Brazil is seeking a Data Engineer to join their team. The role involves designing scalable data architectures, developing data pipelines, and collaborating with Data Science teams. Ideal candidates will have expertise in SQL, Python, and cloud technologies, particularly Google Cloud Platform. This position offers the opportunity to work on cutting-edge data solutions in a dynamic environment.

Qualificações

• Expertise in SQL and Python for data processing and analysis.
• Experience with cloud platforms, especially Google Cloud.
• Knowledge of DataOps and CI/CD practices.

Responsabilidades

• Design and implement scalable data architectures.
• Develop and optimize data pipelines for ingestion and processing.
• Collaborate with Data Science teams for data-driven solutions.

Conhecimentos

SQL

Python

Data Warehousing

DataOps

Git

Formação académica

Google Cloud Certified – Professional Data Engineer

Ferramentas

Apache Airflow

Terraform

Jupyter Notebooks

BigQuery

Cloud Functions

Descrição da oferta de emprego

Pessoa Engenheira de Dados (Sr/Especialista)

Detalhes do Emprego

Recife, Pernambuco, Brasil

MISSÃO DO CARGO:
Oportunidade para atuar como Engenheiro de Dados na maior empresa de Tecnologia do Brasil! Temos duas vagas abertas: 1 vaga de Sênior e 1 vaga de Especialista.

O QUE VOCÊ VAI FAZER:

1. Compreensão e tradução de requisitos: Identificar e priorizar requisitos de negócio, funcionais e técnicos, traduzindo-os em soluções nas plataformas de dados, utilizando as melhores práticas de engenharia de dados.
2. Arquitetura e modelagem de dados: Projetar e implementar arquiteturas escaláveis para armazenar, processar e disponibilizar grandes volumes de dados com alta performance.
3. Integração com Data Science: Trabalhar em parceria com o time de Data Science para projetar e implementar soluções baseadas em dados e Machine Learning.
4. Pipelines e processamento de dados: Desenvolver e otimizar pipelines de ingestão, processamento e transformação de dados, garantindo qualidade, eficiência e governança.
5. Orquestração de Pipelines de Dados: Implementar e gerenciar workflows de dados utilizando ferramentas como Apache Airflow, garantindo automação e escalabilidade.
6. Melhores Práticas de DataOps: Aplicar conceitos de CI/CD para pipelines de dados, testes automatizados em ETLs, versionamento de dados e monitoramento contínuo da qualidade e confiabilidade.
7. Segurança e Governança de Dados: Assegurar boas práticas de proteção de dados, controle de acessos, auditoria e conformidade com regulamentos como LGPD e GDPR.
8. Boas práticas e escalabilidade: Atuar como referência técnica na implementação de soluções em nuvem, promovendo as melhores práticas de engenharia de dados, segurança, confiabilidade e escalabilidade.

O QUE ESPERAMOS DE VOCÊ:

• Expertise em SQL: domínio da linguagem, incluindo otimização de consultas e modelagem eficiente de dados.
• Bancos de dados: experiência com bancos relacionais (SQL) e não relacionais (NoSQL), com foco em desempenho e escalabilidade.
• Programação e notebooks interativos: experiência com Python e Jupyter Notebooks para análise, processamento e manipulação de dados.
• Versionamento e colaboração: conhecimento em sistemas de controle de versão, especialmente Git.
• Integração e APIs: familiaridade com consumo e criação de APIs para manipulação e integração de dados.
• Processamento e análise de dados em larga escala: conhecimento em Data Warehousing e tecnologias de Big Data.
• Documentação e suporte: capacidade de criar e manter documentações claras e acessíveis.
• Gerenciamento de projetos: experiência na organização e entregas de projetos complexos em engenharia de dados.
• Cloud Computing: experiência com provedores de nuvem, especialmente Google Cloud Platform (GCP), incluindo Cloud Functions, BigQuery, Pub/Sub, Dataflow e Cloud Storage.
• Experiência com ferramentas de Data Science, bibliotecas e frameworks para modelagem e análise de dados.
• Familiaridade com sistemas ERP, especialmente TOTVS, em contextos de integração de dados corporativos.
• Infraestrutura como Código (IaC) e Automação: conhecimento em Terraform para provisionamento e gerenciamento de infraestrutura na nuvem.
• Certificação Google Cloud Certified – Professional Data Engineer, demonstrando expertise em soluções de dados na nuvem.