Pessoa Engenheira de Dados - Pleno (Modelo Híbrido)

DTI Digital; Belo Horizonte; Sur place; BRL 167 000 - 290 000; Plein temps

Avantages offerts par ce poste

Previdência Privada

Plano Odontológico

Vale Refeição/Alimentação

Plano de Saúde sem desconto para você/

Auxílio home office 120,00

TotalPass para descontos em academias

Parcerias com SESC

Reembolso de certificação

Desconto em cursos de inglês

Descontos em universidades/podeções

Ambiente descontraído e com feedbacks

Résumé du poste

dti digital procura profissional de dados para projetar e manter pipelines de produção, fornecendo IA e fluxos de trabalho para apps internos e clientes. O foco está em escalabilidade, confiabilidade e observabilidade da plataforma de dados.

Você trabalhará com bancos relacionais, vetoriais e grafos, em uma stack completa (Python/Scala/Java, Spark, Airflow, Terraform, Docker) e estará inserido em um time que valoriza melhoria contínua e entrega confiável.

Qualifications

• Experiência em engenharia de software em produção com escalabilidade e confiabilidade.
• Design e construção de pipelines de dados distribuídos com Apache Airflow.
• Modelagem de dados em relacionais, vetoriais e grafos.
• Proficiência em pelo menos uma linguagem de propósito geral (Python, Scala ou Java).
• Experiência com plataformas em nuvem (GCP/AWS), containers (Docker) e infraestrutura como código (Terraform).
• Boas práticas de versionamento, testes e CI/CD.
• Conforto com ambiguidade e resolução de problemas.

Responsabilités

• Processamento de dados — construção de pipelines ETL/ELT com Spark ingerindo grandes volumes.
• Infraestrutura de dados poliglota — bancos de dados relacionais/vetoriais/grafos para busca e RAG.
• Transformação e modelagem de dados com dbt para modelos bem documentados e versionados.
• Confiabilidade da plataforma de dados — monitoramento, validação de qualidade e rastreabilidade de pipelines.

Connaissances

Engenharia de software

Airflow

Python/Scala/Java

Cloud (GCP/AWS)

Docker

Terraform

CI/CD

Observabilidade

Outils

Apache Airflow

PostgreSQL

MySQL

Pinecone

Weaviate

pgvector

Neo4j

Neptune

dbt

Docker

Terraform

Description du poste

• Tenha vontade de aprender coisas novas e crescer junto com a dti digital;
• Seja uma pessoa proativa, goste de trabalhar em equipe e se comunique bem;
• Tenha facilidade em estabelecer relações interpessoais;
• E que se identifique com a nossa cultura!
  
• Construir pipelines de dados e plataformas de dados de produção que forneçam modelos, dados e fluxos de trabalho de IA para aplicativos internos e voltados para o cliente, sendo responsável por eles sob tráfego real;
• Responsável pela qualidade não funcional — orçamentos de latência e throughput, escalabilidade, confiabilidade, observabilidade e custo — dos sistemas em seu domínio;
• Design e a operação de armazenamentos de dados multimodelos — bancos de dados relacionais (PostgreSQL, MySQL), bancos de dados vetoriais (Pinecone, Weaviate, pgvector) e bancos de dados de grafos (Neo4j, Neptune) — garantindo a ferramenta adequada para cada padrão de acesso;
• Trabalhar em toda a pilha de tecnologia quando necessário — serviços, acesso a dados, infraestrutura como código, CI/CD — e depurar quando houver problemas em produção;
• Orientar padrões de qualidade para engenheiros de dados de nível júnior.
  
• Experiência profissional em engenharia de software, no desenvolvimento e na operação de sistemas de produção, lidando com escalabilidade, confiabilidade, plantão e a transição de um protótipo funcional para um serviço confiável;
• Experiência comprovada e profunda no design e construção de pipelines de dados distribuídos com Apache Airflow, além de sólida modelagem de dados em bancos de dados relacionais, vetoriais e de grafos;
• Proficiência em pelo menos uma linguagem de programação de propósito geral (por exemplo, Python, Scala ou Java) e capacidade de trabalhar efetivamente com outras linguagens;
• Experiência prática com plataformas em nuvem (GCP/AWS), contêineres (Docker), CI/CD e infraestrutura como código (Terraform);
• Sólidos hábitos de engenharia de software — controle de versão, testes, revisão de código e CI/CD;
• Conforto com ambiguidade. Muitos dos nossos problemas não têm uma solução ideal conhecida;
  
• Processamento de dados — construção de pipelines ETL/ELT robustos com Apache Spark que ingerem, transformam e fornecem conjuntos de dados multimodais em escala de terabytes em toda a pilha de inteligência de marketing;
• Infraestrutura de dados poliglota — projeto e operação de bancos de dados relacionais para cargas de trabalho transacionais, bancos de dados vetoriais para busca semântica e sistemas RAG, e bancos de dados de grafos para modelagem de relacionamento com o público e atribuição;
• Transformação e modelagem de dados — orquestração de fluxos de trabalho de engenharia analítica com dbt para criar modelos de dados bem documentados, testados e com controle de versão que alimentam sistemas de IA e BI subsequentes;
• Confiabilidade da plataforma de dados — construção das bases da plataforma (orquestração, monitoramento, verificações de qualidade de dados e rastreamento de linhagem) que garantem a confiabilidade de nossos pipelines e bancos de dados sob carga de produção.
  
• Previdência Privada (Para cada real depositado pelo colaborador, limitado a 6% do salário, a dti complementa com o mesmo valor);
• Vale Refeição e/ou Vale alimentação (R$890/mês);
• Plano de Saúde sem desconto para o colaborador e dependentes;
• Auxílio home office de 120,00;
• TotalPass para desconto em academias, estúdios, aulas on-line e muito mais;
• Parceria com SESC para desconto em acomodações e atividades de lazer;
• Reembolso de certificação;
• Desconto em cursos de inglês com a Open English, Cultura Inglesa, CNA e EHeadset;
• Parceria com USP/ESALQ: descontos em cursos de pós-graduação e especialização;
• Parceria com a PUC-RS: desconto em cursos de graduação, pós-graduação, especialização, idiomas e certificações;
• Parceria com FIAP: desconto em cursos de graduação e pós-graduação;
• Parceria com FIA: desconto em cursos de graduação e pós-graduação;
• Parceria com a ESPM: desconto em cursos de pós-graduação e cursos de curta duração;
• Plano de saúde para seus pets;
• Descontos em Farmácias - Drogasil e Droga Raia;
• Ambiente descontraído, flexível e com feedbacks constantes;
• Rotina com aprendizado constante, com Tech Shots, Mentorias, Rodas de Conversa e Knowledge Transfers.
  

PROCURAMOS UMA PESSOA QUE:

• Tenha vontade de aprender coisas novas e crescer junto com a dti digital;
• Seja uma pessoa proativa, goste de trabalhar em equipe e se comunique bem;
• Tenha facilidade em estabelecer relações interpessoais;
• E que se identifique com a nossa cultura!
  

REQUISITOS OBRIGATÓRIOS:

• Construir pipelines de dados e plataformas de dados de produção que forneçam modelos, dados e fluxos de trabalho de IA para aplicativos internos e voltados para o cliente, sendo responsável por eles sob tráfego real;
• Responsável pela qualidade não funcional — orçamentos de latência e throughput, escalabilidade, confiabilidade, observabilidade e custo — dos sistemas em seu domínio;
• Design e a operação de armazenamentos de dados multimodelos — bancos de dados relacionais (PostgreSQL, MySQL), bancos de dados vetoriais (Pinecone, Weaviate, pgvector) e bancos de dados de grafos (Neo4j, Neptune) — garantindo a ferramenta adequada para cada padrão de acesso;
• Trabalhar em toda a pilha de tecnologia quando necessário — serviços, acesso a dados, infraestrutura como código, CI/CD — e depurar quando houver problemas em produção;
• Orientar padrões de qualidade para engenheiros de dados de nível júnior.
  

ESPERAMOS QUE VOCÊ TENHA:

• Experiência profissional em engenharia de software, no desenvolvimento e na operação de sistemas de produção, lidando com escalabilidade, confiabilidade, plantão e a transição de um protótipo funcional para um serviço confiável;
• Experiência comprovada e profunda no design e construção de pipelines de dados distribuídos com Apache Airflow, além de sólida modelagem de dados em bancos de dados relacionais, vetoriais e de grafos;
• Proficiência em pelo menos uma linguagem de programação de propósito geral (por exemplo, Python, Scala ou Java) e capacidade de trabalhar efetivamente com outras linguagens;
• Experiência prática com plataformas em nuvem (GCP/AWS), contêineres (Docker), CI/CD e infraestrutura como código (Terraform);
• Sólidos hábitos de engenharia de software — controle de versão, testes, revisão de código e CI/CD;
• Conforto com ambiguidade. Muitos dos nossos problemas não têm uma solução ideal conhecida;
  

SERÁ SUA RESPONSÁIVADE:

• Processamento de dados — construção de pipelines ETL/ELT robustos com Apache Spark que ingerem, transformam e fornecem conjuntos de dados multimodais em escala de terabytes em toda a pilha de inteligência de marketing;
• Infraestrutura de dados poliglota — projeto e operação de bancos de dados relacionais para cargas de trabalho transacionais, bancos de dados vetoriais para busca semântica e sistemas RAG, e bancos de dados de grafos para modelagem de relacionamento com o público e atribuição;
• Transformação e modelagem de dados — orquestração de fluxos de trabalho de engenharia analítica com dbt para criar modelos de dados bem documentados, testados e com controle de versão que alimentam sistemas de IA e BI subsequentes;
• Confiabilidade da plataforma de dados — construção das bases da plataforma (orquestração, monitoramento, verificações de qualidade de dados e rastreamento de linhagem) que garantem a confiabilidade de nossos pipelines e bancos de dados sob carga de produção.
  

BENEFÍCIOS DE TRABALHAR COM A DTI:

• Previdência Privada (Para cada real depositado pelo colaborador, limitado a 6% do salário, a dti complementa com o mesmo valor);
• Plano Odontológico;
• Vale Refeição e/ou Vale alimentação (R$890/mês);
• Plano de Saúde sem desconto para o colaborador e dependentes;
• Auxílio home office de 120,00;
• TotalPass para desconto em academias, estúdios, aulas on-line e muito mais;
• Parceria com SESC para desconto em acomodações e atividades de lazer;
• Reembolso de certificação;
• Desconto em cursos de inglês com a Open English, Cultura Inglesa, CNA e EHeadset;
• Parceria com USP/ESALQ: descontos em cursos de pós-graduação e especialização;
• Parceria com a PUC-RS: desconto em cursos de graduação, pós-graduação, especialização, idiomas e certificações;
• Parceria com FIAP: desconto em cursos de graduação e pós-graduação;
• Parceria com FIA: desconto em cursos de graduação e pós-graduação;
• Parceria com a ESPM: desconto em cursos de pós-graduação e cursos de curta duração;
• Plano de saúde para seus pets;
• Descontos em Farmácias - Drogasil e Droga Raia;
• Ambiente descontraído, flexível e com feedbacks constantes;
• Rotina com aprendizado constante, com Tech Shots, Mentorias, Rodas de Conversa e Knowledge Transfers.