Senior Data Engineer

Invillia; Brasil; Teletrabalho; BRL 80.000 - 120.000; Tempo integral

Resumo da oferta

Uma empresa de tecnologia busca um Engenheiro de Dados Sênior para construir e evoluir sua plataforma de Feature Store. O candidato ideal deve ter forte experiência em desenvolvimentos de pipelines, colaboração com times de Data Science e MLOps, além de um sólido conhecimento em Spark. Se você é apaixonado por tecnologia e busca inovação, a oportunidade é para você.

Qualificações

• Experiência sólida com Spark (PySpark) e processamento distribuído.
• Conhecimento em CI/CD com uso de Git e Jenkins.
• Vivência com frameworks de Data Quality ou validações customizadas.
• Conhecimento em engenharia de software (boas práticas, testes, modularização).

Responsabilidades

• Desenvolver pipelines escaláveis e de alta performance.
• Projetar soluções com foco em modularização, versionamento e reuso.
• Criar e manter frameworks internos para automação de processos.
• Implementar mecanismos de validação e monitoramento de dados.
• Apoiar a evolução contínua da plataforma de dados.

Conhecimentos

Spark (PySpark)

Processamento distribuído

CI/CD

Git

Jenkins

Data Quality

Engenharia de software

Formação académica

Formação em engenharia de dados ou ciência de dados

Descrição da oferta de emprego

Overview

A Invillia não apenas transforma a forma como empresas inovam; também conecta pessoas apaixonadas por tecnologia ao redor do mundo. Procuramos uma pessoa engenheira de dados sênior para atuar na construção e evolução da plataforma de Feature Store, solução interna que acelera o desenvolvimento de modelos de machine learning e inteligência artificial. O foco será no desenvolvimento de pipelines performáticos, frameworks reutilizáveis e mecanismos de qualidade de dados, com forte colaboração com os times de Data Science e MLOps.

Responsabilidades

• Desenvolver pipelines escaláveis e de alta performance.
• Projetar soluções com foco em modularização, versionamento e reuso.
• Criar e manter frameworks internos para automação de processos.
• Implementar mecanismos de validação e monitoramento de dados.
• Apoiar a evolução contínua da plataforma de dados.
• Experiência sólida com Spark (PySpark) e processamento distribuído.
• Conhecimento em CI/CD com uso de Git e Jenkins.
• Vivência com frameworks de Data Quality ou validações customizadas.
• Conhecimento em engenharia de software (boas práticas, testes, modularização).

Diferenciais

• Experiência com automação de pipelines de dados e projetos de MLOps/Feature Store.
• Experiência com projetos de IA generativa, especialmente com RAG.

Requisitos e Qualificações

• Formação relacionada a engenharia de dados, ciência de dados ou áreas afins.
• Conhecimento sólido de Spark (PySpark) e processamento distribuído.
• Experiência em CI/CD, Git e Jenkins.
• Conhecimento de Data Quality ou validações de dados.
• Princípios de engenharia de software, testes e modularização.

Sobre a Invillia

A experiência de trabalhar na Invillia é única e global. Contamos com uma cultura de conexão entre talentos, inovação e oportunidades distribuídas. Temos uma metodologia voltada a pessoas e dados e investimos no desenvolvimento dos nossos colaboradores.