12397309 - Engenheiro de Dados Sênior

Stefanini; United States; On-site; USD 110,000 - 160,000; Full time

Job summary

Stefanini procura engenheiro(a) de dados para projetar, desenvolver e otimizar pipelines em ambientes de dados escaláveis. O profissional atuará com Databricks, Lakehouse e Data Warehouse, assegurando performance, governança e qualidade de dados.

Você colaborará com Arquitetura, Segurança e Infraestrutura, apoiando estimativas técnicas e evolução das soluções em um ambiente corporativo global.

Qualifications

• Experiência sólida em Engenharia de Dados com grandes volumes.
• Domínio de Python, SQL e Spark/PySpark.
• Experiência comprovada com Databricks.
• Conhecimento de ADLS/ADF e arquiteturas Data Lake/Lakehouse/Warehouse.
• Conhecimento de bancos SQL/NoSQL e modelagem de dados.
• Experiência com Git, CI/CD e integrações
• Foco em segurança, governança e qualidade de dados.

Responsibilities

• Projetar, desenvolver e manter pipelines de dados complexos.
• Construir soluções escaláveis para ingestão e processamento de grandes volumes.
• Trabalhar com Databricks, Data Lake/Lakehouse e Data Warehouse.
• Definir particionamento, processamento distribuído e tuning de performance.
• Investigar problemas críticos de dados e implementar observabilidade.
• Aplicar práticas de governança, privacidade e segurança de dados.
• Contribuir em revisões de código e orientar a equipe.

Skills

Python

SQL

Apache Spark / PySpark

Databricks

ETL/ELT

Data Lake / Lakehouse / Data Warehouse

Azure Data Lake Storage (ADLS)

Azure Data Factory (ADF)

NoSQL / SQL databases

Git / CI/CD / APIs

Cloud (Azure)

Observability & data quality

Tools

Databricks

Azure Data Factory

Azure Data Lake Storage

Delta Lake

Git

CI/CD pipelines

Job description

Na Stefanini, acreditamos no poder da colaboração, da tecnologia e da criatividade humana para transformar negócios em escala global. Buscamos uma pessoa para atuar na criação, otimização e evolução de soluções de dados escaláveis e de alta complexidade, contribuindo diretamente para o avanço tecnológico de projetos estratégicos. Se você valoriza inovação, autonomia e aprendizado contínuo em um ambiente transformador, essa oportunidade é para você.

Responsabilidades

• Projetar, desenvolver, manter e otimizar pipelines de dados de média e alta complexidade.
• Construir soluções escaláveis para ingestão, transformação e processamento de grandes volumes de dados.
• Criar, evoluir e otimizar soluções na plataforma Databricks, atuando com arquiteturas de Data Lake, Lakehouse e Data Warehouse.
• Definir estratégias de particionamento, processamento distribuído e otimização de performance.
• Investigar e solucionar problemas críticos relacionados a processamento, integração e qualidade de dados.
• Implementar mecanismos de observabilidade, monitoramento, alertas e controles de qualidade.
• Aplicar boas práticas de segurança, governança, privacidade e proteção de dados.
• Participar de decisões técnicas, realizar code reviews e apoiar no desenvolvimento profissional do time.
• Interagir com equipes de Arquitetura, Segurança, Infraestrutura, Desenvolvimento e Negócios.
• Apoiar estimativas técnicas, planejamento de escopo e evolução contínua das soluções.

Requisitos obrigatórios

• Sólida experiência em Engenharia de Dados e na construção de soluções para grandes volumes de dados.
• Conhecimento avançado em Python, SQL e Apache Spark / PySpark.
• Experiência comprovada com a plataforma Databricks.
• Domínio de processos ETL/ELT e arquiteturas de Data Lake, Lakehouse e Data Warehouse.
• Experiência com Azure Data Lake Storage (ADLS) e Azure Data Factory (ou ferramentas equivalentes de orquestração).
• Conhecimento em bancos de dados relacionais e não relacionais (SQL e NoSQL), além de modelagem de dados.
• Experiência com Git, práticas de CI/CD, APIs e integração entre sistemas.
• Conhecimento em otimização/tuning de pipelines, segurança, governança e proteção de dados.
• Vivência em ambientes Cloud e operação de soluções críticas.

Diferenciais

• Experiência com Delta Lake, Databricks Workflows e Unity Catalog.
• Conhecimento em tecnologias de streaming, como Kafka e Azure Event Hubs.
• Experiência com Terraform e Infraestrutura como Código (IaC).
• Certificações Microsoft Azure ou Databricks.
• Vivência anterior no setor financeiro ou bancário.
• Conhecimento em frameworks e ferramentas de observabilidade aplicados a dados.

O que esperamos

Procuramos um profissional com perfil analítico, colaborativo e orientando à resolução de problemas. Esperamos que você tenha paixão por tecnologia, goste de compartilhar conhecimentos com a equipe e busque constantemente aprimorar a maturidade técnica e operacional das nossas soluções.