Engenheiro de Dados Especialista

Deal; São Paulo; Hybrid; BRL 180,000 - 300,000; Full time

Job summary

A Deal Group procura um(a) engenheiro(a) de dados para desenhar e evoluir arquiteturas de dados, assegurando escalabilidade, governança e qualidade em plataformas de IA e dados.

Você atuará na concepção de pipelines, integração entre Lakehouse e Data Mesh, e otimização de consultas com Spark, SQL e Python. Suite de Cloud AWS e práticas de DataOps serão centrais, com liderança técnica e mentoria de times.

Qualifications

• Engenheiro(a) de dados com sólida experiência em ambientes de grande escala.
• Conhecimento avançado de modelagem de dados analíticos (Data Lake, Data Warehouse, Lakehouse, Data Mesh).
• Proficiência em Spark e processamento distribuído; SQL avançado e Python/pySpark.

Responsibilities

• Desenhar e evoluir arquiteturas de dados com padrões, governança e FinOps.
• Viabilizar iniciativas de dados, interagindo com áreas de negócio para traduzir requisitos em soluções técnicas.
• Criar pipelines de ingestão e tratamento de dados com DataOps e monitoramento.

Skills

Data architecture

Data modeling

DataOps

FinOps

Mentoria técnica

Tools

Spark

SQL

Python

pySpark

AWS

Glue

EMR

Lake Formation

Redshift

S3

Step Functions

dbt

Airflow

Kafka

Kinesis

Job description

Sobre a gente :)

A Deal Group é um ecossistema de tecnologia orientado a entregas end-to-end, que integra soluções especializadas em desenvolvimento digital (Deal Tech), marketing de experiência (Alot), cloud e Devops (O2B), inteligência de dados e IA (Sysvision) e soluções financeiras (baasic).

Através de um modelo colaborativo e versátil, o grupo combina essas competências para resolver desafios complexos, oferecendo desde serviços pontuais até transformações digitais completas e escaláveis, garantindo que a expertise técnica de cada unidade de negócio culmine em uma execução única e estratégica para o negócio dos nossos clientes.

Responsabilidades:

• Desenhar e evoluir arquiteturas de dados: Definir padrões, boas práticas e estratégias que garantam eficiência e escalabilidade, incluindo FinOps, governança e integração entre plataforma de IA (ML/GenAI).
• Viabilizar iniciativas de dados: Atuar desde a concepção dos projetos, interagindo com áreas de negócio para entender necessidades e traduzir requisitos funcionais em soluções técnicas robustas.
• Criar soluções para ingestão e tratamento de dados: Desenvolver pipelines resilientes e escaláveis, aplicando conceitos de DataOps para garantir qualidade, automação e monitoramento contínuo.

Requisitos:

• Experiência sólida em engenharia de dados em ambientes de grande escala.
• Proficiência em arquitetura e modelagem de dados analíticos (Data Lake, Data Warehouse, Lakehouse, Data Mesh).
• Domínio de tecnologias de Big Data e processamento distribuído (Spark).
• Conhecimento avançado em SQL e otimização de consultas complexas.
• Programação avançada em Python e pySpark
• Experiência com serviços de dados em nuvem AWS (Glue, EMR, Lake Formation, Redshift, S3, Step Functions, etc) e práticas de DataOps e FinOps.
• Experiência com pipelines ETL/ELT (dbt, Glue) e orquestração (Airflow, Step Functions).
• Familiaridade com microsserviços, APIs, containers e mensageria (Kafka, Kinesis).
• Conhecimento em governança, segurança e compliance em ambientes críticos.
• Boas práticas de engenharia de software (versionamento, CI/CD, testes).
• Capacidade de traduzir conceitos de negócio em métricas quantitativas (KPIs/OKRs).
• Experiência em mentoria técnica e liderança de times.

Diferenciais:

• Atuação prévia em ambientes de IA (preparação de dados para ML/GenAI).

Seja um Dealmaker e aproveite:

• Trilha de carreira;
• Convênio Farmácia;
• Totalpass;
• Assistência Médica
• Incentivo a certificação e qualificação;
• Cultura Deal.