Engenheiro de Dados PL

Stefanini Group; Osasco; On-site; BRL 120,000 - 180,000; Full time

Benefits offered by this job

Vale-refeição

Assistência médica

Academia Stefanini

Mentoring

Clube de vantagens

Assistência odontológica

Clube de vantagens e descontos

Clube de viagens

Convênio para pets

Job summary

A Stefanini Group está recrutando para atuação na área de Engenharia de Dados em Osasco, SP. O profissional vai desenvolver e manter pipelines de dados, trabalhar com grandes volumes e ambientes distribuídos, utilizando Python, SQL e Spark/PySpark. A vaga prevê atuação presencial 2 a 3 vezes ao mês.

Jornada das 08h às 17h, com 1h de intervalo, em regime full-time. Benefícios incluem vale-refeição, assistência médica e outros planos da empresa.

Qualifications

• Desenvolver pipelines de ingestão, transformação e processamento de dados (ETL/ELT).
• Trabalhar com grandes volumes de dados em ambientes distribuídos.
• Desenvolver rotinas com Python e SQL.
• Construir e manter processos distribuídos com Spark/PySpark.
• Apoiar integrações entre fontes, sistemas e plataformas de dados.
• Analisar, tratar e corrigir problemas de qualidade/integração de dados.
• Implementar monitoramento, logs, alertas e tratamento de falhas.
• Apoiar deploy, versionamento e manutenção das soluções.
• Identificar e resolver problemas de performance em pipelines.
• Elaborar e manter documentação técnica.
• Participar de discussões técnicas e evoluções das soluções.
• Trabalhar com Engenheiros de Dados Sênior, Especialistas, Arquitetos e áreas de negócio.
• Atuar em ambiente ágil, participando do planejamento e acompanhamento das entregas.

Responsibilities

• Descrever atividades, importância da operação/projeto e jornada.
• Conduzir atividades técnicas com foco em entrega de dados confiáveis.

Skills

Python

SQL

Spark

ETL/ELT

Pipelines de dados

Ambientes distribuídos

Qualidade dos dados

Monitoramento

Deploy / versionamento

Performance de pipelines

Documentação técnica

Trabalho em equipe

Tools

Azure

Git

Job description

Job description

No Grupo Stefanini, acreditamos no poder da colaboração. Co-criamos soluções inovadoras em parceria com nossos clientes, combinando tecnologia de ponta, inteligência artificial e a criatividade humana. Estamos na vanguarda da resolução de problemas de negócios, proporcionando impacto real em escala global.

Ao se juntar à Stefanini, você se torna parte de uma jornada global de transformação. Estamos empenhados em criar impacto positivo não apenas nos negócios, mas também na vida de nossos colaboradores. Se você procura uma oportunidade de crescimento profissional em uma empresa que valoriza inovação, respeito, autonomia e parceria, você encontra aqui!

Junte-se a nós e seja parte da mudança!

Local: Osasco/SP — atuação presencial de 2 a 3 vezes ao mês nas instalações do cliente
Jornada: 08h às 17h, com 1h de intervalo

Main responsibilities

O que esperamos que você realize: Descreva atividades, importância da operação/projeto e jornada.

Requirements and skills

O que precisamos que você tenha de conhecimento:

• Desenvolver, manter e evoluir pipelines de ingestão, transformação e processamento de dados (ETL/ELT);
• Trabalhar com grandes volumes de dados em ambientes distribuídos;
• Desenvolver rotinas e soluções utilizando Python e SQL;
• Construir e manter processos de processamento distribuído utilizando Spark/PySpark;
• Apoiar integrações entre diferentes fontes, sistemas e plataformas de dados;
• Realizar análise, tratamento e correção de problemas relacionados à qualidade e integridade dos dados;
• Implementar mecanismos de monitoramento, logs, alertas e tratamento de falhas;
• Apoiar processos de deploy, versionamento e manutenção das soluções;
• Participar da identificação e resolução de problemas de performance em pipelines e processos de dados;
• Elaborar e manter documentação técnica das soluções desenvolvidas;
• Participar de discussões técnicas e contribuir para a evolução das soluções;
• Trabalhar em conjunto com Engenheiros de Dados Sênior, Especialistas, Arquitetos e áreas de negócio;
• Atuar em ambiente ágil, participando do planejamento e acompanhamento das entregas.

Diferenciais:

• Experiência profissional em Engenharia de Dados ou funções correlatas;
• Conhecimento sólido em Python;
• SQL avançado;
• Experiência com Spark/PySpark;
• Experiência no desenvolvimento de processos ETL/ELT;
• Experiência com bancos de dados relacionais e/ou NoSQL;
• Conhecimento de Git e práticas de versionamento de código;
• Conhecimento dos conceitos e arquiteturas de Data Lake e Data Warehouse;
• Conhecimento de ambientes Cloud, preferencialmente Azure;
• Conhecimentos de modelagem de dados;
• Conhecimento de metodologias e práticas ágeis.

Additional information

Vale-alimentação ou vale-refeição;

Desconto em cursos, universidades e instituições de idiomas;

Academia Stefanini — plataforma com cursos on-line, gratuitos, atualizados e com certificado;

Mentoring;

Clube de vantagens para consultas e exames;

Assistência médica;

Assistência odontológica;

Clube de vantagens e descontos nos melhores estabelecimentos;

Clube de viagens;

Convênio para pets.