Página da Vaga | Engenheiro de Dados Sr

Stefanini Group; Brasil; Teletrabalho; BRL 20.000 - 80.000; Tempo integral

Resumo da oferta

Uma empresa de tecnologia está em busca de um Engenheiro de Dados Senior para desenvolver e implementar arquiteturas de dados modernas em AWS. Espera-se que o profissional tenha ampla experiência com Python, SQL e serviços AWS, além de conhecimentos em Databricks e PySpark. A vaga oferece benefícios e oportunidades de crescimento em uma empresa que valoriza a inovação e a cocriação.

Serviços

Vale Alimentação ou Vale Refeição

Desconto em cursos e universidades

Academia Stefanini - cursos gratuitos

Auxílio Creche

Assistência Médica

Assistência Odontológica

Clube de vantagens para consultas

Convênio para Pet

Qualificações

• Experiência em projetos de dados na nuvem AWS.
• Habilidade em construir pipelines de dados robustos.
• Conhecimento na implementação de data lakes e warehouses.

Responsabilidades

• Desenvolver soluções analíticas utilizando o ecossistema AWS.
• Implementar e gerenciar data lakes no Amazon S3.
• Otimizar a performance de queries em larga escala.

Conhecimentos

Experiência avançada em Python

Experiência avançada em SQL

Serviços AWS

Trino para queries distribuídas

Databricks e Delta Lake

PySpark

Modelagem de dados

Git

Metodologias ágeis

Formatação de dados modernos

Ferramentas

Apache Airflow

Kubernetes

Docker

Terraform

Descrição da oferta de emprego

Overview

Job type: Full-time employee Full-time employee

Na Stefanini, acreditamos no poder da colaboração. Co-criamos soluções inovadoras em parceria com nossos clientes, combinando tecnologia de ponta, inteligência artificial e a criatividade humana. Estamos na vanguarda da resolução de problemas de negócios, proporcionando impacto real em escala global.

Ao se juntar à Stefanini, você se torna parte de uma jornada global de transformação. Estamos empenhados em criar impacto positivo não apenas nos negócios, mas também na vida de nossos colaboradores. Se você procura uma oportunidade de crescimento profissional em uma empresa que valoriza inovação, respeito, autonomia e parceria, você encontra aqui!

Junte-se a nós e seja parte da mudança!

Responsabilidades

Estamos em busca de um Engenheiro de Dados Senior, com ampla experiência em soluções de dados na nuvem AWS, para desenvolvimento e implementação de arquiteturas de dados modernas e escaláveis. O profissional será responsável por construir pipelines de dados robustos, implementar data lakes e data warehouses, além de desenvolver soluções analíticas utilizando o ecossistema AWS, em conjunto com Databricks e Trino, para o processamento distribuído de grandes volumes de dados.

O que esperamos que você realize:

• Projetar e construir pipelines de dados eficientes utilizando AWS Athena, PySpark e Databricks.
• Implementar e gerenciar data lakes no Amazon S3, garantindo estruturas otimizadas.
• Desenvolver queries e análises complexas com Amazon Athena, Trino e Databricks.
• Implementar processos de ETL/ELT para a integração de múltiplas fontes de dados.
• Otimizar a performance de queries e o processamento de dados em larga escala.
• Participar de code reviews e oferecer mentoria técnica para a equipe.
• Colaborar com stakeholders de negócios para traduzir requisitos em soluções técnicas.
• Implementar rotinas de monitoramento e observabilidade dos pipelines de dados.
• Agendar a execução de rotinas de ETL utilizando o Apache Airflow.

Requisitos essenciais

• Experiência avançada em Python e SQL.
• Sólidos conhecimentos em serviços AWS, incluindo:
• Amazon S3 para armazenamento de dados.
• Experiência com Trino (anteriormente PrestoSQL) para queries distribuídas.
• Domínio do Databricks e Delta Lake para processamento de dados.
• Experiência com PySpark para processamento de dados em larga escala.
• Conhecimento em modelagem de dados e data warehousing.
• Experiência com particionamento e otimização de performance em data lakes.
• Domínio de versionamento Git e metodologias ágeis (Azure DevOps).
• Experiência com formatos de dados modernos (Parquet, Delta, Iceberg).

Diferenciais

• Certificações AWS (Data Analytics, Solutions Architect ou Data Engineer).
• Experiência com Apache Airflow para orquestração.
• Experiência com streaming de dados (Kinesis, Kafka).
• Conhecimento em dbt (Data Build Tool) para transformações.
• Experiência com Great Expectations para qualidade de dados.
• Familiaridade com ferramentas de CDC (Change Data Capture).
• Conhecimento em observabilidade e monitoramento (Elastic Search com Kibana).
• Experiência com APIs RESTful.
• Conhecimento em containerização (Docker, Kubernetes).
• Experiência com Terraform ou CloudFormation para Infrastructure as Code (IaC).

Benefícios

🍛 Vale Alimentação ou Vale Refeição;

👨🏼🎓 Desconto em cursos, universidades e instituições de idiomas;

📚 Academia Stefanini - plataforma com cursos online, gratuitos, atualizados e com certificado;

🏫 Auxílio Creche;

💉 Clube de vantagens para consultas e exames;

🏥 Assistência Médica;

🦷 Assistência Odontológica;

💰 Clube de vantagens e descontos nos melhores estabelecimentos;

🐶 Convênio para Pet;

e muito mais...

• Step 4: Bate papo com Gestão 4 Bate papo com Gestão

Na Stefanini, a inovação não é apenas uma meta; é uma jornada que trilhamos juntos, onde a colaboração se torna a essência da transformação. 🤝 Com 37 anos de história e uma presença global em mais de 40 países, contamos com uma equipe de 38 mil talentos apaixonados, prontos para transformar desafios em oportunidades por meio da tecnologia. 💡

Acreditamos que cada projeto é uma oportunidade e que, juntos, podemos moldar um futuro mais ágil, eficiente e conectado. Nossa missão vai além de oferecer soluções: buscamos cocriar com nossos clientes, integrando inteligência artificial e tecnologias emergentes para revolucionar o cotidiano das empresas. 🌍✨

Aqui, cada voz conta e cada ideia tem o poder de impactar. Valorizamos a humildade, o respeito, o comprometimento e a coragem, construindo uma cultura onde a inovação floresce. Aqui, liderar é dar o exemplo, e é por isso que inspiramos um ambiente dinâmico onde tecnologia e talento se complementam.

Se você sonha grande, tem coragem de desafiar o convencional e quer fazer parte de uma equipe que acredita no poder da cocriação, junte-se a nós! Vamos, juntos, acreditar e cocriar um futuro brilhante, onde cada passo representa uma nova conquista!🚀✨