12447477 - ENGENHEIRO DE DADOS PL

Stefanini; United States; On-site; USD 120,000 - 180,000; Full time

Job summary

A Grupo Stefanini busca um profissional para integrar o time de dados, combinando tecnologia de ponta, IA e criatividade humana para solucionar desafios de negócios.

Você irá projetar pipelines, gerenciar Data Warehouse, Data Lake e Lakehouse com arquitetura medalhão, desenvolver rotinas em Python e Spark, e orquestrar fluxos com Airflow (MWAA) usando AWS (Redshift, S3, Glue, MWAA).

Qualifications

• Formação superior completa.
• Domínio Python e SQL (SQL Server).
• Experiência com Apache Spark e Apache Airflow (MWAA).
• Conhecimento de produtos AWS (Redshift, S3, Glue, MWAA).
• Sólidos conhecimentos em modelagem de dados e arquitetura medalhão.
• Experiência em ETL/ELT e em Data Warehouse / Data Lake / Lakehouse.
• Governança e observabilidade de dados.

Responsibilities

• Projetar, desenvolver e manter pipelines de dados ETL/ELT eficientes e escaláveis.
• Gerenciar Data Warehouse, Data Lake e Lakehouse com arquitetura medalhão.
• Desenvolver rotinas de processamento com Python e Apache Spark.
• Orquestrar fluxos de dados com Apache Airflow (MWAA).
• Utilizar AWS (Redshift, S3, Glue, MWAA) para infraestrutura e processamento.
• Garantir qualidade, governança e observabilidade dos dados.
• Colaborar com times multidisciplinares na co-criação de soluções analíticas.

Skills

Python

SQL

Apache Spark

Apache Airflow MWAA

AWS

Modelagem de dados

ETL/ELT

Governança de dados

Education

Superior completo

Tools

Spark

Airflow MWAA

AWS Redshift

AWS S3

AWS Glue

SQL Server

Job description

No Grupo Stefanini, acreditamos no poder da colaboração e da inovação para impulsionar a transformação digital em escala global. Estamos em busca de um profissional para integrar nosso time de dados, combinando tecnologia de ponta, inteligência artificial e criatividade humana para solucionar desafios complexos de negócios. Se você valoriza autonomia, respeito, parceria e deseja acelerar seu crescimento profissional em uma empresa global, essa oportunidade é para você!

Responsabilidades

• Projetar, desenvolver e manter pipelines de dados (ETL/ELT) eficientes e escaláveis.
• Implementar e gerenciar ambientes de Data Warehouse, Data Lake e Lakehouse utilizando a arquitetura medalhão.
• Desenvolver rotinas de processamento de dados utilizando Python e Apache Spark.
• Criar e gerenciar orquestrações de fluxos de dados com Apache Airflow (MWAA).
• Utilizar soluções da nuvem AWS, como Redshift, S3, Glue e MWAA, para suportar a infraestrutura e processamento de dados.
• Garantir a qualidade, governança e observabilidade dos dados em todas as etapas do ciclo de vida das informações.
• Atuar em parceria com times multidisciplinares na co-criação de soluções analíticas inovadoras.

Requisitos obrigatórios

• Ensino Superior Completo.
• Domínio de linguagem Python e linguagem SQL para consultas e manipulação em SQL Server.
• Experiência prática com Apache Spark e Apache Airflow (MWAA).
• Conhecimento e experiência com produtos AWS (Redshift, S3, Glue e MWAA).
• Sólidos conhecimentos em modelagem de dados e aplicação da arquitetura medalhão.
• Experiência no desenvolvimento de pipelines de ETL/ELT e estruturas de Data Warehouse, Data Lake e Lakehouse.
• Vivência com conceitos e práticas de governança e observabilidade de dados.

Diferenciais

• Certificações em ambiente de nuvem AWS ou engenharia de dados.
• Experiência prévia em projetos estruturados sob metodologias ágeis.
• Entusiasmo por novas tecnologias, inteligência artificial e constante aprendizado na área de dados.

O que esperamos

Buscamos um profissional com mentalidade analítica, proativo e orientado a soluções, que goste de trabalhar de forma colaborativa e dinâmica. Esperamos que você seja movido por desafios, busque evoluir continuamente e queira causar um impacto positivo e real na jornada dos nossos clientes e da nossa equipe.