Engenheiro(a) de Dados Sr.

Aon; São Paulo; Híbrido; BRL 20.000 - 80.000; Tempo integral

Resumo da oferta

A Aon busca um Engenheiro(a) de Dados Sr. com experiência em ambientes cloud, arquitetura Lakehouse e automação de processos de dados. Este profissional atuará em um ambiente híbrido, gerando soluções escaláveis e inovadoras para gestão de dados. Se você está pronto para o próximo desafio em sua carreira, junte-se à nossa equipe e faça a diferença!

Serviços

Trabalho híbrido com flexibilidade

Pacote de benefícios abrangente

Dias de bem-estar global

Qualificações

• Experiência com Databricks e construção de arquiteturas Lakehouse.
• Vivência em ambientes cloud como AWS e Azure.
• Capacidade de otimizar jobs Spark e gestionar pipelines de dados.

Responsabilidades

• Gerenciar incidentes e backlog de produtos.
• Projetar e implementar pipelines de dados em larga escala.
• Automatizar testes e deploys com Devops.

Conhecimentos

Governança de Dados

DataOps

Inglês Avançado

Fluência em espanhol

Desenvolvimento com PySpark

Formação académica

Formação acadêmica em Tecnologia ou áreas correlatas

Ferramentas

Databricks

AWS

Delta Lake

PySpark

SQL avançado

Descrição da oferta de emprego

Descrição da postagem

Engenharo(a) de Dados Sr.

Você tem vivência em em ambientes clouds(AWS, Azure), experiência na construção de plataformas de dados
utilizando o Databricks sobre AWS, Delta Lake e serviços de integração?Domínio em arquitetura Lakehouse, pipelines escaláveis com PySpark, e práticas de governança e DataOps? Se você respondeu “SIM!”, este pode ser o próximo passo em sua carreira como Engenharo(a) de Dados!

Esta é uma função híbrida com flexibilidade para trabalhar virtualmente e em nosso escritório de São Paulo.

Aon está no negócio de melhores decisões

Na Aon, moldamos decisões para melhor proteger e enriquecer a vida das pessoas no mundo todo.

Como organização, estamos unidos pela confiança como uma equipe inclusiva e diversificada, e somos apaixonados por ajudar nossos colegas e clientes a terem sucesso.

Como será o seu dia

Atuar Atendimento de incidentes, gestão de backlog de produtos e gestão de incidentes de produtos (sistemas em low code)

Gestão de pipeline de dados

Atendimento externo a fornecedores de dados

Execução de processos internos da Aon

Projetar pipelines para ingestão de dados em larga escala usando PySpark ou ferramentas de mercado.

Implementar arquitetura de dados baseada em Lakehouse com S3 e Delta Lake.

Automatizar testes e deploys com integração ao Devops.

Gerenciar catálogo de dados, permissões e versionamento via Unity Catalog.

Monitorar e otimizar jobs Spark em Databricks com foco em performance e custo

Como esta oportunidade é diferente

Nesta posição você deverá agregar a Aon com todo seu conhecimento para atuar dentro do pilar de Engenharia de Dados, auxiliando no desenvolvimento da nossa arquitetura de dados (Data Stack) e administrar o andamento dos pipelines de dados existentes.

Habilidades e experiência que levarão ao sucesso

Formação acadêmica completa em Tecnologia e áreas correlatadas.

Inglês Avançado/Fluente.

Vivência em consultorias e/ou no ramo de seguros, e domínio em espanhol será considerado como diferencial

Domínio em Databricks & Spark

• Desenvolvimento de pipelines com PySpark e Spark SQL no ambiente Databricks.

• Projetos com Delta Lake sobre Amazon S3.

• Otimização de jobs Spark (tuning de performance, particionamento, uso de Z-Order, caching).

• Experiência com Databricks Workflows para orquestração.

AWS (Amazon Web Services)

• Amazon S3 como data lake.

• IAM e segurança em nível de bucket e cluster.

Arquitetura e Plataforma de Dados

• Arquitetura Lakehouse baseada na medallion architecture (bronze, silver, gold).

• Integração de múltiplas fontes: bancos relacionais, APIs, dados em lote e streaming.

• Modelagem e versionamento com Delta Lake.

DataOps & Governança

• CI/CD com Databricks Repos, Azure DEVOPS.

• Observabilidade com logging customizado, CloudWatch e alertas.

• Controle de qualidade de dados (Deequ, Great Expectations ou soluções customizadas).

• Governança com Unity Catalog, RBAC e uso de tags.

Linguagens e Ferramentas

• Python e SQL avançado.

• Experiência com JSON, Parquet, Avro.

• Conhecimento em ferramentas de orquestração como Airflow (opcional) ou Databricks Workflows.

• Uso de notebooks colaborativos no ambiente Databricks.

Desejável

• Streaming com Structured Streaming ou Kafka + Databricks.

• Uso de Snowflake como camada de consumo.

• Experiência com Infra as Code (Terraform para Databricks e AWS).

• Conhecimento de Data Mesh ou Data Contracts.

Como apoiamos nossos colegas

Aliado ao nosso abrangente pacote de benefícios, incentivamos uma força de trabalho diversificada. Além disso, nosso ambiente ágil e inclusivo permite que você gerencie seu bem-estar e o equilíbrio entre trabalho e vida pessoal, garantindo que você possa dar o melhor de si na Aon. Na AON, todos os colegas desfrutam de dois “Global Well-being day” - o “Dia do Bem-Estar Global” – por ano, incentivando-os a reservar um tempo para se concentrarem consigo mesmos. Oferecemos uma variedade de soluções de estilo de trabalho, mas também reconhecemos que a flexibilidade vai além do local de trabalho... e somos todos a favor disso. Chamamos isso de Trabalho Inteligente!

Nossa cultura de aprendizado contínuo inspira e prepara você para aprender, compartilhar e crescer, ajudando você a atingir seu potencial máximo. Como resultado, na Aon você está mais conectado, mais relevante e mais valorizado.

A Aon valoriza um local de trabalho inovador e diversificado, onde todos os colegas se sintam capacitados para serem autênticos. A Aon tem orgulho de ser um local de trabalho com oportunidades iguais.

A Aon oferece oportunidades iguais de emprego a todos os funcionários e candidatos a emprego, independentemente de raça, cor, religião, credo, sexo, orientação sexual, identidade de gênero, origem nacional, idade, deficiência, veterano, estado civil, status de parceiro doméstico ou outro status legalmente protegido.

Aceitamos inscrições de todos e oferecemos aos indivíduos com deficiência ferramentas de acessibilidade para participarem de processos seletivos, como candidatura, entrevista e para desempenharem funções de trabalho essenciais, uma vez contratados. Se você quiser saber mais sobre as nossas políticas de acessibilidade, envie um e-mail para [e-mail]

#LI-V1

2559824

Engenharo(a) de Dados Sr.

Você tem vivência em em ambientes clouds(AWS, Azure), experiência na construção de plataformas de dados
utilizando o Databricks sobre AWS, Delta Lake e serviços de integração?Domínio em arquitetura Lakehouse, pipelines escaláveis com PySpark, e práticas de governança e DataOps? Se você respondeu “SIM!”, este pode ser o próximo passo em sua carreira como Engenharo(a) de Dados!

Esta é uma função híbrida com flexibilidade para trabalhar virtualmente e em nosso escritório de São Paulo.

Aon está no negócio de melhores decisões

Na Aon, moldamos decisões para melhor proteger e enriquecer a vida das pessoas no mundo todo.

Como organização, estamos unidos pela confiança como uma equipe inclusiva e diversificada, e somos apaixonados por ajudar nossos colegas e clientes a terem sucesso.

Como será o seu dia

Atuar Atendimento de incidentes, gestão de backlog de produtos e gestão de incidentes de produtos (sistemas em low code)

Gestão de pipeline de dados

Atendimento externo a fornecedores de dados

Execução de processos internos da Aon

Projetar pipelines para ingestão de dados em larga escala usando PySpark ou ferramentas de mercado.

Implementar arquitetura de dados baseada em Lakehouse com S3 e Delta Lake.

Automatizar testes e deploys com integração ao Devops.

Gerenciar catálogo de dados, permissões e versionamento via Unity Catalog.

Monitorar e otimizar jobs Spark em Databricks com foco em performance e custo

Como esta oportunidade é diferente

Nesta posição você deverá agregar a Aon com todo seu conhecimento para atuar dentro do pilar de Engenharia de Dados, auxiliando no desenvolvimento da nossa arquitetura de dados (Data Stack) e administrar o andamento dos pipelines de dados existentes.

Habilidades e experiência que levarão ao sucesso

Formação acadêmica completa em Tecnologia e áreas correlatadas.

Inglês Avançado/Fluente.

Vivência em consultorias e/ou no ramo de seguros, e domínio em espanhol será considerado como diferencial

Domínio em Databricks & Spark

• Desenvolvimento de pipelines com PySpark e Spark SQL no ambiente Databricks.

• Projetos com Delta Lake sobre Amazon S3.

• Otimização de jobs Spark (tuning de performance, particionamento, uso de Z-Order, caching).

• Experiência com Databricks Workflows para orquestração.

AWS (Amazon Web Services)

• Amazon S3 como data lake.

• IAM e segurança em nível de bucket e cluster.

Arquitetura e Plataforma de Dados

• Arquitetura Lakehouse baseada na medallion architecture (bronze, silver, gold).

• Integração de múltiplas fontes: bancos relacionais, APIs, dados em lote e streaming.

• Modelagem e versionamento com Delta Lake.

DataOps & Governança

• CI/CD com Databricks Repos, Azure DEVOPS.

• Observabilidade com logging customizado, CloudWatch e alertas.

• Controle de qualidade de dados (Deequ, Great Expectations ou soluções customizadas).

• Governança com Unity Catalog, RBAC e uso de tags.

Linguagens e Ferramentas

• Python e SQL avançado.

• Experiência com JSON, Parquet, Avro.

• Conhecimento em ferramentas de orquestração como Airflow (opcional) ou Databricks Workflows.

• Uso de notebooks colaborativos no ambiente Databricks.

Desejável

• Streaming com Structured Streaming ou Kafka + Databricks.

• Uso de Snowflake como camada de consumo.

• Experiência com Infra as Code (Terraform para Databricks e AWS).

• Conhecimento de Data Mesh ou Data Contracts.

Como apoiamos nossos colegas

Aliado ao nosso abrangente pacote de benefícios, incentivamos uma força de trabalho diversificada. Além disso, nosso ambiente ágil e inclusivo permite que você gerencie seu bem-estar e o equilíbrio entre trabalho e vida pessoal, garantindo que você possa dar o melhor de si na Aon. Na AON, todos os colegas desfrutam de dois “Global Well-being day” - o “Dia do Bem-Estar Global” – por ano, incentivando-os a reservar um tempo para se concentrarem consigo mesmos. Oferecemos uma variedade de soluções de estilo de trabalho, mas também reconhecemos que a flexibilidade vai além do local de trabalho... e somos todos a favor disso. Chamamos isso de Trabalho Inteligente!

Nossa cultura de aprendizado contínuo inspira e prepara você para aprender, compartilhar e crescer, ajudando você a atingir seu potencial máximo. Como resultado, na Aon você está mais conectado, mais relevante e mais valorizado.

A Aon valoriza um local de trabalho inovador e diversificado, onde todos os colegas se sintam capacitados para serem autênticos. A Aon tem orgulho de ser um local de trabalho com oportunidades iguais.

A Aon oferece oportunidades iguais de emprego a todos os funcionários e candidatos a emprego, independentemente de raça, cor, religião, credo, sexo, orientação sexual, identidade de gênero, origem nacional, idade, deficiência, veterano, estado civil, status de parceiro doméstico ou outro status legalmente protegido.

Aceitamos inscrições de todos e oferecemos aos indivíduos com deficiência ferramentas de acessibilidade para participarem de processos seletivos, como candidatura, entrevista e para desempenharem funções de trabalho essenciais, uma vez contratados. Se você quiser saber mais sobre as nossas políticas de acessibilidade, envie um e-mail para [e-mail]

#LI-V1