Engenheiro(a) de Dados Azure + Databricks

Digiage; Campinas; Presencial; BRL 180 000 - 240 000; Tempo integral

Resumo da oferta

A Digiage está recrutando Engenheiro(a) de Dados com experiência em Azure e Databricks para construir soluções escaláveis de dados que suportem Analytics e Inteligência Artificial. O papel envolve desenvolvimento de pipelines, ingestão e transformação de grandes volumes de dados, assegurando qualidade e governança.

Você trabalhará com equipes de IA/Data Science para disponibilizar dados para modelos analíticos, em um ambiente de tecnologia avançada e crescimento rápido.

Qualificações

• Experiência em Engenharia de Dados em ambientes Cloud Azure.
• Conhecimento em Databricks, Spark e PySpark.
• Experiência com SQL e modelagem de dados.
• Vivência com Data Lakes, ETL/ELT e pipelines de dados.

Responsabilidades

• Desenvolver e evoluir pipelines de dados utilizando Azure Data Factory, Databricks e tecnologias do ecossistema Azure.
• Construir processos de ingestão, transformação e integração de grandes volumes de dados.
• Implementar arquiteturas de dados escaláveis, eficientes e seguras.
• Trabalhar com processamento distribuído utilizando Spark/PySpark.
• Garantir qualidade, governança e confiabilidade dos dados.
• Atuar junto aos times de Ciência de Dados e IA para disponibilização de dados para modelos analíticos.

Conhecimentos

Engenharia de Dados

SQL

Governança de dados

Ferramentas

Azure

Databricks

Spark

PySpark

Azure Data Factory

Data Lakes

ETL/ELT

Descrição da oferta de emprego

Junte-se à Digiage e ajude a escalar a inteligência artificial com excelência operacional.

A Digiage está crescendo e estamos buscando profissionais para fazer parte dessa evolução.

Estamos contratando talentos nas senioridades Júnior, Pleno e Sênior para atuar em projetos de alta relevância junto a clientes de grande porte, contribuindo na construção de soluções inovadoras em dados, inteligência artificial e tecnologia.

Estamos em busca de um(a) Engenheiro(a) de Dados com experiência em Azure e Databricks para atuar na construção de soluções escaláveis de dados, garantindo qualidade, performance e disponibilidade das informações para apoiar projetos de Analytics e Inteligência Artificial.

Responsabilidades e Atribuições

• Desenvolver e evoluir pipelines de dados utilizando Azure Data Factory, Databricks e tecnologias do ecossistema Azure.
• Construir processos de ingestão, transformação e integração de grandes volumes de dados.
• Implementar arquiteturas de dados escaláveis, eficientes e seguras.
• Trabalhar com processamento distribuído utilizando Spark/PySpark.
• Garantir qualidade, governança e confiabilidade dos dados.
• Atuar junto aos times de Ciência de Dados e IA para disponibilização de dados para modelos analíticos.

Requisitos mínimos

• Experiência em Engenharia de Dados em ambientes Cloud Azure.
• Conhecimento em Databricks, Spark e PySpark.
• Experiência com SQL e modelagem de dados.
• Vivência com Data Lakes, ETL/ELT e pipelines de dados.
• Conhecimento em boas práticas de engenharia e arquitetura de dados.

Diferenciais

• Experiência com MLOps.
• Conhecimento em arquitetura Lakehouse.
• Vivência com soluções de IA Generativa.