Engenheiro(a) de Dados (SPS0001976)

DIGISYSTEM - IT Solutions; Brasília; Presencial; BRL 120 000 - 240 000; Tempo integral

Resumo da oferta

A DIGISYSTEM - IT Solutions busca Engenheiro(a) de Dados para atuar no desenvolvimento e evolução de soluções modernas de dados, garantindo pipelines escaláveis, confiáveis e de alta performance para suportar demandas analíticas, operacionais e estratégicas da organização.

O profissional trabalhará na construção de arquiteturas Data Lake/Lakehouse, com Spark/PySpark, Databricks e integração com APIs, em ambiente Cloud (Azure).

Qualificações

• Experiência comprovada em engenharia de dados em ambientes corporativos.
• Conhecimento em Python e PySpark, com foco em pipelines de dados.
• Experiência com Apache Spark (batch e streaming).
• Vivência na construção e manutenção de pipelines ETL/ELT.
• Conhecimento em modelagem de dados para Data Lake e Lakehouse.
• Experiência com integração e consumo de APIs.
• Experiência em Cloud Computing, preferencialmente Microsoft Azure.
• Experiência com Git e versionamento de código.

Responsabilidades

• Desenvolver e implementar pipelines de ingestão de dados a partir de bancos de dados, APIs, logs e outras fontes corporativas.
• Realizar processos de transformação, limpeza, enriquecimento e validação de dados, assegurando qualidade e rastreabilidade.
• Projetar, desenvolver e manter pipelines distribuídos utilizando Apache Spark/PySpark e Databricks.
• Atuar na construção e evolução de arquiteturas Data Lake e Lakehouse.
• Organizar e disponibilizar dados estruturados e não estruturados para consumo analítico e operacional.
• Colaborar com equipes de dados e áreas de negócio na preparação e disponibilização de datasets.
• Monitorar e otimizar a performance dos processos de processamento e armazenamento de dados.
• Garantir a aplicação de boas práticas de governança, confiabilidade, versionamento e qualidade dos dados.
• Contribuir para a evolução das soluções de dados e compartilhar conhecimento com a equipe.

Conhecimentos

Python

PySpark

Apache Spark

ETL/ELT pipelines

Data modeling

APIs

Azure

Git

Ferramentas

Databricks

Azure

Descrição da oferta de emprego

Estamos em busca de um(a) Engenheiro(a) de Dados para atuar no desenvolvimento e evolução de soluções modernas de dados, garantindo a construção de pipelines escaláveis, confiáveis e de alta performance para suportar demandas analíticas, operacionais e estratégicas da organização.

Procuramos um(a) profissional com sólida experiência em Engenharia de Dados, capaz de projetar arquiteturas robustas, otimizar fluxos de processamento e contribuir para a evolução do ecossistema de dados em ambientes corporativos.

Principais Responsabilidades

• Desenvolver e implementar pipelines de ingestão de dados a partir de bancos de dados, APIs, logs e outras fontes corporativas.
• Realizar processos de transformação, limpeza, enriquecimento e validação de dados, assegurando qualidade e rastreabilidade.
• Projetar, desenvolver e manter pipelines distribuídos utilizando Apache Spark/PySpark e Databricks.
• Atuar na construção e evolução de arquiteturas Data Lake e Lakehouse.
• Organizar e disponibilizar dados estruturados e não estruturados para consumo analítico e operacional.
• Colaborar com equipes de dados e áreas de negócio na preparação e disponibilização de datasets.
• Monitorar e otimizar a performance dos processos de processamento e armazenamento de dados.
• Garantir a aplicação de boas práticas de governança, confiabilidade, versionamento e qualidade dos dados.
• Contribuir para a evolução das soluções de dados e compartilhar conhecimento com a equipe.

Requisitos Obrigatórios

• Experiência em Engenharia de Dados.
• Conhecimento em Python e/ou PySpark.
• Experiência com Apache Spark (batch e/ou streaming).
• Vivência na construção e manutenção de pipelines ETL/ELT.
• Conhecimento em modelagem de dados para ambientes Data Lake e Lakehouse.
• Experiência com integração e consumo de APIs.
• Vivência em ambientes de Cloud Computing, preferencialmente Microsoft Azure.
• Experiência com Git e práticas de versionamento de código.

Diferenciais

• Experiência com processamento e tratamento de dados não estruturados, como documentos, textos e conteúdos corporativos.
• Conhecimento em técnicas de indexação e recuperação de informação.
• Experiência na preparação de dados para iniciativas de Inteligência Artificial, Machine Learning e Analytics Avançado.
• Conhecimento em arquiteturas de busca semântica e Retrieval-Augmented Generation (RAG).
• Experiência com plataformas de IA Generativa, como Azure OpenAI, OpenAI ou soluções equivalentes.

Perfil Comportamental

• Perfil analítico e orientado à solução de problemas.
• Proatividade e senso de dono.
• Facilidade para trabalhar em equipe e interagir com diferentes áreas.
• Boa comunicação e capacidade de influenciar decisões técnicas.
• Disposição para compartilhar conhecimento.
• Foco em qualidade, inovação e melhoria contínua.

Certificações Desejáveis

Será considerado um diferencial possuir uma das certificações abaixo:

• Microsoft Certified: Azure Data Engineer Associate
• AWS Certified Big Data
• Certified Data Management Professional (CDMP)
• Cloudera Certified Data Engineer (CCDE)

O que buscamos

Buscamos um(a) profissional apaixonado(a) por dados, capaz de transformar desafios complexos em soluções escaláveis e eficientes, contribuindo para o fortalecimento da cultura orientada a dados e para a evolução de iniciativas de Analytics e Inteligência Artificial na organização.

Regime De Contratação

CLT

Departamento

Governo