Engenheiro(a) de Dados Sênior

SuperSim; Brasil; Remote; BRL 180,000 - 300,000; Full time

Job summary

A SuperSim, maior fintech de microcrédito no Brasil, busca um(a) Engenheiro(a) de Dados Sênior para evoluir a infraestrutura e produtos de dados, garantindo que as informações para análises estejam disponíveis com qualidade, segurança e confiabilidade.

Você atuará com pipelines em Python, SQL e Airflow, modelagem de dados, Data Lake e tecnologias como S3, Iceberg e Trino, integrando dados de várias fontes e promovendo governança e automação.

Qualifications

• Experiência em desenvolvimento de pipelines com Python, SQL e Airflow.
• Conhecimento em Data Lake e em AWS S3.
• Modelagem de dados para análises e operações.
• Integração de dados de bancos, APIs e sistemas internos/externos.
• Foco em qualidade, rastreabilidade e segurança de dados.

Responsibilities

• Desenvolver, manter e evoluir pipelines de dados com Python, SQL e Airflow.
• Otimizar tabelas e modelos de dados para análises.
• Trabalhar com Data Lake, S3, Iceberg e Trino.
• Integrar dados de bancos, APIs e sistemas internos/externos.
• Garantir qualidade, rastreabilidade, segurança e disponibilidade.
• Desenvolver validações, alertas, métricas e monitoramento.
• Investigar problemas de dados e performance, buscando causas raiz.
• Apoiar analistas e cientistas de dados na definição de requisitos.
• Contribuir para governança, arquitetura e controle de acesso aos dados.
• Criar documentação técnica de pipelines e regras de negócio.
• Desenvolver código legível, testável e revisado em code reviews.
• Identificar oportunidades de automação e eficiência.
• Acompanhar produção e assegurar confiabilidade dos dados.

Skills

Python

SQL

Airflow

Data modeling

Data Lake

Amazon S3

Iceberg

Trino

Data governance

Data quality

Tools

Apache Airflow

Apache Iceberg

Trino

Amazon S3

Job description

A SuperSim, maior fintech de microcrédito no Brasil, busca um(a) Engenheiro(a) de Dados Sênior para atuar na evolução da infraestrutura e produtos de dados.

A missão é garantir que as informações necessárias para análises e tomadas de decisão estejam disponíveis no tempo certo, com qualidade, segurança e confiabilidade, focando em democratizar o acesso ao crédito para as classes C e D.

Responsabilidades

• Desenvolver, manter e evoluir pipelines de ingestão, transformação e disponibilização de dados utilizando Python, SQL e Apache Airflow.
• Estruturar e otimizar tabelas e modelos de dados para atender às necessidades analíticas e operacionais do negócio.
• Trabalhar com Data Lake e tecnologias como Amazon S3, Apache Iceberg e Trino.
• Integrar dados provenientes de bancos relacionais, APIs, arquivos e outros sistemas internos e externos.
• Garantir qualidade, consistência, rastreabilidade, segurança e disponibilidade dos dados.
• Desenvolver validações, alertas, métricas e mecanismos de monitoramento dos pipelines.
• Investigar problemas de dados e performance, atuando na causa raiz e implementando soluções que evitem recorrências.
• Apoiar analistas, cientistas de dados e áreas de negócio na definição de requisitos e construção das soluções.
• Contribuir para a evolução da arquitetura, governança e práticas de controle de acesso aos dados.
• Criar e manter documentação técnica sobre pipelines, tabelas, regras de negócio e decisões de arquitetura.
• Desenvolver código legível, testável e sustentável, participando de code reviews e compartilhando conhecimento com o time.
• Identificar oportunidades de automação, simplificação e ganho de eficiência.
• Acompanhar as soluções em produção e assumir responsabilidade pela confiabilidade dos produtos de dados sob sua atuação.