LÍDER TÉCNICO ENGENHEIRO DE DADOS

Memora Processos Inovadores; São Paulo; Presencial; BRL 180 000 - 320 000; Tempo integral

Resumo da oferta

Memora Processos Inovadores busca profissional sênior em dados para atuar na migração entre SGBDs distintos, construção e manutenção de pipelines ETL e orquestração com Apache Airflow.

É esperado domínio de SQL Server e PostgreSQL, bem como scripts em SQL/Python, com foco em performance e qualidade de dados, atuando de forma autônoma dentro de uma squad ágil.

Qualificações

• Experiência prática em migração de dados entre SGBDs distintos (schema, tipos de dados, regras de negócio).
• Condução de pipelines de ETL com performance em grandes volumes.
• Domínio de MS SQL Server (T-SQL) e PostgreSQL.
• Criação e depuração de scripts de carga e transformação (SQL/Python).
• Uso de Git para versionamento de código de pipelines/ETL.

Conhecimentos

Migração de dados

ETL pipelines

Python

SQL scripting

Deduplicação/normalização de dados

Git/versionamento

Formação académica

Graduação em TI

Pós-graduação em Tecnologia

Ferramentas

SQL Server

PostgreSQL

Apache Airflow

Git

Descrição da oferta de emprego

Descrição:

Graduação completa em curso de nível superior em Tecnologia da Informação, ou formação em outra área com pós-graduação em Tecnologia.

Experiência mínima de 08 anos como analista de dados, administrador de bancode dados, engenheiro de dados, DBA ou analitycs/big data.

Requisitos:

Requisitos Obrigatórios:

Experiência prática e comprovada em migração de dados entre SGBDs distintos(não apenas exportação/importação simples — inclui tratamento dedivergências de schema, tipos de dados e regras de negócio).

• Domínio de Microsoft SQL Server (T-SQL, modelagem, performance) ePostgreSQL.
• Experiência real na criação e manutenção de pipelines de ETL em produção.
• Experiência com Apache Airflow para orquestração de pipelines de dados.
• Capacidade de escrever e depurar scripts de carga e transformação de dados(SQL e/ou Python) com atenção a performance em grandes volumes.
• Conhecimento sólido de técnicas de tratamento e sanitização de dados(deduplicação, normalização, tratamento de inconsistências e dadosnulos/corrompidos).
• Experiência com versionamento de código (Git) aplicado a scripts dedados/ETL.
• Capacidade de atuar de forma autônoma como referência técnica da frente dedados dentro de uma squad ágil.

Requisitos Desejáveis:

Experiência com projetos de migração de sistemas legados para arquiteturasmodernas, especialmente em contexto de setor público.

Conhecimento de modelagem de dados para consumo por soluções de IA/RAG(ex.: estruturação de dados de origem para indexação semântica).

Familiaridade com ferramentas de Big Data (Apache Spark) para cenários dealto volume, caso a migração exija processamento distribuído.

Conhecimento básico de bancos NoSQL (Redis, Elasticsearch) caso o sistemavenha a utilizá-los para cache ou busca.

Habilidades Comportamentais:

• Migração de dados entre SGBDs distintos (schema, tipos de dados, regrasde negócio)
• Microsoft SQL Server (T-SQL, modelagem, performance)
• PostgreSQL
• Construção e manutenção de pipelines de ETL
• Apache Airflow para orquestração de pipelines
• Scripts de carga e transformação de dados (SQL e/ou Python)
• Tratamento e sanitização de dados (deduplicação, normalização,inconsistências)