Líder Técnico - Fábrica de Dados

ORYS; São Paulo; Presencial; BRL 223 200 - 279 000; Tempo integral

Resumo da oferta

Uma empresa de tecnologia está à procura de um Líder Técnico para atuar na Fábrica de Dados em São Paulo. O profissional será responsável por liderar a equipe no desenvolvimento de pipelines de dados, garantindo qualidade e performance. É essencial ter experiência em plataformas de Big Data e conhecimento em ferramentas como PySpark e SQL avançado. A empresa valoriza perfil colaborativo e capacidade de organização.

Qualificações

• Experiência em ambientes corporativos de grande porte.
• Conhecimento em boas práticas de DataOps.
• Experiência com ferramentas de integração de dados.

Responsabilidades

• Liderar tecnicamente os desenvolvedores.
• Garantir aderência aos padrões técnicos.
• Atuar no troubleshooting de processos de dados.

Conhecimentos

Plataformas de Big Data

PySpark

Hive

HDFS

Sqoop

Impala

Informatica IDMC

Informatica PowerCenter

SQL avançado

Versionamento de código (GitLab/GitHub)

Ferramentas

Airflow

Descrição da oferta de emprego

Descrição da vaga

Estamos em busca de um Líder Técnico (LT) para atuar na Fábrica de Dados, responsável por orientar tecnicamente a equipe de desenvolvimento de pipelines de dados e garantir a qualidade, governança e performance das entregas.

O profissional será o ponto de referência técnica da equipe, participando ativamente do desenho das soluções de ingestão, transformação e integração de dados, além de apoiar na definição de padrões, boas práticas e revisão de código.

Responsabilidades

• Liderar tecnicamente os desenvolvedores da Fábrica de Dados;
• Apoiar o time na análise e construção de pipelines de ingestão, transformação e carga de dados;
• Garantir a aderência das entregas aos padrões técnicos e de arquitetura definidos;
• Atuar no troubleshooting e otimização de processos de dados (performance, paralelismo, particionamento, etc.);
• Participar de reuniões técnicas e apoiar o time funcional e de arquitetura nas definições de solução;
• Documentar padrões, fluxos e boas práticas para o reuso e padronização dos processos;
• Realizar code review e garantir a qualidade técnica das entregas.

Requisitos Técnicos

• Experiência comprovada com plataformas de Big Data, preferencialmente Cloudera;
• Conhecimentos em PySpark, Hive, HDFS, Sqoop e Impala;
• Experiência com ferramentas de integração de dados como Informatica IDMC (Cloud Data Integration) ou Informatica PowerCenter;
• Conhecimentos em Ingest de Dados (Batch e Near Real Time), conectores e integração com APIs;
• Conhecimentos em SQL avançado (Oracle, SQL Server ou similares);
• Experiência em versionamento de código (GitLab/GitHub);
• Vivência em ambientes corporativos de grande porte e atuação em fábricas de dados;
• Conhecimento em boas práticas de DataOps e engenharia de dados.

Desejáveis

• Conhecimento em Spark Streaming ou Kafka;
• Experiência com Airflow ou outras ferramentas de orquestração;
• Noções de Data Quality e Data Governance;
• Experiência em ambientes com Informatica MDM ou CDGC será considerado diferencial.

Soft Skills

• Perfil colaborativo e comunicativo;
• Capacidade de liderança técnica e mentoria de equipe;
• Proatividade na resolução de problemas;
• Boa capacidade de organização e documentação.