Engenheiro de Dados | Analista PL/SR ou Tech Lead

MaGenX; São Paulo; Hybrid; BRL 201.000 - 312.000; Vollzeit

Zusammenfassung

A MaGenX busca Engenheiro de Dados | Analista PL/SR ou Tech Lead para atuar na migração para cloud e na otimização de pipelines de dados.

Você desenvolverá workflows de ingestão, qualidade e transformação de dados, contribuindo para a arquitetura medalhão do Data Lake, em um ambiente remoto.

Experiência no mercado financeiro (Asset) e inglês para comunicação com times internacionais são diferenciais valorizados para atuação global.

Qualifikationen

• Experiência com Python, Spark e PySpark.
• Experiência em AWS e Databricks.
• Conhecimento em Control-M, Jenkins/Cloudbees e Git/GitHub.
• Experiência no mercado financeiro, especialmente com Fundos de Investimentos (Asset).
• Capacidade de desenvolver workflows de ingestão, qualidade e transformação de dados.
• Experiência com arquitetura medalhão do Data Lake.

Aufgaben

• Atuar em migração para cloud e otimização de pipelines de dados.
• Desenvolver workflows de ingestão, qualidade e transformação de dados.
• Contribuir para a arquitetura medalhão do Data Lake.
• Colaborar com times internacionais em ambiente remoto.

Kenntnisse

Python

Spark

PySpark

Inglês (conversação)

Workflows de dados

Arquitetura Data Lake

Migração para cloud

Análise de dados

Tools

Databricks

AWS

Control-M

Jenkins/CloudBees

Git/GitHub

Jobbeschreibung

Engenheiro de Dados | Analista PL/SR ou Tech Lead

Oportunidade para atuar em projetos de migração para cloud e otimização de pipelines de dados em ambiente híbrido (2-3x por semana na Vila Olímpia, São Paulo-SP). Desenvolvimento de workflows de ingestão, qualidade e transformação de dados, contribuindo para arquitetura medalhão do Data Lake.

Modelo: 100% Remoto

Contratação: PJ

Requisitos Técnicos:

• Inglês para conversação com times internacionais (obrigatório)
• Experiência com Python, Spark, PySpark
• Vivência em AWS e Databricks
• Conhecimento em Control-M, Jenkins/Cloudbees, Git/GitHub
• Experiência no mercado financeiro, especialmente com Fundos de Investimentos (Asset)
• Capacidade de desenvolver workflows de ingestão, qualidade e transformação de dados
• Experiência com arquitetura medalhão do Data Lake