STAFF DATA ENGINEER

Grupo OLX; Brasil; Híbrido; BRL 180.000 - 250.000; Jornada completa

Descripción de la vacante

Grupo OLX busca engenheiro de dados sênior para somar ao time de Data Platform Engineer, contribuindo para uma plataforma de dados confiável que permita ingestão, transformação, exploração e governança para o Grupo OLX, visando autonomia e valor estratégico.

O formato de trabalho é flexível, majoritariamente remoto com encontros presenciais quando necessário, oferecendo autonomia para definir rotinas alinhadas aos objetivos da empresa.

Formación

• Sólido conhecimento em fundamentos e boas práticas de engenharia de software.
• Domínio em Python e PySpark.
• SQL avançado e experiência com motores de consulta distribuídos (Athena, Trino, Spark).
• Experiência prática com arquiteturas de processamento de dados em tempo real (Streaming).
• Frameworks de Big Data: Spark, Apache Iceberg e Trino (conhecimento prático).
• Conhecimento em ambiente Linux.
• Domínio em AWS: foco em sustentação e evolução de plataforma de dados.
• Segurança e Governança: AWS IAM e AWS Lake Formation.
• Infraestrutura como Código & CI/CD: Terraform e GitHub Actions.
• Orquestração: Airflow / MWAA.
• Processamento e Catálogo: AWS Glue (Jobs, Metastore e Data Quality) e EMR.

Responsabilidades

• Manter uma plataforma que possibilite armazenar dados, transformar e disponibilizá-los para consumo, entregando dados relevantes para outras equipes e/ou para o usuário final.
• Trabalhar sistemas altamente escaláveis, distribuídos, com alta disponibilidade, tolerante a falhas, com foco em processamento rápido e massivo.
• Utilizar tecnologias atuais e Open Source.
• Manter e desenvolver uma plataforma dados moderna.

Conocimientos

Python

PySpark

SQL avançado

Streaming

Big Data

Linux

AWS

Data Governance

CI/CD

Airflow

MWAA

Terraform

Herramientas

GitHub Actions

Airflow

MWAA

AWS Glue

EMR

Descripción del empleo

Job description

Somos uma empresa 100% digital, com tecnologia desenvolvida localmente e líder no mercado de compra e venda online. Nos tornamos a marca que melhor representa a economia circular no país. Hoje temos escritórios no Rio de Janeiro e em São Paulo. Nosso modelo de trabalho é flexível e majoritariamente remoto, mas encontros presenciais poderão ocorrer de forma intencional, considerando a dinâmica e necessidade de cada time. Isso garante autonomia e liberdade para que nossas pessoas definam suas rotinas com disciplina e protagonismo, sempre alinhadas aos objetivos, prioridades e ao propósito da empresa.

Construir um ambiente diverso, inclusivo e comprometido com a equidade faz parte do nosso DNA. Entendemos que diversidade, equidade e inclusão são essenciais para criarmos um ambiente seguro com entregas inovadoras e eficientes para nossas pessoas e sociedade.

Main responsibilities

Se você quer fazer parte deste desafio, essa é a sua chance! Nessa posição de Staff Data Engineer, você irá somar ao time de Data Platform Engineer, que tem como objetivo prover uma plataforma de dados confiável que permita a ingestão, transformação, exploração e governança de dados de forma simples e escalável para todo o Grupo OLX, visando proporcionar autonomia e confiabilidade no uso de dados para tomada de decisão e entrega de valor ao negócio.

No dia a dia você vai:

• Manter uma plataforma que possibilite a todos do Grupo armazenarem seus dados, transformarem e disponibilizá-los para consumo, entregando dados relevantes para outras equipes e/ou para o usuário final;
• Trabalhar sistemas altamente escaláveis, distribuídos, com alta disponibilidade, tolerante a falhas, com foco em processamento rápido e massivo;
• Utilizar tecnologias atuais e Open Source;
• Manter e desenvolver uma plataforma dados moderna.

Requirements and skills

E o que você precisa ter?

• Sólido conhecimento em fundamentos e boas práticas de engenharia de software;
• Domínio em Python e PySpark;
• SQL avançado e experiência com motores de consulta distribuídos (Athena, Trino, Spark);
• Experiência prática com arquiteturas de processamento de dados em tempo real (Streaming);
• Frameworks de Big Data: Conhecimento prático em Spark, Apache Iceberg e Trino;
• Conhecimento em ambiente Linux;
• Domínio em AWS: Experiência robusta focada em sustentação e evolução de plataforma de dados;
• Segurança e Governança: Vivência com AWS IAM e AWS Lake Formation;
• Infraestrutura como Código & CI/CD: Conhecimento em Terraform e automação com GitHub Actions (CI/CD);
• Orquestração: Airflow / MWAA (Amazon Managed Workflows for Apache Airflow);
• Processamento e Catálogo: AWS Glue (Jobs, Metastore e Data Quality) e EMR.

Additional information

Mais sobre o Grupo OLX:

No Brasil desde 2010, o Grupo OLX tem como propósito empoderar as pessoas para que alcancem seus sonhos, reinventando o modelo de consumo. Com a aquisição do Grupo ZAP, concluída em outubro de 2020, a companhia opera a OLX, plataforma horizontal com posição de liderança nas categorias de automóveis, bens de consumo usados e imóveis; e duas plataformas líderes do mercado imobiliário, ZAP e Viva Real.

Benefícios:

• Remuneração compatível com o mercado
• Plano de Saúde
• Plano Odontológico
• Previdência Privada
• Benefícios flexíveis que se adaptam às suas necessidades
• Auxílio alimentação
• Aconselhamento financeiro
• Clube de vantagens
• Auxílio Home Office
• Auxílio Mobilidade
• Auxílio Criança
• Seguro de Vida
• Licenças estendidas
• Incentivo ao esporte, qualidade de vida e bem estar
• Empréstimo consignado com taxas reduzidas