Staff Data Engineer - Data Platform

GRUPO OLX; Rio de Janeiro, São Paulo; Híbrido; BRL 180.000 - 240.000; Jornada completa

Ventajas ofrecidas por este puesto de trabajo

Plano de Saúde

Plano Odontológico

Previdência Privada

Auxílio alimentação

Auxílio Home Office

Auxílio Mobilidade

Seguro de Vida

Licenças estendidas

Incentivo ao esporte

Descripción de la vacante

Grupo OLX está buscando um Staff Data Engineer para somar ao time de Data Platform Engineer. A posição foca em prover uma plataforma de dados confiável para ingestão, transformação, exploração e governança, permitindo autonomia para decisões estratégicas e entrega de valor ao negócio.

Você atuará em um ambiente predominantemente remoto com encontros presenciais ocasionais, utilizando tecnologias modernas e Open Source para suportar dados confiáveis e escaláveis para todo o Grupo OLX.

Formación

• Fundamentos de engenharia de software e melhores práticas.
• Domínio em Python e PySpark.
• SQL avançado e experiência com motores de consulta distribuídos (Athena, Trino, Spark).
• Experiência prática com arquiteturas de processamento de dados em tempo real (Streaming).
• Frameworks de Big Data: Spark, Apache Iceberg e Trino.
• Conhecimento em ambiente Linux.
• Domínio em AWS: Sustentação e evolução de plataforma de dados.
• Segurança e Governança: AWS IAM e AWS Lake Formation.
• Infraestrutura como Código & CI/CD: Terraform e automação com GitHub Actions (CI/CD).
• Orquestração: Airflow / MWAA (Amazon Managed Workflows for Apache Airflow).
• Processamento e Catálogo: AWS Glue (Jobs, Metastore e Data Quality) e EMR.

Responsabilidades

• Manter uma plataforma que possibilite a todos do Grupo armazenarem seus dados, transformarem e disponibilizá-los para consumo, entregando dados relevantes para outras equipes e/ou para o usuário final.
• Trabalhar sistemas altamente escaláveis, distribuídos, com alta disponibilidade, tolerante a falhas, com foco em processamento rápido e massivo.
• Utilizar tecnologias atuais e Open Source.
• Manter e desenvolver uma plataforma dados moderna.

Conocimientos

Python

PySpark

SQL

Streaming

Linux

AWS

Data Governance

Herramientas

Apache Spark

Apache Iceberg

Trino

Airflow

MWAA

Terraform

GitHub Actions

AWS Glue

EMR

Descripción del empleo

Job description

Somos uma empresa 100% digital, com tecnologia desenvolvida localmente e líder no mercado de compra e venda online. Nos tornamos a marca que melhor representa a economia circular no país. Hoje temos escritórios no Rio de Janeiro e em São Paulo. Nosso modelo de trabalho é flexível e majoritariamente remoto, mas encontros presenciais poderão ocorrer de forma intencional, considerando a dinâmica e necessidade de cada time. Isso garante autonomia e liberdade para que nossas pessoas definam suas rotinas com disciplina e protagonismo, sempre alinhadas aos objetivos, prioridades e ao propósito da empresa.

Construir um ambiente diverso, inclusivo e comprometido com a equidade faz parte do nosso DNA. Entendemos que diversidade, equidade e inclusão são essenciais para criarmos um ambiente seguro com entregas inovadoras e eficientes para nossas pessoas e sociedade.

Main responsibilities

Se você quer fazer parte deste desafio, essa é a sua chance! Nessa posição de Staff Data Engineer, você irá somar ao time de Data Platform Engineer, que tem como objetivo prover uma plataforma de dados confiável que permita a ingestão, transformação, exploração e governança de dados de forma simples e escalável para todo o Grupo OLX, visando proporcionar autonomia e confiabilidade no uso de dados para tomada de decisão e entrega de valor ao negócio.

No dia a dia você vai:

• Manter uma plataforma que possibilite a todos do Grupo armazenarem seus dados, transformarem e disponibilizá-los para consumo, entregando dados relevantes para outras equipes e/ou para o usuário final;
• Trabalhar sistemas altamente escaláveis, distribuídos, com alta disponibilidade, tolerante a falhas, com foco em processamento rápido e massivo;
• Utilizar tecnologias atuais e Open Source;
• Manter e desenvolver uma plataforma dados moderna.

Requirements and skills

E o que você precisa ter?

• Sólido conhecimento em fundamentos e boas práticas de engenharia de software;
• Domínio em Python e PySpark;
• SQL avançado e experiência com motores de consulta distribuídos (Athena, Trino, Spark);
• Experiência prática com arquiteturas de processamento de dados em tempo real (Streaming);
• Frameworks de Big Data: Conhecimento prático em Spark, Apache Iceberg e Trino;
• Conhecimento em ambiente Linux;
• Domínio em AWS: Experiência robusta focada em sustentação e evolução de plataforma de dados;
• Segurança e Governança: Vivência com AWS IAM e AWS Lake Formation;
• Infraestrutura como Código & CI/CD: Conhecimento em Terraform e automação com GitHub Actions (CI/CD);
• Orquestração: Airflow / MWAA (Amazon Managed Workflows for Apache Airflow);
• Processamento e Catálogo: AWS Glue (Jobs, Metastore e Data Quality) e EMR.

Additional information

Mais sobre o Grupo OLX:

No Brasil desde 2010, o Grupo OLX tem como propósito empoderar as pessoas para que alcancem seus sonhos, reinventando o modelo de consumo. Com a aquisição do Grupo ZAP, concluída em outubro de 2020, a companhia opera a OLX, plataforma horizontal com posição de liderança nas categorias de automóveis, bens de consumo usados e imóveis; e duas plataformas líderes do mercado imobiliário, ZAP e Viva Real.

Benefícios:

• Remuneração compatível com o mercado
• Plano de Saúde
• Plano Odontológico
• Previdência Privada
• Benefícios flexíveis que se adaptam às suas necessidades
• Auxílio alimentação
• Aconselhamento financeiro
• Clube de vantagens
• Auxílio Home Office
• Auxílio Mobilidade
• Auxílio Criança
• Seguro de Vida
• Licenças estendidas
• Incentivo ao esporte, qualidade de vida e bem estar
• Empréstimo consignado com taxas reduzidas