Profissional Engenheiro(a) de Dados (AWS) Sênior - Remoto

Luby; Brasil; Remote; BRL 120,000 - 240,000; Full time

Benefits offered by this job

Remoto no Brasil

Plano de Saúde

Plano Odontológico

Seguro de Vida

Wellhub (Gympass)

Descontos em FIAP/MBA USP Esalq

Descontos Multilaser

Bônus anual

Indicação de profissionais

Job summary

A Luby está buscando um Engenheiro de Dados para atuar em projeto com cliente dos EUA, alocado no Brasil. O papel envolve desenhar e manter pipelines de dados em AWS, transformar telemetria e dados de operações em produtos de dados confiáveis, com validação de qualidade e monitoramento.

Você trabalhará com product owners, engenheiros de confiabilidade e analistas, usando SQL e Python para transformar dados, com disponibilidade para sobreposição de horário ET.

Qualifications

• Pelo menos 4 anos de experiência em engenharia de dados.
• Experiência prática com AWS Glue, Spark, Athena, S3, EMR e Step Functions.
• Domínio de SQL e Python.
• Experiência comprovada na construção e manutenção de pipelines de ETL em produção.
• Experiência com frameworks de qualidade de dados, validação e monitoramento de pipelines.
• Familiaridade com versionamento e release de datasets ou produtos de dados.
• Inglês avançado para comunicação com stakeholders dos EUA.
• Disponibilidade para overlap com o fuso ET.

Responsibilities

• Projetar, desenvolver e manter pipelines de ETL na AWS.
• Ingerir e modelar dados de várias fontes.
• Transformar dados brutos em produtos de dados limpos e reutilizáveis.
• Implementar validação de qualidade de dados, monitoramento e alertas.
• Gerenciar releases de produtos de dados com mudanças de schema e retrocompatibilidade.
• Escrever e otimizar SQL e Python para transformações e análises.
• Colaborar com product owners, engenheiros de confiabilidade e analistas.

Skills

SQL

Python

ETL pipelines

Data modeling

Tools

AWS Glue

Spark

Athena

S3

EMR

Step Functions

Job description

VemPraLuby

Aqui você terá a oportunidade de:

• Evoluir em um ambiente de alta performance:Uma cultura onde o desenvolvimento é contínuo, com autonomia e envolvimento em projetos nacionais e internacionais que realmente testam suas habilidades e impulsionam seu potencial.
• Integrar um time apaixonado por tecnologia:Aqui, você vai trabalhar ao lado de talentos experientes em um ambiente colaborativo e disruptivo, utilizando as tecnologias mais avançadas do mercado.
• Deixar sua marca no mundo:Nossas soluções digitais impactam diretamente a vida de milhares de pessoas, e é a sua chance de ser parte ativa na construção de um futuro mais digital e conectado.
• Trabalhar de forma remota e com flexibilidade:Seja qual for o seu lugar, estamos prontos para te receber no nosso time!

Buscamos um Engenheiro de Dados para atuar alocado em um dos nossos clientes, em um time que desenvolve produtos de dados para a área de Reliability Experience de uma grande operadora de telecomunicações dos Estados Unidos.

Principais Atividades:

• Projetar, desenvolver e manter pipelines de ETL na AWS utilizando Glue, Spark, EMR, Athena, S3 e Step Functions.
• Ingerir e modelar dados de sistemas operacionais como AOM, IPDR, Scope, CARS, IRIS e Gisual.
• Transformar dados brutos de telemetria e de ticketing em produtos de dados limpos, documentados e reutilizáveis.
• Implementar validação de qualidade de dados, monitoramento e alertas para garantir a confiabilidade de cada release.
• Gerenciar releases versionados dos produtos de dados, incluindo mudanças de schema, retrocompatibilidade e release notes.
• Escrever e otimizar SQL e Python para transformações, validações e análises.
• Atuar junto a product owners, engenheiros de confiabilidade e analistas na definição de requisitos e na priorização das entregas.

Requisitos essenciais:

• Pelo menos 4 anos de experiência em engenharia de dados.
• Experiência prática com AWS Glue, Spark, Athena, S3, EMR e Step Functions.
• Domínio de SQL e Python.
• Experiência comprovada na construção e manutenção de pipelines de ETL em produção.
• Experiência com frameworks de qualidade de dados, validação e monitoramento de pipelines.
• Familiaridade com práticas de versionamento e release de datasets ou produtos de dados.
• Inglês avançado para comunicação diária com stakeholders dos Estados Unidos.
• Disponibilidade para trabalhar com sobreposição de horário com o fuso da Costa Leste dos EUA (ET).

Será um diferencial:

• Experiência em telecom ou operações de rede (telemetria, registros de uso, dados de indisponibilidade e incidentes).
• Vivência com AOM, IPDR, Scope, CARS, IRIS ou Gisual.
• Experiência com infraestrutura como código (Terraform ou CloudFormation).
• Experiência com CI/CD para pipelines de dados.
• Contato com ferramentas de catálogo, linhagem ou governança de dados.

O que oferecemos:

• Trabalho Remoto:Desfrute da flexibilidade de trabalhar de qualquer lugar do Brasil, com total autonomia e organização.
• Saúde e Bem estar:Plano de Saúde e Odontológico, Seguro de Vida e Wellhub (Gympass).
• +Educação:Descontos em cursos da FIAP e MBA USP Esalq para você continuar aprendendo e se desenvolvendo.
• Diferenciais exclusivos:Descontos em lojas Multilaser, bonificação por indicação de profissionais e negócios, horário adaptável e bônus anual.

Saiba mais sobre cultura, diferenciais e como é ser um #Luber em nossa Página de Carreiras!