Data Engineer AWS + Databricks

Keyrus US; São Paulo; Presencial; BRL 120.000 - 160.000; Tempo integral

Resumo da oferta

Uma empresa de tecnologia em São Paulo busca um(a) Data Engineer Pleno/Sênior para atuar em projetos de Business Intelligence e Big Data. O(a) profissional será responsável por desenvolver e otimizar processos de integração e transformação de dados, garantindo qualidade e performance. Exige-se experiência com Databricks e AWS, além de conhecimento em modelagem de dados e bancos de dados. Venha fazer parte do Time Keyrus!

Qualificações

• Experiência com Databricks.
• Experiência com AWS (Amazon Web Services).
• Domínio em modelagem de dados.
• Vivência em projetos de BI e arquiteturas de Big Data.
• Conhecimento em mensageria e processamento distribuído.
• Experiência em tecnologias e ferramentas de ETL / ELT.
• Conhecimento em bancos de dados relacionais e não relacionais.
• Vivência em arquiteturas de DW e Data Lake.

Responsabilidades

• Desenvolver e otimizar processos de integração e transformação de dados.
• Garantir a qualidade e confiabilidade das execuções de dados.
• Trabalhar com bancos de dados relacionais e não relacionais.
• Projetar e implementar arquiteturas de Data Warehouse e Data Lake.
• Definir padrões e procedimentos em conjunto com arquitetos de solução.
• Apoiar analistas na especificação e integração de dados.
• Definir soluções para integração de dados complexos.
• Manter metadados e repositórios de dados atualizados.
• Manter-se atualizado sobre novas tecnologias.

Conhecimentos

Databricks

AWS (Amazon Web Services)

modelagem de dados

projetos de BI

mensageria

processamento distribuído

tecnologias e ferramentas de ETL / ELT

bancos de dados relacionais (SQL Server, Oracle, PostgreSQL)

bancos de dados não relacionais (MongoDB, Cassandra)

arquiteturas de DW e Data Lake

Descrição da oferta de emprego

A Keyrus acredita na diversidade e na inclusão. Encorajamos a todos a participarem em nosso processo de contratação, não importando o gênero, idade, raça, religião. Não permitimos nenhum tipo de discriminação. Isto é reforçado no processo de contratação e vivido dessa forma na empresa.

Sabemos que grandes resultados só são alcançados com uma grande equipe, por isso procuramos pessoas talentosas e apaixonadas, com desejo de crescer profissionalmente e criar uma trajetória de carreira conosco.

Buscamos um(a) Data Engineer Pleno / Sênior com experiência em projetos de Business Intelligence, modelagem de dados e forte conhecimento em tecnologias, ferramentas e arquiteturas de Big Data. Esse(a) profissional atuará no desenvolvimento e sustentação de pipelines de dados, garantindo a qualidade, performance e escalabilidade dos processos.

Papéis e Responsabilidades:

• Desenvolver e otimizar processos de integração, ingestão e transformação de dados estruturados e não estruturados (batch e streaming);
• Garantir a qualidade, performance e confiabilidade das execuções nas demandas de dados;
• Trabalhar com bancos de dados relacionais e não relacionais;
• Projetar e implementar arquiteturas de Data Warehouse (DW) e Data Lake;
• Participar da definição de padrões, procedimentos e camadas de dados, em conjunto com os arquitetos de solução;
• Apoiar analistas e times de negócio na especificação e integração de dados;
• Definir soluções para integração de dados complexos e de alta volumetria;
• Utilizar e manter metadados técnicos e repositórios de dados atualizados;
• Manter-se atualizado sobre tendências e novas tecnologias aplicáveis ao ambiente do cliente.

Qualificações Essenciais:

• Experiência com Databricks;
• Experiência com AWS (Amazon Web Services);
• Domínio em modelagem de dados;
• Vivência em projetos de BI e arquiteturas de Big Data;
• Conhecimento em mensageria e processamento distribuído;
• Experiência em tecnologias e ferramentas de ETL / ELT;
• Conhecimento em bancos de dados relacionais (SQL Server, Oracle, PostgreSQL) e não relacionais (MongoDB, Cassandra, etc.);
• Vivência em arquiteturas de DW e Data Lake.

Serão considerados Diferenciais:

• Experiência com DBT, Apache Spark ou Kafka;
• Conhecimento em Python ou Scala;
• Certificações AWS, Databricks ou equivalentes.

Nossa missão é Auxiliar as empresas a extrair todo o potencial de Dados e Digital objetivando aumentar seu desempenho, ajudando na transformação, gerando novas alavancas de crescimento e competitividade.

Vem fazer parte do Time Keyrus!

Desejamos boa sorte!