Data Engineer AWS + Databricks

Keyrus US; São Paulo; Presencial; BRL 120.000 - 160.000; Tempo integral

Resumo da oferta

Uma empresa líder em tecnologia busca profissionais apaixonados para integrar sua equipe focada em Big Data. O candidato ideal terá experiência em desenvolver e manter soluções de dados, otimização de processos e colaboração com equipes multidisciplinares. Se você tem habilidades em ferramentas e ambientes como Apache Spark, AWS e Databricks, procure fazer parte de um time que valoriza diversidade e inclusão, garantindo um ambiente de trabalho estimulante e desafiador.

Qualificações

• Experiência sólida em Data Warehousing e Big Data, com foco em Hadoop.
• Otimização de consultas e desenvolvimento de pipelines em Apache Spark.
• Domínio em SQL relacional e bancos de dados NoSQL.

Responsabilidades

• Desenvolver e manter pipelines de dados escaláveis e confiáveis.
• Colaborar na implementação de soluções com AWS e Databricks.
• Otimizar processos existentes e automatizar rotinas manuais.

Conhecimentos

Hadoop

Apache Spark

SQL

Python

Scala

DevOps

Ferramentas

Docker

Git

Jira

Jenkins

Databricks

AWS

Alteryx

Tableau Prep Builder

Descrição da oferta de emprego

A Keyrus acredita na diversidade e na inclusão. Encorajamos a todos a participarem em nosso processo de contratação, não importando o gênero, idade, raça, religião. Não permitimos nenhum tipo de discriminação. Isto é reforçado no processo de contratação e vivido dessa forma na empresa.

Sabemos que grandes resultados só são alcançados com uma grande equipe, por isso procuramos pessoas talentosas e apaixonadas, com desejo de crescer profissionalmente e criar uma trajetória de carreira conosco.

Papéis e Responsabilidades:

Desenvolver e manter pipelines de dados escaláveis e confiáveis.

Atuar na coleta, processamento e organização de grandes volumes de dados.

Colaborar na implementação de soluções baseadas em Databricks e serviços da AWS como S3, Glue, Lambda, entre outros.

Otimizar processos existentes e implementar soluções que sigam diretrizes de arquitetura de Big Data.

Automatizar rotinas manuais e contribuir com padrões de ingestão e qualidade de dados.

Colaborar com cientistas de dados e analistas na resolução de problemas técnicos relacionados aos dados.

Qualificações Essenciais:

Experiência sólida em Data Warehousing e ambientes de Big Data, com foco em Hadoop.

Forte atuação com Apache Spark, incluindo otimização de consultas edesenvolvimento de pipelines de dados escaláveis.

Experiencia com Databricks.

Domínio em SQL relacional, bancos de dados NoSQL e ferramentas de ETL/Data Wrangling.

Excelente proficiência em Python ou Scala.

Experiência em modelagem de dados estruturados e não estruturados.

Vivência com ferramentas e práticas de DevOps (Docker, Git, Jira, Jenkins).

Atuação com serviços AWS, incluindo EMR, Glue, Lambda, S3, Redshift, Athena, DMS e AppFlow.

Familiaridade com frameworks como DBT e orquestração de pipelines utilizando Apache Airflow.

Experiência com ferramentas de preparação e automação de dados como Alteryx e Tableau Prep Builder.

Nossa missão é Auxiliar as empresas a extrair todo o potencial de Dados e Digital objetivando aumentar seu desempenho, ajudando na transformação, gerando novas alavancas de crescimento e competitividade.

Vem fazer parte do Time Keyrus!

Se você quiser saber mais sobre nós, convidamos você a visitar nosso site:http://www.keyrus.com/br/

Desejamos boa sorte!