Senior Data Engineer

Keyrus US; São Paulo; Presencial; BRL 40.000 - 80.000; Tempo integral

Resumo da oferta

Uma empresa inovadora busca profissionais apaixonados por dados para integrar sua equipe. O papel envolve o desenvolvimento e manutenção de pipelines de dados escaláveis, além de colaborar com cientistas de dados para resolver problemas técnicos. Se você possui experiência em ambientes de Big Data e ferramentas como Hadoop e Apache Spark, esta é a oportunidade ideal para você. Venha fazer parte de uma equipe que valoriza a diversidade e a inclusão, e que está comprometida em ajudar empresas a extrair o máximo potencial de seus dados. Junte-se a nós e impulsione sua carreira!

Qualificações

• Experiência sólida em ambientes de Big Data e Data Warehousing.
• Habilidades em otimização de consultas e desenvolvimento de pipelines de dados.

Responsabilidades

• Desenvolver e manter pipelines de dados escaláveis e confiáveis.
• Otimizar processos e implementar soluções de Big Data.

Conhecimentos

Data Warehousing

Hadoop

Apache Spark

SQL

Python

Scala

DevOps

AWS

Data Modeling

Ferramentas

Docker

Git

Jira

Jenkins

Alteryx

Tableau Prep Builder

Apache Airflow

Descrição da oferta de emprego

A Keyrus acredita na diversidade e na inclusão. Encorajamos a todos a participarem em nosso processo de contratação, independentemente de gênero, idade, raça ou religião. Não permitimos qualquer tipo de discriminação, reforçando esse compromisso em todas as etapas do processo de contratação e na cultura da empresa.

Sabemos que grandes resultados só são alcançados com uma equipe talentosa e apaixonada, com desejo de crescer profissionalmente e construir uma trajetória de carreira conosco.

Papéis e Responsabilidades:

1. Desenvolver e manter pipelines de dados escaláveis e confiáveis.
2. Atuar na coleta, processamento e organização de grandes volumes de dados.
3. Otimizar processos existentes e implementar soluções alinhadas às diretrizes de arquitetura de Big Data.
4. Automatizar rotinas manuais e contribuir para padrões de ingestão e qualidade de dados.
5. Colaborar com cientistas de dados e analistas na resolução de problemas técnicos relacionados aos dados.

Qualificações Essenciais:

1. Sólida experiência em Data Warehousing e ambientes de Big Data, com foco em Hadoop.
2. Forte atuação com Apache Spark, incluindo otimização de consultas e desenvolvimento de pipelines de dados escaláveis.
3. Domínio em SQL relacional, bancos de dados NoSQL e ferramentas de ETL/Data Wrangling.
4. Excelentes habilidades em Python ou Scala.
5. Experiência em modelagem de dados estruturados e não estruturados.
6. Vivência com ferramentas e práticas de DevOps (Docker, Git, Jira, Jenkins).
7. Experiência com serviços AWS, incluindo EMR, Glue, Lambda, S3, Redshift, Athena, DMS e AppFlow.
8. Familiaridade com frameworks como DBT e orquestração de pipelines com Apache Airflow.
9. Conhecimento em ferramentas de preparação e automação de dados como Alteryx e Tableau Prep Builder.

Nosso objetivo é ajudar empresas a extrair o máximo potencial de Dados e Digital, impulsionando seu desempenho, promovendo transformação, e criando novas oportunidades de crescimento e competitividade.

Venha fazer parte do Time Keyrus!

Para saber mais sobre nós, visite nosso site: http://www.keyrus.com/br/

Desejamos boa sorte!