Senior Data Engineer Em Três Lagoas (pi)

RE Partners; Piauí; Presencial; BRL 167 400 - 223 200; Tempo integral

Resumo da oferta

A RE Partners está buscando um engenheiro de dados sênior em Três Lagoas, Piauí. O candidato ideal deve ter experiência em engenharia de dados e capacidades em frameworks como Spark e Hadoop, além de entender a infraestrutura da AWS. As responsabilidades incluem projetar pipelines ETL e colaborar com equipes para atender às suas necessidades de dados. O salário é a combinar, com benefícios não informados.

Qualificações

• Experiência profissional em ambientes de dados, especialmente usando Spark e Hadoop.
• Boa compreensão de bancos de dados.
• Entendimento profundo de design de sistemas e estruturas de dados.

Responsabilidades

• Projetar e construir pipelines de dados ETL no AWS.
• Colaborar com equipes multifuncionais para entender necessidades de dados.
• Otimizar a infraestrutura de dados.

Conhecimentos

Experiência em data warehousing

Proficiente em Scala, Java ou Python

Conhecimento de frameworks de computação distribuída

Compreensão de qualidade de dados

Experiência em grandes produtos de dados

Ferramentas

Spark

Hadoop

Hive

AWS (EMR, S3, Lambda, Redshift)

Descrição da oferta de emprego

Cargo:

Senior data engineer em três lagoas (PI) – três lagoas

Responsibilities:

• Design and build Spark data ETL pipelines on AWS data platform.
• Collaborate with cross‑functional teams such as data scientists, fraud, marketing, and other business stakeholders to understand their data needs and deliver reliable solutions.
• Optimize data infrastructure – design and maintain robust data infrastructure by using modern data platform architecture.
• Ensure data quality and reliability.
• Innovate and follow best practices.
• Ensure operational excellence of the data platform, including monitoring, incident response, performance optimization, and continuous improvement.

Qualifications:

• Professional experience working in data warehousing, data architecture, and/or data engineering environments, especially using Spark, Hadoop, Hive, etc. with solid understanding of streaming pipelines.
• Proficiency in at least one high‑level programming language (Scala, Java, Python or equivalent).
• Good understanding of databases.
• Experience building large‑scale data products and understanding the tradeoffs made when building these features.
• Deep understanding of system design, data structures, and algorithms.
• Excellent knowledge of distributed computing frameworks such as Hadoop MapReduce and Spark.
• Strong knowledge of AWS infrastructure (EMR, S3, Lambda, Redshift, etc.).
• Strong understanding of data quality and governance.
• Team player, self‑driven, highly motivated individual who loves to learn new things.

Salário:

A Combinar

Benefícios:

Não informado

Equal Opportunity Employer:

We are an equal opportunity employer and welcome applications from all qualified individuals regardless of race, color, religion, gender, sexual orientation, gender identity or expression, national origin, age, disability, or veteran status.