Engenheiro de Dados Pl

BRQ; São Paulo; Hybrid; BRL 180,000 - 300,000; Full time

Job summary

BRQ está buscando um(a) engenheiro(a) de dados para atuar em projetos de Big Data no Brasil, com foco em Spark, PySpark e Hadoop. O(a) candidato(a) ideal terá experiência com Spark SQL, Databricks, Hive/Impala e ferramentas de qualidade de código.

O papel exige domínio de PySpark, Python, PL/SQL e Shell Script, além de conhecimentos em Azure/AWS e Data Factory. A vaga oferece modelo híbrido, com atuação em São Paulo.

Qualifications

• Experiência em Big Data com Spark, Hive e HDFS.
• Desenvolvimento com PySpark e Spark SQL.
• Conhecimento avançado em PySpark, PL/SQL, Shell Script e Python.
• Experiência com Hadoop, Hive e Impala e Databricks.
• Conhecimento em ferramentas de qualidade e segurança de código (Sonar, Fortify).

Responsibilities

• Atuar em projetos de Big Data com Spark, Hive e HDFS.
• Desenvolver aplicações utilizando PySpark e Spark SQL.
• Utilizar PySpark, PL/SQL, Shell Script e Python no dia a dia.
• Trabalhar com Hadoop, Hive e Impala, além de Databricks.
• Aplicar controles com Control-M e assegurar qualidade com Sonar e Fortify.

Tools

PySpark

Spark SQL

Spark

Hadoop

Hive

Impala

HDFS

Python

PL/SQL

Shell Script

Databricks

Azure

AWS

Data Lake Storage

Data Factory

Sonar

Fortify

Control-M

Job description

Sobre a vaga

Vem ser um fera BRQ

Responsabilidades

• Experiência em projetos de Big Data, utilizando tecnologias como Spark, Hive e HDFS;
• Experiência comprovada no desenvolvimento de aplicações utilizando PySpark e Spark SQL;
• Conhecimento avançado em:
  • PySpark
  • PL/SQL
  • Shell Script
  • Python
• Conhecimento em Hadoop, incluindo Hive e Impala;
• Conhecimento sólido e experiência com Databricks;
• Experiência com Control-M;
• Conhecimento em ferramentas de qualidade e segurança de código, como Sonar e Fortify.

Requisitos

Databricks | PySpark | Spark SQL | Spark | Hadoop | Hive | Impala | HDFS | Python | PL/SQL | Shell Script | Control-M | Azure | AWS | Data Lake Storage | Data Factory | Sonar | Fortify

Diferenciais

• Certificação DataBricksCertificação Cloud (Azure / AWS)

Cultura na BRQ

Chamamos de BRQ Way o nosso jeito de cuidar das pessoas, com iniciativas de carreira e desenvolvimento, saúde e bem-estar, e comunicação e conexão. Trabalhamos com flexibilidade de acordo com o contexto do projeto (anywhere office, híbrido ou presencial) e investimos em desenvolvimento contínuo com BRQ Academy, mentoria, incentivo a certificações e programas de idiomas, entre outras frentes.

Diversidade, inclusão e liberdade fazem parte do nosso dia a dia. Incentivamos a candidatura de pessoas com perfis, trajetórias e realidades diversas, além de contarmos com oportunidades afirmativas para pessoas com deficiência e mulheres. Também temos três Grupos de Afinidade, chamados de Roars, que criam espaços de troca e impulsionam iniciativas inclusivas na empresa. https://www.brq.com/carreiras/

Ref: ID 51b5b7 #LI-Hybrid