Engenheiro(a) de Dados Sênior (Plataforma de Dados, Cloud & Big Data)

BRQ Digital Solutions

São Paulo

Hybrid

BRL 167.000 - 257.000

Vollzeit

14 Tage+

Erhalte eine Antwort von diesem Arbeitgeber

Dein Lebenslauf und dein Anschreiben, genau auf das zugeschnitten, was gesucht wird.

Schaffe es an den ATS-Filtern vorbei

Zusammenfassung

BRQ Digital Solutions busca um(a) Engenheiro(a) de Dados Sênior para projetar, construir e evoluir nossa plataforma de dados em nuvem, assegurando qualidade desde ingestão até a camada curada. O papel envolve governança de dados, contratos de modelagem e atuação com squads multidisciplinares.

O(a) candidato(a) terá atuação em ambientes de Cloud (Azure/AWS), com experiência em Spark, Hadoop e ferramentas de orquestração como Airflow, além de práticas DevOps com Docker/Kubernetes.

Qualifikationen

  • Domínio de Python, PySpark, SQL, Scala e Java.
  • Experiência com Spark, Spark Streaming, Hadoop e Kafka.
  • Vivência sólida em Azure e AWS, Databricks, Cosmos DB e Airflow.
  • Experiência com containers Docker e Kubernetes, CI/CD (Drone, GitHub Actions, Jenkins).
  • Arquitetura e mapeamento/modelagem de dados.

Aufgaben

  • Construção de Plataforma: projetar e construir uma plataforma de dados resiliente, com qualidade em coleta, processamento e disponibilização na camada curada.
  • Governança e Modelagem: estabelecer contratos de modelagem e governança de dados com outras equipes.
  • Ciclo de Vida de Produtos: conduzir desenvolvimento voltado a produtos de dados em ambientes de nuvem (Cloud).

Kenntnisse

Python
PySpark
SQL
Scala
Java
Spark
Spark Streaming
Hadoop
Kafka
Azure
AWS
Databricks
Cosmos DB
Airflow
Docker
Kubernetes
Drone
GitHub Actions
Jenkins
Arquitetura de dados

Tools

Jira
Confluence
AKS
Databricks
Azure Cosmos DB
Kubernetes

Jobbeschreibung

Engenheiro(a) de Dados Sênior (Plataforma de Dados, Cloud & Big Data)

Buscamos um(a) Engenheiro(a) de Dados Sênior com forte visão de arquitetura e grande capacidade técnica para projetar, construir e evoluir nossa plataforma de dados resiliente. Você atuará em um primeiro momento em realizar o entendimento do que existe hoje, desenhando um fluxo funcional para melhoria de processos já existente e em um futuro este desenho irá para esteira de desenvolvimento, onde teremos que garantir a qualidade de ponta a ponta — desde a ingestão até a camada curada —, estabelecendo contratos de modelagem e governança em parceria com squads multidisciplinares. Se você domina ecossistemas de nuvem e processamento distribuído de alta volumetria, esta oportunidade é para você.


Responsabilidades e Atribuições


  • Construção de Plataforma: Projetar e construir uma plataforma de dados resiliente, garantindo requisitos rigorosos de qualidade em todas as etapas (coleta, processamento e disponibilização na camada curada para análises e produtos de dados).

  • Governança e Modelagem: Estabelecer, em parceria com outras equipes, processos e contratos sólidos de modelagem e governança de dados.

  • Ciclo de Vida de Produtos: Conduzir todo o ciclo de desenvolvimento voltado a produtos de dados em ambientes de nuvem (Cloud).


Requisitos Técnicos (Hard Skills)


  • Linguagens de Programação: Domínio de Python, PySpark, SQL, Scala e conhecimentos em Java.

  • Big Data & Processamento Distribuído: Experiência com Spark, Spark Streaming, Hadoop, manipulação de grandes volumes de dados e Kafka.

  • Plataformas de Dados & Cloud: Vivência sólida em Azure (com maior proficiência como diferencial) e AWS, utilizando Databricks, Cosmos DB e ferramentas de orquestração como Airflow.

  • Engenharia e DevOps: Experiência com containers (Docker, Kubernetes), microsserviços e ferramentas de CI/CD (Drone, GitHub Actions, Jenkins).

  • Arquitetura: Sólidos conhecimentos em arquitetura e mapeamento/modelagem de dados.


Habilidades Comportamentais (Soft Skills)


  • Colaboração Multidisciplinar: Elevado nível de interação e trabalho em equipe com diferentes áreas.

  • Inovação e Resolução de Problemas: Forte capacidade analítica para criar soluções criativas e disruptivas.

  • Autonomia e Qualidade: Organização, autonomia e rigor com a excelência nas entregas.

  • Metodologias Ágeis: Vivência em times Scrum com uso de ferramentas colaborativas (Jira e Confluence).


Diferenciais


  • Experiência em instituições financeiras.

  • Conhecimento em Kubernetes (AKS).

  • Experiência com Jenkins e automação de deploy.

  • Conhecimento em Kedro.

  • Experiência com ambientes Hadoop/Cloudera.

  • Vivência em microsserviços e arquiteturas distribuídas.

  • Conhecimento em Databricks sobre AWS.


Certificações


  • Certificação Databricks Data Engineer Associate (ou superior); ou compromisso de obtê-la em até 90 dias após o início das atividades.

  • Certificações Microsoft Azure (AZ-900 e DP-900) serão consideradas diferenciais.


Perfil

Buscamos um profissional que combine visão de Engenharia de Dados com Engenharia de Software, junto com visão de desenho de solução, entrevistas, reuniões com time técnido e negóio, com forte preocupação em qualidade de código, performance, escalabilidade e boas práticas de desenvolvimento. Espera-se autonomia técnica, capacidade analítica, colaboração com diferentes equipes e atuação em projetos críticos para o negócio.


Vaga - 78d1d0


#LI-JO1


#LI-Hybrid

Hol dir deinen kostenlosen, vertraulichen Lebenslauf-Check.

oder ziehe deine Datei hierhin.

Similar jobs

Ähnliche Jobs, die dir auch gefallen könnten

Engenheiro de Dados II
Engenheiro de Dados II

Meeta Solutions • Barueri

Vor Ort
BRL 180.000 - 260.000
Engenheiro(a) de Dados Junior
Engenheiro(a) de Dados Junior

Avanade Inc. • São Paulo

Vor Ort
BRL 120.000 - 180.000
Vale refeição
Convênio médico
Convênio odontológico
+8
Engenheiro de Dados AWS/Snowflake Pleno | Remoto
Engenheiro de Dados AWS/Snowflake Pleno | Remoto

Dataside • Brasilien

Remote
BRL 180.000 - 300.000
Engenheiro de dados
Engenheiro de dados

DBC Company • Brasilien

Vor Ort
BRL 120.000 - 170.000
Data Platform Especialista - 125819
Data Platform Especialista - 125819

GFT Technologies España • Cristalina

Vor Ort
BRL 167.400 - 223.200
Engenheiro de Dados Sênior | Híbrido São Paulo
Engenheiro de Dados Sênior | Híbrido São Paulo

Objective • São Paulo

Hybrid
BRL 180.000 - 240.000
12764582 - Engenheiro De Dados Sr
12764582 - Engenheiro De Dados Sr

Stefanini • Osasco

Vor Ort
BRL 180.000 - 260.000
Engenharia De Dados Sênior (Kafka / Aws) Híbrido/Sp
Engenharia De Dados Sênior (Kafka / Aws) Híbrido/Sp

Gft Brasil • Barueri

Vor Ort
BRL 180.000 - 300.000
Engenheiro de Dados Pleno
Engenheiro de Dados Pleno

Projeto 22 • São Paulo

Hybrid
BRL 120.000 - 180.000
Bônus anual (1 a 3 salários)
Assistência médica – dependentes
Assistência odontológica
+9
Tech Lead - Data Platform
Tech Lead - Data Platform

ROIT • Brasilien

Vor Ort
BRL 300.000 - 550.000