Engenheiro(A) De Dados Sr - Gcp, Spark & Airflow | Inglês Avançado - Híbrido (Barueri/Sp)

Objective

Barueri

Hybrid

BRL 200,000 - 360,000

Full time

8 days ago

Get a reply from this employer

Your resume and cover letter, tailored to exactly what they’re hiring for.

Get past ATS filters

Qualifications

  • Graduação (ou cursando) em Ciência da Computação, Engenharia de Software, Engenharia da Computação, Sistemas de Informação ou áreas correlatas.
  • Experiência com pipelines de dados massivos (Batch/Streaming) usando Spark ou Cloud Dataflow.
  • Domínio de Airflow/Cloud Composer para orquestrar fluxos de dados.
  • SQL avançado e experiência com BigQuery, particionamento e otimização de queries.
  • Experiência com bancos de dados relacionais e NoSQL (PostgreSQL, Redis) e com mensageria (Pub/Sub).
  • Programação em Python, PySpark e/ou Java/Scala para engenharia de dados.

Responsibilities

  • Desenvolver e sustentar pipelines de dados massivos em Batch/Streaming.
  • Orquestrar fluxos de dados com Airflow/Cloud Composer e gerenciar DAGs.
  • Otimizar consultas SQL em Big Data e modelar dados analíticos.
  • Projetar arquitetura de armazenamento e mensageria na nuvem com baixa latência.
  • Integrar pipelines com microsserviços e plataformas de identidade na GCP.

Skills

ETL/ELT pipelines
Apache Spark
Airflow/Cloud Composer
SQL Avançado
Python/PySpark/Java/Scala
GCP
NoSQL (PostgreSQL, Redis)
REST/gRPC APIs

Education

Bacharelado em Ciência da Computação/Engenharia/IS

Tools

Google Cloud Platform (GCP)
BigQuery
Dataproc/GKE
PostgreSQL
Redis

Job description

Tecnologia, aprendizado contínuo e impacto real fazem parte do nosso jeito de evoluir.

Na Objective, você encontra um ambiente colaborativo, com espaço para evoluir, trocar conhecimento e construir soluções com qualidade ao lado de pessoas que valorizam conexões, desenvolvimento e inovação na prática.

Valorizamos a diversidade porque acreditamos que diferentes perspectivas fortalecem a inovação e a entrega de valor. Todas as nossas vagas estão abertas a todas as pessoas, com ou sem deficiência, independentemente de idade, gênero, orientação sexual, etnia, religião ou qualquer outra característica. Se você se identifica com esta oportunidade, venha construir com a gente.

O QUE BUSCAMOS?

Buscamos Engenheiro de Dados - Inglês Avançado, que queiram trabalhar conosco em um ambiente descontraído e dinâmico, com aprendizado contínuo no desenvolvimento de grandes projetos, junto junto à um grande cliente da área de Birô de Crédito, em um projeto global. Temos escritórios em São Paulo e Chicago (EUA).

ATENÇÃO

Esta é uma vaga hibrída, 2x por semana em Barueri/SP.

O QUE ESSE PROFISSIONAL IRÁ FAZER?
  • Desenvolver e sustentar pipelines de ETL/ELT complexos para processamento massivo de dados em ambientes Batch e Streaming, garantindo a ingestão e transformação contínua em larga escala.

  • Orquestrar fluxos e dependências de dados corporativos utilizando Cloud Composer (Apache Airflow) com gestão e otimização avançada de DAGs.

  • Atuar na modelagem analítica e na otimização pesada de consultas SQL em ecossistemas Big Data.

  • Projetar e manter a arquitetura de armazenamento e mensageria em nuvem, garantindo baixa latência, resiliência e alta performance.

  • Integrar pipelines de dados com ecossistemas de microsserviços modernos e plataformas de identidade na Google Cloud Platform (GCP).

O QUE É NECESSÁRIO PARA A POSIÇÃO?
  • Graduação (Ensino Superior) em Ciência da Computação, Engenharia de Software, Engenharia da Computação, Sistemas de Informação ou áreas correlatas (cursando ou completo).

  • Sólida e comprovada experiência no desenvolvimento de pipelines de dados massivos (Batch e Streaming) utilizando Apache Spark (Dataproc/GKE) e/ou Cloud Dataflow.

  • Domínio prático em orquestração de fluxos complexos de dados com Apache Airflow ou Cloud Composer.

  • Domínio avançado de SQL e vivência prática com BigQuery, incluindo técnicas de particionamento, otimização e ajuste de performance de queries.

  • Experiência prática com bancos de dados relacionais e não-relacionais: PostgreSQL, Cloud BigTable (NoSQL) para cargas massivas e Redis para camadas de cache.

  • Experiência em arquiteturas de mensageria e eventos em tempo real com Google Cloud Pub/Sub.

  • Domínio de programação em Python, PySpark e/ou Java/Scala para engenharia de dados.

  • Conhecimento em arquitetura de microsserviços, consumo e criação de APIs REST e gRPC.

  • Disponibilidade para atuação no modelo Híbrido em Barueri/SP.

O QUE SERIA UM DIFERENCIAL?
  • Experiência prévia na construção de microsserviços de alta performance utilizando frameworks como Quarkus ou Spring Boot em Birôs de Crédito.

  • Conhecimentos em GCP Identity Platform para governança e segurança na ingestão de eventos.

  • Vivência na implantação e operação de clusters Spark diretamente sobre Kubernetes (GKE).

  • Certificações oficiais na nuvem Google (ex: GCP Professional Data Engineer).

ETAPAS DO PROCESSO:
  1. Inscrição
  2. Fit cultural
  3. Entrevista técnica + Live coding
  4. Entrevista com o cliente
  5. Contratação
Get your free, confidential resume review.

or drag and drop your file here.

Similar jobs

Similar jobs worth comparing

Engenheiro(a) de Dados SR - GCP, Spark & Airflow | Inglês Avançado - Híbrido (Barueri/SP)
Engenheiro(a) de Dados SR - GCP, Spark & Airflow | Inglês Avançado - Híbrido (Barueri/SP)

Objective • Barueri

Hybrid
BRL 180,000 - 280,000
Engenheiro de Dados SR/Especialista - Inglês Avançado - Hibrido (Barueri/SP)
Engenheiro de Dados SR/Especialista - Inglês Avançado - Hibrido (Barueri/SP)

Objective Group • Barueri

Hybrid
BRL 180,000 - 240,000
Engenheiro de Dados SR/Especialista - Inglês Avançado - Hibrido (Barueri/SP)
Engenheiro de Dados SR/Especialista - Inglês Avançado - Hibrido (Barueri/SP)

Objective • Barueri

Hybrid
BRL 170,000 - 240,000
Engenheiro Implantado Avançado IV, Data Cloud, Google Cloud (Inglês, Português)
Engenheiro Implantado Avançado IV, Data Cloud, Google Cloud (Inglês, Português)

Google • São Paulo

On-site
BRL 400,000 - 560,000
Especialista De Engenharia De Dados Sênior (Googlecloud)
Especialista De Engenharia De Dados Sênior (Googlecloud)

Leega Consultoria • São Paulo

On-site
BRL 180,000 - 320,000
11089 - Engenheiro(a) de Dados | Google Cloud (GCP) - Sênior
11089 - Engenheiro(a) de Dados | Google Cloud (GCP) - Sênior

Runtalent • Brazil

Remote
BRL 180,000 - 300,000
Data Architect Sênior (Gcp)
Data Architect Sênior (Gcp)

confidential • Santa Catarina

Remote
BRL 350,000 - 600,000
Atuação 100% remota
Projeto em cliente global
Notebook fornecido
Engenheiro(a) de Dados Sênior(Google Cloud)
Engenheiro(a) de Dados Sênior(Google Cloud)

Leega Consultoria • São Paulo

On-site
BRL 180,000 - 240,000
Plano de saúde
Plano odontológico
PLR
+8
Engenheiro(a) de Dados Sênior
Engenheiro(a) de Dados Sênior

Hvar Consulting • Rio de Janeiro

Hybrid
BRL 180,000 - 260,000
Engenheiro de Dados | Python & SQL
Engenheiro de Dados | Python & SQL

Avanade Inc. • São Paulo

On-site
BRL 120,000 - 180,000
Vale refeição/alimentação
Convênio médico
Seguro de vida
+5