ENGENHEIRO(A) DE DADOS

act digital; Brasil; Remote; BRL 200,000 - 280,000; Full time

Benefits offered by this job

Home Office

Job summary

A act digital está recrutando um Engenheiro de Dados Sênior para atuar com Databricks, Spark, Python e pipelines de dados em um projeto para cliente do segmento bancário. A posição envolve desenvolvimento de pipelines, modelagem relacional e dimensional, além de integração com AWS.

Deseja-se sólido conhecimento de Databricks, Spark (Batch/Streaming) e Kafka/Confluent, com atuação 100% remota (Home Office) e contratação CLT no Brasil.

Qualifications

• Sólida experiência com Databricks e Databricks SQL Warehouse — obrigatório.
• Experiência com jobs de Spark (Batch e Streaming).
• Experiência com Kafka/Confluent para ingestão e processamento de dados em tempo real.
• Domínio de Python para desenvolvimento, automação e APIs de dados.
• Desenvolvimento de pipelines de dados utilizando PySpark/Python.
• Conhecimento avançado em Modelagem Relacional e Dimensional, incluindo Data Marts.
• Experiência com Netezza, IBM Db2 e SQL Server.
• Experiência em projetos em AWS, com serviços de armazenamento e computação.

Responsibilities

• Atuar no design, desenvolvimento e manutenção de pipelines de dados.
• Trabalhar com Databricks, Spark e PySpark para processamento em batch/streaming.
• Projetar modelos relacionais e dimensionais, incluindo Data Marts.
• Analisar e implementar ingestão de dados com Kafka/Confluent.

Skills

Databricks

Spark

Python

Pipelines de dados

Modelagem de dados

AWS

SQL Server

Databricks SQL Warehouse

Kafka/Confluent

Netezza

IBM Db2

SQL Server

Tools

Databricks SQL Warehouse

Kafka/Confluent

Netezza

IBM Db2

SQL Server

AWS

Job description

A act digital está com oportunidade para atuar em um de nossos clientes do segmento bancário!

Buscamos um(a) Engenheiro(a) de Dados Sênior com sólida experiência em Databricks, Spark, Python e pipelines de dados.

O que buscamos:

• Sólida experiência com Databricks e Databricks SQL Warehouse — obrigatório
• Experiência com jobs de Spark (Batch e Streaming)
• Experiência com Kafka/Confluent para ingestão e processamento de dados em tempo real
• Domínio de Python para desenvolvimento, automação e APIs de dados
• Desenvolvimento de pipelines de dados utilizando PySpark/Python
• Conhecimento avançado em Modelagem Relacional e Dimensional, incluindo Data Marts
• Experiência com Netezza, IBM Db2 e SQL Server
• Experiência em projetos em AWS, com serviços de armazenamento e computação

Diferenciais:

• Vivência com arquitetura Data Lakehouse (Bronze, Silver e Gold)
• Conhecimento em CDC e replicação de dados
• Experiência com projetos de MLOps
• Experiência com Denodo e DataOps/CI/CD

Contratação: CLT

Modelo: 100% Home Office

Segmento: Bancário

Se você tem experiência sólida com Databricks, atuando com pipelines, modelagem, processamento e consumo de dados, quero conhecer seu perfil!

Se você é Sênior em Dados e tem uma boa bagagem com Databricks, quero conhecer seu perfil!