Senior Data Engineer: Real-Time & Batch Pipelines on AWS

Getnet Platforms; Madrid; Presencial; EUR 65.000 - 90.000; Jornada completa

Descripción de la vacante

Getnet Platforms busca un Data Engineer senior para diseñar, construir y operar pipelines de datos en una plataforma AWS nativa basada en Spark y Delta Lake. El rol exige experiencia en Spark Structured Streaming, procesamiento batch, Kafka/Confluent y governance de datos.

Se valorará dominio de AWS Glue, SageMaker y SQL avanzado, así como experiencia en entornos regulados. Ubicación en Madrid con posible horario híbrido. Se ofrece entorno técnico desafiante y oportunidades de crecimiento.

Formación

• Se requiere experiencia sólida como Data Engineer en entornos productivos de gran volumen.
• Formación técnica universitaria en ingeniería, ciencias o afines.
• Conocimiento profundo de Spark (batch y Structured Streaming) y Delta Lake.
• Experiencia con Kafka/Confluent y ecosistema AWS para data-lake y ETL.

Responsabilidades

• Diseñar, construir y operar pipelines de datos en tiempo real y por lotes en AWS.
• Implementar CDC, joins de enriquecimiento y gestión de checkpoints/offsets.
• Integrar Confluent Kafka, Schema Registry y optimizar throughput.
• Construir y optimizar tablas Delta Lake y gestionar esquemas.
• Desarrollar jobs en AWS Glue y orquestación con Lambda; soporte a SageMaker.

Conocimientos

Apache Spark

PySpark/Scala

Delta Lake

Kafka/Confluent

AWS Data Lake/Glue

SageMaker

SQL avanzado

CDC & SCD

Git/CI-CD

Educación

Licenciatura en Ingeniería o similar

Herramientas

Glue

Data Catalog

EMR

EMR Serverless

S3

Lambda

Delta Lake

Schema Registry

Debezium

Terraform / CloudFormation

Descripción del empleo

Getnet Platforms busca un Data Engineer senior para diseñar, construir y operar pipelines de datos en una plataforma AWS nativa basada en Spark y Delta Lake. El rol exige experiencia en Spark Structured Streaming, procesamiento batch, Kafka/Confluent y governance de datos.

Se valorará dominio de AWS Glue, SageMaker y SQL avanzado, así como experiencia en entornos regulados. Ubicación en Madrid con posible horario híbrido. Se ofrece entorno técnico desafiante y oportunidades de crecimiento.