Senior Data Engineer – Big Data & Cloud (Hybrid)

Grupo TECDATA Engineering; Madrid; Hybrid; EUR 60,000 - 90,000; Full time

Job summary

Grupo TECDATA Engineering busca un Senior Data Engineer para liderar arquitecturas Big Data y Cloud, trabajando en entornos híbridos y plataformas en la nube. El rol combina diseño y desarrollo, con impacto directo en la evolución de la plataforma de datos.

Se trabajará en pipelines batch y real time, guiará al equipo técnico y colaborará con IT y negocio, participando en demos y en la entrega de valor para el cliente. Valorable experiencia en GCP, Kafka y governance de datos.

Qualifications

• Más de 3 años de experiencia diseñando y desarrollando procesos batch y real time con Spark.
• Alto nivel de Scala sobre Spark y conocimientos de Java.
• Experiencia con HDFS, Hive, Kudu y Solr.
• Conocimiento profundo de Apache Kafka a nivel de arquitectura y desarrollo.
• Experiencia con GCP y BigQuery; conocimientos de dbt, SQL y Python.
• Experiencia con Git/Bitbucket, Jenkins y CI/CD; Scrum.

Responsibilities

• Diseñar y evolucionar arquitecturas de datos batch y real time sobre Cloudera y Google Cloud Platform (GCP).
• Desarrollar y mantener procesos de ingesta, almacenamiento y transformación de datos con Spark, Scala, BigQuery, dbt, SQL y Python.
• Trabajar con arquitecturas de datos, gobierno del dato y optimización de procesos productivos.
• Participar en la planificación del backlog, estimaciones técnicas y coordinación con el Product Owner.
• Colaborar con el cliente, los equipos de IT y negocio, y participar en demos.
• Resolver incidencias de producción y supervisar procesos mediante Control-M.
• Asegurar las buenas prácticas técnicas y orientar al resto del equipo.

Skills

Big Data

Spark

Scala

Java

Python

Git/CI-CD

Scrum

Tools

Apache Spark

HDFS

Hive

Kafka

BigQuery

dbt

Job description

Grupo TECDATA Engineering busca un Senior Data Engineer para liderar arquitecturas Big Data y Cloud, trabajando en entornos híbridos y plataformas en la nube. El rol combina diseño y desarrollo, con impacto directo en la evolución de la plataforma de datos.

Se trabajará en pipelines batch y real time, guiará al equipo técnico y colaborará con IT y negocio, participando en demos y en la entrega de valor para el cliente. Valorable experiencia en GCP, Kafka y governance de datos.