Data Engineer Senior – DataHub, Spark & Cloud (Híbrido)

Aubay Spain; Madrid; Hybrid; EUR 60,000 - 90,000; Full time

Benefits offered by this job

Hybrid work 50%

Desarrollo profesional en un entorno I

Job summary

Aubay Spain busca un/a Data Engineer Senior para integrar un equipo de datos y contribuir al mantenimiento y evolución de la plataforma DataHub. Participarás en el diseño y optimización de pipelines y en proyectos de migración a la nube, combinando desarrollo con soporte en producción y buenas prácticas de DevOps.

Se requiere al menos 6 años de experiencia en Data Engineering, con fuerte dominio de Scala, Apache Spark y Hadoop/HDFS, así como experiencia en CI/CD y herramientas como Airflow u

Qualifications

• Experiencia mínima de 6 años como Data Engineer o similar.
• Experiencia sólida en Scala y Apache Spark.
• Conocimientos de Hadoop, HDFS y SQL.
• Experiencia en ETL/ELT y procesamiento de grandes volúmenes de datos.

Responsibilities

• Mantenimiento, soporte y evolución de la plataforma DataHub.
• Diseño, desarrollo y optimización de pipelines de datos.
• Migraciones hacia entornos cloud y modernización de infraestructuras.
• Automatización y orquestación de procesos con Airflow y Oozie.
• Gestión de entornos CI/CD y monitorización en producción.

Skills

Scala

Apache Spark

SQL

Airflow

Oozie

CI/CD

GitLab

Jenkins

Education

Titulación universitaria en Ingeniería, Informática o similar

Tools

Hadoop

HDFS

Cloud Storage (S3)

Job description

Aubay Spain busca un/a Data Engineer Senior para integrar un equipo de datos y contribuir al mantenimiento y evolución de la plataforma DataHub. Participarás en el diseño y optimización de pipelines y en proyectos de migración a la nube, combinando desarrollo con soporte en producción y buenas prácticas de DevOps.

Se requiere al menos 6 años de experiencia en Data Engineering, con fuerte dominio de Scala, Apache Spark y Hadoop/HDFS, así como experiencia en CI/CD y herramientas como Airflow u