Desarrollador de Big Data

Jordan martorell s.l.; Valencia; Presencial; EUR 45.000 - 65.000; Jornada completa

Descripción de la vacante

Una empresa de tecnología en Valencia busca un Desarrollador Senior Big Data con más de 4 años de experiencia en PySpark y nivel medio-alto en Scala. El candidato ideal debe tener conocimientos en orquestación mediante Azure Data Factory, así como experiencia con metodologías ágiles y herramientas de Atlassian. La función incluye el desarrollo y optimización de procesos ETL/ELT, coordinación con equipos de Reporting y diseño de pipelines end-to-end.

Formación

• Más de 4 años de experiencia en PySpark.
• Nivel medio-alto en Scala.
• Conocimiento de procesos internos en Santander.
• Experiencia con metodologías ágiles.

Responsabilidades

• Desarrollar y optimizar procesos ETL/ELT en PySpark y Scala.
• Orquestar soluciones con Azure Data Factory.
• Coordinar con equipos de Reporting y Arquitectura.

Conocimientos

PySpark

Scala

Azure Data Factory

Metodologías ágiles

Atlassian (Jira, Confluence)

Herramientas

Autosys

Control-M

Descripción del empleo

Desarrollador Senior Big Data – Reporting Regulatorio

+4 años en PySpark (Spark SQL, DataFrames; Spark Streaming valorado).

Nivel medio-alto en Scala.

Orquestación con Azure Data Factory o similares (Autosys, Control-M).

Conocimiento de procesos internos Santander (ITSM, RLSE Data, Change Management, entornos DES/PRE/PRO).

Experiencia con metodologías ágiles y Atlassian (Jira, Confluence).

Valorables:

• Certificaciones Azure (Databricks Data Engineer, Azure Data Engineer).
• Conocimiento de dbt, Great Expectations.
• Diseño y desarrollo de procesos ETL/ELT masivos en PySpark y Scala.
• Extracción y transformación de datos de Tarjetas y Medios de Pago.
• Optimización de jobs Spark y mantenimiento de pipelines existentes.
• Coordinación con equipos de Reporting, Riesgos y Arquitectura.

Competencias clave:

• Proactividad y ownership de los pipelines end-to-end.
• Alta capacidad analítica y atención al detalle.
• Comunicación fluida con equipos funcionales y técnicos.