Spark / Scala Developer (AWS) – Mid-Level

IT Partner; Madrid; On-site; EUR 29,000 - 35,000; Full time

Job summary

IT Partner está buscando un/a Data Engineer especializado/a en Apache Spark y Scala para un proyecto en el sector bancario. Se valorará experiencia en entornos AWS y en procesos ETL y pipelines de datos, con foco en calidad e integridad de datos.

La posición requiere autonomía, enfoque analítico y capacidad para gestionar incidencias con poca supervisión, manteniendo documentación y buenas prácticas en un entorno regulado. Se valorarán ubicaciones alternas y presencia en oficinas del cliente.

Qualifications

• Experiencia de al menos 2–3 años en Data Engineering.
• Experiencia práctica con Apache Spark, Scala y Hadoop.
• Conocimientos sólidos de AWS EMR, Glue, Lambda y Step Functions.
• Experiencia en desarrollo y mantenimiento de procesos ETL y pipelines de datos.
• Conocimientos de Terraform para infraestructura como código.
• Manejo de SQL y herramientas como Amazon Athena.
• Inglés C1 imprescindible.

Responsibilities

• Diseñar, desarrollar y mantener pipelines de datos con Spark y Scala.
• Implementar procesos ETL, transformaciones y migraciones de datos, garantizando integridad.
• Orquestar y monitorizar procesos batch con AWS Step Functions.
• Trabajar con AWS EMR, Glue y Lambda.
• Supervisar procesos en producción, analizar logs y diagnosticar errores.
• Realizar controles de calidad y validaciones de datos con SQL y Athena.
• Investigar incidencias y proponer soluciones correctivas.
• Documentar desarrollos y procedimientos operativos.
• Colaborar con equipos técnicos y funcionales.

Skills

Apache Spark

Scala

Python

Bash

SQL

Unix/Linux

Git

Maven

Jenkins

Inglés C1

Tools

Terraform

AWS EMR

AWS Glue

AWS Lambda

AWS Step Functions

Amazon Athena

Job description

Sector: Banca Experiencia: 2-3 años mínimo Ubicación: Preferiblemente en alguna de las oficinas del cliente, siguiendo su modelo de presencialidad. Se valorarán otras ubicaciones. Inglés: C1 (imprescindible) Salario MAX: 32Ks Descripción del puesto Buscamos un/a Data Engineer especializado/a en Apache Spark y Scala, con experiencia en entornos AWS y procesamiento de grandes volúmenes de datos, para incorporarse a un proyecto del sector bancario. La persona seleccionada participará en el diseño, desarrollo, mantenimiento y optimización de procesos ETL y pipelines de datos, trabajando en un entorno productivo y regulado. Buscamos un perfil autónomo, analítico y orientado a resultados, capaz de gestionar procesos de datos, realizar validaciones y resolver incidencias técnicas con poca supervisión. Responsabilidades

• Diseñar, desarrollar y mantener pipelines de datos utilizando Apache Spark y Scala.
• Implementar procesos ETL, transformaciones y migraciones de datos, garantizando su integridad y consistencia.
• Orquestar y monitorizar procesos batch mediante AWS Step Functions.
• Trabajar con servicios AWS como EMR, Glue y Lambda.
• Supervisar procesos en producción, analizar logs de Hadoop/YARN y diagnosticar errores.
• Realizar controles de calidad y validaciones de datos mediante SQL y Amazon Athena.
• Investigar incidencias, identificar causas raíz y proponer soluciones correctivas.
• Participar en la definición de soluciones técnicas y traducir requisitos de negocio en especificaciones.
• Documentar desarrollos, pruebas y procedimientos operativos.
• Colaborar con equipos técnicos y funcionales.

Requisitos imprescindibles

• Experiencia de al menos 2-3 años en Data Engineering.
• Experiencia práctica con Apache Spark, Scala y Hadoop.
• Conocimientos sólidos de AWS EMR, Glue, Lambda y Step Functions.
• Experiencia desarrollando y manteniendo procesos ETL y pipelines de datos.
• Conocimientos de Terraform para configuración de infraestructura.
• Experiencia en monitorización y resolución de incidencias en entornos productivos.
• Manejo de SQL y herramientas como Amazon Athena.
• Experiencia en procesamiento batch y orquestación de procesos.
• Conocimientos de Python, Bash y entornos Unix/Linux.
• Experiencia con Git, Maven y herramientas CI/CD como Jenkins.
• Inglés C1 imprescindible.

Se valorará

• Experiencia previa en banca o servicios financieros.
• Conocimientos de reporting regulatorio.
• Experiencia con Control‑M.
• Conocimientos de Power BI.
• Experiencia en análisis funcional, definición de casos de prueba y documentación técnica.

Perfil buscado Buscamos una persona proactiva, autónoma y resolutiva, con capacidad para trabajar en entornos productivos, gestionar incidencias, analizar problemas técnicos y asumir la responsabilidad de sus entregables. Se valorará especialmente la capacidad de adaptación y colaboración con equipos multidisciplinares.