Big Data Engineer – Spark / Scala / ELK

IT Partner; Tarragona; Presencial; EUR 40.000 - 60.000; Jornada completa

Descripción de la vacante

Una empresa líder en el sector financiero busca un profesional para participar en la creación de un dashboard en Kibana y el procesamiento de Big Data en un entorno colaborativo de Market Risk. Se requiere experiencia previa en tecnologías como Hadoop y Spark, y conocimientos de SQL. Esta oportunidad ofrece un entorno de trabajo flexible y deslocalizado para candidatos con el perfil adecuado.

Formación

• Experiencia previa en proyectos de Big Data o analítica.
• Conocimientos en Hadoop y SQL son esenciales.
• Conocimiento básico de Shell scripting es deseable.

Responsabilidades

• Desarrollar y mantener procesos de ingesta y transformación de datos en Spark.
• Diseñar y construir dashboards en Kibana para visualización de datos de Market Risk.
• Colaborar en tareas comunes del área de Big Data.

Conocimientos

Análisis de datos

Desarrollo en Spark

SQL

Shell scripting

Colaboración

Herramientas

Kibana

Hadoop

Elasticsearch

Spark

Azure Databricks

Descripción del empleo

Preferencia por ciudades con sede (flexible para candidatos deslocalizados si el perfil encaja).
Modalidad: acorde a experiencia y conocimientos del perfil.
Nivel de inglés: Nivel B2 requerido.

Descripción del puesto

Buscamos un profesional para participar en la creación de un nuevo dashboard en Kibana, incluyendo tareas de preprocesamiento Big Data en el Data Lake (SCIB).
Formará parte de un equipo especializado en Market Risk, colaborando en el desarrollo de procesos en tecnologías Big Data (Spark, Scala) y tareas del área.
El rol implica trabajar con tecnologías del ecosistema ELK (Kibana, Elasticsearch, Logstash), procesamiento de datos en entornos distribuidos (Hadoop, Spark), y contribuir a soluciones analíticas para la gestión de riesgos del mercado.

Responsabilidades

• Desarrollo y mantenimiento de procesos de ingesta y transformación de datos en Spark (Scala).
• Diseño y construcción de dashboards en Kibana para visualización de datos de Market Risk.
• Preprocesamiento y gestión de datos en el Data Lake (SCIB).
• Colaboración en tareas comunes del área de Big Data.
• Aplicación de buenas prácticas de desarrollo y documentación de procesos.

Requisitos obligatorios

• Experiencia previa en proyectos tecnológicos, preferentemente en datos o analítica.
• Conocimiento técnico y experiencia en Hadoop.
• Conocimiento en SQL.
• Conocimiento básico de Shell scripting.

Requisitos no obligatorios

• Conocimiento técnico de Azure Databricks.
• Experiencia en el sector bancario o en Riesgos de Mercado.

Condiciones

• Ubicación: Preferencia por ciudades con sedes; posibilidad de perfiles deslocalizados.
• Tarifa: Se definirá según experiencia y conocimientos.