Spark & Azure Big Data Engineer

Aldia; Barcelona; Presencial; EUR 60.000 - 85.000; Jornada completa

Descripción de la vacante

ALDIA busca un/a Ingeniero/a de Big Data y Cloud para unirse a su equipo de consultoría en Barcelona. Trabajarás en pipelines de datos con Spark/Scala, pruebas y monitorización de plataformas en Azure, asegurando ingesta, transformación y procesamiento de datos robustos.

Se valorará experiencia en Hadoop/Hive y scripting. Se prevé incorporación indefinida y entorno de consultoría tecnológica a nivel internacional desde Barcelona.

Formación

• Mínimo 2 años de experiencia como ingeniero de software.
• Experiencia en programación funcional (preferiblemente Scala).
• Más de 1 año de experiencia en Apache Spark 2.0 o superior.
• Conocimiento de patrones de diseño de software.
• Capacidad para escribir consultas SQL complejas.
• Buena comprensión de la computación distribuida.

Responsabilidades

• Desarrollar pipelines de procesamiento de datos usando Spark/Scala.
• Desarrollar pruebas usando Spark/Scala.
• Desarrollar y monitorizar la plataforma en la nube Azure y componentes para ingesta, transformación y procesamiento de datos.
• Diagnosticar y resolver problemas complejos de la infraestructura de datos; optimizar rendimiento.
• Diseñar e implementar programas según requisitos funcionales y no funcionales.
• Desarrollar y mantener documentación técnica y seguir control de cambios.

Conocimientos

Software engineering

Functional programming (Scala)

Apache Spark

SQL

Distributed computing

Design patterns

Herramientas

Spark

Azure

Scala

Descripción del empleo

ALDIA busca un/a Ingeniero/a de Big Data y Cloud para unirse a su equipo de consultoría en Barcelona. Trabajarás en pipelines de datos con Spark/Scala, pruebas y monitorización de plataformas en Azure, asegurando ingesta, transformación y procesamiento de datos robustos.

Se valorará experiencia en Hadoop/Hive y scripting. Se prevé incorporación indefinida y entorno de consultoría tecnológica a nivel internacional desde Barcelona.