Azure Databricks Data Engineer: Spark & Data Lakehouse

Bluetab, an IBM Company; Vitoria; Híbrido; EUR 50.000 - 70.000; Jornada completa

Ventajas ofrecidas por este puesto de trabajo

Teletrabajo flexible

Sede Madrid ó Hubs: Alicante,Barcelona

Bilbao y Málaga

Descripción de la vacante

Bluetab, an IBM Company, busca un Data Engineer para unirse a su equipo en España. Trabajarás con Scala, Python o PySpark sobre Spark y Databricks, diseñando pipelines y arquitecturas Data Lakehouse en Azure y otros entornos cloud.

Se valorará experiencia en SQL avanzado, Terraform y Airflow, y una mentalidad analítica para optimizar procesos de datos a gran escala. Se ofrece teletrabajo flexible y beneficios múltiples.

Formación

• Sólida experiencia en desarrollo con Scala o Python o PySpark sobre Spark para procesamiento distribuido.
• Experiencia con Databricks y conocimiento en arquitecturas Data Lakehouse.
• Conocimiento en SQL avanzado, optimización de queries y modelos de datos escalables.
• Experiencia en despliegues y automatización con herramientas como Terraform, Airflow o similares.
• Mentalidad analítica y enfoque en la eficiencia, optimización y escalabilidad de procesos de datos.
• Actitud colaborativa y pasión por la innovación, trabajando en equipo para resolver desafíos complejos.
• Familiaridad con entornos Cloud.

Responsabilidades

• Desarrollar y optimizar pipelines de datos en Scala, Python o PySpark desarrollando y ejecutando procesos en Spark, o sobre Databricks.
• Diseñar y construir arquitecturas Data Lake y Data Warehouse en entornos Cloud (Azure mayormente o en AWS o GCP).
• Transformar datos a gran escala mediante Spark, aplicando buenas prácticas de procesamiento distribuido.
• Optimizar queries y almacenamiento en Databricks, reduciendo costos y mejorando eficiencia.
• Integrar múltiples fuentes de datos, asegurando calidad y trazabilidad.
• Colaborar con equipos multidisciplinares para mejorar procesos de ingesta, transformación y explotación de datos.

Conocimientos

Scala

Python

PySpark

Spark

Herramientas

Databricks

Terraform

Airflow

Descripción del empleo

Bluetab, an IBM Company, busca un Data Engineer para unirse a su equipo en España. Trabajarás con Scala, Python o PySpark sobre Spark y Databricks, diseñando pipelines y arquitecturas Data Lakehouse en Azure y otros entornos cloud.

Se valorará experiencia en SQL avanzado, Terraform y Airflow, y una mentalidad analítica para optimizar procesos de datos a gran escala. Se ofrece teletrabajo flexible y beneficios múltiples.