Data Engineer Spark | Hibrido Málaga

Kenostechnology; Málaga; Presencial; EUR 40.000 - 60.000; Jornada completa

Descripción de la vacante

Una empresa tecnológica está buscando un/a Data Engineer con más de 4 años de experiencia en el diseño y operación de pipelines de datos. Las responsabilidades incluyen construir y optimizar procesos ETL/ELT, trabajar con grandes volúmenes de información y desarrollar soluciones de análisis y reporting. Se requiere experiencia con herramientas como Apache Spark y Databricks, así como habilidades en Python y visualización de datos en Power BI.

Formación

• Más de 4 años de experiencia en diseño y operación de pipelines de datos.
• Familiaridad con entornos distribuidos y procesamiento de grandes volúmenes de información.
• Experiencia en creación de dashboards y reportes.

Responsabilidades

• Diseñar, implementar y optimizar pipelines ETL/ELT.
• Procesar grandes volúmenes de datos y optimizar el rendimiento.
• Automatizar tareas y transformaciones de datos.

Conocimientos

Diseño de pipelines ETL/ELT

Optimización de procesos de datos

Trabajo con Apache Spark

Automatización con Python

Herramientas

Apache Spark

Databricks

PostgreSQL

Oracle

Power BI

GitHub

Descripción del empleo

Buscamos un/a Data Engineer con 4+ experiencia en el diseño y operación de pipelines de datos en entornos distribuidos. La persona se encargará de construir y optimizar procesos ETL/ELT, trabajar con grandes volúmenes de información y desarrollar soluciones de análisis y reporting que soporten las necesidades de negocio.

• Diseñar, implementar y optimizar pipelines ETL/ELT en entornos distribuidos utilizando Apache Spark y/o Databricks.
• Procesar grandes volúmenes de datos, optimizando particionado, tuning de jobs y gestión de datasets a escala.
• Trabajar con bases de datos relacionales como PostgreSQL y Oracle.
• Automatizar tareas y transformaciones de datos usando Python y librerías de data engineering (pandas, PySpark).
• Crear dashboards y reportes para visualización en Power BI.
• Gestionar control de versiones con GitHub: ramas, pull requests, colaboración y CI/CD básico.