Senior Data Engineer - Databricks & Cloud Data Pipelines

Minsait; Comunidad de Madrid; On-site; EUR 70,000 - 90,000; Full time

Benefits offered by this job

Proyectos internacionales

Plan de carrera adaptado

Autonomía y flexibilidad

Formación continua Open University/UdM

Job summary

Indra Group, a través de Minsait, impulsa la transformación digital con IA, cloud y soluciones de datos. Se busca un Senior Data Engineer para trabajar en proyectos nacionales e internacionales centrados en Databricks y arquitecturas cloud de última generación.

Se diseñarán pipelines escalables, ETL/ELT y procesamiento de grandes volúmenes con Databricks y PySpark, asegurando calidad, seguridad y coste-eficiencia a través de data warehouses, lakes y lakehouses.

Qualifications

• Más de 5 años de experiencia como Data Engineer.
• Experiencia demostrable trabajando con Databricks.
• Conocimientos sólidos de SQL y Python.
• Experiencia con Spark/PySpark para procesamiento de grandes volúmenes de datos.
• Conocimientos de Data Warehouse, Data Lake y arquitecturas Lakehouse (Delta Lake, Apache Iceberg).
• Valorable experiencia en proyectos de migración a cloud y certificaciones Databricks, AWS o Azure.

Responsibilities

• Diseñar, desarrollar y mantener pipelines de datos escalables en entornos cloud.
• Construir y optimizar procesos ETL/ELT para integración y transformación de datos.
• Desarrollar soluciones de procesamiento de datos utilizando Databricks y PySpark.
• Colaborar con equipos técnicos y de negocio para definir requisitos y casos de uso.
• Garantizar la calidad, seguridad y disponibilidad de los datos.
• Optimizar el rendimiento y los costes de almacenamiento y procesamiento.

Skills

Databricks

PySpark

SQL

Python

Spark

Data Warehouse

Data Lake

Lakehouse

Delta Lake

Apache Iceberg

Nube/Cloud

Tools

Databricks

PySpark

Job description

Indra Group, a través de Minsait, impulsa la transformación digital con IA, cloud y soluciones de datos. Se busca un Senior Data Engineer para trabajar en proyectos nacionales e internacionales centrados en Databricks y arquitecturas cloud de última generación.

Se diseñarán pipelines escalables, ETL/ELT y procesamiento de grandes volúmenes con Databricks y PySpark, asegurando calidad, seguridad y coste-eficiencia a través de data warehouses, lakes y lakehouses.