Data Engineer Azure Databricks (PySpark)

CAS Training; Spain; Remote; EUR 42,000 - 65,000; Full time

Benefits offered by this job

Acceso a plataforma de formación

Job summary

CAS Training busca un/a Data Engineer para trabajar 100% remoto desde España, con formación universitaria y al menos 4 años de experiencia en ingeniería y procesamiento de datos. Se valoran PySpark, Apache Spark y soluciones en Azure.

La experiencia en Delta Lake y Azure Data Factory es muy deseable para colaborar en entornos de Big Data. Se trabajará en proyectos de transformación de datos, optimización y calidad de datos, con acceso a formación gratuita para impulsar el desarrollo profesional.

Qualifications

• Al menos 4 años de experiencia en Data Engineering.
• Experiencia práctica con PySpark y Apache Spark.
• Conocimientos en entornos Azure y almacenamiento de datos (Data Lake Storage).
• Implementación de pipelines de datos y soluciones de procesamiento distribuido.
• Trabajo en proyectos en entorno Azure y Big Data.

Responsibilities

• Desarrollo y mantenimiento de procesos de ingeniería de datos utilizando PySpark y Apache Spark.
• Gestión y procesamiento de datos en entornos Azure.
• Trabajo con Azure Data Lake Storage.
• Implementación y gestión de soluciones de almacenamiento y procesamiento mediante Delta Lake.
• Desarrollo y mantenimiento de pipelines de datos con Azure Data Factory.
• Trabajo con Azure Databricks para procesamiento y transformación de grandes volúmenes de datos.
• Participación en iniciativas de gestión, calidad y optimización de datos.

Skills

PySpark

Apache Spark

Azure

Big Data

Education

University degree

Tools

Azure Data Lake Storage

Delta Lake

Azure Data Factory

Azure Databricks

Job description

Buscamos un/a Data Engineer con formación universitaria y al menos 4 años de experiencia en ingeniería y procesamiento de datos, con conocimientos sólidos de tecnologías del ecosistema Azure y Apache Spark. Participarás en proyectos de transformación y gestión de datos, trabajando con tecnologías cloud y soluciones de procesamiento distribuido.

Modalidad

• 100% teletrabajo (residencia en España imprescindible)
• Imprescindible residir en alguna de las siguientes ubicaciones: Salamanca, Cáceres, Badajoz o León. Castellón, Alicante, Albacete o Murcia. Islas Canarias. Andalucía: Granada, Jaén, Almería, Málaga, Sevilla, Huelva o Cádiz.
• No es necesario disponer de certificado oficial, pero sí garantizar un nivel suficiente para trabajar y comunicarse en inglés.
• Desarrollo y mantenimiento de procesos de ingeniería de datos utilizando PySpark y Apache Spark.
• Gestión y procesamiento de datos en entornos Azure.
• Trabajo con Azure Data Lake Storage.
• Implementación y gestión de soluciones de almacenamiento y procesamiento mediante Delta Lake.
• Desarrollo y mantenimiento de pipelines de datos con Azure Data Factory.
• Trabajo con Azure Databricks para el procesamiento y transformación de grandes volúmenes de datos.
• Participación en iniciativas de gestión, calidad y optimización de datos.
• Titulación universitaria.
• Al menos 4 años de experiencia en proyectos de Data Engineering.
• Experiencia práctica con: PySpark / Apache Spark. Azure Data Lake Storage.
• Residencia en alguna de las ubicaciones indicadas.
• Proyecto tecnológico en entorno Azure y Big Data.
• Modalidad 100% remoto.
• Acceso gratuito a nuestra plataforma de formación para impulsar tu desarrollo profesional.