Databricks Data Engineer: End-to-End Pipelines

SDG Group España; Madrid; Híbrido; EUR 40.000 - 70.000; Jornada completa

Ventajas ofrecidas por este puesto de trabajo

Flexibilidad laboral

Formación continua

Apoyo económico para el teletrabajo

Retribución flexible

Descripción de la vacante

SDG Group España busca un Data Engineer para desarrollar pipelines de datos end-to-end utilizando Python y PySpark. La posición ofrece la oportunidad de trabajar con tecnologías innovadoras en un entorno de Big Data.

Se requiere experiencia en Databricks y procesamiento distribuido con Apache Spark. Se valorará un nivel fluido de inglés. La empresa ofrece un plan de carrera, flexibilidad laboral y formación continua.

Formación

• Más de 4 años de experiencia como Data Engineer en entornos Big Data.
• Sólida experiencia trabajando con Python y PySpark.
• Experiencia en procesamiento distribuido con Apache Spark.
• Conocimiento de arquitecturas de datos sobre Data Lake.
• Experiencia en entornos cloud (Azure, AWS o GCP).

Responsabilidades

• Desarrollar pipelines de datos end-to-end.
• Trabajar con Databricks en la construcción de procesos de transformación de datos.
• Colaborar en la definición de requerimientos técnicos para pipelines y procesos de datos.

Conocimientos

Python

PySpark

Databricks

Scala

Apache Spark

Inglés fluido

Herramientas

Airflow

dbt

Snowflake

Azure

AWS

GCP

Descripción del empleo

SDG Group España busca un Data Engineer para desarrollar pipelines de datos end-to-end utilizando Python y PySpark. La posición ofrece la oportunidad de trabajar con tecnologías innovadoras en un entorno de Big Data.

Se requiere experiencia en Databricks y procesamiento distribuido con Apache Spark. Se valorará un nivel fluido de inglés. La empresa ofrece un plan de carrera, flexibilidad laboral y formación continua.