Senior Data Engineer (Databricks & PySpark)

SDG Group España; Madrid; Presencial; EUR 40.000 - 70.000; Jornada completa

Ventajas ofrecidas por este puesto de trabajo

Flexibilidad laboral

Formación continua

Apoyo económico para el teletrabajo

Retribución flexible

Descripción de la vacante

SDG Group España busca un Data Engineer para desarrollar pipelines de datos end-to-end utilizando Python y PySpark. La posición ofrece la oportunidad de trabajar con tecnologías innovadoras en un entorno de Big Data.

Se requiere experiencia en Databricks y procesamiento distribuido con Apache Spark. Se valorará un nivel fluido de inglés. La empresa ofrece un plan de carrera, flexibilidad laboral y formación continua.

Formación

• Más de 4 años de experiencia como Data Engineer en entornos Big Data.
• Sólida experiencia trabajando con Python y PySpark.
• Experiencia en procesamiento distribuido con Apache Spark.
• Conocimiento de arquitecturas de datos sobre Data Lake.
• Experiencia en entornos cloud (Azure, AWS o GCP).

Responsabilidades

• Desarrollar pipelines de datos end-to-end.
• Trabajar con Databricks en la construcción de procesos de transformación de datos.
• Colaborar en la definición de requerimientos técnicos para pipelines y procesos de datos.

Conocimientos

Python

PySpark

Databricks

Scala

Apache Spark

Inglés fluido

Herramientas

Airflow

dbt

Snowflake

Azure

AWS

GCP

Descripción del empleo

En SDG Group llevamos más de 30 años convirtiendo datos en impacto real. Somos una consultora global 100% especializada en Data, Analytics e Inteligencia Artificial, referente del sector según Gartner, Penteo y Everest Group.

Somos especialistas, y eso nos da una profundidad técnica y un conocimiento de negocio que marcan la diferencia en la transformación data-driven de nuestros clientes: más de 1.000 proyectos desarrollados anualmente, equipos altamente especializados y soluciones que llegan a producción.

Todo ello sustentado en nuestro Triple Expertise: visión de negocio, conocimiento tecnológico profundo y alianzas tecnológicas (Microsoft, Databricks, Snowflake, AWS, GCP, entre otras). Una combinación que nos ha llevado a trabajar con clientes del IBEX-35 y Fortune 500, contando con presencia global y más de 2.000 personas en todo el mundo.

Si quieres crecer en el mundo del dato, este es el lugar.

¿Cómo será tu día a día?

• Desarrollarás pipelines de datos end-to-end con Python y PySpark, desde la ingesta hasta su procesamiento en entornos Big Data.
• Trabajarás con Databricks en la construcción y optimización de procesos de transformación de datos.
• Participarás en el diseño de arquitecturas y soluciones de datos, colaborando con perfiles más senior.
• Implementarás modelos de datos y transformaciones sobre Data Lakes, asegurando eficiencia y escalabilidad.
• Colaborarás en la definición de requerimientos técnicos para pipelines y procesos de datos.
• Probarás y aplicarás nuevas tecnologías del ecosistema Big Data y cloud en proyectos reales.

¿Qué te hará triunfar en esta posición?

• +4 años de experiencia como Data Engineer en entornos Big Data.
• Experiencia sólida trabajando con Python y PySpark.
• Experiencia con Scala en entornos de datos.
• Experiencia trabajando con Databricks (imprescindible).
• Experiencia en procesamiento distribuido con Apache Spark.
• Conocimiento de arquitecturas de datos sobre Data Lake (modelado, particionado, optimización).
• Experiencia en entornos cloud (Azure, AWS o GCP).

También valoramos:

• Experiencia con orquestadores como Airflow o Databricks Workflows.
• Conocimiento de herramientas como dbt, Snowflake o similares.
• Experiencia con CI/CD y buenas prácticas de desarrollo.
• Se valorará positivamente nivel fluido de Inglés.

• La tecnología y los datos son nuestra esencia: No solo trabajamos con lo último del mercado, sino que te formaremos para que domines las herramientas más innovadoras en proyectos punteros y de nueva construcción con alto impacto. Además, contamos con un área de innovación donde exploramos nuevas alianzas y centros de I+D.
• Crecimiento y plan de carrera: Contarás con revisiones salariales semestrales o anuales, según la categoría profesional, y un desarrollo basado en meritocracia, con posibilidad de evolucionar hacia un camino más técnico o hacia posiciones de liderazgo y management.
• Aprendizaje y trabajo en equipo: Formarás parte de equipos con amplia experiencia tanto técnica como de negocio, en un entorno colaborativo donde podrás apoyarte en otros profesionales, aprender de referentes y desarrollarte constantemente.
• Diversidad con propósito: La adhesión a la Carta de la Diversidad en España refleja el compromiso con los principios europeos de igualdad, diversidad e inclusión en el entorno laboral. Diferentes perspectivas, mejores soluciones.
• Posición estable y con proyección: tendrás la oportunidad de construir tu carrera a largo plazo, en proyectos de Data & Analytics que generan impacto de verdad.
• Flexibilidad: Modelo de trabajo híbrido adaptado a las necesidades del equipo, con posibilidad de modalidad 100% remoto según la ubicación.
• Jornada intensiva los viernes y durante julio y agosto.
• Salario acorde a tu formación y experiencia.
• Apoyo económico para el teletrabajo.
• Formación continua: certificaciones oficiales, conferencias, workshops y cursos.
• Retribución flexible: ticket restaurante, ticket guardería, ayuda al transporte y seguro médico privado con Mapfre, extensible a tu familia.