Senior Data Engineer (Databricks & PySpark)

SDG Group; Barcelona; Presencial; EUR 55.000 - 85.000; Jornada completa

Ventajas ofrecidas por este puesto de trabajo

Ticket restaurant

Ticket guardería

Ayuda al transporte

Seguro médico privado Mapfre

Formación continua

Modelo híbrido

Descripción de la vacante

SDG Group, una consultora global especializada en Data, Analytics e Inteligencia Artificial, busca un Data Engineer para impulsar pipelines end-to-end en entornos Big Data. Trabajarás con PySpark y Databricks, diseñando arquitecturas de datos y optimizando procesos en Data Lakes.

Requerimos +3 años de experiencia, habilidades en Python/PySpark y experiencia en entornos cloud (Azure/AWS/GCP). Se valorará inglés y capacidad de trabajar en un entorno híbrido en Barcelona.

Formación

• Al menos 3 años como Data Engineer en entornos Big Data.
• Experiencia sólida con Python y PySpark.
• Conocimiento de Databricks y Spark distribuido.
• Experiencia en entornos cloud (Azure/AWS/GCP).
• Conocimiento de arquitecturas Data Lake y modelado.
• Familiaridad con herramientas DBA/BI y pipelines.

Responsabilidades

• Desarrollar pipelines de datos end-to-end con Python y PySpark.
• Trabajar con Databricks para transformar y optimizar procesos.
• Diseñar arquitecturas y soluciones de datos con perfiles senior.
• Implementar modelos y transformaciones sobre Data Lakes.
• Definir requisitos técnicos para pipelines y procesos.
• Probar y aplicar nuevas tecnologías del ecosistema Big Data y cloud.

Conocimientos

Python

PySpark

Databricks

Scala

Apache Spark

Data Lake

Azure

AWS

GCP

dbt

Airflow

Snowflake

Herramientas

Databricks

Snowflake

dbt

Airflow

Descripción del empleo

En SDG Group llevamos más de 30 años convirtiendo datos en impacto real. Somos una consultora global 100% especializada en Data, Analytics e Inteligencia Artificial, referente del sector según Gartner, Penteo y Everest Group.

Somos especialistas, y eso nos da una profundidad técnica y un conocimiento de negocio que marcan la diferencia en la transformación data-driven de nuestros clientes: más de 1.000 proyectos desarrollados anualmente, equipos altamente especializados y soluciones que llegan a producción.

Todo ello sustentado en nuestro Triple Expertise: visión de negocio, conocimiento tecnológico profundo y alianzas tecnológicas (Microsoft, Databricks, Snowflake, AWS, GCP, entre otras). Una combinación que nos ha llevado a trabajar con clientes del IBEX-35 y Fortune 500, contando con presencia global y más de 2.000 personas en todo el mundo.

Si quieres crecer en el mundo del dato, este es el lugar.

¿Cómo será tu día a día?

• Desarrollarás pipelines de datos end-to-end con Python y PySpark, desde la ingesta hasta su procesamiento en entornos Big Data.
• Trabajarás con Databricks en la construcción y optimización de procesos de transformación de datos.
• Participarás en el diseño de arquitecturas y soluciones de datos, colaborando con perfiles más senior.
• Implementarás modelos de datos y transformaciones sobre Data Lakes, asegurando eficiencia y escalabilidad.
• Colaborarás en la definición de requerimientos técnicos para pipelines y procesos de datos.
• Probarás y aplicarás nuevas tecnologías del ecosistema Big Data y cloud en proyectos reales.

¿Qué te hará triunfar en esta posición?

• +3 años de experiencia como Data Engineer en entornos Big Data.
• Experiencia sólida trabajando con Python y PySpark.
• Experiencia con Scala en entornos de datos.
• Experiencia trabajando con Databricks (imprescindible).
• Experiencia en procesamiento distribuido con Apache Spark.
• Conocimiento de arquitecturas de datos sobre Data Lake (modelado, particionado, optimización).
• Experiencia en entornos cloud (Azure, AWS o GCP).

También valoramos:

• Experiencia con orquestadores como Airflow o Databricks Workflows.
• Conocimiento de herramientas como dbt, Snowflake o similares.
• Experiencia con CI/CD y buenas prácticas de desarrollo.
• Se valorará positivamente nivel fluido de Inglés.

¿Qué nos hace diferentes?

• La tecnología y los datos son nuestra esencia: No solo trabajamos con lo último del mercado, sino que te formaremos para que domines las herramientas más innovadoras en proyectos punteros y de nueva construcción con alto impacto. Además, contamos con un área de innovación donde exploramos nuevas alianzas y centros de I+D.
• Crecimiento y plan de carrera: Contarás con revisiones salariales semestrales o anuales, según la categoría profesional, y un desarrollo basado en meritocracia, con posibilidad de evolucionar hacia un camino más técnico o hacia posiciones de liderazgo y management.
• Aprendizaje y trabajo en equipo: Formarás parte de equipos con amplia experiencia tanto técnica como de negocio, en un entorno colaborativo donde podrás apoyarte en otros profesionales, aprender de referentes y desarrollarte constantemente.
• Diversidad con propósito: La adhesión a la Carta de la Diversidad en España refleja el compromiso con los principios europeos de igualdad, diversidad e inclusión en el entorno laboral. Diferentes perspectivas, mejores soluciones.

Y además, disfrutarás de…

• Posición estable y con proyección: tendrás la oportunidad de construir tu carrera a largo plazo, en proyectos de Data & Analytics que generan impacto de verdad.
• Flexibilidad: Modelo de trabajo híbrido adaptado a las necesidades del equipo, con posibilidad de modalidad 100% remoto según la ubicación.
• Jornada intensiva los viernes y durante julio y agosto.
• Salario acorde a tu formación y experiencia.
• Apoyo económico para el teletrabajo.
• Formación continua: certificaciones oficiales, conferencias, workshops y cursos.
• Retribución flexible: ticket restaurante, ticket guardería, ayuda al transporte y seguro médico privado con Mapfre, extensible a tu familia.

Sigue descubriendo quiénes somos:

• En nuestra web corporativa.
• Nuestras publicaciones y contenido en Medium.
• En nuestras redes sociales: Instagram, LinkedIn y YouTube.