Big Data Specialist

Shakers; Madrid; Híbrido; EUR 55.000 - 75.000; Jornada completa

Descripción de la vacante

Shakers busca un/a Data Engineer Big Data para unirse a un proyecto a largo plazo con presencia híbrida en Madrid. Trabajarás en soluciones con Spark, Java y Python, gestionando datos batch y en tiempo real y liderando la integración de pipelines desde requisitos hasta producción.

El equipo maneja Azure (Power Apps, Data Factory, Databricks) y Google BigQuery, con foco en eficiencia y DevOps/DataOps. Se valorará experiencia en seguros y capacidad de generar documentación técnica clara.

Formación

• Más de 5 años de experiencia diseñando e implementando arquitecturas de Big Data.
• Experiencia sólida integrando y tratando datos en batch y en tiempo real con Spark.
• Conocimiento en ingeniería de procesos de IA: preparación de datasets e industrialización de código.
• Experiencia demostrable desarrollando software con Java y Python.
• Conocimientos avanzados de Azure (Power Apps, Data Factory, Databricks, FinOps).
• Experiencia con Google BigQuery: automatización de queries y gestión de accesos.
• Dominio avanzado de SQL.
• Titulación en Ingeniería Superior y/o Técnica.
• Disponibilidad para modelo híbrido en Madrid (1 día/semana presencial).

Responsabilidades

• Llevar proyectos de Big Data de extremo a extremo, desde el levantamiento de requisitos hasta el despliegue en producción.
• Diseñar soluciones de datos y elaborar la documentación técnica y funcional correspondiente.
• Supervisar desarrollos externos y coordinar los ciclos de pruebas.
• Construir soluciones técnicas aplicando Spark, Java y Python.
• Integrar fuentes de datos mediante procesos batch y en tiempo real, liderando el proyecto de punta a punta.
• Optimizar procesos de datos existentes para mejorar el rendimiento de los sistemas.
• Proponer mejoras en las prácticas de Data Engineering y explorar enfoques DevOps/DataOps.

Conocimientos

Spark

Java

Python

Azure

Google BigQuery

SQL

Data Engineering

DevOps/DataOps

Big Data Architecture

Educación

Ingeniería Superior

Herramientas

Databricks

Power Apps

Data Factory

Power BI

Descripción del empleo

Descripción del trabajo

Data Engineer Big Data - Spark, Azure & BigQuery

En Shakers colaboramos con una aseguradora líder en España, muy enfocada en innovación y transformación digital, para incorporar un/a Data Engineer especializado/a en Big Data a su equipo de Data Engineering. Proyecto de largo recorrido, con presencia híbrida en Madrid.

El reto

El equipo de Data Engineering gestiona proyectos de Big Data de principio a fin, desde la toma de requisitos hasta la puesta en producción. Necesitan a alguien que diseñe soluciones, lidere la integración de datos batch y en tiempo real, y que se mueva con soltura entre Spark, Java y Python. El día a día combina diseño técnico, documentación, supervisión de desarrollos externos y una búsqueda constante de eficiencia en los procesos de datos, con margen para proponer mejoras y explorar prácticas de DevOps/DataOps.

Responsabilidades

• Llevar proyectos de Big Data de extremo a extremo, desde el levantamiento de requisitos hasta el despliegue en producción.
• Diseñar soluciones de datos y elaborar la documentación técnica y funcional correspondiente.
• Supervisar desarrollos externos y coordinar los ciclos de pruebas.
• Construir soluciones técnicas aplicando Spark, Java y Python.
• Integrar fuentes de datos mediante procesos batch y en tiempo real, liderando el proyecto de punta a punta.
• Optimizar procesos de datos existentes para mejorar el rendimiento de los sistemas.
• Proponer mejoras en las prácticas de Data Engineering y explorar enfoques DevOps/DataOps.

Requisitos

• Más de 5 años de experiencia diseñando e implementando arquitecturas de Big Data.
• Experiencia sólida integrando y tratando datos en batch y en tiempo real con Spark.
• Conocimiento en ingeniería de procesos de IA: preparación de datasets e industrialización de código.
• Experiencia demostrable desarrollando software con Java y Python.
• Conocimientos avanzados de Azure (Power Apps, Data Factory, Databricks, FinOps).
• Experiencia con Google BigQuery: automatización de queries y gestión de accesos.
• Dominio avanzado de SQL.
• Titulación en Ingeniería Superior y/o Técnica.
• Disponibilidad para modelo híbrido en Madrid (1 día/semana presencial).

Se valora

• Conocimiento del sector seguros.
• Experiencia con DevOps/DataOps, incluyendo integración y despliegue continuo.
• Familiaridad con herramientas de integración o analítica como OAS, Power BI, Informatica PowerCenter o Data Quality.

Por qué este proyecto

• Proyecto a largo plazo, con estabilidad y continuidad.
• Pieza clave en la evolución de una plataforma de datos estratégica.
• Impacto directo en la arquitectura Big Data y en la estrategia de datos.
• Oportunidad de consolidarte como referente técnico en Azure y Google BigQuery.

#BigData #Spark #Azure #GoogleBigQuery #DataEngineering #Freelance #Shakers