Big Data Architect

SDG Group; España; On-site; EUR 60,000 - 110,000; Full time

Job summary

SDG Group busca un profesional senior de Data Architecture para diseñar arquitecturas end-to-end en grandes volúmenes de datos y liderar la estrategia tecnológica en proyectos globales. Trabajarás con ETL/ELT, gobernanza y plataformas en la nube para generar insights.

Debes dominar Spark, Databricks, Snowflake y prácticas DataOps, reportando a líderes técnicos y colaborando con equipos internacionales en entornos multi-nube.

Qualifications

• Formación en Ingeniería Informática, Telecomunicaciones, matemáticas, Física o similar.
• Experiencia en Big Data con procesamiento distribuido y pipelines ETL/ELT.
• Conocimientos de Python/Scala, Spark y plataformas como Airflow, Databricks o Snowflake.
• Buenas prácticas de código, CI/CD y gobernanza de datos, con monitorización de pipelines.

Responsibilities

• Diseñarás arquitecturas end-to-end para procesamiento de grandes volúmenes de datos.
• Definirás el stack tecnológico y estándares para generación de insights.
• Gestionarás almacenamiento y formatos (Parquet, Delta Lake, Iceberg) en multi-nube.
• Capacitarás equipos y stakeholders ejecutivos, traduciendo necesidades en soluciones viables.

Skills

Big Data

Python

Scala

Apache Spark

Airflow

Snowflake

Delta Lake

dbt Cloud

DataOps

Git

Education

Ingeniería Informática

Telecomunicaciones

Matemáticas

Tools

Databricks

Snowflake

Parquet

Delta Lake

Iceberg

dbt Cloud

Kubernetes

Job description

En SDG Group somos líderes globales en Big Data, Business Intelligence, Analytics e Inteligencia Artificial. Desde 1994 hemos acompañado a la mitad del IBEX-35 y a algunas de las compañías más destacadas a nivel internacional en su transformación digital, convirtiendo los datos en soluciones de alto impacto gracias a nuestras alianzas estratégicas con Microsoft, Google y AWS, y a los mejores aceleradores tecnológicos del mercado. Nuestro equipo de Data Technologies es el epicentro donde aterrizan proyectos desafiantes y las soluciones más disruptivas. Trabajamos de forma transversal con clientes de múltiples sectores, siempre a la vanguardia tecnológica, combinando innovación, expertise y autonomía real . Diseñamos arquitecturas que marcan estándares y creamos aceleradores que transforman. No solo se ejecutan proyectos, sino que se desarrollan aceleradores, artefactos y pruebas de concepto. Aquí no solo presentarás proyectos, desarrollarás casos de uso innovadores, colaborarás con expertos de primer nivel y posicionarás a SDG como referente.

¿Cómo será tu día a día?

• Diseñarás y definirás arquitecturas end-to-end para el procesamiento de grandes volúmenes de datos, alineando la estrategia tecnológica con los objetivos de negocio y estableciendo las bases para pipelines ETL/ELT escalables y de alto rendimiento.
• Definirás el stack tecnológico y los estándares de implementación liderando la toma de decisiones arquitectónicas que impulsen la generación de insights estratégicos.
• Establecerás las estrategias de almacenamiento, formatos de datos (Parquet, Delta Lake, Apache Iceberg) y patrones de acceso, garantizando eficiencia, escalabilidad y gobierno en arquitecturas cloud multi-proveedor ( AWS, Azure, GCP ).
• Liderarás el diseño de arquitecturas avanzadas como Data Lakehouse, Data Mesh y Modern Data Warehouses, definiendo la evolución de la plataforma de datos corporativa y su roadmap tecnológico.
• Actuarás como líder técnico con equipos multidisciplinares y stakeholders ejecutivos, traduciendo necesidades estratégicas en arquitecturas técnicas viables, escalables y alineadas con el negocio.
• Evaluarás, seleccionarás e impulsarás la adopción de tecnologías emergentes (Delta Live Tables, dbt Cloud, Apache Iceberg, Snowflake), posicionando a la organización a la vanguardia del ecosistema Big Data.
• Establecerás marcos de calidad, observabilidad y gobernanza mediante DataOps, Data Quality frameworks y CI/CD, garantizando plataformas de datos confiables.

¿Qué te hará triunfar en esta posición?

• Formación en Ingeniería Informática, Telecomunicaciones, matemáticas, Física, o similares.
• Experiencia en Big Data :almeno 8 añostrabajando con procesamiento distribuido y pipelines ETL/ELT en entornos complejos, utilizando lenguajes como Python o Scala, frameworks como Apache Spark, y plataformas como Airflow, Databricks o Snowflake; conocimiento de arquitecturas de datos (Data Lakehouse, cloud) y formatos/almacenamiento como Parquet, Delta Lake, Iceberg o Hudi.
• Buenas prácticas y gestión de código: Git, CI/CD, DataOps, monitorización de pipelines, control de calidad de datos y versionado de datos.
• Mentalidad de innovación : Curiosidad por tecnologías emergentes y tendencias Big Data, con disposición a experimentar y proponer mejoras continuas.
• Que puedas comunicarte en inglés para trabajar en entornos globales y colaborar con equipos internacionales.

Valoramos también:

• Experiencia en proyectos de streaming en tiempo real, utilizando tecnologías como Kafka, Kinesis, Flink o Spark Structured Streaming.
• Conocimientos avanzados en orquestación, DevOps para datos, gobernanza, calidad y seguridad, así como experiencia con Data Mesh y arquitecturas distribuidas.
• Experiencia en ML pipelines y MLOps integrados con Big Data, usando herramientas como MLflow, SageMaker, Vertex AI o Kubeflow.

¿Qué nos hace diferentes?

• Tecnología e innovación sin límites . La tecnología y los datos son nuestra esencia. Trabajamos con lo más avanzado del mercado y te formamos para que domines las herramientas que están redefiniendo la industria. Tendrás acceso a las últimas plataformas y tecnologías: si algo es nuevo, lo estamos usando o evaluando.
• Desarrollo profesional a tu medida . Aquí no hay carreras rígidas ni caminos predefinidos: cada cierto tiempo se revisan tus logros y se definen nuevos objetivos. Podrás evolucionar hacia roles de arquitectura, tech lead, referente tecnológico o especialista en dominios complejos, manteniendo siempre un impacto directo en la tecnología y en las decisiones clave de los proyectos.
• Un equipo que te acompaña desde el primer día . Desde el minuto 1 formas parte del equipo de Data Technologies, formado por numerosos referentes donde la colaboración es el pilar fundamental.
• Propósito y valores que nos definen . Creemos firmemente en la diversidad y la inclusión como motores esenciales d