Senior Data Engineer Big Data & Cloud

Grupo TECDATA Engineering; Madrid; Hybrid; EUR 55,000 - 75,000; Full time

Job summary

Grupo TECDATA Engineering busca un Data Engineer Senior para liderar la arquitectura y el desarrollo de una plataforma de datos centrada en Big Data, con componentes en Cloudera/Spark y Google Cloud Platform. El puesto es híbrido y requiere más de 3 años de experiencia con autonomía para tomar decisiones técnicas.

Se valora capacidad de diseñar pipelines, gobernanza de datos y colaboración estrecha con el Product Owner y clientes. Contrato indefinido y ubicación en Madrid.

Qualifications

• Buscamos perfil senior con más de 3 años de experiencia en arquitectura y desarrollo de plataformas de datos centradas en Big Data.
• Experiencia autónoma en proyectos sobre Cloudera/Spark y con parte en Google Cloud Platform.
• Conocimientos de herramientas de ingesta, almacenamiento y orquestación de datos.

Responsibilities

• Diseñar y evolucionar arquitecturas de datos batch y real time sobre Cloudera y GCP.
• Implantar y mantener plataformas de ingesta, almacenamiento y agregación de datos con Spark y BigQuery.
• Desarrollar, probar, desplegar y documentar procesos en Spark/Scala y en dbt/SQL/Python.
• Definir bases arquitecturales y procesos de gobierno del dato.
• Colaborar con Product Owner para priorizar el backlog y ser interlocutor técnico con cliente, IT y negocio.
• Resolver incidencias de producción y optimizar procesos productivos.
• Planificar y supervisar la ejecución de procesos con Control-M.

Skills

Big Data

Cloudera

Spark

Python

SQL

dbt

Cloud (GCP)

Tools

Spark

Cloudera

BigQuery

Control-M

dbt

Job description

Contrato indefinido

Buscamos un perfil senior, con más de 3 años de experiencia, que asuma con autonomía la arquitectura y el desarrollo de una plataforma de datos centrada en Big Data (Cloudera / Spark) y con parte en Google Cloud Platform.

Senior Data Engineer Big Data & Cloud

Trabajo Hibrido en madrid

Contrato indefinido

Buscamos un perfil senior, con más de 3 años de experiencia, que asuma con autonomía la arquitectura y el desarrollo de una plataforma de datos centrada en Big Data (Cloudera / Spark) y con parte en Google Cloud Platform.

Responsabilidades

• Diseñar y evolucionar arquitecturas de datos batch y real time sobre Cloudera y GCP.
• Implantar y mantener plataformas de ingesta, almacenamiento y agregación de datos con Spark y BigQuery.
• Desarrollar, probar, desplegar y documentar procesos en Spark/Scala y en dbt/SQL/Python.
• Definir las bases arquitecturales y los procesos de gobierno del dato.
• Estimar la complejidad de las funcionalidades y ayudar al Product Owner a priorizar el backlog. Ser el interlocutor técnico con el cliente, IT y negocio, y participar en las demos.
• Resolver incidencias de producción y optimizar procesos productivos.
• Planificar y supervisar la ejecución de procesos con Control-M. Orientar técnicamente al resto del equipo y velar por las buenas prácticas y las normas del cliente.