Data Engineer: Pipelines y Data Lakes (Híbrido, Madrid)

AD4 Octógono; Madrid; Híbrido; EUR 35.000 - 40.000; Jornada completa

Descripción de la vacante

AD4 Octógono busca un/a Data Engineer para reforzar y evolucionar la infraestructura de datos existente. La persona se encargará de integrar fuentes de información y bases de datos, desarrollando pipelines ETL/ELT y mejorando la calidad y disponibilidad de los datos.

Se valorará autonomía técnica y capacidad para comprender una infraestructura existente, ejecutar líneas de trabajo definidas y proponer mejoras en procesos y flujos de datos en un entorno híbrido en Madrid.

Formación

• 2-4 años de experiencia en Data Engineering o posiciones similares.
• Experiencia en desarrollo y mantenimiento de pipelines ETL/ELT.
• Experiencia en integración de bases de datos, APIs y diferentes fuentes de información.
• Buen dominio de SQL, incluyendo transformación y optimización de consultas.
• Conocimientos de Python aplicado al procesamiento, transformación y automatización de datos.
• Experiencia en Data Modeling y estructuración de datos.
• Conocimientos de arquitecturas Data Warehouse / Data Lake.
• Experiencia con al menos un entorno Cloud: Azure, AWS o GCP.
• Capacidad para detectar y aplicar mejoras de rendimiento y eficiencia.
• Conocimientos de Data Quality, monitorización y gestión de errores.
• Experiencia con Git y buenas prácticas de desarrollo.
• Capacidad para trabajar sobre una infraestructura existente, comprenderla y evolucionarla.
• Autonomía técnica y capacidad para ejecutar líneas de trabajo ya definidas.

Responsabilidades

• Desarrollar y mantener pipelines de datos ETL/ELT.
• Integrar diferentes bases de datos, APIs y fuentes de información.
• Desarrollar procesos de transformación y procesamiento de datos.
• Trabajar con SQL para la transformación, extracción y optimización de datos.
• Utilizar Python para procesamiento, transformación y automatización de procesos.
• Participar en el modelado y estructuración de datos.
• Trabajar sobre arquitecturas Data Warehouse y Data Lake.
• Integrar y gestionar fuentes de datos en entornos Cloud.
• Analizar procesos y flujos de datos para identificar oportunidades de mejora.
• Aplicar mejoras orientadas a la eficiencia, rendimiento y escalabilidad de los procesos.
• Implementar mecanismos de calidad del dato, monitorización y gestión de errores.
• Trabajar con Git y aplicar buenas prácticas de desarrollo.
• Analizar y comprender la infraestructura de datos existente.
• Ejecutar las líneas de acción y evolución tecnológica ya identificadas.
• Proponer mejoras técnicas sobre la infraestructura y los procesos existentes.
• Colaborar con otros equipos técnicos para garantizar la disponibilidad y calidad de los datos.

Conocimientos

SQL

Python

ETL/ELT

Data Pipelines

Data Modeling

APIs

Data Warehouse

Data Lake

Cloud

Git

Data Quality

Descripción del empleo

AD4 Octógono busca un/a Data Engineer para reforzar y evolucionar la infraestructura de datos existente. La persona se encargará de integrar fuentes de información y bases de datos, desarrollando pipelines ETL/ELT y mejorando la calidad y disponibilidad de los datos.

Se valorará autonomía técnica y capacidad para comprender una infraestructura existente, ejecutar líneas de trabajo definidas y proponer mejoras en procesos y flujos de datos en un entorno híbrido en Madrid.