Data Engineer (Python, Tableau, AWS, SQL)

Common Management Solutions; Barcelona; Presencial; EUR 50.000 - 90.000; Jornada completa

Descripción de la vacante

Una firma innovadora busca un Desarrollador de Data Lake para un emocionante proyecto en el sector bancario. Este rol clave implica la creación y mantenimiento de soluciones de datos que impulsan la toma de decisiones estratégicas. Trabajarás con tecnologías de vanguardia en la nube y big data, colaborando con equipos multidisciplinarios para garantizar la calidad y eficiencia en el procesamiento de datos. Si eres un profesional apasionado por la analítica y la optimización de datos, esta es tu oportunidad para dejar una huella significativa en un entorno dinámico y colaborativo.

Servicios

Oportunidades de desarrollo profesional

Ambiente colaborativo y ágil

Trabajo con tecnologías de vanguardia

Salario competitivo

Formación

• Experiencia sólida en SQL y Python, con enfoque en big data y ETL.
• Conocimientos prácticos de servicios de AWS y frameworks de procesamiento de datos.

Responsabilidades

• Desarrollar y mantener pipelines ETL para la ingestión de datos en tiempo casi real.
• Optimizar el almacenamiento y procesamiento de datos utilizando servicios de AWS.

Conocimientos

SQL

Python

ETL Development

Big Data Technologies

Data Processing Frameworks

Analytical Skills

Herramientas

AWS (S3, Athena, Glue, EMR, Lambda)

Apache Spark

Tableau

Git

Descripción del empleo

Desarrollador de Data Lake (AWS - SQL - Python - Tableau)

Sobre el Rol

Desde Common MS, estamos apoyando a uno de los mayores bancos con un nuevo proyecto greenfield, Origin, para desarrollar una solución interna de data lake. Esta plataforma apoyará servicios de BI, herramientas de ciencia de datos y otras iniciativas dentro de SCIB. Ingerirá datos de mercado en tiempo casi real desde múltiples fuentes y los almacenará en la nube de AWS.

Buscamos un Desarrollador Senior con experiencia en ingestión de big data, procesos ETL y manejo de grandes volúmenes de datos. Este rol será clave para desarrollar y mantener ETLs de alta calidad, asegurando escalabilidad, rendimiento y eficiencia en el procesamiento de datos.

Responsabilidades principales

1. Desarrollar y mantener pipelines ETL para la ingestión de datos estructurados y no estructurados en lotes y en tiempo casi real.
2. Optimizar el almacenamiento y procesamiento de datos utilizando Parquet, servicios de AWS (Athena, EMR, QuickSight) y herramientas externas (Tableau, Apache Spark, Presto, etc.).
3. Diseñar y gestionar un catálogo centralizado de metadatos para garantizar la consistencia y accesibilidad de los datos.
4. Colaborar con ingenieros de datos, científicos de datos y partes interesadas del negocio para comprender los requisitos y entregar soluciones de alta calidad.
5. Garantizar la calidad, integridad y seguridad de los datos en la plataforma.
6. Optimizar continuamente el rendimiento y reducir costos mediante buenas prácticas en computación en la nube y arquitectura de datos.
7. Trabajar en un equipo ágil, asegurando iteraciones rápidas y adaptación a las necesidades del negocio.

Requisitos técnicos

• Sólida experiencia en SQL y Python.
• Experiencia demostrada en tecnologías de big data y desarrollo de ETL.
• Conocimientos prácticos de servicios de AWS (S3, Athena, Glue, EMR, Lambda, etc.).
• Dominio de frameworks de procesamiento de datos (Apache Spark, Presto, Tableau, etc.).
• Conocimiento de formatos de datos Parquet, gestión de metadatos y particionamiento de datos.
• Familiaridad con pipelines CI/CD y sistemas de control de versiones como Git.

Requisitos deseables

• Experiencia en el sector financiero, especialmente en trading electrónico y flujos de precios.
• Conocimiento de mercados de renta fija y procesamiento de datos de mercado.
• Habilidades analíticas y de resolución de problemas con un enfoque en escalabilidad y rendimiento.

Beneficios y oportunidades

• Oportunidad de construir una plataforma de datos innovadora con alta visibilidad dentro del banco.
• Trabajo con tecnologías de vanguardia en la nube y big data.
• Ambiente colaborativo y ágil en un banco de inversión global.
• Salario competitivo y oportunidades de desarrollo profesional.

Únete a nosotros y forma parte del futuro de la toma de decisiones basada en datos en la banca de inversión!