Data Engineer

IT Partner; Madrid; Presencial; EUR 35.000 - 50.000; Jornada completa

Descripción de la vacante

IT Partner busca un Data Engineer/Data Scientist para desarrollar una plataforma innovadora en mercados financieros. Únete a un equipo multidisciplinar y trabaja con tecnologías AWS, gestionando grandes volúmenes de datos en un entorno ágil. Se requiere experiencia en big data y conocimiento avanzado de Tableau.

Formación

• 4+ años de experiencia en big data y manejo de grandes volúmenes de datos.
• Dominio avanzado de Tableau y experiencia en herramientas AWS.
• Conocimiento en metodologías Agile y ciclo de vida del software.

Responsabilidades

• Desarrollar y mantener ETLs eficientes.
• Diseñar soluciones de ingestión y procesamiento de datos.
• Colaborar con equipos para asegurar calidad en la entrega.

Conocimientos

Big data ingestion

Tableau

SQL

Hadoop

Python

PySpark

Pandas

JupyterLab

CI/CD

Agile methodologies

Herramientas

AWS

Git

Jenkins

Terraform

Ansible

Bash scripting

boto3

Descripción del empleo

Te apasiona trabajar con big data y construir soluciones innovadoras desde cero? En IT Partner España, buscamos un Data Engineer / Data Scientist con experiencia en entornos de AWS para desarrollar una plataforma de alto rendimiento para el trading electrónico y pricing en mercados financieros.

Sobre el proyecto

Formarás parte de un equipo ágil y multidisciplinar que trabaja en una nueva iniciativa estratégica respaldada a nivel ejecutivo. La plataforma se basa en AWS y permite la ingestión de datos en batch y en tiempo casi real, con almacenamiento y computación desacoplados para escalabilidad y rendimiento óptimos.

• Desarrollar y mantener ETLs eficientes para manejar grandes volúmenes de datos.
• Diseñar soluciones de ingestión, almacenamiento y procesamiento de datos.
• Contribuir al diseño técnico y documentar la arquitectura del sistema.
• Integrar la plataforma con herramientas de AWS (Athena, EMR, QuickSight) y terceros (Apache Spark, Presto, Tableau).
• Colaborar con equipos tecnológicos y de negocio para asegurar una entrega de calidad.

Requisitos mínimos :

• Experiencia mínima de 4 años en big data ingestion y manejo de grandes volúmenes de datos.
• Dominio avanzado de Tableau.
• Experiencia con SQL, Hive y Hadoop.
• Conocimientos sólidos en Python, PySpark, Pandas y JupyterLab.
• Experiencia en entornos AWS y herramientas de CI / CD (Git, Jenkins).
• Metodologías Agile y conocimiento del ciclo de vida del software.

Skills valorables :

• Experiencia con Kafka.
• Uso de AWS EMR para ejecución de clústeres de Spark.
• Conocimientos en Terraform.
• Experiencia con Ansible, Bash scripting, boto3.

Ubicación y condiciones :

Oficinas : Candidatos ubicados en Madrid, puesto que se requiere presencialidad en oficina. Probablemente, durante el primer mes 3 / 4 días en oficina, los siguientes 3 meses 3 días en oficina, y a partir del 4 mes, 2 días en oficina.

Salario, según experiencia y conocimientos.

Si buscas un reto en un proyecto innovador con tecnología puntera, te estamos esperando

Crear una alerta de empleo para esta búsqueda