Data Engineer Lead

Scalian es una empresa de más de 6.000 personas con una dimensión internacional, con oficinas en Europa y América del Norte. Estamos especializados en dar servicios a diferentes clientes enfocados en Data, Cloud e Inteligencia Artificial.

Buscamos un perfil de Ingeniero / a de datos que pueda liderar un squad de 6 personas para uno de nuestros proyectos en el sector bancario.

• Diseño e implementación de pipelines de datos con Apache Spark / Pyspark en AWS
• Gestión de worflows ETL complejos
• Realizar transformaciones complejas y cálculos intensivos sobre grandes volúmenes de datos con Apache Spark
• Modelado de datos, diseño de esquemas optimizados y manejo de datos a gran escala
• Procesos de CI / CD y despliegues automatizados en AWS
• Trabajar con el área de Cloud y TechHub para optimizar la infraestructura de AWS que soporta los procesos ETL
• Actuar como punto de contacto con stakeholders, responsable de producto y otros líderes técnicos, para alinear los modelos de datos con el reporting y los objetivos del negocio
• Liderar al equipo de Data Engineering, asignando tareas y revisando entregas promoviendo la mejora técnica dentro del equipo
• Experiencia de al menos 5 años como Data Engineer trabajando con Python, Spark y Pyspark.
• Habilidades avanzadas con la herramienta AWS
• Experiencia avanzada con SQL y PostgreSQL
• Familiaridad con procesos de CI / CD
• Experiencia haciendo dara modeling, data ingestion y transformation.
• Experiencia previa liderando equipos.

Habilidades deseables :

• Experiencia con procesamiento de datos en tiempo real

Qué tendrás con nosotros?

Crear una alerta de empleo para esta búsqueda

Lead Data Engineer • castelló de la plana, España