Data Engineer – Spark | Azure & Aws | 100% Remoto

Mensoft Consultores; Madrid; Remote; EUR 40,000 - 60,000; Full time

Job summary

Mensoft Consultores busca un Data Engineer con experiencia en Spark, Java/Scala y entornos Cloud Azure y AWS para desarrollar y evolucionar pipelines de datos. Se valorará experiencia con Azure Databricks, Apache Airflow y herramientas de calidad de software.

La posición es 100% remota para residentes en España, con posibilidad de participar en proyectos de clientes en toda España y entornos de nube Azure y AWS. Se requiere capacidad de trabajo en equipo y documentación en Jira/Confluence.

Qualifications

• Experiencia mínima de 2 años como Data Engineer o similar.
• Experiencia de 2+ años trabajando con Java, Spark, Scala y SQL.
• Experiencia con Azure Databricks y Apache Airflow.
• Conocimientos de AWS EMR, Microsoft Azure, Apache Spark y MySQL.
• Experiencia en entornos Cloud Azure y AWS.
• Conocimientos básicos de IA aplicadas al desarrollo y ciberseguridad.

Responsibilities

• Desarrollar y mantener pipelines de datos con Azure Databricks y AWS EMR.
• Orquestar flujos de datos mediante Apache Airflow.
• Desarrollar componentes y realizar pruebas de integración.
• Documentar soluciones en Jira y Confluence.
• Gestionar incidencias y realizar análisis de causa raíz.
• Dar soporte a producción y a nuevas versiones de aplicaciones.

Tools

Spark

Java

Scala

SQL

Azure Databricks

Apache Airflow

AWS EMR

Microsoft Azure

MySQL

AWS

Job description

¿Interesado/a en nuevos retos? En Mensoft Consultores estamos buscando un/a Data Engineer con experiencia en Spark, Java/Scala y entornos Cloud Azure y AWS, para participar en el desarrollo y evolución de pipelines de datos.

• Mínimo 2 años de experiencia como Data Engineer o similar.
• +2 años trabajando con Java, Spark, Scala y SQL.
• Experiencia con Azure Databricks y Apache Airflow.
• Nivel avanzado de AWS EMR, Microsoft Azure, Apache Spark y MySQL.
• Experiencia Cloud con Azure y AWS.
• Uso de herramientas basadas en IA aplicadas al desarrollo.
• Conocimientos básicos de calidad y ciberseguridad: Fortify, Sonar, Raptor o similares.

Valorable

• Experiencia en reporting regulatorio.

Funciones

• Desarrollar y mantener pipelines con Azure Databricks y AWS EMR.
• Orquestar flujos de datos mediante Apache Airflow.
• Desarrollar componentes y realizar pruebas de integración.
• Documentar soluciones en Jira y Confluence.
• Gestionar incidencias y realizar análisis de causa raíz.
• Dar soporte a producción y a nuevas versiones de aplicaciones.

Condiciones

• Modalidad: 100% remoto (solo residentes en España)