Remote Data Engineer - Spark, Azure & AWS

Mensoft Consultores; Madrid; A distancia; EUR 40.000 - 60.000; Jornada completa

Descripción de la vacante

Mensoft Consultores busca un Data Engineer con experiencia en Spark, Java/Scala y entornos Cloud Azure y AWS para desarrollar y evolucionar pipelines de datos. Se valorará experiencia con Azure Databricks, Apache Airflow y herramientas de calidad de software.

La posición es 100% remota para residentes en España, con posibilidad de participar en proyectos de clientes en toda España y entornos de nube Azure y AWS. Se requiere capacidad de trabajo en equipo y documentación en Jira/Confluence.

Formación

• Experiencia mínima de 2 años como Data Engineer o similar.
• Experiencia de 2+ años trabajando con Java, Spark, Scala y SQL.
• Experiencia con Azure Databricks y Apache Airflow.
• Conocimientos de AWS EMR, Microsoft Azure, Apache Spark y MySQL.
• Experiencia en entornos Cloud Azure y AWS.
• Conocimientos básicos de IA aplicadas al desarrollo y ciberseguridad.

Responsabilidades

• Desarrollar y mantener pipelines de datos con Azure Databricks y AWS EMR.
• Orquestar flujos de datos mediante Apache Airflow.
• Desarrollar componentes y realizar pruebas de integración.
• Documentar soluciones en Jira y Confluence.
• Gestionar incidencias y realizar análisis de causa raíz.
• Dar soporte a producción y a nuevas versiones de aplicaciones.

Herramientas

Spark

Java

Scala

SQL

Azure Databricks

Apache Airflow

AWS EMR

Microsoft Azure

MySQL

AWS

Descripción del empleo

Mensoft Consultores busca un Data Engineer con experiencia en Spark, Java/Scala y entornos Cloud Azure y AWS para desarrollar y evolucionar pipelines de datos. Se valorará experiencia con Azure Databricks, Apache Airflow y herramientas de calidad de software.

La posición es 100% remota para residentes en España, con posibilidad de participar en proyectos de clientes en toda España y entornos de nube Azure y AWS. Se requiere capacidad de trabajo en equipo y documentación en Jira/Confluence.