Data Engineer, Cloudera CDP — Hybrid & Real-time Pipelines

Ayesa Digital; Valencia; Híbrido; EUR 55.000 - 75.000; Jornada completa

Ventajas ofrecidas por este puesto de trabajo

Seguro médico

Ticket Restaurant

Guardería y Transporte

Plan Bienestar

Descripción de la vacante

Ayesa Digital busca un/a Data Engineer Cloudera CDP para diseñar, construir y operar soluciones de ingeniería de datos sobre CDP. Trabajarás en proyectos de procesamiento de datos a gran escala y arquitecturas distribuidas, con modalidad de teletrabajo híbrido desde cualquiera de nuestras oficinas en España.

Se valorará certificación Cloudera Data Engineer y experiencia sólida en CDP, Spark, Hive/Impala, Airflow, Kafka y APIs.

Formación

• Titulación universitaria o formación equivalente en Ingeniería Informática, Telecomunicaciones, Matemáticas, Estadística o disciplinas relacionadas.
• Experiencia mínima de 3 a 5 años en proyectos de ingeniería del dato con 2 a 3 años trabajando con tecnologías Cloudera en entornos productivos.
• Certificación oficial Cloudera Data Engineer (imprescindible).
• Experiencia sólida en CDP, Spark y PySpark, Hive e Impala, Airflow y DAGs, Kafka, HDFS y almacenamiento distribuido, procesamiento batch y streaming, CDC, optimización de consultas y rendimiento, integraciones via REST/JDBC.

Responsabilidades

• Diseñar, desarrollar y mantener pipelines de datos batch y streaming sobre CDP.
• Desarrollar procesos distribuidos con Spark, PySpark y Spark SQL.
• Ingesta, transformación e movimiento de datos con Apache NiFi.
• Soluciones de procesamiento en tiempo real con Apache Kafka u otras tecnologías.
• Gestión de esquemas, particionado y rendimiento en entornos distribuidos.
• Analizar planes de ejecución y cuellos de botella para optimizar rendimiento.
• Garantizar la calidad de datos mediante validaciones e integridad.
• Integrar Cloudera con bases de datos, APIs y plataformas cloud.

Conocimientos

Cloudera CDP

Apache Spark

PySpark

Apache Kafka

Airflow

Educación

Ingeniería Informática

Herramientas

Cloudera Data Platform

Hive

Impala

HDFS

SQL

Descripción del empleo

Ayesa Digital busca un/a Data Engineer Cloudera CDP para diseñar, construir y operar soluciones de ingeniería de datos sobre CDP. Trabajarás en proyectos de procesamiento de datos a gran escala y arquitecturas distribuidas, con modalidad de teletrabajo híbrido desde cualquiera de nuestras oficinas en España.

Se valorará certificación Cloudera Data Engineer y experiencia sólida en CDP, Spark, Hive/Impala, Airflow, Kafka y APIs.