Ingeniero de datos

Indra Group; Lima Metropolitana; Híbrido; PEN 236.000 - 371.000; Jornada completa

Ventajas ofrecidas por este puesto de trabajo

Acceso a Udemy

Descuentos corporativos

Asesorías con psicólogo

Modalidad híbrida

Descripción de la vacante

INDRA es una de las principales compañías globales de tecnología y consultoría. Se dirige a un Data Engineer para diseñar e implementar flujos de ingesta y transformación en Data Lake/Lake House, en entornos On Premise y/o Azure.

Trabajará con Spark, PySpark y Scala (Batch), optimizando procesos y costos, con despliegue en producción mediante DevSecOps. También definirá buenas prácticas y brindará consultoría técnica en plataformas distribuidas.

Formación

• Experiencia de 4 años o más en implementación de soluciones con las tecnologías requeridas.
• Análisis y desarrollo de flujos de ingesta y transformación en Data Lake / Lake House en On Premise y/o Azure.
• Análisis y desarrollo con Spark usando PySpark y Scala (Batch).
• Optimización de procesos y costos (tiempo de procesamiento y uso del clúster).
• Análisis y scheduling de procesos; despliegue en producción con DevSecOps.
• Desarrollo de buenas prácticas y frameworks para Spark.
• Consultoría técnica en plataformas distribuidas On Premise y/o Cloud (Azure).

Responsabilidades

• Analizar e implementar flujos de ingesta y transformación en Data Lake/Lake House (On Premise y/o Azure).
• Desarrollar con Spark, PySpark y Scala (Batch) y optimizar rendimiento y costos.
• Programar y coordinar procesos de acuerdo a criterios de usuarios; desplegar en producción con DevSecOps.
• Desarrollar marcos y prácticas para mejora continua del framework de desarrollo y despliegue.
• Proporcionar consultoría técnica sobre implementación en plataformas distribuidas.

Conocimientos

PySpark

Scala

Spark

Azure

Data Lake

DevSecOps

ETL

Data Ingestion

Herramientas

Azure

CI/CD

Spark

Descripción del empleo

INDRA es una de las principales compañías globales de tecnología y consultoría y el socio tecnológico para las operaciones clave de los negocios de sus clientes en todo el mundo. Es un proveedor líder mundial de soluciones propias en segmentos específicos de los mercados de Transporte y Defensa, y la empresa líder en consultoría de transformación digital y Tecnologías de la Información en España y Latinoamérica. Con cerca de 48.000 empleados, presencia local en 46 países y operaciones comerciales en más de 140 países.

Buscamos un Data Engineer:

• Experiencia de 4 años a más en implementación de soluciones con las tecnologías requeridas, habiendo realizado las siguientes actividades.
• Análisis y desarrollo de flujos de Ingesta y transformación de datos en Data lake o Lake House en plataformas On Premise y/o Cloud (AZURE).
• Análisis y Desarrollo utilizando procesamiento distribuido en Spark usando PySpark y Scala (Batch).
• Optimización de los procesos a desarrollar o existentes con un enfoque de optimización de costos (tiempo de procesamiento y uso del clúster) con Spark.
• Análisis y schedulamiento de los procesos de acuerdo a las criterias definidas por los usuarios. Despliegue soluciones en producción haciendo uso de herramientas de integración y despliegue continuo (DevSecOps).
• Desarrollo de soluciones transversales para la mejora continua del framework de desarrollo y despliegue de soluciones.
• Desarrollo de buenas prácticas, frameworks y estándares de desarrollo en Spark.
• Consultoría y asesoría técnica en la estrategia de implementación de soluciones en plataformas distribuidas On Premise y/o Cloud (AZURE).

Beneficios:

• Acceso total a Udemy para seguir aprendiendo
• Descuentos corporativos exclusivos
• Asesorías virtuales con psicólogo y nutricionista
• Modalidad híbrida. Horario de trabajo: De lunes a viernes de 9:00am a 6:30pm