Especialista en Hadoop - Híbrido

Capital Empresarial Horizonte; Ciudad de México; Presencial; MXN 400,000 - 600,000; Jornada completa

Descripción de la vacante

Una empresa mexicana líder en recursos humanos y tecnología busca un especialista en desarrollo y gestión de datos. El candidato ideal debe tener experiencia en Python, Spark, Hadoop y la gestión de pipelines. Se ofrece un sueldo negociable, prestaciones de ley y superiores, así como un horario de oficina.

Servicios

Prestaciones superiores (SGMM familiar)

30 días de aguinaldo

Vales de despensa

Formación

• Experiencia en desarrollo de código con Python y arquitecturas Spark.
• Capacidad para crear y optimizar pipelines de datos.
• Conocimientos sólidos en herramientas de programación y scripts de shell.

Responsabilidades

• Gestionar cargas de trabajo de producción y soporte.
• Crear y optimizar pipelines de datos en OOZIE Framework.
• Obtener datos desde RDBMS a data lakes.

Conocimientos

Gestión de cargas de trabajo

Python

OOZIE

Linux

Spark

Hadoop

SQL

Data Lakes

Herramientas

CA7

Stonebranch

Descripción del empleo

Capital Empresarial Horizonte, una empresa mexicana especialista en recursos humanos y tecnologías de la información, solicita:

• Experiencia en la gestión y soporte de cargas de trabajo de producción.
• Experiencia en desarrollo de código Python utilizando diversas versiones y funciones (framework Spark en Python).
• Creación y optimización de pipelines de datos en OOZIE Framework.
• Experiencia en el manejo de datos estructurados, no estructurados y semiestructurados (archivos planos, JSON, XML, archivos binarios).
• Conocimiento de Linux y sólidas habilidades de línea de comandos.
• Experiencia en la arquitectura Spark, incluyendo Spark Core, Spark SQL, DataFrames y Spark Streaming.
• Experiencia en la obtención de datos desde RDBMS (Oracle, DB2, MySQL, etc.) a data lakes.
• Amplio conocimiento de los frameworks de la arquitectura Hadoop y diversos componentes como HDFS, Hive, IMPALA, SQL, Sqoop, Python Scripting, Spark, desarrollo de UDF (Funciones Definidas por el Usuario) y conceptos de MapReduce.
• Capacidad para crear artefactos e implementarlos mediante la canalización CICD.
• Experiencia con herramientas de programación como CA7 o Stonebranch.
• Experiencia práctica en la distribución CDH/CDP.
• Experiencia práctica con scripts de shell.
• Es imprescindible tener experiencia en algunas de estas habilidades (si no todas): OOZIE, HDFS, Hive, IMPALA, SQL, Sqoop, scripts de Python, Spark, UDF y plataforma Azure.

Ofrecemos:

• Horario de oficina.
• Esquema 100% nómina.
• Sueldo abierto a negociación de acuerdo a experiencia.
• Prestaciones de ley.
• Prestaciones superiores (SGMM familiar, SV 1 millón, vales de despensa, 30 días de aguinaldo, PTU).

Interesados, enviar CV al correo de empleo (arroba) horizonteempresarial.com.mx