Senior Data Engineer - AWS/Databricks: AI Pipelines

hiberus; Bogotá; Presencial; COP 133.920.000 - 267.840.000; Jornada completa

Descripción de la vacante

hiberus Colombia está buscando un/a Senior Data Engineer para un proyecto internacional de IA, trabajando junto a equipos de Data Science, ML Engineering y GenAI. El rol implica diseñar, construir y mantener pipelines de ingesta, transformación y procesamiento de datos para un Golden Dataset gobernado, asegurando calidad, trazabilidad y reproducibilidad para soluciones IA.

Se valorará experiencia en pipelines batch/streaming en AWS y/o Databricks, arquitecturas Delta Lake y herramientas de

Formación

• 3+ años en Ingeniería de Datos.
• 2+ años trabajando con AWS y/o Databricks en entornos productivos.
• Conocimiento en AWS: S3, IAM, Glue, Lake Formation y CloudWatch.
• PySpark / Spark SQL a nivel avanzado.
• Python a nivel productivo.
• Git y prácticas de desarrollo.
• CI/CD aplicado a pipelines de datos.

Responsabilidades

• Diseñar e implementar pipelines de datos batch y streaming en AWS y/o Databricks.
• Construir arquitecturas Medallion (Bronze/Silver/Gold) sobre Delta Lake.
• Generar y mantener Golden Datasets.
• Implementar controles de calidad, versionado, trazabilidad y linaje.
• Desarrollar transformaciones con Python/PySpark, Spark SQL o dbt.
• Automatizar despliegues con CI/CD y herramientas como GitHub Actions, GitLab CI o Terraform.
• Optimizar rendimiento y costes en AWS/Databricks.
• Colaborar con Data Scientists, ML Engineers y GenAI Engineers para crear datasets y features reutilizables.

Descripción del empleo

hiberus Colombia está buscando un/a Senior Data Engineer para un proyecto internacional de IA, trabajando junto a equipos de Data Science, ML Engineering y GenAI. El rol implica diseñar, construir y mantener pipelines de ingesta, transformación y procesamiento de datos para un Golden Dataset gobernado, asegurando calidad, trazabilidad y reproducibilidad para soluciones IA.

Se valorará experiencia en pipelines batch/streaming en AWS y/o Databricks, arquitecturas Delta Lake y herramientas de