Ingeniero Datos Cloud

INGEPSY; Girardot; Presencial; COP 90.000.000 - 130.000.000; Jornada completa

Descripción de la vacante

INGEPSY busca Ingeniero/a de Datos con experiencia avanzada en SQL, Python y Spark para diseñar y desplegar arquitecturas Data Lake/Lakehouse en Azure y Databricks. Se valorarán conocimientos de Unity Catalog, Delta Lake y pipelines CI/CD, trabajando en entornos ágiles.

La posición exige al menos 6 años en datos y 5 años como Data Engineer, con experiencia en plataformas Azure Data y Databricks, y manejo de datos relacionales y NoSQL.

Formación

• Experiencia general mínima de 6 años en datos y al menos 5 años como Ingeniero/a de Datos.
• Al menos 3 años trabajando con plataformas de datos en Azure y Databricks.
• Participación en implementaciones de soluciones analíticas bajo Microsoft Azure Data y metodologías ágiles.
• Experiencia en diseño e implementación de arquitecturas Data Lake y Lakehouse (Medallion y metadata-driven).
• Despliegue y configuración de recursos cloud; conocimiento en bases de datos relacionales y NoSQL.

Conocimientos

SQL avanzado

Python

Spark/PySpark

Databricks

Unity Catalog

Delta Lake

Parquet

Git

Azure DevOps

CI/CD

Data Lake/Lakehouse

Medallion architecture

Herramientas

Databricks

Unity Catalog

Azure DevOps

Delta Lake

Descripción del empleo

Experiencia general mínima de 6 años y experiencia específica de al menos 5 años desempeñándose como Ingeniero(a) de Datos en proyectos de ingeniería y analítica de datos, con mínimo 3 años de experiencia trabajando con plataformas de datos en Azure y Databricks, participación en implementaciones de soluciones analíticas bajo tecnologías Microsoft Azure Data y metodologías ágiles, experiencia en diseño e implementación de arquitecturas Data Lake y Lakehouse con enfoques Medallion y metadata-driven, despliegue y configuración de recursos cloud, y conocimientos en bases de datos relacionales y NoSQL.

• 3+ años de experiencia como Ingeniero(a) de Datos.
• Experiencia trabajando con Unity Catalog
• Conocimiento sólido en SQL avanzado.
• Experiencia en Python y procesamiento distribuido con Spark/PySpark.
• Manejo de formatos como Parquet y/o Delta Lake.
• Experiencia trabajando con Git y Azure DevOps.
• Conocimiento en CI/CD para despliegue de pipelines y notebooks.
• Conocimiento en modelado de datos (dimensional deseable).