Líder de Ingeniería de Datos en Azure (Remoto)

XpertGroup; Medellín; A distancia; COP 200.880.000 - 312.480.000; Jornada completa

Descripción de la vacante

XpertGroup busca un Líder Técnico de Datos experto en Python y Azure para liderar la arquitectura y construcción de plataformas de datos de alto rendimiento. El rol implica guiar al equipo, definir frameworks de migración a Microsoft Fabric y desarrollar pipelines con PySpark y Spark SQL.

Trabajarás en un entorno remoto, enfocado en optimizar costos en la nube y diseñar soluciones escalables que soporten proyectos de alto impacto para clientes de la firma.

Formación

• Experiencia en ingeniería de datos con Python y Azure.
• Dominio de plataformas de datos en la nube para optimizar costos.
• Capacidad de diseñar arquitecturas de datos escalables y de alto rendimiento.

Responsabilidades

• Diseñar arquitecturas de datos escalables y de alto rendimiento sobre Azure y Microsoft Fabric.
• Liderar el diseño y desarrollo de frameworks de migración de procesos analíticos hacia Microsoft Fabric.
• Construir un framework de datos modular y sencillo de configurar que abstraiga la complejidad del negocio.
• Desarrollar pipelines de datos masivos con Python, PySpark, Spark SQL y SQL Server.
• Diseñar sistemas de mensajería e integración con Azure Event Grid y Azure Service Bus.
• Implementar monitoreo y automatización, incluida la detección de eventos en OneLake con Fabric Activator (Reflex).
• Optimizar consumo de recursos y costos en la nube (Capacity Units en Fabric).
• Guiar técnicamente al equipo: estándares de código, revisiones y mentoría.

Conocimientos

Python

PySpark

SQL

SQL Server

Polars

DevOps

CI/CD

Microsoft Fabric

Azure Service Bus

Azure Event Grid

OneLake

Fabric Activator

Delta Lake

TerraformAzure

Spark SQL

Herramientas

Azure (Azure Fabric/Azure Data services)

Microsoft Fabric

PySpark/Spark

Descripción del empleo

XpertGroup busca un Líder Técnico de Datos experto en Python y Azure para liderar la arquitectura y construcción de plataformas de datos de alto rendimiento. El rol implica guiar al equipo, definir frameworks de migración a Microsoft Fabric y desarrollar pipelines con PySpark y Spark SQL.

Trabajarás en un entorno remoto, enfocado en optimizar costos en la nube y diseñar soluciones escalables que soporten proyectos de alto impacto para clientes de la firma.