Azure Databricks SME - Data & ML Pipelines Leader

The Big Job Site; Aguascalientes; Hybrid; MXN 900,000 - 1,300,000; Full time

Job summary

Capgemini México busca un SME de Integración Azure Databricks para diseñar e implementar soluciones de datos en Azure Databricks y optimizar pipelines ETL en entornos híbridos. El colaborador trabajará con equipos de Data Engineering, Analytics y DevOps para entregar soluciones escalables y seguras.

Se requiere experiencia en Azure Databricks, Spark, Delta Lake y CI/CD, con habilidades en Python/SQL y modelado de datos.

Qualifications

• Experiencia trabajando con Azure Databricks, Spark y Delta Lake.
• Conocimiento de servicios Azure (Data Lake, SQL, Storage, Networking, VM).
• Programación en Python, SQL y Scala.
• Experiencia en ETL, Data Warehousing y modelado de datos.

Responsibilities

• Diseñar e implementar soluciones de datos en Azure Databricks.
• Desarrollar pipelines de datos, procesos ETL y flujos de Machine Learning.
• Optimizar rendimiento, costos y operación de plataformas Databricks.
• Administrar seguridad, accesos y cumplimiento regulatorio.
• Proporcionar soporte avanzado y resolución de incidentes complejos.
• Colaborar con Data Engineering, Analytics, DevOps y Arquitectura.

Skills

Trabajo bajo presión

Tools

Azure Databricks

Apache Spark

Delta Lake

Azure Data Factory

Azure Synapse Analytics

Azure Data Lake

Azure SQL

Cosmos DB

Python

SQL

Scala

ETL

Data Warehousing

Jenkins

GitHub

Azure DevOps

Nexus

Jira

Power BI

Azure Monitor

Job description

Capgemini México busca un SME de Integración Azure Databricks para diseñar e implementar soluciones de datos en Azure Databricks y optimizar pipelines ETL en entornos híbridos. El colaborador trabajará con equipos de Data Engineering, Analytics y DevOps para entregar soluciones escalables y seguras.

Se requiere experiencia en Azure Databricks, Spark, Delta Lake y CI/CD, con habilidades en Python/SQL y modelado de datos.