Senior Azure Data Engineer | Pipelines, Spark & Databricks

Softtek; México; On-site; MXN 900,000 - 1,300,000; Full time

Job summary

Softtek busca un Ingeniero de Datos Azure Senior para diseñar, construir y optimizar pipelines de datos en la plataforma Azure. El candidato trabajará con Azure Data Factory, Azure Databricks y Azure Synapse Analytics para procesar grandes volúmenes y garantizar la calidad de los datos.

La posición requiere experiencia en Python/Scala, modelos SQL/NoSQL y gobernanza de datos. Se valorará experiencia en entornos ágiles y capacidad de colaboración con equipos multidisciplinarios.

Qualifications

• 5+ años de experiencia en Ingeniería de Datos.
• Diseño, desarrollo y optimización de ETL/ELT.

Responsibilities

• Diseñar, desarrollar y mantener pipelines de ingesta, procesamiento y transformación de datos.
• Implementar soluciones con Azure Databricks y Azure Data Factory.
• Diseñar y optimizar bases de datos transaccionales y modelos de almacenamiento de datos.
• Garantizar la calidad, integridad y disponibilidad de la información.
• Integrar múltiples fuentes de datos estructurados y no estructurados.
• Implementar Unity Catalog para gobernanza y control de acceso a datos.
• Optimizar procesos de extracción y procesamiento para grandes volúmenes de información.
• Participar en arquitecturas basadas en eventos y microservicios.
• Colaborar con equipos multidisciplinarios para transformar requerimientos de negocio en soluciones técnicas.
• Implementar CI/CD para soluciones de datos.
• Identificar y resolver problemas de rendimiento y confiabilidad de los datos.

Skills

Inglés técnico

Arquitecturas orientadas a eventos

Python

Scala

Databricks

Azure Data Factory

Azure Databricks

Azure Synapse Analytics

Azure SQL Data Warehouse

Azure Event Hubs

SQL

NoSQL

Big data processing

JSON/XML/CSV/Parquet

Tools

ADF (Azure Data Factory)

Azure Databricks

Azure Synapse Analytics

Azure SQL Data Warehouse

Azure Event Hubs

Job description

Softtek busca un Ingeniero de Datos Azure Senior para diseñar, construir y optimizar pipelines de datos en la plataforma Azure. El candidato trabajará con Azure Data Factory, Azure Databricks y Azure Synapse Analytics para procesar grandes volúmenes y garantizar la calidad de los datos.

La posición requiere experiencia en Python/Scala, modelos SQL/NoSQL y gobernanza de datos. Se valorará experiencia en entornos ágiles y capacidad de colaboración con equipos multidisciplinarios.