Remote Azure Data Engineer | Databricks & ADF Specialist

DaCodes; Puebla de Zaragoza; Remote; MXN 391,000 - 446,000; Full time

Job summary

DaCodes busca un Azure Data Engineer con experiencia en Databricks y Azure Data Factory para un proyecto de corta duración enfocado en automatización y optimización de procesos ETL en Azure.

El candidato ideal debe diseñar, automatizar y mantener pipelines de datos, procesar archivos estructurados y asegurar la calidad e disponibilidad de la información para clientes LATAM y USA. Modalidad remota parcial.

Qualifications

• 5+ años de experiencia en Data Engineering, ETL Development o Data Integration.

Responsibilities

• Diseñar, desarrollar y mantener procesos ETL utilizando Azure Data Factory y Databricks.
• Implementar pipelines de integración de datos para la ingesta y procesamiento de archivos CSV, TXT, Excel y otras fuentes de información.
• Automatizar procesos de carga, transformación y validación de datos.
• Configurar y administrar Jobs y Workflows en Databricks para la ejecución programada de procesos.
• Desarrollar transformaciones de datos utilizando SQL y tecnologías del ecosistema Databricks.
• Monitorear, diagnosticar y resolver incidencias relacionadas con pipelines y procesos ETL.
• Garantizar la calidad, consistencia e integridad de los datos procesados.
• Colaborar con equipos técnicos y stakeholders para entender requerimientos de integración y automatización.
• Participar en actividades de optimización y mejora continua de procesos de datos.

Skills

Data Engineering

ETL Development

SQL

Python

Analytical Thinking

Tools

Azure Data Factory

Azure Databricks

SQL

Python

PySpark

Azure Data Lake Storage

Azure Blob Storage

Job description

DaCodes busca un Azure Data Engineer con experiencia en Databricks y Azure Data Factory para un proyecto de corta duración enfocado en automatización y optimización de procesos ETL en Azure.

El candidato ideal debe diseñar, automatizar y mantener pipelines de datos, procesar archivos estructurados y asegurar la calidad e disponibilidad de la información para clientes LATAM y USA. Modalidad remota parcial.