Remote Azure Data Engineer | ETL/Databricks Expert

Visa Hunt; La Pampa; Remote; ARS 42,892,000 - 77,206,000; Full time

Benefits offered by this job

Remote work

Job summary

Visa Hunt busca un Data Engineer con al menos 3 años de experiencia en Azure para diseñar, construir y operar pipelines ETL/ELT en un entorno 100% remoto desde Argentina. Trabajará con Azure Data Factory, Databricks y Delta Lake, optimizando consultas, gestionando datos en Data Lake y aplicando CI/CD para pipelines.

Se requieren habilidades en PySpark, Spark, Python y buenas prácticas de gobernanza de datos.

Qualifications

• Experiencia comprobable como Data Engineer (mín. 3 años) trabajando con Azure Data Factory y Azure Databricks.
• Dominio de Apache Spark y PySpark para procesamiento distribuido y optimización de jobs.
• Sólidos conocimientos de SQL: modelado, tuning y optimización de consultas.
• Experiencia en diseño e implementación de pipelines ETL/ELT y en integración de datos.
• Conocimiento práctico de Azure Blob Storage y Azure Data Lake (Gen2), incluyendo formatos como Parquet/Delta Lake.
• Familiaridad con herramientas de orquestación, monitorización y CI/CD aplicadas a datos.
• Inglés técnico: nivel intermedio (lectura de documentación y comunicación con equipos técnicos).
• Residir en Argentina.
• Experiencia con Delta Lake, optimizaciones de storage y compaction.
• Conocimientos en seguridad y gobernanza de datos: RBAC, Data Catalog, políticas de enmascaramiento.
• Familiaridad con Python avanzado y librerías de ingeniería de datos (pandas, numpy, airflow o equivalentes).
• Experiencia con performance tuning de Spark y troubleshooting de jobs en Databricks.
• Certificaciones Azure relacionadas con datos (DP-203, Azure Data Engineer Associate) o Databricks.
• Experiencia en entornos cloud a gran escala y en trabajo ágil con equipos multidisciplinarios.

Responsibilities

• Diseñar y desarrollar pipelines ETL/ELT en Azure para ingestion, transformación y disponibilización de datos.
• Implementar procesos con Azure Data Factory y Azure Databricks para procesamiento por lotes y en tiempo casi real.
• Modelar y optimizar consultas SQL y estructuras de datos para consumo analítico y reporting.
• Gestionar datos en Azure Blob Storage y Azure Data Lake Gen2, definiendo particionamiento y formatos.
• Instrumentar logging, métricas y alertas, y mantener pipelines reproducibles y observables.
• Colaborar con ciencia de datos, BI y producto para contratos de datos y SLAs.
• Automatizar despliegues y pruebas de pipelines con CI/CD para artefactos de datos.
• Garantizar políticas de seguridad y privacidad en datos sensibles.
• Documentar arquitecturas, runbooks y transferir conocimiento al equipo.

Skills

Azure Data Factory

Azure Databricks

Apache Spark

PySpark

SQL

Python

Data modeling

CI/CD for data

Tools

Azure Blob Storage

Azure Data Lake Gen2

Delta Lake

Parquet

Airflow

Job description

Visa Hunt busca un Data Engineer con al menos 3 años de experiencia en Azure para diseñar, construir y operar pipelines ETL/ELT en un entorno 100% remoto desde Argentina. Trabajará con Azure Data Factory, Databricks y Delta Lake, optimizando consultas, gestionando datos en Data Lake y aplicando CI/CD para pipelines.

Se requieren habilidades en PySpark, Spark, Python y buenas prácticas de gobernanza de datos.