Remote Azure Data Engineer: ETL, Spark & Delta Lake

Visa Hunt; Neuquén; A distancia; ARS 92.724.000 - 154.540.000; Jornada completa

Descripción de la vacante

Visa Hunt busca un Data Engineer para diseñar y operar pipelines ETL/ELT en Azure, asegurando ingesta, transformación y disponibilidad de datos para usuarios de negocio y modelos analíticos. El rol admite 100% remoto desde Argentina.

Trabajarás con Azure Data Factory, Azure Databricks y almacenamiento en Data Lake/Blob, aplicando buenas prácticas de calidad, rendimiento y gobernanza de datos, con enfoque en CI/CD y monitoreo de pipelines.

Formación

• Experiencia demostrable como Data Engineer (mín. 3 años) trabajando con Azure Data Factory y Azure Databricks.
• Dominio de Apache Spark y PySpark para procesamiento distribuido y optimización de jobs.
• Sólidos conocimientos de SQL: modelado, tuning y optimización de consultas.
• Experiencia en diseño e implementación de pipelines ETL/ELT y en integración de datos.
• Conocimiento práctico de Azure Blob Storage y Azure Data Lake (Gen2), incluyendo formatos Parquet/Delta Lake.
• Familiaridad con herramientas de orquestación, monitorización y CI/CD aplicadas a datos.
• Inglés técnico: nivel intermedio (lectura de documentación y comunicación con equipos técnicos).
• Residir en Argentina.
• Experiencia con Delta Lake, optimizaciones de storage y compaction.
• Conocimientos en seguridad y gobernanza de datos: RBAC, Data Catalog, políticas de enmascaramiento.
• Familiaridad con Python avanzado y librerías de ingeniería de datos (pandas, numpy, airflow o equivalentes).
• Experiencia con performance tuning de Spark y troubleshooting de jobs en Databricks.
• Certificaciones Azure relacionadas con datos (DP-203, Azure Data Engineer Associate) o Databricks.
• Experiencia en entornos cloud a gran escala y en trabajo ágil con equipos multidisciplinarios.

Responsabilidades

• Diseñar, desarrollar y operar pipelines ETL/ELT en Azure con Data Factory y Databricks.
• Implementar procesos ETL/ELT con Apache Spark y PySpark para procesamiento por lotes y en tiempo casi real.
• Modelar y optimizar consultas SQL y estructuras de datos para consumo analítico y reporting.
• Gestionar y organizar datos en Azure Blob Storage y Azure Data Lake (Gen2) con particionamiento y políticas de retención.
• Construir pipelines reproducibles, parametrizables y observables; instrumentar logging, métricas y alertas.
• Colaborar con equipos de ciencia de datos, BI y producto para definir contratos de datos, SLAs y calidad.
• Automatizar despliegues y pruebas de pipelines; aplicar control de versiones y CI/CD para artefactos de datos.
• Garantizar cumplimiento de políticas de seguridad y privacidad en el manejo de datos sensibles.
• Documentar arquitecturas, pipelines y runbooks; transferir conocimiento y participar en on-call rotativo.

Conocimientos

Azure Data Factory

Azure Databricks

Apache Spark

PySpark

SQL

Delta Lake

Azure Blob Storage

Azure Data Lake

Python

pandas

numpy

Airflow

CI/CD

RBAC

Data Catalog

Data Privacy

Security Governance

on-call

Herramientas

Azure Data Factory

Azure Databricks

Spark

PySpark

SQL Server

Descripción del empleo

Visa Hunt busca un Data Engineer para diseñar y operar pipelines ETL/ELT en Azure, asegurando ingesta, transformación y disponibilidad de datos para usuarios de negocio y modelos analíticos. El rol admite 100% remoto desde Argentina.

Trabajarás con Azure Data Factory, Azure Databricks y almacenamiento en Data Lake/Blob, aplicando buenas prácticas de calidad, rendimiento y gobernanza de datos, con enfoque en CI/CD y monitoreo de pipelines.