Senior Data Engineer Azure • Databricks • Spark

Acid Labs; Santiago; On-site; CLP 18,000,000 - 30,000,000; Full time

Job summary

Acid Labs busca Senior Data Engineers para liderar proyectos de modernización de plataformas de datos, construir arquitecturas Lakehouse y soluciones escalables en la nube.

Si te apasiona diseñar plataformas robustas, optimizar procesos de datos y trabajar con Python, SQL y Spark en entornos Azure, te queremos con nosotros para colaborar con Data Science y desarrollo.

Ofrecemos un equipo dinámico, proyectos en Chile y América Latina, y oportunidades de crecimiento.

Qualifications

• Más de 4 años de experiencia en Data Engineering.
• Dominio de Python y SQL para desarrollar pipelines.
• Experiencia con Azure Databricks y Apache Spark/PySpark.
• Conocimiento de herramientas y servicios de Azure (Data Factory, Data Lake Storage, Delta Lake).
• Buenas prácticas de gobierno y calidad de datos.

Responsibilities

• Diseñar e implementar pipelines ETL/ELT de alto rendimiento.
• Construir soluciones sobre arquitecturas Lakehouse.
• Desarrollar procesos utilizando Spark/PySpark.
• Integrar múltiples fuentes de información y colaborar con Data Science/Analytics.

Skills

Python

SQL

Tools

Azure Databricks

Apache Spark / PySpark

Azure

Azure Data Factory

Azure Data Lake Storage

Delta Lake

Unity Catalog

MLflow

Azure DevOps

Git

CI/CD

Arquitecturas Lakehouse

Gobierno de Datos

Job description

En Acid Labs trabajamos junto a importantes empresas de Chile y Latinoamérica desarrollando soluciones de Datos, Analítica Avanzada e Inteligencia Artificial.

Actualmente buscamos incorporar Senior Data Engineers para futuros proyectos de modernización de plataformas de datos, construcción de arquitecturas Lakehouse y desarrollo de soluciones escalables en la nube.

Si disfrutas diseñando plataformas robustas, optimizando procesos de datos y trabajando con tecnologías modernas, queremos conocerte.

¿Qué desafíos podrás encontrar?

• Diseñar e implementar pipelines ETL/ELT de alto rendimiento.
• Construir soluciones sobre arquitecturas Lakehouse.
• Desarrollar procesos utilizando Apache Spark y PySpark.
• Integrar múltiples fuentes de información.
• Implementar buenas prácticas de gobierno y calidad de datos.
• Participar en procesos de modernización tecnológica y migración de plataformas.
• Colaborar con equipos de Data Science, Analytics y Desarrollo.

Buscamos profesionales con experiencia en:

Requisitos excluyentes:

• Más de 4 años de experiencia en Data Engineering.
• Python.
• SQL avanzado.
• Azure Databricks.
• Apache Spark / PySpark.
• Azure.

Valoraremos experiencia en:

• Azure Data Factory.
• Azure Data Lake Storage.
• Delta Lake.
• Unity Catalog.
• MLflow.
• Azure DevOps.
• Git.
• CI/CD.
• Arquitecturas Lakehouse.
• Gobierno de Datos.

Será un plus:

• Experiencia en minería.
• Experiencia en proyectos de gran escala.
• Participación en migraciones o modernización de plataformas.