ARQUITECTO/A TÉCNICO AZURE DATABRICKS – 100% TELETRABAJO

Rawson BPO; Spain; Remote; EUR 90,000 - 120,000; Full time

Benefits offered by this job

Teletrabajo 100%

Job summary

Rawson BPO busca incorporar un/a Arquitecto/a Técnico Azure Databricks con experiencia en ingeniería del dato y diseño de soluciones Lakehouse en entornos productivos.

Se valorará certificación Databricks Certified Data Engineer Professional, dominio de Spark/PySpark, Delta Lake y Databricks SQL, así como experiencia en AWS y Azure. Trabajarás diseñando pipelines batch y streaming y colaborarás con equipos de datos, gobierno y negocio.

Qualifications

• Titulación universitaria o formación equivalente en Ingeniería Informática, Telecomunicaciones, Matemáticas, Estadística o similar.
• +3 años en proyectos de ingeniería del dato y +2 años trabajando con Databricks en producción.
• Certificación Databricks Certified Data Engineer Professional (imprescindible).
• Conocimientos de Apache Spark y PySpark.
• Databricks Data Intelligence Platform, Delta Lake, Delta Tables y Databricks SQL.
• Delta Live Tables / Lakeflow Declarative Pipelines.
• Databricks Asset Bundles.
• Optimización: particionamiento, Z-Ordering, Liquid Clustering, caching y file compaction.
• AWS y Databricks on AWS.
• Azure: ADLS, Data Factory, Microsoft Fabric, Key Vault y Azure DevOps.

Responsibilities

• Diseñar y mantener pipelines batch y streaming sobre Databricks.
• Desarrollar procesos de ingesta y transformación con Spark, PySpark y SQL.
• Diseñar y evolucionar arquitecturas Lakehouse / Delta Lake.
• Construir modelos bajo arquitectura Medallion (Bronze, Silver y Gold).
• Desarrollar y optimizar notebooks, jobs y workflows.
• Aplicar técnicas de optimización sobre tablas Delta y cargas distribuidas.
• Definir estándares de desarrollo, versionado, despliegue y documentación.
• Colaborar con equipos de datos, gobierno y negocio.

Education

Ingeniería Informática

Telecomunicaciones

Matemáticas

Estadística

Tools

Databricks

Apache Spark

PySpark

Delta Lake

Delta Tables

Databricks SQL

Delta Live Tables

Lakeflow

Databricks Asset Bundles

AWS

Azure DevOps

Azure Data Factory

ADLS

Terraform

Kafka

Job description

Buscamos incorporar un/a Arquitecto/a Técnico Azure Databricks con experiencia en ingeniería del dato y diseño de soluciones Lakehouse en entornos productivos.

REQUISITOS IMPRESCINDIBLES:

• Titulación universitaria o formación equivalente en Ingeniería Informática,
• Telecomunicaciones, Matemáticas, Estadística o similar.
  +3 años en proyectos de ingeniería del dato y +2 años trabajando con Databricks en producción.
• Certificación Databricks Certified Data Engineer Professional (imprescindible).
• Apache Spark y PySpark.
• Databricks Data Intelligence Platform, Delta Lake, Delta Tables y Databricks SQL.
• Delta Live Tables / Lakeflow Declarative Pipelines.
• Databricks Asset Bundles.
• Optimización: particionamiento, Z-Ordering, Liquid Clustering, caching y file compaction.
• AWS y Databricks on AWS.
• Azure: ADLS, Data Factory, Microsoft Fabric, Key Vault y Azure DevOps.

FUNCIONES:

• Diseñar y mantener pipelines batch y streaming sobre Databricks.
• Desarrollar procesos de ingesta y transformación con Spark, PySpark y SQL.
• Diseñar y evolucionar arquitecturas Lakehouse / Delta Lake.
• Construir modelos bajo arquitectura Medallion (Bronze, Silver y Gold).
• Desarrollar y optimizar notebooks, jobs y workflows.
• Aplicar técnicas de optimización sobre tablas Delta y cargas distribuidas.
• Definir estándares de desarrollo, versionado, despliegue y documentación.
• Colaborar con equipos de datos, gobierno y negocio.

VALORABLE:

• Migración de ETL tradicionales a Databricks.
• Kafka u otras plataformas de streaming.
• dbt, Airflow u otras herramientas de orquestación.
• Terraform para aprovisionamiento de Databricks.

CONDICIONES:

• 100% teletrabajo
• Proyecto estable y de larga duración.