Ingeniero de Datos Azure Databricks | Data Lakehouse

GFT Technologies LATAM; Bogotá ciudad; Vor Ort; COP 9.000.000 - 18.000.000; Vollzeit

Zusammenfassung

GFT Technologies LATAM en Bogotá busca un Ingeniero de Datos con experiencia en Azure Databricks para diseñar y operar arquitecturas y pipelines de datos orientados a analítica e IA.

El perfil debe garantizar disponibilidad, calidad y seguridad de la información en entornos cloud, aplicando prácticas de automatización y gobierno de datos. Se valoran conocimientos en Delta Lake, Lakehouse y pipelines ETL/ELT.

Qualifikationen

• Profesional en ingeniería afín.
• Experiencia 3–5 años como Ingeniero/a de Datos.
• Conocimiento avanzado de SQL.
• Experiencia en Python o Scala.
• Experiencia en procesamiento distribuido con PySpark.
• Experiencia con Azure Databricks y Azure Data Factory.
• Experiencia con ADLS Gen2 y Delta Lake.
• Conocimiento de arquitectura Lakehouse y Medallion.
• Conocimiento de modelado dimensional y bases de datos relacionales/NoSQL.
• Conocimiento en gobierno y calidad de datos (Unity Catalog, Great Expectations).
• Experiencia en ingeniería de datos, integración ETL/ELT y observabilidad de pipelines.

Aufgaben

• Diseñar, construir y optimizar arquitecturas de datos basadas en Azure y Databricks.
• Implementar procesos ETL y ELT para integrar múltiples fuentes de información.
• Diseñar y administrar arquitecturas Data Lake y Lakehouse.
• Monitorear pipelines de datos para garantizar calidad y seguridad.
• Preparar datasets para analítica avanzada, reporting y ML.
• Colaborar con BI y ciencia de datos para acceso a la información.
• Definir controles de gobierno y calidad de datos.
• Implementar CI/CD para soluciones de datos.
• Diseñar soluciones escalables para procesamiento distribuido y grandes volúmenes de datos.
• Identificar oportunidades de optimización de costos y rendimiento.
• Evaluar tecnologías y mejores prácticas para evolución de la plataforma.

Kenntnisse

SQL

Python

Scala

PySpark

Azure Databricks

Azure Data Factory

ADLS Gen2

Delta Lake

Lakehouse

Delta Live Tables

Power BI

Unity Catalog

Event Hubs

Entra ID

RBAC

Git

Visual Studio Code

Ausbildung

Ingeniería (Sistemas/Industrial/Electrónica/Mecatrónica)

Tools

Azure DevOps

Git

Visual Studio Code

Jobbeschreibung

GFT Technologies LATAM en Bogotá busca un Ingeniero de Datos con experiencia en Azure Databricks para diseñar y operar arquitecturas y pipelines de datos orientados a analítica e IA.

El perfil debe garantizar disponibilidad, calidad y seguridad de la información en entornos cloud, aplicando prácticas de automatización y gobierno de datos. Se valoran conocimientos en Delta Lake, Lakehouse y pipelines ETL/ELT.