Senior Data Engineer Azure Pipelines & Data Platforms

Endava; Córdoba; Híbrido; COP 60.000.000 - 120.000.000; Jornada completa

Ventajas ofrecidas por este puesto de trabajo

Modalidad de trabajo híbrida

Bonos por referidos

Programas de desarrollo profesional

Comunidad tecnológica global

Bienestar y salud laboral

Descripción de la vacante

Endava busca un Data Engineer en Colombia para transformar datos en información accionable y construir infraestructuras de datos robustas. Trabajarás con equipos de ciencia de datos para diseñar y optimizar pipelines en la nube, asegurando calidad, escalabilidad y costos eficientes.

Se requiere dominio de Python y SQL, experiencia en Spark y ETL/ELT, y manejo de herramientas como dbt y Datadog. Modelo de trabajo híbrido y oportunidades de desarrollo profesional.

Formación

• Dominio de Python y SQL, con experiencia en procesamiento de datos.
• Experiencia con bases de datos relacionales y NoSQL.
• Conocimientos de diseño de datos y modelado (Medallion, Kimball, Star Schema).
• Experiencia con ETL/ELT y pipelines de datos, herramientas de orquestación.
• Transformación y optimización de datos con Spark.
• Servicios en nube (Azure/AWS/GCP) y herramientas de observabilidad como Datadog.
• Conocimientos de arquitectura orientada a eventos y metodologías Agile.

Responsabilidades

• Trabajar con científicos y analistas para entender necesidades de información y crear flujos de datos eficientes.
• Diseñar, implementar y mantener pipelines de datos para ingesta, procesamiento y transformación en entornos cloud.
• Crear y mantener almacenamiento de datos con Azure SQL DB, Data Lake y Blob Storage.
• Desarrollar procesos ETL/ELT con dbt o tecnologías equivalentes.
• Garantizar calidad e integridad de datos mediante validación y limpieza.
• Mejorar escalabilidad y control de costos de pipelines de datos.
• Monitorear pipelines y asegurar disponibilidad de datos; aplicar CI/CD y pruebas de calidad.

Conocimientos

Python

SQL

Scripting (data processing)

Spark (PySpark/Scala)

Event-Driven Architecture

Agile

Herramientas

Azure

AWS

GCP

dbt

Datadog

Descripción del empleo

Endava busca un Data Engineer en Colombia para transformar datos en información accionable y construir infraestructuras de datos robustas. Trabajarás con equipos de ciencia de datos para diseñar y optimizar pipelines en la nube, asegurando calidad, escalabilidad y costos eficientes.

Se requiere dominio de Python y SQL, experiencia en Spark y ETL/ELT, y manejo de herramientas como dbt y Datadog. Modelo de trabajo híbrido y oportunidades de desarrollo profesional.