Ingeniero de Datos AWS - Pipelines, LakeHouse y ML

PRAGMA; Colombia; Sur place; COP 90 000 000 - 130 000 000; Plein temps

Résumé du poste

PRAGMA busca un Ingeniero de Datos con pasión por los datos y capacidad para generar impacto trabajando en Colombia, CAC, México y USA. Formarás parte de un equipo que diseña soluciones escalables para mejorar la experiencia de los usuarios a través de pipelines robustos y modelos de datos eficientes.

Trabajarás con Python, Spark y Airflow para construir y automatizar pipelines, diseñar Data Lakes/LakeHouse y aplicar gobernanza y seguridad en la nube.

Qualifications

• Al menos 3 años de experiencia como ingeniero de datos.
• Dominio en Python y principios de OO/funcional.
• SQL avanzado para consulta, transformación y optimización de datos.
• Git en proyectos colaborativos.
• Conocimiento de procesamiento distribuido, especialmente Apache Spark.
• Experiencia con Apache Airflow para orquestación de pipelines.
• Capacidad para desplegar infraestructura en la nube con Terraform o CloudFormation.
• Experiencia en servicios de nube (almacenamiento, bases de datos, cómputo, funciones, analítica).
• Conocimiento de LakeHouse y gobernanza de datos.
• Capacidad para liderar equipos técnicos y adoptar tecnologías.

Responsabilités

• Desarrollarás pipelines de datos ETL/ELT con calidad, disponibilidad y trazabilidad.
• Diseñarás modelos de datos eficientes para analítica y ML.
• Orquestarás flujos de información en entornos distribuidos con herramientas modernas.
• Participarás en arquitecturas de datos como Data Lakes y soluciones analíticas en la nube.
• Contribuirás al diseño de soluciones seguras, resilientes y escalables en nube pública.
• Colaborarás con producto, ingeniería y analítica para convertir necesidades en soluciones técnicas.

Connaissances

Python

OO/FP

SQL avanzado

Git

Apache Spark

Airflow

Infra en nube

LakeHouse

Gobierno de datos

Liderazgo técnico

Outils

Terraform

CloudFormation

Airflow

Description du poste

PRAGMA busca un Ingeniero de Datos con pasión por los datos y capacidad para generar impacto trabajando en Colombia, CAC, México y USA. Formarás parte de un equipo que diseña soluciones escalables para mejorar la experiencia de los usuarios a través de pipelines robustos y modelos de datos eficientes.

Trabajarás con Python, Spark y Airflow para construir y automatizar pipelines, diseñar Data Lakes/LakeHouse y aplicar gobernanza y seguridad en la nube.