Aws Data Platform Engineer

Crh Talento De It; Colombia; On-site; COP 120,000,000 - 180,000,000; Full time

Job summary

Crh Talento De It busca un Senior AWS Data Platform Engineer con experiencia en Python, PySpark y SQL para diseñar, construir y optimizar plataformas de datos en AWS.

El rol implica desarrollar pipelines eficientes, implementar Data Lake y Data Fabric, garantizar gobernanza y seguridad de datos, y automatizar infraestructuras con Terraform. Se valorará experiencia en servicios de datos de AWS como Glue, EMR y Lake Formation.

Qualifications

• Conocimientos avanzados en Python, PySpark y SQL.
• Experiencia sólida en diseñar y optimizar pipelines de datos.
• Experiencia práctica con servicios AWS de datos (Glue, EMR, Lake Formation).
• Capacidad para automatizar infraestructura cloud con Terraform.
• Enfocado en gobernanza, calidad y seguridad de datos.

Responsibilities

• Diseñar, construir y optimizar plataformas de datos escalables en AWS.
• Desarrollar y mantener pipelines de datos eficientes con PySpark y SQL.
• Implementar Data Lake y Data Fabric y garantizar gobernanza de la información.
• Automatizar despliegues e IaC utilizando Terraform.
• Asegurar calidad, seguridad y monitoreo de datos.

Skills

Python

PySpark

SQL

AWS

Terraform

Data governance

Data security

Inglés C1

Tools

AWS Glue

AWS EMR

Lake Formation

Apache Hudi

Apache Iceberg

Job description

Descripción del puesto

Buscamos un Senior AWS Data Platform Engineer con sólida experiencia en Python e ingeniería de datos para diseñar, construir y optimizar plataformas de datos escalables, seguras y de alto rendimiento en AWS.

La persona será responsable de desarrollar y mantener pipelines de datos eficientes, implementar arquitecturas modernas de Data Lake y Data Fabric, garantizar la calidad y gobernanza de la información y automatizar la infraestructura cloud mediante buenas prácticas de ingeniería.

Diseñar y administrar plataformas de datos en AWS utilizando Glue, EMR, Lake Formation, EC2 y CloudWatch.

Desarrollar y optimizar pipelines de datos con Python, PySpark y SQL.

Implementar formatos de tablas abiertas como Apache Hudi o Apache Iceberg.

Automatizar infraestructura y despliegues mediante Terraform (IaC).

Implementar mecanismos de validación, limpieza, seguridad y monitoreo de datos.

Colaborar con equipos de ingeniería para entregar productos de datos confiables y escalables.

Experiencia práctica con servicios de datos de AWS, especialmente Glue, EMR y Lake Formation.

Dominio de Python, PySpark y SQL avanzado.

Conocimientos de seguridad, gobernanza, calidad y optimización de datos.

Inglés avanzado C1 y excelentes habilidades de comunicación.

Deseable: experiencia en servicios financieros o banca de inversión, procesamiento en tiempo real con Apache Flink o Kafka Streams y arquitecturas orientadas a eventos (event-driven).