Senior AWS Data Platform Architect (Python, Spark)

Crh Talento De It; Colombia; On-site; COP 120,000,000 - 180,000,000; Full time

Job summary

Crh Talento De It busca un Senior AWS Data Platform Engineer con experiencia en Python, PySpark y SQL para diseñar, construir y optimizar plataformas de datos en AWS.

El rol implica desarrollar pipelines eficientes, implementar Data Lake y Data Fabric, garantizar gobernanza y seguridad de datos, y automatizar infraestructuras con Terraform. Se valorará experiencia en servicios de datos de AWS como Glue, EMR y Lake Formation.

Qualifications

• Conocimientos avanzados en Python, PySpark y SQL.
• Experiencia sólida en diseñar y optimizar pipelines de datos.
• Experiencia práctica con servicios AWS de datos (Glue, EMR, Lake Formation).
• Capacidad para automatizar infraestructura cloud con Terraform.
• Enfocado en gobernanza, calidad y seguridad de datos.

Responsibilities

• Diseñar, construir y optimizar plataformas de datos escalables en AWS.
• Desarrollar y mantener pipelines de datos eficientes con PySpark y SQL.
• Implementar Data Lake y Data Fabric y garantizar gobernanza de la información.
• Automatizar despliegues e IaC utilizando Terraform.
• Asegurar calidad, seguridad y monitoreo de datos.

Skills

Python

PySpark

SQL

AWS

Terraform

Data governance

Data security

Inglés C1

Tools

AWS Glue

AWS EMR

Lake Formation

Apache Hudi

Apache Iceberg

Job description

Crh Talento De It busca un Senior AWS Data Platform Engineer con experiencia en Python, PySpark y SQL para diseñar, construir y optimizar plataformas de datos en AWS.

El rol implica desarrollar pipelines eficientes, implementar Data Lake y Data Fabric, garantizar gobernanza y seguridad de datos, y automatizar infraestructuras con Terraform. Se valorará experiencia en servicios de datos de AWS como Glue, EMR y Lake Formation.