Ingeniero de Datos AWS | Data Lake / Data Mesh

Accenture Global; Bogotá; On-site; COP 60,000,000 - 120,000,000; Full time

Job summary

Accenture es una compañía global líder en servicios profesionales. Buscamos Ingenieros de Datos – Colombia para diseñar, desarrollar e implementar pipelines y productos de datos sobre AWS, contribuyendo a arquitecturas Data Lake / Data Mesh.

Participarás en ETL/ELT, optimización de cargas con Spark y gestión de metadatos en AWS Glue Data Catalog, con enfoque en calidad y escalabilidad.

Qualifications

• Experiencia en ingeniería de datos o proyectos ETL/ELT (nivel Junior, Semi Senior o Senior).
• Conocimientos en AWS Glue, Python, PySpark y Spark SQL.
• Experiencia con Redshift, Athena y almacenamiento en S3.
• Desarrollo de pipelines de datos y procesamiento distribuido.
• Conocimientos de SQL para transformación y validación.
• Orquestación con Airflow / MWAA y pruebas de datos.

Responsibilities

• Diseñar, desarrollar y mantener procesos de ingesta y pipelines ETL/ELT sobre AWS.
• Construir y optimizar soluciones de procesamiento de datos con AWS Glue, Python y PySpark.
• Diseñar pipelines desde fuentes hacia Amazon S3 con buena gobernanza.
• Aplicar buenas prácticas de desarrollo y uso de Git.
• Colaborar en gestión de Data Lake / Data Mesh y calidad de datos.
• Apoyar en pruebas unitarias y verificación de datos.

Skills

AWS Glue

Python

PySpark

Spark SQL

Redshift

Athena

SQL

Airflow

MWAA

Git

Pandas

Data Lake

Data Mesh

Tools

AWS Glue

Python

PySpark

Spark SQL

Redshift

Athena

S3

Airflow

MWAA

Git

Job description

Accenture es una compañía global líder en servicios profesionales. Buscamos Ingenieros de Datos – Colombia para diseñar, desarrollar e implementar pipelines y productos de datos sobre AWS, contribuyendo a arquitecturas Data Lake / Data Mesh.

Participarás en ETL/ELT, optimización de cargas con Spark y gestión de metadatos en AWS Glue Data Catalog, con enfoque en calidad y escalabilidad.