Global Data Engineer: AWS Glue & PySpark ETL

Ready; United States; Remote; USD 90,000 - 130,000; Full time

Job summary

Ready está buscando un Data Engineer especializado en AWS Glue para diseñar y mantener pipelines de ingesta y transformación de datos en proyectos internacionales. Trabajarás con Oracle, Redshift y SQL Server, diseñando soluciones en Amazon S3 mediante AWS Glue y PySpark.

Se requiere conocimiento de CDC con AWS DMS, Spark y SQL avanzado, y experiencia gestionando datos en las capas raw, bronze, silver y gold.

Qualifications

• Conocimientos sólidos en Spark y PySpark para procesamiento de datos.
• Experiencia en desarrollo de pipelines ETL y transformación de datos.
• Conocimientos de bases de datos Oracle, Redshift y SQL Server.

Responsibilities

• Diseñar y mantener pipelines de ingesta y transformación de datos hacia S3 usando AWS Glue.
• Desarrollar procesos ETL en PySpark y SQL avanzado.
• Gestionar transformación de datos en las capas raw/bronze/silver/gold y integrar fuentes relevantes.

Skills

Spark

Python

SQL

AWS Glue

PySpark

Tools

AWS DMS

Oracle

Redshift

SQL Server

Job description

Ready está buscando un Data Engineer especializado en AWS Glue para diseñar y mantener pipelines de ingesta y transformación de datos en proyectos internacionales. Trabajarás con Oracle, Redshift y SQL Server, diseñando soluciones en Amazon S3 mediante AWS Glue y PySpark.

Se requiere conocimiento de CDC con AWS DMS, Spark y SQL avanzado, y experiencia gestionando datos en las capas raw, bronze, silver y gold.