Data Engineer AWS Glue

Ready; United States; Remote; USD 90.000 - 130.000; Vollzeit

Zusammenfassung

Ready está buscando un Data Engineer especializado en AWS Glue para diseñar y mantener pipelines de ingesta y transformación de datos en proyectos internacionales. Trabajarás con Oracle, Redshift y SQL Server, diseñando soluciones en Amazon S3 mediante AWS Glue y PySpark.

Se requiere conocimiento de CDC con AWS DMS, Spark y SQL avanzado, y experiencia gestionando datos en las capas raw, bronze, silver y gold.

Qualifikationen

• Conocimientos sólidos en Spark y PySpark para procesamiento de datos.
• Experiencia en desarrollo de pipelines ETL y transformación de datos.
• Conocimientos de bases de datos Oracle, Redshift y SQL Server.

Aufgaben

• Diseñar y mantener pipelines de ingesta y transformación de datos hacia S3 usando AWS Glue.
• Desarrollar procesos ETL en PySpark y SQL avanzado.
• Gestionar transformación de datos en las capas raw/bronze/silver/gold y integrar fuentes relevantes.

Kenntnisse

Spark

Python

SQL

AWS Glue

PySpark

Tools

AWS DMS

Oracle

Redshift

SQL Server

Jobbeschreibung

En Ready estamos buscando un/a Data Engineer especializado en AWS Glue, con experiencia en diseño y mantenimiento de pipelines de ingesta y transformación de datos en proyectos internacionales.

• JDBC con Oracle, Redshift, SQL Server
• CDC con AWS DMS
• Spark, Python, SQL avanzado, Format
• Diseñar y mantener pipelines de ingesta de datos hacia Amazon S3 usando AWS Glue.
• Desarrollar procesos ETL en PySpark.
• Gestionar transformación de datos a través de las capas raw/bronze, silver y gold.
• Integrar fuentes como Oracle, Redshift, SQL Server.
• Certificaciones:

Condiciones

• Duración: 12 Meses, con posibilidad de renovación
• Inglés avanzado B2+ C1