Remote Data Engineer (AWS) with CI/CD & Spark

Xideral; Mexico; Hybrid; PHP 2,203,000 - 3,672,000; Full time

Job summary

Xideral en México busca un Data Engineer con experiencia en AWS y CI/CD para diseñar, construir y mantener pipelines de datos en entornos cloud. Requisitos: >4 años en data engineering, experiencia con AWS (S3, Glue), ingestion Source to S3, particiones, CDC, y optimización de rendimiento.

Modalidad: Remoto desde México. Inglés avanzado (C1-C2) es indispensable. Ofrecemos salario acorde a experiencia y empleo indefinido, con pago quincenal y prestaciones de ley. Trabajo REMOTO permanente.

Qualifications

• Inglés C1-C2 requerido y superior.
• Más de 4 años de experiencia como Data Engineer.
• Experiencia en entornos cloud y AWS (S3, Glue).
• Conocimiento de ingestión Source to S3 y particiones.
• Conocimiento de CDC y ficheros pequeños/small files.
• Pipelines idempotentes y replayables; diseño de S3 Landing Zones.
• Optimización de tamaño de archivos y compaction.
• Experiencia en CI/CD para pipelines de datos; control de versiones y deployment.

Skills

Inglés avanzado

Ingesta de datos

Lecturas particionadas

CDC

Pipelines idempotentes

Nube (data engineering)

Data Skew

Conocimientos CI/CD

Procesos de deployment

Tools

AWS

Amazon S3

AWS Glue

Apache Spark

Job description

Xideral en México busca un Data Engineer con experiencia en AWS y CI/CD para diseñar, construir y mantener pipelines de datos en entornos cloud. Requisitos: >4 años en data engineering, experiencia con AWS (S3, Glue), ingestion Source to S3, particiones, CDC, y optimización de rendimiento.

Modalidad: Remoto desde México. Inglés avanzado (C1-C2) es indispensable. Ofrecemos salario acorde a experiencia y empleo indefinido, con pago quincenal y prestaciones de ley. Trabajo REMOTO permanente.