Data Engineer - AWS - CI/CD - Remoto - 2863

Xideral; Mexico; Hybrid; PHP 2,203,000 - 3,672,000; Full time

Job summary

Xideral en México busca un Data Engineer con experiencia en AWS y CI/CD para diseñar, construir y mantener pipelines de datos en entornos cloud. Requisitos: >4 años en data engineering, experiencia con AWS (S3, Glue), ingestion Source to S3, particiones, CDC, y optimización de rendimiento.

Modalidad: Remoto desde México. Inglés avanzado (C1-C2) es indispensable. Ofrecemos salario acorde a experiencia y empleo indefinido, con pago quincenal y prestaciones de ley. Trabajo REMOTO permanente.

Qualifications

• Inglés C1-C2 requerido y superior.
• Más de 4 años de experiencia como Data Engineer.
• Experiencia en entornos cloud y AWS (S3, Glue).
• Conocimiento de ingestión Source to S3 y particiones.
• Conocimiento de CDC y ficheros pequeños/small files.
• Pipelines idempotentes y replayables; diseño de S3 Landing Zones.
• Optimización de tamaño de archivos y compaction.
• Experiencia en CI/CD para pipelines de datos; control de versiones y deployment.

Skills

Inglés avanzado

Ingesta de datos

Lecturas particionadas

CDC

Pipelines idempotentes

Nube (data engineering)

Data Skew

Conocimientos CI/CD

Procesos de deployment

Tools

AWS

Amazon S3

AWS Glue

Apache Spark

Job description

Estamos buscando Data Engineer – AWS + CI/CD

Modalidad: Remoto desde México

Inglés: Avanzado C1 - C2

Requisitos:

• Ingles C1 - C2
• Más de 4 años de experiencia como DATA ENGINEER
• Experiencia como Data Engineer en ambientes cloud.
• Experiencia sólida con AWS, principalmente Amazon S3 y AWS Glue.
• Conocimiento en procesos de ingesta Source to S3.
• Experiencia con partitioned reads.
• Conocimiento de cargas incrementales y basadas en CDC (Change Data Capture).
• Experiencia con pipelines idempotentes y replayables.
• Conocimiento en diseño de S3 Landing Zones.
• Experiencia con estrategias de particionamiento, formatos de archivos y compresión.
• Conocimientos en optimización de tamaño de archivos y file compaction.
• Experiencia en AWS Glue Performance & Cost Tuning.
• Conocimiento en Worker Type, DPU sizing y autoscaling.
• Experiencia con Predicate Pushdown.
• Conocimientos de Data Skew y manejo de Small Files.
• Experiencia con Apache Spark y análisis de rendimiento mediante Spark UI.
• Experiencia en mantenimiento de pipelines de CI/CD.
• Manejo de Control de Versiones y procesos de Deployment.
• Inglés avanzado C1, indispensable.
• Disponibilidad para trabajar remotamente desde México.

Ofrecemos:

• Salario dependiendo de tus años de experiencia.
• Pago nominal y quincenal.
• Proyecto de forma indefinido
• Prestaciones de ley y superiores.
• Trabajo REMOTO permanente.