Senior Big Data Engineer: Spark, Scala & CI/CD Architect

Babel Group; Ciudad de México; Hybrid; MXN 900,000 - 1,500,000; Full time

Job summary

Babel Group, una consultora tecnológica líder, busca un/a Senior Data Engineer para fortalecer el equipo de datos en Ciudad de México. Rol híbrido, enfocado en desarrollar soluciones Big Data con Scala y Spark, optimizar pipelines batch y streaming y promover prácticas de CI/CD.

Se requieren al menos 3 años de experiencia en Big Data/Data Engineering, dominio de Scala y Spark, y conocimiento de repositorios, CI/CD, Kubernetes y entornos Cloud.

Qualifications

• 3+ años de experiencia en Big Data/Data Engineering.
• Experiencia sólida con Scala y Apache Spark.
• Conocimiento de CI/CD, entornos Cloud y herramientas de orquestación.

Responsibilities

• Desarrollar soluciones Big Data con Scala y Spark.
• Diseñar y optimizar pipelines batch y streaming.
• Implementar transformaciones, integraciones y calidad de datos.
• Automatizar desarrollo, testing y despliegue con CI/CD.
• Definir e implementar arquitecturas de datos escalables.
• Colaborar con Data Engineering, Arquitectura, DevOps y Negocio.
• Monitorear y optimizar rendimiento de aplicaciones y datos.
• Aplicar buenas prácticas de desarrollo y control de versiones.
• Participar en revisiones de código y mantener estándares técnicos.

Skills

Big Data

Scala

Apache Spark

CI/CD

Cloud

Kubernetes

Inglés B2-C1

Tools

Git

Jenkins

GitHub Actions

GitLab CI

Airflow

Kafka

Docker

Job description

Babel Group, una consultora tecnológica líder, busca un/a Senior Data Engineer para fortalecer el equipo de datos en Ciudad de México. Rol híbrido, enfocado en desarrollar soluciones Big Data con Scala y Spark, optimizar pipelines batch y streaming y promover prácticas de CI/CD.

Se requieren al menos 3 años de experiencia en Big Data/Data Engineering, dominio de Scala y Spark, y conocimiento de repositorios, CI/CD, Kubernetes y entornos Cloud.