Ingeniero de Datos - Pipelines en Databricks y Lakehouse

Crh Talento De It; Monterrey; Sur place; MXN 600 000 - 1 000 000; Plein temps

Résumé du poste

Crh Talento De It en Monterrey busca un Ingeniero de Datos para diseñar, desarrollar y mantener pipelines end-to-end con Databricks, implementando arquitecturas Lakehouse en Bronze, Silver y Gold. La posición requiere experiencia en PySpark, SQL avanzado, Delta Lake y herramientas de orquestación como Airflow o Prefect, con foco en calidad, disponibilidad y escalabilidad de datos.

Trabajarás con equipos de Analytics, BI y Data Science para asegurar datasets confiables y cumplir con estándares de

Qualifications

• Licenciatura en ingeniería o carreras afines.
• Entre 4 y 7 años de experiencia construyendo y manteniendo pipelines de datos en producción.
• SQL avanzado y experiencia con PySpark.
• Dominio de Apache Spark y Databricks.
• Conocimiento de Delta Lake y arquitecturas Lakehouse (bronze/silver/gold).
• Experiencia con herramientas de orquestación como Airflow o Prefect.

Responsabilités

• Diseñar, desarrollar y mantener pipelines de datos end-to-end.
• Implementar y mantener Lakehouse con capas bronze, silver y gold.
• Desarrollar procesos de ingestión, transformación, validación y publicación de datos.
• Monitorear pipelines, detectar errores y activar alertas.
• Optimizar Spark y Databricks para rendimiento y costos en la nube.
• Validar y publicar datasets certificados para Analytics/BI/ML.
• Colaborar con equipos de Data Science, Analytics y BI.

Connaissances

PySpark

SQL avanzado

Spark

Diseño de pipelines

Colaboración con Data Science

Resolución de problemas

Formation

Licenciatura en Ingeniería, Ciencias de la Computación, Matemáticas, Actuaría, Economía, Finanzas o carreras afines

Outils

Databricks

Delta Lake

Apache Airflow

Prefect

Description du poste

Crh Talento De It en Monterrey busca un Ingeniero de Datos para diseñar, desarrollar y mantener pipelines end-to-end con Databricks, implementando arquitecturas Lakehouse en Bronze, Silver y Gold. La posición requiere experiencia en PySpark, SQL avanzado, Delta Lake y herramientas de orquestación como Airflow o Prefect, con foco en calidad, disponibilidad y escalabilidad de datos.

Trabajarás con equipos de Analytics, BI y Data Science para asegurar datasets confiables y cumplir con estándares de