SENIOR DATA ENGINEER

CRH Talento en IT

Monterrey

On-site

MXN 420,000 - 900,000

Full time

14 days+

A complete application in a minute

Tailored resume and cover letter, ready to send.

Get past ATS filters

Job summary

CRH Talento en IT busca un ingeniero de datos para diseñar, desarrollar y mantener pipelines de datos end-to-end en entornos batch y near real-time usando Databricks.

Será responsable de implementar arquitecturas Lakehouse con las capas bronze, silver y gold, y de garantizar la calidad, disponibilidad y gobernanza de datos para Analytics, BI y Data Science. Se valorará experiencia en Airflow o Prefect y en entornos cloud.

Qualifications

  • Licenciatura en Ingeniería, Ciencias de la Computación, Matemáticas, Actuaría, Economía, Finanzas o carreras afines.
  • Entre 4 y 7 años de experiencia construyendo pipelines de datos en producción.
  • Dominio de SQL avanzado y PySpark.
  • Experiencia práctica con Databricks y Delta Lake.
  • Conocimiento de arquitecturas Lakehouse y del modelo de capas bronze, silver y gold.
  • Experiencia con herramientas de orquestación como Apache Airflow o Prefect.
  • Experiencia en diseño de pipelines escalables y optimización de procesos de datos en la nube.
  • Conocimiento de prácticas de calidad, monitoreo, documentación y gobierno de datos.
  • Experiencia colaborando con equipos de Data Science, Machine Learning, Analytics Engineering o Business Intelligence.

Responsibilities

  • Diseñar, desarrollar y mantener pipelines de datos end-to-end para processing batch y near real-time utilizando Databricks.
  • Implementar y mantener arquitecturas Lakehouse mediante las capas bronze, silver y gold.
  • Desarrollar procesos de ingestión, transformación, validación y publicación de datos, asegurando su calidad, disponibilidad y confiabilidad.
  • Implementar mecanismos automatizados de monitoreo, detección de errores y alertas para los pipelines de datos.
  • Optimizar procesos de Spark y Databricks para mejorar el rendimiento y reducir los costos de procesamiento en la nube.
  • Validar, documentar y publicar datasets certificados para su consumo por equipos de Analytics, Business Intelligence y Data Science.
  • Diagnosticar y resolver incidentes críticos en ambientes productivos, implementando acciones correctivas y preventivas.
  • Establecer y promover estándares técnicos, buenas prácticas de desarrollo, pruebas, documentación y despliegue.
  • Colaborar con equipos multidisciplinarios para garantizar la disponibilidad de datos confiables para iniciativas analíticas y de Machine Learning.

Skills

Pensamiento analítico
Resolución de problemas complejos
Comunicación efectiva
Autonomía e iniciativa
Liderazgo técnico
Colaboración interdisciplinaria

Education

Licenciatura en Ingeniería/CI, Matemáticas, Actuaría, Economía, Finanzas o afines

Tools

Databricks
Delta Lake
Apache Airflow
Prefect
Apache Spark
SQL avanzado

Job description

Responsabilidades
  • Diseñar, desarrollar y mantener pipelines de datos end-to-end para procesamiento batch y near real-time utilizando Databricks.
  • Implementar y mantener arquitecturas Lakehouse mediante las capas bronze, silver y gold.
  • Desarrollar procesos de ingestión, transformación, validación y publicación de datos, asegurando su calidad, disponibilidad y confiabilidad.
  • Implementar mecanismos automatizados de monitoreo, detección de errores y alertas para los pipelines de datos.
  • Optimizar procesos de Spark y Databricks para mejorar el rendimiento y reducir los costos de procesamiento en la nube.
  • Validar, documentar y publicar datasets certificados para su consumo por equipos de Analytics, Business Intelligence y Data Science.
  • Diagnosticar y resolver incidentes críticos en ambientes productivos, implementando acciones correctivas y preventivas.
  • Establecer y promover estándares técnicos, buenas prácticas de desarrollo, pruebas, documentación y despliegue.
  • Colaborar con equipos multidisciplinarios para garantizar la disponibilidad de datos confiables para iniciativas analíticas y de Machine Learning.
Requisitos
  • Licenciatura en Ingeniería, Ciencias de la Computación, Matemáticas, Actuaría, Economía, Finanzas o carreras afines.
  • Entre 4 y 7 años de experiencia construyendo y manteniendo pipelines de datos en producción.
  • Experiencia trabajando con SQL avanzado.
  • Dominio de PySpark y Apache Spark.
  • Experiencia práctica con Databricks y Delta Lake.
  • Conocimiento de arquitecturas Lakehouse y del modelo de capas bronze, silver y gold.
  • Experiencia con herramientas de orquestación como Apache Airflow o Prefect.
  • Experiencia en diseño de pipelines escalables y optimización de procesos de datos en la nube.
  • Conocimiento de prácticas de calidad, monitoreo, documentación y gobierno de datos.
  • Experiencia colaborando con equipos de Data Science, Machine Learning, Analytics Engineering o Business Intelligence.
Competencias
  • Pensamiento analítico y resolución de problemas complejos.
  • Orientación a la calidad, eficiencia y mejora continua.
  • Capacidad para diagnosticar y resolver incidentes en producción.
  • Comunicación efectiva y colaboración con equipos multidisciplinarios.
  • Autonomía, iniciativa y aprendizaje continuo.
  • Liderazgo técnico y capacidad para compartir conocimientos y promover buenas prácticas.
Get your free, confidential resume review.

or drag and drop your file here.

Similar jobs

Similar jobs worth comparing

Ingeniero(a) de Datos Senior
Ingeniero(a) de Datos Senior

CRH Talento en IT • Monterrey

On-site
MXN 700,000 - 1,000,000
Data Management Engineer Cloud Etl Sr
Data Management Engineer Cloud Etl Sr

Softtek • Mexico

On-site
MXN 900,000 - 1,300,000
Data Engineer Middle
Data Engineer Middle

Multiplica • Región Centro

Hybrid
MXN 800,000 - 1,000,000
Salud y beneficios de ley
Vacaciones adicionales
Flexibilidad horaria
+2
Científico de datos
Científico de datos

Bluetab, an IBM Company (América) • Estado de México

On-site
MXN 900,000 - 1,500,000
Cientifico de Datos (Experiencia con Databricks)
Cientifico de Datos (Experiencia con Databricks)

Bluetab, an IBM Company • Ciudad de México

On-site
MXN 900,000 - 1,500,000
Ingeniero de Datos - Pipelines Lakehouse en Databricks
Ingeniero de Datos - Pipelines Lakehouse en Databricks

CRH Talento en IT • Monterrey

On-site
MXN 700,000 - 1,000,000
Data Governance Specialist (Databricks Unity Catalog)
Data Governance Specialist (Databricks Unity Catalog)

Bluetab, an IBM Company (América) • Ciudad de México

On-site
MXN 900,000 - 1,350,000
Vales de despensa
Seguro de salud
Capacitación y desarrollo
Senior Data Engineer - Lakehouse, Databricks & Spark
Senior Data Engineer - Lakehouse, Databricks & Spark

CRH Talento en IT • Monterrey

On-site
MXN 420,000 - 900,000
Ingeniero de Datos
Ingeniero de Datos

Digital Challengers IT • Mexico

On-site
MXN 900,000 - 1,300,000
Líder de Ingeniería de Datos
Líder de Ingeniería de Datos

Capital Empresarial Horizonte • Benito Juárez

Hybrid
MXN 900,000 - 1,300,000
Horario de Oficina
Nómina 100%
Prestaciones de Ley
+3