Senior Data Engineer - Lakehouse, Databricks & Spark

CRH Talento en IT

Monterrey

On-site

MXN 420,000 - 900,000

Full time

14 days+

A complete application in a minute

Tailored resume and cover letter, ready to send.

Get past ATS filters

Job summary

CRH Talento en IT busca un ingeniero de datos para diseñar, desarrollar y mantener pipelines de datos end-to-end en entornos batch y near real-time usando Databricks.

Será responsable de implementar arquitecturas Lakehouse con las capas bronze, silver y gold, y de garantizar la calidad, disponibilidad y gobernanza de datos para Analytics, BI y Data Science. Se valorará experiencia en Airflow o Prefect y en entornos cloud.

Qualifications

  • Licenciatura en Ingeniería, Ciencias de la Computación, Matemáticas, Actuaría, Economía, Finanzas o carreras afines.
  • Entre 4 y 7 años de experiencia construyendo pipelines de datos en producción.
  • Dominio de SQL avanzado y PySpark.
  • Experiencia práctica con Databricks y Delta Lake.
  • Conocimiento de arquitecturas Lakehouse y del modelo de capas bronze, silver y gold.
  • Experiencia con herramientas de orquestación como Apache Airflow o Prefect.
  • Experiencia en diseño de pipelines escalables y optimización de procesos de datos en la nube.
  • Conocimiento de prácticas de calidad, monitoreo, documentación y gobierno de datos.
  • Experiencia colaborando con equipos de Data Science, Machine Learning, Analytics Engineering o Business Intelligence.

Responsibilities

  • Diseñar, desarrollar y mantener pipelines de datos end-to-end para processing batch y near real-time utilizando Databricks.
  • Implementar y mantener arquitecturas Lakehouse mediante las capas bronze, silver y gold.
  • Desarrollar procesos de ingestión, transformación, validación y publicación de datos, asegurando su calidad, disponibilidad y confiabilidad.
  • Implementar mecanismos automatizados de monitoreo, detección de errores y alertas para los pipelines de datos.
  • Optimizar procesos de Spark y Databricks para mejorar el rendimiento y reducir los costos de procesamiento en la nube.
  • Validar, documentar y publicar datasets certificados para su consumo por equipos de Analytics, Business Intelligence y Data Science.
  • Diagnosticar y resolver incidentes críticos en ambientes productivos, implementando acciones correctivas y preventivas.
  • Establecer y promover estándares técnicos, buenas prácticas de desarrollo, pruebas, documentación y despliegue.
  • Colaborar con equipos multidisciplinarios para garantizar la disponibilidad de datos confiables para iniciativas analíticas y de Machine Learning.

Skills

Pensamiento analítico
Resolución de problemas complejos
Comunicación efectiva
Autonomía e iniciativa
Liderazgo técnico
Colaboración interdisciplinaria

Education

Licenciatura en Ingeniería/CI, Matemáticas, Actuaría, Economía, Finanzas o afines

Tools

Databricks
Delta Lake
Apache Airflow
Prefect
Apache Spark
SQL avanzado

Job description

CRH Talento en IT busca un ingeniero de datos para diseñar, desarrollar y mantener pipelines de datos end-to-end en entornos batch y near real-time usando Databricks.

Será responsable de implementar arquitecturas Lakehouse con las capas bronze, silver y gold, y de garantizar la calidad, disponibilidad y gobernanza de datos para Analytics, BI y Data Science. Se valorará experiencia en Airflow o Prefect y en entornos cloud.

Get your free, confidential resume review.

or drag and drop your file here.

Similar jobs

Similar jobs worth comparing

Ingeniero de Datos - Pipelines Lakehouse en Databricks
Ingeniero de Datos - Pipelines Lakehouse en Databricks

CRH Talento en IT • Monterrey

On-site
MXN 700,000 - 1,000,000
SENIOR DATA ENGINEER
SENIOR DATA ENGINEER

CRH Talento en IT • Monterrey

On-site
MXN 420,000 - 900,000
Senior Databricks Architect — Lakehouse Leader (Hybrid)
Senior Databricks Architect — Lakehouse Leader (Hybrid)

Capital Empresarial Horizonte • Ciudad de México

Hybrid
MXN 1,200,000 - 2,400,000
Sueldo negociable
Horarios de oficina
Nómina 100%
+3
Data Lakehouse Platform Lead — Databricks & AWS
Data Lakehouse Platform Lead — Databricks & AWS

Capital Empresarial Horizonte • Región Centro

Hybrid
MXN 1,800,000 - 3,000,000
Horario de Oficina
Nomina 100%
Sueldo a negociación
+5
Arquitecto Databricks Lakehouse | Hybrid + Liderazgo
Arquitecto Databricks Lakehouse | Hybrid + Liderazgo

Capital Empresarial Horizonte • Región Centro

Hybrid
MXN 900,000 - 1,300,000
Databricks Architect | Hybrid (CDMX/GDL) & Azure Expert
Databricks Architect | Hybrid (CDMX/GDL) & Azure Expert

Azkait • Ciudad de México, Región Centro

Hybrid
MXN 900,000 - 1,300,000
IMSS, Infonavit y PTU conforme a la le
Seguro médico para el colaborador y su
Seguro de vida por 1 millón de pesos
+6
Senior Data Scientist & ML Engineer - Databricks
Senior Data Scientist & ML Engineer - Databricks

Bluetab • Ciudad de México

On-site
MXN 900,000 - 1,500,000
Líder de Ingeniería de Datos - Data Platform & CI/CD
Líder de Ingeniería de Datos - Data Platform & CI/CD

Capital Empresarial Horizonte • Benito Juárez

Hybrid
MXN 900,000 - 1,300,000
Horario de Oficina
Nómina 100%
Prestaciones de Ley
+3
Ingeniero de Datos Senior — Data Warehousing, Databricks y AI
Ingeniero de Datos Senior — Data Warehousing, Databricks y AI

Kyndryl • Ciudad de México

Hybrid
MXN 600,000 - 1,200,000
Databricks Architect
Databricks Architect

Capital Empresarial Horizonte • Ciudad de México

Hybrid
MXN 1,200,000 - 2,400,000
Sueldo negociable
Horarios de oficina
Nómina 100%
+3