Ingeniería de Datos Azure - Databricks
GFT Technologies LATAM
Consigue una respuesta de este empleador
Tu currículum y tu carta de presentación, adaptados exactamente a lo que buscan contratar.
Descripción de la vacante
GFT Technologies LATAM busca un Ingeniero/a de Datos con experiencia en Azure Databricks para diseñar, construir y operar pipelines de datos orientados a analítica e IA, asegurando disponibilidad, calidad y seguridad en entornos cloud.
La función requiere diseñar Data Lake y Lakehouse, implementar ETL/ELT, gobernanza de datos y colaboración con equipos de BI y ciencia de datos. 3–5 años de experiencia, SQL avanzado y experiencia en Python/Scala son esenciales.
Formación
- Experiencia 3–5 años en Ingeniería de Datos.
- Dominio avanzado de SQL.
- Experiencia en Python o Scala.
- Experiencia con Azure Databricks y herramientas Azure.
- Conocimiento de Data Lake / Lakehouse y gobernanza de datos.
Responsabilidades
- Diseñar, construir y optimizar arquitecturas de datos basadas en Azure y Databricks.
- Implementar ETL/ELT para integrar múltiples fuentes.
- Diseñar y administrar Data Lake y Lakehouse.
- Monitorear pipelines para garantizar calidad y seguridad.
- Preparar datasets para analítica, reporting y ML.
- Colaborar con BI y ciencia de datos para facilitar acceso a la información.
- Definir controles de gobierno y calidad de datos.
- Implementar CI/CD para soluciones de datos.
- Diseñar soluciones escalables para procesamiento distribuido.
- Identificar oportunidades de optimización de costos y rendimiento.
- Evaluar nuevas tecnologías para evolucionar la plataforma.
Conocimientos
Educación
Herramientas
Descripción del empleo
Buscamos una persona con experiencia en Ingeniería de Datos sobre Azure, especializada en Databricks, responsable de diseñar, construir y operar arquitecturas y pipelines de datos orientados a analítica e inteligencia artificial. El perfil deberá garantizar la disponibilidad, calidad, seguridad y escalabilidad de la información en entornos cloud, aplicando buenas prácticas de automatización y gobierno de datos.
- Diseñar, construir y optimizar arquitecturas de datos basadas en Azure y Databricks
- Implementar procesos ETL y ELT para integrar múltiples fuentes de información
- Diseñar y administrar arquitecturas Data Lake y Lakehouse
- Monitorear pipelines de datos para garantizar consistencia, calidad, trazabilidad y seguridad
- Preparar y optimizar datasets para analítica avanzada, reporting y modelos de Machine Learning
- Colaborar con equipos de BI, analítica y ciencia de datos para facilitar el acceso a la información
- Definir e implementar controles de gobierno y calidad de datos
- Implementar procesos de integración continua y despliegue continuo para soluciones de datos
- Diseñar soluciones escalables para procesamiento distribuido y grandes volúmenes de datos
- Identificar oportunidades de mejora para optimizar costos, rendimiento y tiempos de procesamiento
- Evaluar nuevas tecnologías y mejores prácticas para la evolución de la plataforma de datos
Descripción del puesto:
Buscamos una persona con experiencia en Ingeniería de Datos sobre Azure, especializada en Databricks, responsable de diseñar, construir y operar arquitecturas y pipelines de datos orientados a analítica e inteligencia artificial. El perfil deberá garantizar la disponibilidad, calidad, seguridad y escalabilidad de la información en entornos cloud, aplicando buenas prácticas de automatización y gobierno de datos.
- Diseñar, construir y optimizar arquitecturas de datos basadas en Azure y Databricks
- Implementar procesos ETL y ELT para integrar múltiples fuentes de información
- Diseñar y administrar arquitecturas Data Lake y Lakehouse
- Monitorear pipelines de datos para garantizar consistencia, calidad, trazabilidad y seguridad
- Preparar y optimizar datasets para analítica avanzada, reporting y modelos de Machine Learning
- Colaborar con equipos de BI, analítica y ciencia de datos para facilitar el acceso a la información
- Definir e implementar controles de gobierno y calidad de datos
- Implementar procesos de integración continua y despliegue continuo para soluciones de datos
- Diseñar soluciones escalables para procesamiento distribuido y grandes volúmenes de datos
- Identificar oportunidades de mejora para optimizar costos, rendimiento y tiempos de procesamiento
- Evaluar nuevas tecnologías y mejores prácticas para la evolución de la plataforma de datos
- Profesional en Ingeniería de Sistemas, Ingeniería Industrial, Ingeniería Electrónica, Ingeniería Mecatrónica o carreras afines
- Entre 3 y 5 años de experiencia como Ingeniero(a) de Datos
- Dominio avanzado de SQL
- Experiencia en Python o Scala
- Experiencia en procesamiento distribuido con PySpark
- Experiencia con Azure Databricks
- Experiencia con Azure Data Factory
- Experiencia con Azure Data Lake Storage Gen2 (ADLS Gen2)
- Conocimiento de Delta Lake
- Experiencia en arquitecturas Lakehouse
- Conocimiento de arquitectura Medallion
- Experiencia en modelado dimensional
- Experiencia con bases de datos relacionales
- Experiencia con bases de datos NoSQL
- Conocimiento en gobierno y calidad de datos
- Experiencia con Unity Catalog
- Experiencia con Delta Live Tables (DLT)
- Conocimiento de Great Expectations
- Experiencia en procesamiento de streaming mediante Event Hubs
- Experiencia con Azure DevOps y Git
- Conocimiento de Entra ID
- Conocimiento de RBAC
- Manejo de Power BI
- Manejo de Visual Studio Code
- Experiencia en integración de datos y procesos ETL/ELT
- Experiencia en análisis y modelado de datos
- Experiencia en proyectos de Inteligencia Artificial y Machine Learning
- Conocimiento en DataOps y automatización de plataformas de datos
- Experiencia en optimización de costos en plataformas cloud
- Certificaciones de Azure relacionadas con Data Engineering
- Experiencia avanzada en observabilidad y monitoreo de pipelines de datos
- Participación en iniciativas de modernización de plataformas analíticas
- Comunicación
- Resolución de Problemas
- Pensamiento analítico
- Trabajo en equipo
- Adaptabilidad
- Proactividad
- Autogestión
- Responsabilidad
- Integridad
- Servicio al Cliente
- Toma de Decisiones
- Construcción de Relaciones
- Gestión de Stakeholders
- Pensamiento Estratégico
- Orientación a resultados
En cumplimiento con nuestras disposiciones en materia de protección de datos personales, te informamos que la información que nos proporciones, será tratada conforme al Aviso de Privacidad que encontrarás en nuestra página web.En el apartado: Aviso de privacidad para el tratamiento de datos personales- candidato-
'/%3e%3cpath%20d='M101.744%2012.4726L102.894%2016.1947L99.0021%2013.2201L101.744%2012.4726ZM105.3%208.40937H100.488L99.0026%203.59473L97.5116%208.41047L92.7%208.40385L96.5965%2011.3834L95.1055%2016.1942L99.0021%2013.2196L101.408%2011.3834L105.3%208.40992V8.40937Z'%20fill='white'/%3e%3cdefs%3e%3clinearGradient%20id='paint0_linear_5593_1381'%20x1='90'%20y1='9.44471'%20x2='99'%20y2='9.44471'%20gradientUnits='userSpaceOnUse'%3e%3cstop%20stop-color='%2300AD70'/%3e%3cstop%20offset='0.998594'%20stop-color='%2300B67A'/%3e%3cstop%20offset='1'%20stop-color='%23DCDCE6'/%3e%3c/linearGradient%3e%3c/defs%3e%3c/svg%3e){kind=small}
