Data Engineer – Databricks

Improving South America; Comisión de Fomento de Perú; Remote; ARS 136,430,000 - 181,906,000; Full time

Benefits offered by this job

Contrato a largo plazo

Remoto 100%

Vacaciones y PTO

2 bonos al año

2 revisiones salariales al año

Clases de inglés

Equipamiento Apple

Cursos en linea

Budget para libros

Budget para materiales

Job summary

Improving South America busca un Data Engineer senior para diseñar, optimizar y mantener soluciones de datos escalables. Trabajarás con Delta Lake, Unity Catalog, Python y SQL en pipelines de Databricks, enfocándote en procesamiento incremental y evolución de esquemas.

Se valorará experiencia en Delta Lake, CI/CD y Azure DevOps, así como experiencia en healthcare o seguros. Contrato a largo plazo, 100% remoto y revisiones salariales regulares.

Qualifications

• 7+ años de experiencia como Data Engineer.
• Inglés intermedio/avanzado para comunicación diaria con equipos globales.
• Experiencia con Databricks.
• Experiencia sólida con Python y SQL.
• Conocimientos de Delta Lake y Unity Catalog.
• Conocimientos de data modelling.
• Experiencia con Databricks Asset Bundles y/o Azure DevOps para CI/CD.
• Experiencia con procesamiento incremental y evolución de esquemas.

Responsibilities

• Diseñar y optimizar tablas utilizando Delta Lake.
• Desarrollar y mantener pipelines de datos en Databricks.
• Gestionar el gobierno y acceso a los datos mediante Unity Catalog.
• Trabajar con Databricks Asset Bundles y Azure DevOps para CI/CD.
• Participar en la automatización, optimización y mejora continua de procesos de ingeniería de datos.

Skills

Data modelling

Pipeline design

CI/CD practices

Data governance

Incremental processing

Tools

Databricks

Python

SQL

Delta Lake

Unity Catalog

Databricks Asset Bundles

Azure DevOps

Job description

En Improving South America, brindamos servicios de TI para transformar la percepción del profesional de TI. Nos enfocamos en consultoría de TI, desarrollo de software y formación ágil. La empresa promueve una cultura de trabajo excepcional basada en el trabajo en equipo, la excelencia y la diversión, con enfoque en crecimiento personal y recompensas compartidas. Al integrarse, el/la candidato/a formará parte de una comunidad que prioriza la comunicación abierta y relaciones laborales sólidas a largo plazo, respaldada por una estructura de desarrollo profesional y aprendizaje continuo.

Responsabilidades del rol

Buscamos Data Engineer con experiencia sólida en Databricks para diseñar, optimizar y mantener soluciones de datos escalables, trabajando con Delta Lake, Unity Catalog, Python y SQL.

El rol tendrá foco en el diseño y modelado de datos, procesamiento incremental, evolución de esquemas, orquestación de pipelines y prácticas de CI/CD.

Lo Que Harás

• Diseñar y optimizar tablas utilizando Delta Lake.
• Implementar y mantener modelos de datos eficientes y escalables.
• Gestionar el gobierno y acceso a los datos mediante Unity Catalog.
• Desarrollar y mantener pipelines de datos en Databricks.
• Implementar procesos de procesamiento incremental y estrategias de evolución de esquemas.
• Trabajar con Databricks Asset Bundles y Azure DevOps para CI/CD.
• Participar en la automatización, optimización y mejora continua de los procesos de ingeniería de datos.

Requerimientos indispensables

• 7+ años de experiencia profesional como Data Engineer.
• Inglés intermedio/avanzado para comunicación diaria con equipos globales. – Obligatorio.
• Experiencia profesional trabajando con Databricks.
• Experiencia sólida con Python y SQL.
• Experiencia práctica con Delta Lake y Unity Catalog.
• Conocimientos de data modelling.
• Experiencia con Databricks Asset Bundles y/o Azure DevOps aplicada a procesos de CI/CD.
• Experiencia con procesamiento incremental y schema evolution.

Plus relevante

Experiencia previa en proyectos de Healthcare o Insurance.

Beneficios que ofrecemos

• Contrato a largo plazo.
• 100% Remoto.
• Vacaciones y PTOs
• Posibilidad de recibir 2 bonos al año.
• 2 revisiones salariales al año.
• Clases de inglés.
• Equipamiento Apple.
• Plataforma de cursos en linea
• Budget para compra de libros.
• Budget para compra de materiales de trabajo
• mucho mas..