Senior Data Engineer | Proyecto 1 mes

Praxis; Lima Metropolitana; Hybrid; PEN 90,000 - 140,000; Full time

Job summary

PRAXIS, una consultoría de TI con más de 25 años de experiencia, busca un/a Senior Data Engineer para un proyecto del sector financiero. Se trabajará con Azure y pipelines de datos en entornos de alta concurrencia.

El/la candidato(a) ideal diseñará, desarrollará y operará pipelines ETL/ELT con Databricks, PySpark y SQL, asegurando Data Quality, CDC y trazabilidad desde fuente hasta PostgreSQL. Se ofrece modalidad híbrida en San Isidro, Lima 3 días en oficina.

Qualifications

• 4+ años de experiencia en Ingeniería de Datos.
• Experiencia con Azure y ADLS Gen2.
• Experiencia con Databricks, Spark y PySpark.
• Conocimientos de Python y SQL.
• Experiencia con PostgreSQL y ETL/ELT.
• Conocimientos de Delta Lake y CDC.
• Experiencia con Azure Data Factory, Data Quality y reconciliación.
• Conocimientos de Git y CI/CD.
• Conocimientos de Docker y AKS.
• Deseable experiencia en sector financiero o bancario.

Responsibilities

• Diseñar y desarrollar pipelines ETL/ELT desde fuentes diversas.
• Implementar zonas Landing, Raw y Curated en Data Lake.
• Desarrollar transformaciones con Databricks, Spark y PySpark.
• Implementar cargas Full e incrementales y CDC.
• Diseñar tablas, índices y consultas para alta concurrencia.
• Controlar Data Quality, integridad y reconciliación.
• Planificar reprocesamiento, recuperación y manejo de errores.
• Garantizar trazabilidad de datos hasta PostgreSQL.
• Monitorear pipelines, data freshness y lag de sincronización.

Skills

Azure

Azure Data Lake Storage

Databricks

Apache Spark

PySpark

Python

SQL

PostgreSQL

ETL/ELT

CDC

Git

CI/CD

CQRS

Docker

AKS

Tools

Delta Lake

Azure Data Factory

Docker

AKS

Job description

PRAXISes una consultoría de TI con más de 25 años de experiencia, estamos presentes en 10 países (España, USA, México, Brasil, Colombia, Perú, Panamá, Costa Rica, Brasil, Argentina). Nuestros principales clientes son sector financiero, seguros, construcción, automotriz, etc

Buscamos un/a Senior Data Engineer con 4+ años de experiencia en Ingeniería de Datos para participar en un proyecto del sector financiero/bancario. (1 MES)

La persona será responsable de diseñar, desarrollar y operar soluciones de datos sobre Azure, construyendo pipelines de ingestión, transformación y sincronización que permitan alimentar modelos de lectura optimizados para aplicaciones de alta concurrencia.

• Diseñar y desarrollar pipelines ETL/ELT desde diferentes fuentes.
• Implementar zonas Landing, Raw y Curated dentro del Data Lake.
• Desarrollar procesos de transformación utilizando Databricks, Apache Spark y PySpark.
• Implementar cargas Full e incrementales y mecanismos de CDC.
• Diseñar tablas, índices y consultas optimizadas para alta concurrencia.
• Implementar controles de Data Quality, integridad, duplicidad y reconciliación.
• Diseñar estrategias de reprocesamiento, recuperación y manejo de errores.
• Garantizar la trazabilidad de los datos desde la fuente hasta PostgreSQL.
• Implementar monitoreo de pipelines, data freshness y synchronization lag.
• Participar en pruebas de rendimiento, volumen, concurrencia y reconciliación.
• Trabajar en conjunto con equipos Backend y de arquitectura.
• 4+ años de experiencia en Ingeniería de Datos.
• Experiencia con Azure y Azure Data Lake Storage (ADLS Gen2).
• Experiencia con Databricks, Apache Spark y PySpark.
• Conocimientos sólidos de Python y SQL.
• Experiencia con PostgreSQL.
• Experiencia desarrollando procesos ETL/ELT.
• Conocimientos de Delta Lake / Delta Tables.
• Experiencia con CDC y cargas incrementales.
• Experiencia con Azure Data Factory.
• Conocimientos de Data Quality y reconciliación.
• Conocimientos de Git y CI/CD.
• Conocimientos de Docker / AKS.
• Deseable experiencia con CQRS / Read Models.
• Deseable experiencia en el sector financiero o bancario.

HIBRIDO - SAN ISIDRO - LIMA (3 veces a la semana en oficina)

"En Praxis queda prohibido la solicitud de certificados médicos de no embarazo y virus de Inmunodeficiencia Humana (VIH) como requisito para el ingreso, permanencia o ascenso"