Senior Data Engineer

Mantu; Lima Metropolitana; Presencial; PEN 120.000 - 190.000; Jornada completa

Descripción de la vacante

Amaris Consulting busca un Data Engineer Senior en Lima para liderar el diseño y operación de pipelines de datos en AWS y Databricks orientados a un lakehouse empresarial robusto y seguro. La posición implica migrar from legacy a arquitecturas modernas cumpliendo regulaciones y estándares de analítica avanzada.

Se requiere experiencia en CDC log-based, Databricks, Delta Lake, S3 y Unity Catalog, con foco en performance y calidad de datos.

Formación

• 7–10 años en ingeniería de datos.
• Al menos 5 años construyendo y operando pipelines en producción.
• 3+ años con procesamiento distribuido (batch y streaming) y SQL avanzado.
• Experiencia con lakehouse/medallón (Delta Lake, Apache Iceberg, Hudi).
• Dominio de AWS aplicado a soluciones de datos y seguridad.
• Gestión de catálogos de gobierno de datos (Unity Catalog, Collibra, etc.).
• Conocimiento de formatos de tablas abiertas y tuning de rendimiento.
• Experiencia con Git y CI/CD en datos.

Responsabilidades

• Diseñar y operar pipelines de ingesta y transformación en AWS y Databricks.
• Migrar cargas ETL legacy hacia un lakehouse moderno con control de calidad.
• Definir métricas de calidad, publicar dashboards y certificar productos de datos.
• Optimizar modelado físico y performance de consultas en Databricks.
• Gestionar la capa gold para BI y modelos de consumo para herramientas de visualización.
• Trabajar con gobierno de datos: Unity Catalog, linaje y clasificación de datos.
• Colaborar con Arquitecto de Data y asegurar cumplimiento regulatorio peruano.

Conocimientos

Pipelines de datos

AWS

Databricks

SQL avanzado

Lakehouse

Gobernanza de datos

Data modeling

Calidad y performance

Transformación de datos

Educación

Ingeniería de Sistemas

Herramientas

Lakeflow Connect

Databricks

Delta Lake

S3

Unity Catalog

Purview

Collibra

Apache Iceberg

Git

CI/CD

Descripción del empleo

Lleva tu carrera al siguiente nivel como Data Engineer Senior en Lima, Perú, liderando el diseño y operación de pipelines de datos en AWS y Databricks para construir un lakehouse empresarial robusto, seguro y orientado a analítica avanzada. Serás clave en la migración desde plataformas legacy hacia arquitecturas modernas de datos, garantizando calidad, performance y cumplimiento regulatorio.

Tus funciones

• Diseñar pipelines de ingesta CDC log-based desde bases transaccionales (Oracle, PostgreSQL, MySQL) utilizando Lakeflow Connect sobre AWS.
• Implementar la arquitectura medallón (Databricks, Delta Lake, S3, Unity Catalog) mediante pipelines declarativos y jobs en producción.
• Definir expectativas de calidad en cada pipeline, publicar métricas y certificar productos de datos para consumo analítico y operacional.
• Optimizar el modelado físico y el performance de consultas en Databricks, ajustando particionamiento, clustering y configuración de warehouses SQL.
• Migrar cargas ETL y flujos analíticos legacy hacia el lakehouse, operando pipelines nuevos y antiguos en paralelo hasta demostrar paridad funcional y de datos.
• Preparar y mantener la capa gold para BI, asegurando modelos de consumo consistentes y eficientes para herramientas de visualización y reporting.
• Construir y operar los pipelines del modelo canónico de persona (matching, deduplicación, survivorship) según el diseño del Arquitecto de Data y las reglas de Gobierno de Datos.
• Aplicar clasificación de datos personales por nivel de sensibilidad, reglas de tratamiento según destino y seudonimización previa a cualquier ruta de IA generativa, cumpliendo la ley peruana de protección de datos personales.

Perfil requerido

• 7 a 10 años de experiencia total en ingeniería de datos, con al menos 5 años construyendo y operando pipelines en producción.
• Experiencia mínima de 3 años con motores de procesamiento distribuido de datos (batch y streaming) y SQL avanzado sobre grandes volúmenes de datos empresariales.
• Experiencia mínima de 2 años trabajando con formatos de tablas abiertas y arquitecturas lakehouse/medallón (p. ej., Delta Lake, Apache Iceberg, Apache Hudi).
• Dominio de Amazon Web Services (AWS) aplicado a soluciones de datos (almacenamiento, cómputo, seguridad y servicios gestionados).
• Experiencia demostrable con replicación CDC log-based desde bases Oracle, PostgreSQL o MySQL.
• Experiencia en migración de cargas ETL legacy o de warehouses analíticos hacia plataformas lakehouse (deseable y valorada como plus).
• Experiencia con Databricks: desarrollo de notebooks, jobs, pipelines declarativos, orquestación, reintentos, dependencias y despliegue as-code.
• Experiencia manejando catálogos de gobierno de datos (Unity Catalog, Purview, Collibra o similares): esquemas, ubicaciones externas, permisos, tags de clasificación y linaje.
• Conocimiento de formatos de tablas abiertas a nivel físico: clustering adaptativo, change data feed, time travel, optimización y mantenimiento de tablas.
• Experiencia con Git y CI/CD aplicados a código de datos (pruebas automatizadas, revisión por pares, despliegue por pipeline).
• Experiencia manejando datos personales en entornos regulados, idealmente bajo la ley peruana de protección de datos personales o normativas equivalentes (deseable).
• Deseable: conocimientos de administración y tuning en Oracle, con lectura de PL/SQL para entender y trasladar lógica de negocio de sistemas fuente.
• Experiencia en warehouse SQL para BI con motores de ejecución acelerados: tuning de consultas y diseño de modelos de consumo para herramientas de BI.
• Español nativo; se valoran conocimientos de inglés técnico para documentación y trabajo con equipos internacionales.
• Formación: Bachiller o titulado en Ingeniería de Sistemas, Ciencias de la Computación, Ingeniería Informática o carreras afines; especialización o diplomado en ingeniería de datos, big data o arquitecturas cloud.
• Comunidad internacional con más de 110 nacionalidades.
• Plan de formación y desarrollo con nuestra Academia interna.
• Entorno dinámico y colaborativo, con eventos internos y cultura de mejora continua.
• Fuerte compromiso con la Responsabilidad Social Empresarial a través de WeCare Together.

Amaris Consulting se compromete a promover la diversidad y a crear un entorno de trabajo inclusivo. Todas las candidaturas cualificadas serán consideradas, prestando especial atención a las personas en situación de discapacidad.