Senior Data Ingestion & Integration Engineer - Remote Latam

Bluelight Consulting, Llc; Quilmes; Remote; ARS 1,200,000 - 1,800,000; Full time

Job summary

Bluelight Consulting busca un LT Data Integration Engineer para diseñar, desarrollar y operar pipelines de datos empresariales con Informatica IDMC y Databricks Lakehouse. Se trabajará con CDI/CMI, CI/CD y plataformas en la nube para entregar soluciones escalables y eficientes.

El candidato ideal debe dominar IDMC, Databricks y Azure/AWS, con experiencia en IA aplicada al desarrollo de pipelines y optimización de costos.

Qualifications

• Conocimiento avanzado de soluciones de integración de datos utilizando Informatica IDMC.
• Experiencia en Databricks Lakehouse y Delta Lake.
• Experiencia en entornos cloud (Azure, AWS) y conceptos de IA aplicados al desarrollo de pipelines.

Responsibilities

• Diseñar e implementar pipelines de ingesta y transformación de datos con CDI/CMI y IDMC para alimentar Databricks Lakehouse.
• Migrar procesos de PowerCenter a IDMC con metodologías estructuradas.
• Administrar infraestructura de integración (Secure Agents y Runtime Environments) y asegurar SLA.

Skills

Informatica IDMC

Databricks

Azure Cloud

SQL

Cloud Data Integration

Tools

Terraform

Azure Data Factory

PowerCenter

Databricks Connector

Job description

LT Data Integration Engineer

En Ready Buscamos un(a) LT Data Integration Engineer con experiencia en el diseño, desarrollo y operación de soluciones de integración de datos empresariales utilizando Informatica Intelligent Data Management Cloud (IDMC) como plataforma principal. Será responsable de construir, optimizar y administrar pipelines de datos para alimentar Databricks Lakehouse, garantizando soluciones escalables, eficientes y alineadas con las necesidades del negocio.

La persona ideal cuenta con experiencia en herramientas ETL/ELT, ambientes cloud (Azure, AWS y deseable GCP) y desarrollo asistido por inteligencia artificial mediante CLAIRE GPT y CLAIRE Copilot.

Responsabilidades

• Diseñar, desarrollar e implementar pipelines de ingesta, transformación y distribución de datos utilizando Cloud Data Integration (CDI) y Cloud Mass Ingestion (CMI).
• Construir y optimizar procesos ETL/ELT hacia Databricks Lakehouse utilizando IDMC for Databricks y patrones Delta Lake.
• Migrar procesos desarrollados en PowerCenter hacia Informatica IDMC mediante metodologías estructuradas y aceleradores de migración.
• Administrar y mantener la infraestructura de integración (Secure Agents y Runtime Environments), garantizando el cumplimiento de los SLA establecidos.
• Implementar integraciones mediante Cloud Application Integration (CAI) para APIs, procesos de negocio y microservicios.
• Aplicar CLAIRE GPT y CLAIRE Copilot para acelerar el desarrollo, depuración y documentación automática de pipelines.
• Monitorear el consumo de Informatica Processing Units (IPU) y proponer mejoras en costos y rendimiento.
• Colaborar con equipos multidisciplinarios para garantizar la disponibilidad, calidad y escalabilidad de las soluciones de integración.

Conocimientos Técnicos

• Informatica IDMC
  • Cloud Data Integration (CDI).
  • Mapping Designer.
  • SQL ELT con Pushdown Optimization.
  • Taskflows.
  • Mapping Partitioning.
  • Dynamic Mappings.
  • Parameterización.
  • File Listeners.
  • Intelligent Structure Models.
  • Performance Tuning.
  • Cloud Mass Ingestion (CMI):
  • Mass Ingestion Databases (CDC).
  • Files.
  • Applications.
  • Streaming.
  • Cloud Application Integration (CAI).
  • Administración de Secure Agents y Runtime Environments.
  • Migración de PowerCenter a IDMC.
• Databricks
  • Integración de IDMC con Databricks Lakehouse.
  • Delta Lake.
  • Databricks SQL.
  • Databricks Connector (Partner Connect).
  • Conocimiento de Unity Catalog.
  • Orquestación de procesos parametrizados.
• Desarrollo asistido por IA
  • Experiencia utilizando CLAIRE GPT y CLAIRE Copilot.
  • Conocimiento de CLAIRE Agents (deseable).
• Cloud
  • Azure
    • Azure Data Factory (ADF).
    • Azure Data Lake Storage Gen2.
    • Azure Key Vault.
    • Azure Databricks.
  • AWS
    • Glue.
    • S3.
    • Step Functions.
    • Redshift.
    • Athena.
    • EventBridge.
  • Deseable GCP
    • BigQuery.
    • Cloud Composer.
• Infraestructura como Código (IaC) y CI/CD
  • Terraform.
  • CloudFormation.
  • GitHub o Bitbucket.
  • Jenkins.
• Bases de datos
  • SQL avanzado (Oracle, SQL Server, PostgreSQL, Redshift y Databricks SQL).
  • Deseable experiencia en MongoDB y DynamoDB.
  • Conocimiento de arquitecturas Data Warehouse, Data Lake y Lakehouse.

Otros Requisitos

• Inglés B2+ o C1 (indispensable).
• Experiencia en diseño, desarrollo y operación de soluciones de integración de datos utilizando Informatica IDMC.
• Experiencia implementando soluciones sobre Databricks.
• Experiencia trabajando en entornos cloud (Azure, AWS y deseable GCP).

Certificaciones

• Informatica Cloud Data Integration Developer Professional Certification (ICP). (Requerida)
• Informatica IDMC Foundation / Data Engineering Foundation. (Deseable)
• Informatica Cloud Application Integration Developer Professional Certification. (Deseable)
• Databricks Certified Data Engineer Associate. (