Senior Data Integration Engineer - Ai Cloud Pipelines

EPAM Systems Inc

Quilmes

Remote

ARS 185,448,000 - 247,265,000

Full time

14 days+

A complete application in a minute

Tailored resume and cover letter, ready to send.

Get past ATS filters

Benefits offered by this job

Remote LATAM

Job summary

Epam Systems Inc. busca un LT Data Integration Engineer para diseñar, desarrollar y operar soluciones de integración de datos empresariales con IDMC, Databricks y Delta Lake.

Se trabajará en migración de procesos, optimización de pipelines y colaboración con equipos multidisciplinarios en entornos cloud (Azure/AWS, deseable GCP). La posición es freelance (Contractor), 100% remoto LATAM, con jornada de lunes a viernes de 9:00 a 18:00 (hora Chile).

Qualifications

  • Experiencia en diseño, desarrollo y operación de soluciones de integración de datos empresariales.
  • Conocimiento de IDMC, Databricks y Delta Lake.
  • Habilidad para migrar procesos entre herramientas ETL/ELT y plataformas en la nube.
  • Conocimientos de APIs, microservicios e integración de datos en entornos cloud.

Responsibilities

  • Diseñar y mantener pipelines de ingesta, transformación y distribución de datos.
  • Optimizar pipelines para Databricks Lakehouse y IDMC.
  • Migrar procesos desde PowerCenter hacia IDMC y asegurar SLA.
  • Colaborar con equipos multidisciplinarios para disponibilidad y rendimiento.

Skills

ETL/ELT
IDMC
Databricks
Cloud experience
IA tooling CLAIRE
SQL

Education

Bachelor degree in CS/Engineering

Tools

Informatica IDMC
Databricks
Azure
AWS
GCP

Job description

LT Data Integration Engineer

En Ready Buscamos un(a) LT Data Integration Engineer con experiencia en el diseño, desarrollo y operación de soluciones de integración de datos empresariales utilizando Informatica Intelligent Data Management Cloud (IDMC) como plataforma principal. Será responsable de construir, optimizar y administrar pipelines de datos para alimentar Databricks Lakehouse, garantizando soluciones escalables, eficientes y alineadas con las necesidades del negocio.

La persona ideal cuenta con experiencia en herramientas ETL/ELT, ambientes cloud (Azure, AWS y deseable GCP) y desarrollo asistido por inteligencia artificial mediante CLAIRE GPT y CLAIRE Copilot.

  • Diseñar, desarrollar e implementar pipelines de ingesta, transformación y distribución de datos utilizando Cloud Data Integration (CDI) y Cloud Mass Ingestion (CMI).
  • Construir y optimizar procesos ETL/ELT hacia Databricks Lakehouse utilizando IDMC for Databricks y patrones Delta Lake.
  • Migrar procesos desarrollados en PowerCenter hacia Informatica IDMC mediante metodologías estructuradas y aceleradores de migración.
  • Administrar y mantener la infraestructura de integración (Secure Agents y Runtime Environments), garantizando el cumplimiento de los SLA establecidos.
  • Implementar integraciones mediante Cloud Application Integration (CAI) para APIs, procesos de negocio y microservicios.
  • Aplicar CLAIRE GPT y CLAIRE Copilot para acelerar el desarrollo, depuración y documentación automática de pipelines.
  • Monitorear el consumo de Informatica Processing Units (IPU) y proponer mejoras en costos y rendimiento.
  • Colaborar con equipos multidisciplinarios para garantizar la disponibilidad, calidad y escalabilidad de las soluciones de integración.
Conocimientos Técnicos
Informatica IDMC
  • Cloud Data Integration (CDI).
  • Mapping Designer.
  • SQL ELT con Pushdown Optimization.
  • Taskflows.
  • Mapping Partitioning.
  • Dynamic Mappings.
  • Parameterización.
  • File Listeners.
  • Intelligent Structure Models.
  • Performance Tuning.
  • Cloud Mass Ingestion (CMI):
  • Mass Ingestion Databases (CDC).
  • Files.
  • Applications.
  • Streaming.
  • Cloud Application Integration (CAI).
  • Administración de Secure Agents y Runtime Environments.
  • Migración de PowerCenter a IDMC.
Databricks
  • Integración de IDMC con Databricks Lakehouse.
  • Delta Lake.
  • Databricks SQL.
  • Databricks Connector (Partner Connect).
  • Conocimiento de Unity Catalog.
  • Orquestación de procesos parametrizados.
Desarrollo asistido por IA
  • Experiencia utilizando CLAIRE GPT y CLAIRE Copilot.
  • Conocimiento de CLAIRE Agents (deseable).
Cloud
Azure
  • Azure Data Factory (ADF).
  • Azure Data Lake Storage Gen2.
  • Azure Key Vault.
  • Azure Databricks.
AWS
  • Glue.
  • S3.
  • Step Functions.
  • Redshift.
  • Athena.
  • EventBridge.
Deseable GCP
  • BigQuery.
  • Cloud Composer.
Infraestructura como Código (IaC) y CI/CD
  • Terraform.
  • CloudFormation.
  • GitHub o Bitbucket.
  • Jenkins.
Bases de datos
  • SQL avanzado (Oracle, SQL Server, PostgreSQL, Redshift y Databricks SQL).
  • Deseable experiencia en MongoDB y DynamoDB.
  • Conocimiento de arquitecturas Data Warehouse, Data Lake y Lakehouse.
Otros Requisitos
  • Inglés B2+ o C1 (indispensable).
  • Experiencia en diseño, desarrollo y operación de soluciones de integración de datos utilizando Informatica IDMC.
  • Experiencia implementando soluciones sobre Databricks.
  • Experiencia trabajando en entornos cloud (Azure, AWS y deseable GCP).
Certificaciones
  • Informatica Cloud Data Integration Developer Professional Certification (ICP). (Requerida)
  • Informatica IDMC Foundation / Data Engineering Foundation. (Deseable)
  • Informatica Cloud Application Integration Developer Professional Certification. (Deseable)
  • Databricks Certified Data Engineer Associate. (Deseable)
  • Microsoft Certified: Azure Data Engineer Associate (DP-203). (Deseable)
  • AWS Certified Data Engineer o Data Analytics Specialty. (Deseable)
Condiciones de la posición
  • Modalidad de contratación: Freelance (Contractor). 100% Remoto LATAM
  • Jornada laboral: Tiempo completo, de lunes a viernes, de 9:00 a.m. a 6:00 p.m (Horario Chile)
  • Duración del contrato: 12 meses con posibilidad de renovación.
Get your free, confidential resume review.

or drag and drop your file here.

Similar jobs

Similar jobs worth comparing

Senior Data Ingestion & Bi Integrations Engineer
Senior Data Ingestion & Bi Integrations Engineer

AgileEngine, LLC. • Quilmes

Remote
ARS 139,086,000 - 200,903,000
Senior Data Ingestion & Integrations Engineer
Senior Data Ingestion & Integrations Engineer

Coder Technologies Inc. • Buenos Aires

Remote
ARS 53,224,000 - 127,737,000
Remote Ai Data Integration Engineer - Junior
Remote Ai Data Integration Engineer - Junior

Devsu • Quilmes

Remote
ARS 92,724,000 - 139,086,000
Senior Data Pipelines & Integrations Engineer
Senior Data Pipelines & Integrations Engineer

AgileEngine, LLC. • Quilmes

Remote
ARS 68,987,000 - 155,220,000
Senior Data Ingestion & Integrations Engineer
Senior Data Ingestion & Integrations Engineer

Coder Technologies Inc. • Quilmes

Remote
ARS 92,909,000 - 139,364,000
Senior Data Ingestion & Integration Engineer - Remote
Senior Data Ingestion & Integration Engineer - Remote

Coder Technologies Inc. • Buenos Aires

Remote
ARS 72,699,000 - 113,592,000
Senior Data Ingestion & Security Integrations Engineer
Senior Data Ingestion & Security Integrations Engineer

AgileEngine, LLC. • Quilmes

Remote
ARS 85,158,000 - 127,737,000
Senior Data Integration Engineer (Ai, Python, Airflow)
Senior Data Integration Engineer (Ai, Python, Airflow)

EPAM Systems Inc • Quilmes

Remote
ARS 120,727,000 - 206,960,000
Remote Ai Data Integration Engineer For Rcm Migrations
Remote Ai Data Integration Engineer For Rcm Migrations

Hire Hangar, Inc. • Buenos Aires

Remote
ARS 135,219,000 - 253,536,000
Remote LATAM
Remote Bi & Data Integration Specialist (Sql/Power Bi)
Remote Bi & Data Integration Specialist (Sql/Power Bi)

Virtustant • Quilmes

Remote
ARS 61,816,000 - 131,359,000