Data Engineer – AWS Lakehouse

BC Tecnología; Santiago; Hybrid; CLP 16,740,000 - 23,436,000; Full time

Job summary

BC Tecnología busca un Data Engineer para un proyecto híbrido enfocado en una arquitectura Lakehouse en AWS. Se trabajará en ingesta, procesamiento, monitoreo y gobernanza de datos, asegurando calidad y observabilidad de pipelines.

El rol implica colaborar con equipos técnicos, manejar AWS Glue, Redshift y herramientas de orquestación como Airflow, con despliegues y automatización de infraestructuras.

Qualifications

• Experiencia trabajando con arquitecturas Lakehouse.
• Conocimiento de ingesta y consumo de datos.
• Monitoreo y observabilidad de pipelines de datos.
• Gobernanza y calidad de datos.

Responsibilities

• Operar y mantener soluciones basadas en Lakehouse.
• Implementar patrones de ingesta y consumo de datos.
• Monitorear observabilidad de pipelines de datos.
• Participar en iniciativas de gobernanza y calidad de datos.
• Trabajar con servicios AWS para integración, procesamiento y almacenamiento.
• Gestionar flujos de trabajo y procesos de datos.
• Participar en automatización de infraestructura y despliegues.
• Colaborar con equipos usando herramientas de gestión y documentación.

Skills

Lakehouse architecture

Data ingestion patterns

Data pipeline monitoring

Data governance

Tools

AWS Glue

Glue Catalog

AWS Lambda

Step Functions

EventBridge

CloudWatch

Amazon S3

Amazon Redshift

Redshift Serverless

Redshift Spectrum

Athena

Airflow

GitHub

Jira

Confluence

Terraform

DBT

Job description

Experiencia Con Servicios AWS, Especialmente

AWS Glue

Company Description: BC Tecnologia

Job Description: Buscamos Data Engineer – AWS Lakehouse Proyecto Híbrido

En BC Tecnología estamos en búsqueda de un/a Data Engineer para participar en un proyecto con foco en operación sobre arquitectura Lakehouse, trabajando en procesos de ingesta, consumo, monitoreo, observabilidad, gobernanza y calidad de datos.

Principales responsabilidades

• Operar y mantener soluciones basadas en arquitectura Lakehouse.
• Implementar y mantener patrones de ingesta y consumo de datos.
• Monitorear y asegurar la observabilidad de pipelines de datos.
• Participar en iniciativas de gobernanza y calidad de datos.
• Trabajar con servicios AWS orientados a integración, procesamiento, almacenamiento y analítica.
• Gestionar y mantener flujos de trabajo y procesos de datos.
• Participar en automatización de infraestructura y despliegues.
• Colaborar con equipos técnicos utilizando herramientas de gestión y documentación.

Requisitos técnicos

• Experiencia trabajando con arquitecturas de datos tipo Lakehouse.
• Experiencia en patrones de ingesta y consumo de datos.
• Experiencia en monitoreo y observabilidad de pipelines.
• Conocimientos de gobernanza y calidad de datos.

Experiencia Con Servicios AWS, Especialmente

• AWS Glue
• Glue Catalog
• AWS Lambda
• Step Functions
• EventBridge
• CloudWatch
• Amazon S3
• Amazon Redshift
• Redshift Serverless
• Redshift Spectrum
• Athena
• Experiencia con Airflow y Pods.
• Manejo de GitHub.
• Experiencia con Jira y Confluence.
• Conocimientos de Terraform.
• Experiencia con DBT.

Modalidad

• Proyecto híbrido.