Data Engineer – AWS Lakehouse

BC Tecnologia; Santiago; Hybrid; CLP 18,000,000 - 32,000,000; Full time

Job summary

BC Tecnología busca un Data Engineer para un proyecto híbrido enfocado en operación sobre una arquitectura Lakehouse, involucrándose en ingesta, consumo, monitoreo, observabilidad, gobernanza y calidad de datos.

Entre las responsabilidades se encuentran operar soluciones Lakehouse, diseñar patrones de ingesta, asegurar la observabilidad de pipelines y colaborar en automatización de infra y despliegues, trabajando con AWS (Glue, S3, Redshift) y herramientas de gestión.

Qualifications

• Experiencia en arquitecturas Lakehouse.
• Conocimientos de ingesta y consumo de datos.
• Monitoreo y observabilidad de pipelines de datos.
• Gobernanza y calidad de datos.
• Experiencia con servicios AWS (Glue, S3, Redshift, Athena, etc.)

Responsibilities

• Operar y mantener soluciones basadas en Lakehouse.
• Implementar y mantener patrones de ingesta y consumo de datos.
• Monitorear y asegurar la observabilidad de pipelines de datos.
• Participar en iniciativas de gobernanza y calidad de datos.
• Trabajar con servicios AWS orientados a integración, procesamiento, almacenamiento y analítica.
• Gestionar y mantener flujos de trabajo y procesos de datos.
• Participar en automatización de infraestructura y despliegues.
• Colaborar con equipos técnicos utilizando herramientas de gestión y documentación.

Skills

Lakehouse architecture

Data ingestion patterns

Pipeline observability

Data governance & quality

Tools

AWS Glue

Glue Catalog

AWS Lambda

Step Functions

EventBridge

CloudWatch

Amazon S3

Amazon Redshift

Redshift Serverless

Redshift Spectrum

Athena

Airflow

Pods

GitHub

Jira

Confluence

Terraform

DBT

Job description

Buscamos Data Engineer – AWS Lakehouse Proyecto Híbrido

En BC Tecnología estamos en búsqueda de un/a Data Engineer para participar en un proyecto con foco en operación sobre arquitectura Lakehouse, trabajando en procesos de ingesta, consumo, monitoreo, observabilidad, gobernanza y calidad de datos.

Principales responsabilidades

• Operar y mantener soluciones basadas en arquitectura Lakehouse.
• Implementar y mantener patrones de ingesta y consumo de datos.
• Monitorear y asegurar la observabilidad de pipelines de datos.
• Participar en iniciativas de gobernanza y calidad de datos.
• Trabajar con servicios AWS orientados a integración, procesamiento, almacenamiento y analítica.
• Gestionar y mantener flujos de trabajo y procesos de datos.
• Participar en automatización de infraestructura y despliegues.
• Colaborar con equipos técnicos utilizando herramientas de gestión y documentación.

Requisitos técnicos

• Experiencia trabajando con arquitecturas de datos tipo Lakehouse.
• Experiencia en patrones de ingesta y consumo de datos.
• Experiencia en monitoreo y observabilidad de pipelines.
• Conocimientos de gobernanza y calidad de datos.
• Experiencia con servicios AWS, especialmente:
• AWS Glue
• Glue Catalog
• AWS Lambda
• Step Functions
• EventBridge
• CloudWatch
• Amazon S3
• Amazon Redshift
• Redshift Serverless
• Redshift Spectrum
• Athena
• Experiencia con Airflow y Pods.
• Manejo de GitHub.
• Experiencia con Jira y Confluence.
• Conocimientos de Terraform.
• Experiencia con DBT.

Modalidad

Proyecto híbrido.