Data Engineer

Stefanini; Santiago; On-site; CLP 25,000,000 - 40,000,000; Full time

Job summary

Stefanini busca un experto en ingeniería de datos para diseñar, desarrollar y mantener pipelines ETL/ELT en Google Cloud Platform. Trabajarás con BigQuery, Dataflow/Dataproc y Pub/Sub, implementando Airflow/Cloud Composer para orquestación y contribuyendo a Data Lake/Warehouse.

Deberás dominar Python y SQL avanzado, Spark/PySpark y promover buenas prácticas de CI/CD e Infraestructura como Código para garantizar calidad, trazabilidad y rendimiento de datos.

Qualifications

• Diseño, desarrollo y mantenimiento de pipelines ETL/ELT (batch y event-driven).
• Implementación de soluciones en Google Cloud Platform (GCP).
• Desarrollo con Python, SQL y Spark/PySpark.
• Trabajo con BigQuery, Cloud Storage, Dataflow/Dataproc y Pub/Sub.
• Implementación y mantenimiento de Airflow/Cloud Composer para orquestación.
• Contribución a Data Lake/Warehouse/Lakehouse y modelado de datos.
• Automatización de procesos y despliegues con CI/CD e Infraestructura como Código (Terraform).
• Asegurar calidad, integridad, trazabilidad y disponibilidad de datos.

Responsibilities

• Diseñar, desarrollar y mantener pipelines de datos ETL/ELT, tanto batch como event-driven.
• Implementar soluciones de procesamiento y almacenamiento sobre Google Cloud Platform.
• Desarrollar procesos utilizando Python, SQL y Spark/PySpark.
• Trabajar con servicios como BigQuery, Cloud Storage, Dataflow, Dataproc y Pub/Sub.
• Implementar y mantener procesos de orquestación mediante Airflow/Cloud Composer.
• Participar en la construcción y evolución de arquitecturas Data Lake, Data Warehouse y/o Lakehouse.

Skills

GCP

BigQuery

Cloud Storage

Dataflow

Pub/Sub

Python

SQL avanzado

Spark PySpark

Airflow

Cloud Composer

ETL/ELT pipelines

Tools

Terraform

Git

Hadoop

Kafka

Vertex AI

Job description

JOB DESCRIPTION

¡Sé parte de Stefanini!

En Stefanini somos más de 30.000 genios, conectados desde 41 países, haciendo lo que les apasiona y co‑creando un futuro mejor.

RESPONSIBILIDADES AND ASSIGNMENTS

• Diseñar, desarrollar y mantener pipelines de datos ETL/ELT, tanto batch como event-driven.
• Implementar soluciones de procesamiento y almacenamiento sobre Google Cloud Platform.
• Desarrollar procesos utilizando Python, SQL y Spark/PySpark.
• Trabajar con servicios como BigQuery, Cloud Storage, Dataflow, Dataproc y Pub/Sub.
• Implementar y mantener procesos de orquestación mediante Airflow / Cloud Composer.
• Participar en la construcción y evolución de arquitecturas Data Lake, Data Warehouse y/o Lakehouse.
• Diseñar y optimizar modelos de datos para procesamiento y explotación de información.
• Automatizar procesos y despliegues mediante prácticas de CI/CD e Infrastructure as Code, idealmente utilizando Terraform.
• Implementar controles que aseguren la calidad, integridad, trazabilidad y disponibilidad de los datos.
• Optimizar pipelines, consultas y procesos considerando performance, escalabilidad y uso eficiente de recursos.
• Participar en procesos de migración y modernización de plataformas de datos hacia Cloud.
• Colaborar con equipos de Arquitectura, Data Science, BI, Desarrollo y áreas de negocio.
• Documentar arquitecturas, pipelines, modelos y soluciones implementadas.
• Apoyar técnicamente al equipo y promover buenas prácticas de Ingeniería de Datos.

REQUIREMENTS AND QUALIFICATIONS

Stack principal:

• Google Cloud Platform (GCP).
• BigQuery.
• Cloud Storage.
• Dataflow y/o Dataproc.
• Pub/Sub.
• Python.
• SQL avanzado.
• Apache Spark / PySpark.
• Desarrollo de pipelines ETL/ELT.
• Modelamiento y transformación de datos.
• Airflow / Cloud Composer para orquestación.

Conocimientos deseables:

• DBT y/o Dataform.
• Terraform.
• Git y procesos CI/CD.
• Data Lake / Data Warehouse / Lakehouse.
• Hadoop y/o Kafka.
• Bases de datos relacionales y NoSQL.
• Machine Learning y/o Vertex AI.
• Gobierno y calidad de datos.

ADDITIONAL INFORMATION

Beneficios Stefanini

Creer para co-crear

¿Buscas un lugar donde tus ideas brillen?

Con más de 38 años y una presencia global, en Stefanini transformamos el mañana juntos. Aquí, cada acción cuenta y cada idea puede marcar la diferencia. Únete a un equipo que valora la innovación, el respeto y el compromiso.

Si eres una persona disruptiva, te mantienes en aprendizaje continuo y la innovación está en tu ADN, entonces somos lo que buscas. ¡Ven y construyamos juntos un futuro mejor!