Data Engineer GCP

Stefanini Group; Santiago; Presencial; CLP 30.000.000 - 54.000.000; Jornada completa

Descripción de la vacante

Stefanini Group está buscando un/a Data Engineer para unirse a un proyecto relevante en el sector financiero. Trabajarás en desafíos de Ingeniería de Datos sobre Google Cloud Platform (GCP) y formarás parte de un equipo tecnológico encargado de construir, mantener y evolucionar soluciones de datos en la nube.

Deberás gestionar pipelines ETL/ELT, tanto batch como event-driven, y transformar datos con Python, SQL y Spark/PySpark.

Formación

• Experiencia en ingeniería de datos con pipelines ETL/ELT.
• Conocimiento de Python, SQL y Spark/PySpark.
• Experiencia en soluciones sobre Google Cloud Platform (GCP).

Responsabilidades

• Desarrollar y mantener pipelines ETL/ELT, batch y event-driven.
• Procesar y transformar datos con Python, SQL y Spark/PySpark.
• Implementar soluciones en Google Cloud Platform (GCP).
• Trabajar con BigQuery, Cloud Storage, Dataflow, Dataproc y Pub/Sub.
• Orquestar procesos con Airflow / Cloud Composer.
• Construir y evolucionar Data Lake, Data Warehouse y Lakehouse.
• Modelar y transformar datos; optimizar rendimiento y escalabilidad.
• Asegurar calidad, integridad y trazabilidad de los datos.
• Participar en migraciones y modernización hacia la nube.

Conocimientos

Python

SQL

Spark/PySpark

GCP

BigQuery

Dataflow

Dataproc

Pub/Sub

Airflow/Cloud Composer

Data Modeling

Data Lake

Data Warehouse

Lakehouse

Descripción del empleo

En Stefanini seguimos creciendo y queremos sumar un/a Data Engineer para participar en un importante proyecto del sector financiero, trabajando en desafíos de Ingeniería de Datos sobre Google Cloud Platform (GCP).

Serás parte de un equipo tecnológico encargado de construir, mantener y evolucionar soluciones de datos, participando en:

• Desarrollo y mantenimiento de pipelines ETL/ELT, tanto batch como event-driven.
• Procesamiento y transformación de datos utilizando Python, SQL y Spark/PySpark.
• Implementación de soluciones sobre Google Cloud Platform (GCP).
• Trabajo con servicios como BigQuery, Cloud Storage, Dataflow, Dataproc y Pub/Sub.
• Orquestación de procesos mediante Airflow / Cloud Composer.
• Construcción y evolución de arquitecturas Data Lake, Data Warehouse y Lakehouse.
• Modelamiento y transformación de datos.
• Optimización de pipelines y consultas, considerando performance y escalabilidad.
• Implementación de controles de calidad, integridad y trazabilidad de datos.
• Participación en iniciativas de migración y modernización de plataformas hacia Cloud.

Buscamos experiencia o conocimientos en:

También será valorado contar con conocimientos en Dataflow, Dataproc, Pub/Sub, Terraform, DBT/Dataform, Git, CI/CD, Kafka, Hadoop, Vertex AI y gobierno de datos.

No es necesario contar con experiencia en el 100% de las tecnologías mencionadas. Nos interesa encontrar profesionales con buenas bases en Ingeniería de Datos, experiencia trabajando con datos y motivación por seguir desarrollándose en tecnologías Cloud.

Si tienes experiencia en Data Engineering y te interesa participar en un desafío tecnológico dentro del sector financiero,