Remote Senior Data Engineer - GCP/BigQuery Pipelines

Ulvior; Chile; Remote; CLP 40.000.000 - 70.000.000; Vollzeit

Zusammenfassung

Ulvior busca un Data Engineer Senior para diseñar y construir pipelines de datos productivos en la nube de Google (GCP) y BigQuery. Se trabajará con Cloud Storage y Airflow/Cloud Composer, diseñando tablas eficientes y optimizando costos y rendimiento en la nube, de forma 100% remota desde Chile.

Requisitos incluyen 4+ años en Data Engineering, 3+ años con GCP/BigQuery, dominio de Python y SQL avanzado, y capacidad de documentar procesos y colaborar con equipos de Data y Data Science.

Qualifikationen

• Requisitos: Formación universitaria afín.
• 4+ años de experiencia como Data Engineer.
• Al menos 3 años con GCP y BigQuery.
• Experiencia construyendo pipelines productivos con Airflow / Cloud Composer.
• Experiencia con grandes volúmenes de datos.
• Dominio de Git y flujos CI/CD.
• Experiencia con Python y SQL avanzado.
• Capacidad para trabajar de forma autónoma y tomar decisiones técnicas.
• Rigurosidad y orientacif3n a la calidad de datos.
• Capacidad de documentacif3n y generar conocimiento.
• Comunicación clara con equipos te9cnicos y de negocio.
• Criterio para optimizar costos y rendimiento en la nube.

Aufgaben

• Diseñar y construir pipelines de datos productivos.
• Implementar procesos de ingesta y procesamiento utilizando servicios de Google Cloud Platform (GCP).
• Trabajar con BigQuery y Cloud Storage para almacenamiento y procesamiento de datos.
• Diseñar tablas eficientes considerando particionamiento, clustering, datos tardíos y zonas horarias.
• Orquestar y monitorear pipelines mediante Cloud Composer / Airflow.
• Implementar controles de completitud, volumetría y alertas ante comportamientos anómalos.
• Trabajar con grandes volúmenes de información y optimizar procesos considerando rendimiento y costos en la nube.
• Documentar pipelines, procedimientos operativos, runbooks y procesos de reproceso/backfill.
• Trabajar colaborativamente con equipos de Data, IA y Data Science.
• Participar en la definición y evolución de soluciones dentro de una plataforma de datos existente.

Kenntnisse

GCP & BigQuery

Airflow / Cloud Composer

Python

SQL avanzado

Git & CI/CD

Data pipelines

Autonomía y decisiones técnicas

Ausbildung

Ingeniería Civil Informática / Computación

Tools

Cloud Composer

BigQuery

Jobbeschreibung

Ulvior busca un Data Engineer Senior para diseñar y construir pipelines de datos productivos en la nube de Google (GCP) y BigQuery. Se trabajará con Cloud Storage y Airflow/Cloud Composer, diseñando tablas eficientes y optimizando costos y rendimiento en la nube, de forma 100% remota desde Chile.

Requisitos incluyen 4+ años en Data Engineering, 3+ años con GCP/BigQuery, dominio de Python y SQL avanzado, y capacidad de documentar procesos y colaborar con equipos de Data y Data Science.