Data Engineer Semi Senior

FactorIT; Santiago; On-site; CLP 133,920,000 - 200,880,000; Full time

Job summary

FactorIT solicita un Data Engineer Semi Senior para unirse a un equipo centrado en construir soluciones de datos sobre Google Cloud Platform (GCP).

Las responsabilidades incluyen diseñar y mantener pipelines, ingestar datos, optimizar modelos en BigQuery y orquestar flujos con Airflow, buscando soluciones escalables y economicamente eficientes.

Qualifications

• 2 a 4 años de experiencia como Data Engineer o roles similares.
• Experiencia práctica con Google Cloud Platform (GCP).
• Conocimiento de modelamiento de datos y Data Warehouse/Data Lakehouse.
• Capacidad para diseñar pipelines batch y streaming y optimizar costos.

Responsibilities

• Diseñar, construir y mantener pipelines de datos batch y streaming en GCP.
• Implementar ingesta desde sistemas transaccionales, APIs y fuentes externas hacia el Data Warehouse.
• Desarrollar y optimizar modelos de datos en BigQuery (raw, staging, analítica).
• Optimizar consultas con particionamiento y clustering para rendimiento y costos.
• Orquestar flujos de datos con Cloud Composer (Airflow) y gestionar dependencias.
• Desarrollar transformaciones con Dataflow/Dataform/dbt y asegurar calidad de datos.
• Documentar procesos y participar en catalogación de datos; aplicar gobierno de datos.

Skills

GCP

Python para data processing

SQL avanzado

Analytical thinking

Trabajo en equipo

Education

Ingeniería de Sistemas/Informática

Tools

BigQuery

Cloud Composer / Airflow

Dataflow

Dataform / dbt

Git

Terraform

Dataproc / Spark

Job description

Buscamos un/a Data Engineer Semi Senior para integrarse a un equipo enfocado en la construcción y evolución de soluciones de datos sobre Google Cloud Platform (GCP).

El desafío estará orientado al diseño, desarrollo y optimización de pipelines batch y streaming, modelos de datos en BigQuery y procesos de integración y transformación, asegurando soluciones confiables, escalables, trazables y eficientes en costos.

Trabajarás de manera colaborativa con equipos de Analítica, BI, TI y Negocio, transformando necesidades de información en soluciones de datos que habiliten reportería, análisis y futuros casos de uso de IA/ML.

Responsabilidades

• Diseñar, construir y mantener pipelines de datos batch y streaming en GCP.
• Implementar procesos de ingesta desde sistemas transaccionales, APIs y fuentes externas hacia el Data Warehouse.
• Desarrollar y optimizar modelos de datos en BigQuery, considerando capas raw, staging y analítica.
• Aplicar buenas prácticas de particionamiento, clustering y optimización de consultas para mejorar rendimiento y controlar costos.
• Orquestar y monitorear flujos de datos utilizando Cloud Composer (Airflow), gestionando dependencias, reintentos, alertas y SLAs.
• Desarrollar procesos de transformación utilizando Dataflow (Apache Beam), Dataform o dbt, de acuerdo con las necesidades del proyecto.
• Implementar validaciones automáticas para asegurar la calidad, trazabilidad e integridad de los datos.
• Documentar procesos y soluciones de datos y participar en su catalogación.
• Aplicar buenas prácticas de seguridad y gobierno de datos, incluyendo IAM, políticas a nivel de fila y columna y mecanismos de protección de información sensible.
• Colaborar con equipos de Analítica, BI y Negocio para transformar requerimientos en soluciones de datos.
• Participar en la mejora continua de la arquitectura, proponiendo optimizaciones de performance, costos y mantenibilidad.
• Versionar código y participar en procesos de CI/CD e infraestructura como código.

Requisitos técnicos

2 a 4 años de experiencia como Data Engineer o en roles similares. Experiencia práctica trabajando con Google Cloud Platform (GCP).

Experiencia Con

• BigQuery
• Cloud Storage
• Cloud Composer / Airflow
• Dataflow / Apache Beam
• Pub/Sub
• SQL avanzado, incluyendo CTEs, funciones de ventana y optimización de consultas en BigQuery.
• Python orientado al procesamiento de datos, desarrollo de DAGs y uso de librerías cliente de GCP.
• Conocimientos de modelamiento de datos dimensional y conceptos de Data Warehouse / Data Lakehouse.
• Experiencia con Git y flujos de CI/CD como Cloud Build, GitHub Actions o GitLab CI.
• Conocimiento de formatos de datos como Parquet, Avro y JSON.
• Experiencia con patrones de integración como APIs REST, CDC y cargas incrementales.

Formación

Profesional en Ingeniería de Sistemas, Ingeniería Informática, Ciencias de la Computación, Ingeniería de Software o carreras relacionadas.

Habilidades

• Orientación al negocio y capacidad para comprender el impacto de los datos en los procesos de la organización.
• Comunicación efectiva con equipos técnicos y no técnicos.
• Trabajo colaborativo con equipos de Producto, Analítica, TI y proveedores.
• Autonomía y criterio para resolver problemas técnicos de complejidad media.
• Pensamiento analítico y atención al detalle.
• Orientación a la calidad y capacidad para identificar causas raíz.
• Responsabilidad y manejo cuidadoso de información sensible.
• Aprendizaje continuo y adaptación a nuevas tecnologías.
• Capacidad para trabajar en entornos ágiles bajo metodologías como Scrum o Kanban.

Será valorado

• Certificación Google Cloud Professional Data Engineer o Associate Cloud Engineer.
• Experiencia con Dataform o dbt.
• Conocimientos de Terraform e infraestructura como código.
• Experiencia con Dataproc / Spark.
• Exposición a herramientas de visualización como Looker o Looker Studio.
• Experiencia en industrias reguladas como servicios financieros, seguridad social o salud.
• Conocimientos de gobierno y protección de datos personales.
• Experiencia o nociones en habilitación de datos para soluciones de IA/ML y Vertex AI.