Data Engineer Senior - Proyecto Estratégico Sector Seguros

Soluciones Kabec, S.A. de C.V.; Ciudad de México; Presencial; MXN 200,000 - 400,000; Jornada completa

Descripción de la vacante

Una empresa de tecnología de datos busca un ingeniero de datos para desarrollar pipelines críticos y transformar datos a gran escala. El candidato ideal tendrá experiencia en GCP, especialmente con BigQuery y Dataproc Serverless, y habilidades en Python (PySpark) y SQL. Esta posición requiere al menos 2 años de experiencia y un título universitario. Se ofrece un ambiente de trabajo colaborativo y oportunidades para el desarrollo profesional.

Formación

• Educación mínima: Licenciatura en un campo relevante.
• Mínimo 2 años de experiencia en un rol similar.

Responsabilidades

• Desarrollar pipelines críticos conectando fuentes On-premise y SaaS hacia la nube.
• Transformación de datos a gran escala utilizando PySpark y SQL en BigQuery.
• Construcción de DAGs complejos en Apache Airflow.

Conocimientos

Python (PySpark)

SQL experto

Bash

Orquestación en Cloud Composer

Gestión de datos en GCP

Educación

Licenciatura

Herramientas

Apache Airflow

BigQuery

Dataproc Serverless

Cloud Storage

Pub/Sub

Descripción del empleo

Overview

Arquitectura de Ingesta: Desarrollar pipelines críticos (batch y near-real-time) conectando fuentes On-premise y SaaS hacia la nube.

Procesamiento de Alto Nivel: Transformación de datos a gran escala utilizando PySpark (Dataproc Serverless) y SQL avanzado en BigQuery.

Orquestación y Automatización: Construcción de DAGs complejos en Apache Airflow (Cloud Composer) garantizando SLAs y monitoreo proactivo.

Diseño de Dominio: Implementar modelos analíticos y tablas de consumo optimizadas bajo la ontología corporativa.

Responsabilidades

• El Stack Tecnológico que dominarás:
• GCP: BigQuery, Dataproc Serverless, Cloud Storage, Pub/Sub.
• Orquestación: Cloud Composer (Airflow).
• Gobernanza: Palanca técnica sobre Foundry, Dataplex y Data Catalog.
• Lenguajes: Python (PySpark), SQL experto, Bash y IaC.

Requerimientos

• Educación mínima: Educación superior - Licenciatura
• 2 años de experiencia

Palabras clave

Palabras clave: datos, data, ingeniero, engineers, ingeniera, ing, engineer, senior, sr, project, insurance, aseguradora, seguros