Data Pipeline Architect: ETL, Streaming & Spark Expert

axity; Estado de México; Presencial; MXN 200,000 - 400,000; Jornada completa

Descripción de la vacante

Una empresa de tecnología busca un profesional con amplia experiencia en el diseño y desarrollo de sistemas ETL. El candidato ideal debe tener habilidades en Python y herramientas como Apache Airflow y Kafka, así como experiencia en la construcción de arquitecturas de datos para asegurar la calidad de la información. Se valorará la capacidad para trabajar con múltiples fuentes de datos y realizar procesos de análisis complejos.

Formación

• Experiencia comprobable en el desarrollo de procesos ETL/ELT.
• Conocimiento avanzado en Python.
• Manejo de herramientas de orquestación como Apache Airflow.
• Experiencia con tecnologías de streaming, especialmente Apache Kafka.
• Conocimientos en Apache Spark para procesamiento distribuido.
• Manejo de bases de datos como Athena, Postgres u otras relacionales.
• Experiencia en la construcción de pipelines y modelos de datos.
• Conocimientos en análisis y mapeo de vistas complejas.

Conocimientos

Desarrollo de procesos ETL/ELT

Python avanzado

Apache Airflow

Apache Kafka

Apache Spark

Bases de datos como Athena y Postgres

Construcción de pipelines y modelos de datos

Análisis y mapeo de vistas complejas

Descripción del empleo

Una empresa de tecnología busca un profesional con amplia experiencia en el diseño y desarrollo de sistemas ETL. El candidato ideal debe tener habilidades en Python y herramientas como Apache Airflow y Kafka, así como experiencia en la construcción de arquitecturas de datos para asegurar la calidad de la información. Se valorará la capacidad para trabajar con múltiples fuentes de datos y realizar procesos de análisis complejos.