Ingeniero de Datos: Diseña Pipelines Escalables y Data Lake

Bia Energy SAS; Puerto Bogotá; Sur place; COP 90 000 000 - 130 000 000; Plein temps

Résumé du poste

Bia Energy SAS busca un(a) Ingeniero(a) de datos para diseñar y mantener infraestructuras de datos escalables y seguras en la nube. El rol lidera pipelines desde origen hasta sistemas de análisis para facilitar decisiones basadas en datos.

Requisitos: experiencia de 4+ años en ingeniería de datos, dominio de Python/Java/Scala, experiencia con Spark/Hadoop/Kafka, bases de datos SQL/NoSQL y servicios en la nube. Se valora Airflow y contenedores Docker/Kubernetes.

Qualifications

• Profesional en Ingeniería de Sistemas, Informática, Ciencias de la Computación o áreas relacionadas.
• Más de 4 años en roles similares enfocados en ingeniería de datos.
• Conocimientos en Python, Java o Scala.
• Experiencia con Apache Spark, Hadoop y Kafka.
• Dominio de SQL (PostgreSQL, MySQL) y NoSQL (MongoDB).
• Servicios en la nube (AWS, Azure o Google Cloud) para datos.
• Airflow como framework de orquestación.
• Contenedores y orquestación (Docker, Kubernetes).

Responsabilités

• Diseñar, construir y mantener pipelines de datos hasta analítica.
• Implementar soluciones ETL/ELT robustas para integración y transformación.
• Implementación y soporte del Datalake.
• Asegurar calidad de datos con limpieza, validación y monitoreo.
• Optimizar bases de datos y almacenamiento para escalabilidad y rendimiento.
• Implemementar controles de acceso y seguridad de datos.
• Documentar procesos y diseños de sistemas de datos.

Connaissances

Python

Java

Scala

Formation

Ingeniería de Sistemas/Informática/Ciencias de la Computación

Outils

Apache Spark

Hadoop

Kafka

PostgreSQL

MySQL

MongoDB

AWS

Azure

Google Cloud

Airflow

Docker

Kubernetes

Description du poste

Bia Energy SAS busca un(a) Ingeniero(a) de datos para diseñar y mantener infraestructuras de datos escalables y seguras en la nube. El rol lidera pipelines desde origen hasta sistemas de análisis para facilitar decisiones basadas en datos.

Requisitos: experiencia de 4+ años en ingeniería de datos, dominio de Python/Java/Scala, experiencia con Spark/Hadoop/Kafka, bases de datos SQL/NoSQL y servicios en la nube. Se valora Airflow y contenedores Docker/Kubernetes.