Ingeniero de Datos Big Data - Arquitecto de Pipelines

Softtek; San Pedro Garza García; On-site; MXN 600,000 - 900,000; Full time

Job summary

Softtek busca un Ingeniero de Datos - Big Data para diseñar, desarrollar y mantener infraestructuras de datos para procesamiento y almacenamiento de grandes volúmenes de información en CDMX.

Será responsable de construir pipelines escalables, seguras y eficientes, integrando datos de múltiples fuentes y asegurando la calidad y disponibilidad de los datos. Se valorará experiencia en Data Lakes, herramientas como Databricks, Spark y tecnologías de CI/CD.

Qualifications

• Experiencia mínima de 2 años en análisis de grandes volúmenes de datos y desarrollo de soluciones de Inteligencia de Negocio.
• Licenciatura o Ingeniería en Informática, Sistemas o afín.
• Experiencia en diseño, construcción y mantenimiento de procesos ETL/ELT.
• Noción de computación en nube (AWS, Azure, Databricks, Docker/Kubernetes) y Azure Red Hat OpenShift (ARO).
• Big Data (CCA, Hadoop, Spark) y herramientas de procesamiento (Databricks, Data Factory, DataStage, Hadoop, Spark, Kafka).
• Bases de datos relacionales (MySQL, PostgreSQL, SQL Server) y NoSQL (MongoDB, Cassandra, Redis, HBase).
• Lenguajes de programación (Python, SQL, Scala, Rust, Java, R).
• Diseño y desarrollo de ETL/ELT; Arquitecturas Data Lakes y pipelines distribuidas.
• Visualización de datos (Tableau, Grafana)
• Automatización de procesos y DevOps (CI/CD).
• Contar con evidencia de capacitación, certificación o especialización en al menos dos de las áreas.

Responsibilities

• Diseñar, desarrollar y mantener la infraestructura de datos para el procesamiento y almacenamiento de grandes volúmenes de información.
• Construir y optimizar pipelines de datos escalables, seguros y eficientes.
• Diseñar e implementar procesos de extracción, transformación y carga de datos (ETL/ELT).
• Integrar información de múltiples fuentes internas y externas.
• Garantizar la calidad, consistencia y disponibilidad de los datos.
• Optimizar rendimiento de bases de datos y plataformas de almacenamiento.
• Implementar arquitecturas modernas basadas en Data Lakes y entornos distribuidos.
• Automatizar ingesta, transformación y monitoreo de datos.
• Colaborar con analítica, ciencia de datos y negocio para soluciones basadas en información.
• Aplicar mejores prácticas de seguridad, gobierno y gestión de datos.
• Participar en soluciones en entornos cloud y Big Data.
• Generar documentación técnica y mantener estándares de arquitectura.

Skills

ETL/ELT

Big Data

Cloud platforms

Python/SQL

Spark

Data Modeling

CI/CD

Data visualization

Inglés Intermedio

Education

Licenciatura o Ingeniería en Informática/Sistemas

Tools

AWS

Azure

Databricks

Docker/Kubernetes

Hadoop

Spark

Kafka

Data Factory

DataStage

SQL databases (MySQL/PostgreSQL)

Job description

Softtek busca un Ingeniero de Datos - Big Data para diseñar, desarrollar y mantener infraestructuras de datos para procesamiento y almacenamiento de grandes volúmenes de información en CDMX.

Será responsable de construir pipelines escalables, seguras y eficientes, integrando datos de múltiples fuentes y asegurando la calidad y disponibilidad de los datos. Se valorará experiencia en Data Lakes, herramientas como Databricks, Spark y tecnologías de CI/CD.