Ingeniero De Datos Big Data Proficient

Softtek; San Pedro Garza García; On-site; MXN 600,000 - 900,000; Full time

Job summary

Softtek busca un Ingeniero de Datos - Big Data para diseñar, desarrollar y mantener infraestructuras de datos para procesamiento y almacenamiento de grandes volúmenes de información en CDMX.

Será responsable de construir pipelines escalables, seguras y eficientes, integrando datos de múltiples fuentes y asegurando la calidad y disponibilidad de los datos. Se valorará experiencia en Data Lakes, herramientas como Databricks, Spark y tecnologías de CI/CD.

Qualifications

• Experiencia mínima de 2 años en análisis de grandes volúmenes de datos y desarrollo de soluciones de Inteligencia de Negocio.
• Licenciatura o Ingeniería en Informática, Sistemas o afín.
• Experiencia en diseño, construcción y mantenimiento de procesos ETL/ELT.
• Noción de computación en nube (AWS, Azure, Databricks, Docker/Kubernetes) y Azure Red Hat OpenShift (ARO).
• Big Data (CCA, Hadoop, Spark) y herramientas de procesamiento (Databricks, Data Factory, DataStage, Hadoop, Spark, Kafka).
• Bases de datos relacionales (MySQL, PostgreSQL, SQL Server) y NoSQL (MongoDB, Cassandra, Redis, HBase).
• Lenguajes de programación (Python, SQL, Scala, Rust, Java, R).
• Diseño y desarrollo de ETL/ELT; Arquitecturas Data Lakes y pipelines distribuidas.
• Visualización de datos (Tableau, Grafana)
• Automatización de procesos y DevOps (CI/CD).
• Contar con evidencia de capacitación, certificación o especialización en al menos dos de las áreas.

Responsibilities

• Diseñar, desarrollar y mantener la infraestructura de datos para el procesamiento y almacenamiento de grandes volúmenes de información.
• Construir y optimizar pipelines de datos escalables, seguros y eficientes.
• Diseñar e implementar procesos de extracción, transformación y carga de datos (ETL/ELT).
• Integrar información de múltiples fuentes internas y externas.
• Garantizar la calidad, consistencia y disponibilidad de los datos.
• Optimizar rendimiento de bases de datos y plataformas de almacenamiento.
• Implementar arquitecturas modernas basadas en Data Lakes y entornos distribuidos.
• Automatizar ingesta, transformación y monitoreo de datos.
• Colaborar con analítica, ciencia de datos y negocio para soluciones basadas en información.
• Aplicar mejores prácticas de seguridad, gobierno y gestión de datos.
• Participar en soluciones en entornos cloud y Big Data.
• Generar documentación técnica y mantener estándares de arquitectura.

Skills

ETL/ELT

Big Data

Cloud platforms

Python/SQL

Spark

Data Modeling

CI/CD

Data visualization

Inglés Intermedio

Education

Licenciatura o Ingeniería en Informática/Sistemas

Tools

AWS

Azure

Databricks

Docker/Kubernetes

Hadoop

Spark

Kafka

Data Factory

DataStage

SQL databases (MySQL/PostgreSQL)

Job description

Ingeniero de Datos - Big Data

Habilidades Requeridas:

• Experiencia mínima de 2 años en análisis de grandes volúmenes de datos y desarrollo de soluciones de Inteligencia de Negocio.
• Licenciatura o Ingeniería ne Informatica, Sistemas o afín
• Experiencia en diseño, construcción y mantenimiento de procesos ETL/ELT
• Cómputo en nube (AWS Certified Big Data, Azure, Databricks, Docker/Kubernetes), ARO (Azure Redhat OpenShit)
• Big Data (Cloudera Certified Associate (CCA), Data Analyst, Hadoop, Spark)
• Bases de datos Relacionales (MySQL, PostgreSQL, SQL Server)
• Bases de datos NoSQL (MongoDB, Cassandra, Redis, HBase)
• Lenguajes de programación (Python, SQL, Scala, Rust, Java, R)
• Herramientas de procesamiento de datos (Databricks, Data Factory, DataStage, Hadoop, Spark, Kafka)
• Herramientas de Big Data (Apache, Dask, Flink)
• Diseño y desarrollo de procesos ETL/ELT (Extract, Transform, Load)
• Modelos y Arquitecturas de Datos (DataLakes, Data Pipelines, Arquitecturas distribuidas)
• Visualización de Datos (Fabric, Tableau, Grafana)
• Automatización de Procesos y DevOps (CI/CD)
• Contar con evidencia de capacitación, certificación o especialización en al menos dos de las áreas antes mencionadas

Habilidades Deseables:

• Experiencia en plataformas de nube: Microsoft Azure, AWS, Databricks, Docker, Kubernetes, Azure Red Hat OpenShift (ARO)
• Conocimiento en bases de datos NoSQL: MongoDB, Cassandra, Redis, HBase

Responsabilidades

• Diseñar, desarrollar y mantener la infraestructura de datos para el procesamiento y almacenamiento de grandes volúmenes de información.
• Construir y optimizar pipelines de datos escalables, seguros y eficientes.
• Diseñar e implementar procesos de extracción, transformación y carga de datos (ETL/ELT ).
• Integrar información proveniente de múltiples fuentes internas y externas.
• Garantizar la calidad, consistencia, confiabilidad y disponibilidad de los datos.
• Optimizar el rendimiento de bases de datos y plataformas de almacenamiento.
• Implementar arquitecturas modernas de datos basadas en Data Lakes y entornos distribuidos.
• Automatizar procesos de ingesta, transformación y monitoreo de datos.
• Colaborar con equipos de analítica, ciencia de datos y negocio para habilitar soluciones basadas en información.
• Aplicar mejores prácticas de seguridad, gobierno y gestión de datos.
• Participar en la implementación de soluciones en entornos cloud y plataformas Big Data.
• Generar documentación técnica y mantener actualizados los estándares de arquitectura y procesamiento de datos.

Idiomas Requeridos Inglés Intermedio Bajo

Ubicación CDMX - Modalidad 100% en sitio