Data Engineer Azure Proficient

Softtek; Bogotá; On-site; COP 44,640,000 - 100,440,000; Full time

Job summary

Softtek busca un Data Engineer para diseñar, construir y mantener pipelines de datos críticos en un entorno Azure. Se valorará experiencia con ETL/ELT, Python y soluciones en Databricks y Snowflake, con enfoque en calidad y escalabilidad.

El candidato trabajará con equipos de analítica y negocio para habilitar soluciones basadas en datos, con orientación a resultados y capacidades de priorizar tareas en un entorno dinámico.

Qualifications

• Profesional en Ingeniería de Sistemas, Ingeniería Informática, Ciencias de la Computación o carreras afines.
• Entre 2 y 4 años de experiencia como Data Engineer.
• Experiencia en diseño y construcción de pipelines de datos.
• Experiencia obligatoria en Azure Data Factory.
• Dominio de Python para procesamiento, transformación y automatización de datos.
• Experiencia en procesos ETL/ELT e integración de múltiples fuentes de información.
• Conocimiento de arquitecturas y procesamiento de datos en entornos Cloud.
• Conocimiento de Databricks, Snowflake, Spark/PySpark y Unity Catalog.

Responsibilities

• Diseñar, desarrollar y mantener pipelines de datos.
• Implementar procesos ETL/ELT para integración y transformación de información.
• Integrar datos de diferentes fuentes estructuradas y no estructuradas.
• Desarrollar soluciones de procesamiento y automatización utilizando Python.
• Garantizar la calidad, disponibilidad y confiabilidad de los datos.
• Optimizar procesos de carga, transformación y almacenamiento de información.
• Colaborar con equipos de analítica, negocio y tecnología para habilitar soluciones basadas en datos.
• Participar en iniciativas de mejora continua relacionadas con plataformas y procesos de datos.

Skills

Python

ETL/ELT

Azure Data Factory

Azure Databricks

Snowflake

Spark/PySpark

Unity Catalog

CI/CD basics

Data Lake

Cloud architectures

Education

Ingeniería de Sistemas, Ingeniería Informática o Ciencias de la Computación

Tools

Azure Data Factory

Azure Databricks

Snowflake

Spark/PySpark

Unity Catalog

Job description

Fundada en 1982, Softtek es un proveedor global de servicios orientados a procesos de TI con 30 oficinas en Norteamérica, Latinoamérica, Europa y Asia. Con 15 Centros de Desarrollo Global en EE. UU., México, China, Brasil, Argentina, Costa Rica, España, Hungría e India. Softtek mejora resultados para grandes empresas en más de 20 países. Softtek es el creador y líder de la industria nearshore.

Para más información de lo que hacemos, y de nuestras Oportunidades de carreras, visita www.softtek.com

• Profesional en Ingeniería de Sistemas, Ingeniería Informática, Ciencias de la Computación o carreras afines.
• Entre 2 y 4 años de experiencia como Data Engineer.
• Experiencia en diseño y construcción de pipelines de datos.
• Experiencia obligatoria en Azure Data Factory.
• Dominio de Python para procesamiento, transformación y automatización de datos.
• Experiencia en procesos ETL/ELT e integración de múltiples fuentes de información.
• Conocimiento de arquitecturas y procesamiento de datos en entornos Cloud.
• Pensamiento analítico y resolución de problemas.
• Orientación a resultados.
• Trabajo colaborativo.
• Organización y gestión de prioridades.
• Proactividad y mejora continua.
• Experiencia o conocimientos en Azure Databricks.
• Conocimiento de Snowflake.
• Experiencia con Spark o PySpark.
• Conocimiento de Unity Catalog.
• Experiencia con bases de datos no relacionales.
• Conocimientos básicos de CI/CD.
• Experiencia con Data Lake, Synapse Analytics u otras soluciones de datos en Azure.

Responsabilidades (Actividades a desempeñar)

• Diseñar, desarrollar y mantener pipelines de datos.
• Implementar procesos ETL/ELT para integración y transformación de información.
• Integrar datos provenientes de diferentes fuentes estructuradas y no estructuradas.
• Desarrollar soluciones de procesamiento y automatización utilizando Python.
• Garantizar la calidad, disponibilidad y confiabilidad de los datos.
• Optimizar procesos de carga, transformación y almacenamiento de información.
• Colaborar con equipos de analítica, negocio y tecnología para habilitar soluciones basadas en datos.
• Participar en iniciativas de mejora continua relacionadas con plataformas y procesos de datos.

Idiomas requeridos

Información adicional

Condiciones especiales

• Se valorará experiencia o conocimientos en Databricks, Snowflake, Spark/PySpark y Unity Catalog.
• Perfil orientado a construcción de soluciones de integración y procesamiento de datos sobre ecosistemas Azure.