Data Expert / Data Architect

Grupo Ns; Barcelona; Presencial; EUR 65.000 - 105.000; Jornada completa

Descripción de la vacante

Grupo Ns busca un Data Expert / Data Architect para diseñar y optimizar soluciones en Azure Synapse Analytics y pipelines de datos. Deberá gestionar ingestas, transformaciones y control de calidad, manteniendo la seguridad y permisos de datos en ADLS Gen2.

Se requiere experiencia en PySpark, Python y SQL, así como coordinación con equipos de datos, infraestructura y seguridad. Ubicación en Barcelona, modalidad presencial.

Formación

• Requisitos sólidos en diseño y operación de soluciones de datos en Azure.
• Experiencia con Azure Synapse Analytics y Dedicated SQL Pool.
• Experiencia en ETL/ELT con Data Factory y Synapse Pipelines.
• Conocimiento de PySpark, Spark y Python.

Responsabilidades

• Diseñar, evolucionar y optimizar soluciones sobre Azure Synapse Analytics y Dedicated SQL Pool.
• Desarrollar y mantener procesos de ingestión y orquestación mediante Azure Data Factory y Synapse Pipelines.
• Diseñar pipelines parametrizados y procesos metadata-driven.
• Desarrollar y optimizar procesos de transformación y carga con SQL, Python y PySpark.
• Implementar controles de calidad, reconciliación e idempotencia de los datos.
• Analizar y resolver incidencias de pipelines, SQL, Spark, almacenamiento y configuración.
• Gestionar permisos, identidades y accesos sobre bases de datos y ADLS Gen2.
• Analizar aspectos de conectividad y seguridad mediante Private Endpoint, Private Link y Private DNS.
• Gestionar el versionado y despliegue de componentes mediante Git, Azure Repos y Azure DevOps.
• Coordinar técnicamente con equipos de datos, infraestructura, BI, seguridad y soporte.

Conocimientos

SQL

SPARK

Python

Azure

PySpark

Data Factory

Data Lake

Descripción del empleo

Servicios y tecnología de la información

Empleado

Data Expert / Data Architect

Publicada 22 de Septiembre

Responsabilidades

• Diseñar, evolucionar y optimizar soluciones sobre Azure Synapse Analytics y Dedicated SQL Pool.
• Desarrollar y mantener procesos de ingestión y orquestación mediante Azure Data Factory y Synapse Pipelines.
• Diseñar pipelines parametrizados y procesos metadata-driven.
• Desarrollar y optimizar procesos de transformación y carga con SQL, Python y PySpark.
• Implementar controles de calidad, reconciliación e idempotencia de los datos.
• Analizar y resolver incidencias de pipelines, SQL, Spark, almacenamiento y configuración.
• Gestionar permisos, identidades y accesos sobre bases de datos y ADLS Gen2.
• Analizar aspectos de conectividad y seguridad mediante Private Endpoint, Private Link y Private DNS.
• Gestionar el versionado y despliegue de componentes mediante Git, Azure Repos y Azure DevOps.
• Coordinar técnicamente con equipos de datos, infraestructura, BI, seguridad y soporte.

Conocimientos técnicos Microsoft Azure.

• Azure Synapse Analytics / Dedicated SQL Pool.
• Azure Data Factory/Synapse Pipelines.
• Azure Data Lake Storage Gen2.
• SQL / T-SQL.
• Python y PySpark.
• Apache Spark.
• Procesos batch, cargas masivas y troubleshooting de plataformas de datos.

NS, es una empresa donde se valora tanto el perfil profesional tecnológico de los trabajadores, como el interés y la aptitud que demuestren a la hora de desarrollar nuevos proyectos.

Por ello, requerimos personas constantes, con ganas de evolucionar y aprender.

Competencias

• SQL
• SPARK
• python
• azure
• pyspark
• datafactory
• DataLake