Data Engineer & Generative IA

Paradigma Digital - Nuestras ofertas de Empleo; Pozuelo de Alarcón; Hybride; EUR 60 000 - 90 000; Plein temps

Avantages offerts par ce poste

Seguro médico 100% subvencionado

Retribución flexible Edenred

25 días de vacaciones

Formación y certificaciones oficiales

Résumé du poste

Paradigma Digital está buscando un Senior Data Engineer para unirse al área de Data, trabajando en mantenimiento, optimización, integración y calidad del dato en entornos basados en nube y con experiencia en IA Generativa para construir RAG y Agentes.

La persona diseñará y optimizará pipelines de datos, gestionará el ciclo de vida del dato y orquestará flujos con herramientas como Apache Airflow, AWS Step Functions o Google Cloud Composer, con disponibilidad de trabajo remoto o híbrido.

Qualifications

• Experiencia en construcción de pipelines y orquestación de datos.
• Conocimiento en IA Generativa y desarrollo de RAG/Agentes.
• Experiencia en entornos cloud (AWS, Azure y/o GCP).

Responsabilités

• Diseño e implementación de pipelines de datos y estructuras de ingestión.
• Construcción de RAG y Agentes para soluciones de IA.
• Gestión del ciclo de vida y calidad de los datos.
• Optimización y escalabilidad de bases de datos y flujos.
• Integración de datos desde múltiples fuentes y monitorización de pipelines.
• Orquestación de workflows con herramientas como Airflow/Cloud Composer.

Outils

Airflow

Step Functions

Cloud Composer

Kafka

CDC

Kinesis

Description du poste

¡Forma parte del futuro de Paradigma!

Si eresSenior Data Engineery quieres participar en un proyecto de nuestro área de Data con experiencia en mantenimiento, optimización, integración , gestión del ciclo de vida y calidad del dato basado en cloud y aportas experiencia en proyectos de IAGenerativa construyendo RAG y Agentes, este proyecto te puede interesar.

¿Que buscamos?

Data Engineer Seniorcon experiencia en construcción de pipelines, diseño, desarrollo y optimización de datos complejos basado en cloud AWS, Azure y/o GCP, asi como experiencia en proyectos de IA Generatiava

Responsabilidades

• Diseño e implementación de pipelines de datos: Crear y estructurar procesos para la ingestión, procesamiento y transformación de datos.
• Construcción de RAG y/o Agentes
• Recolección y almacenamiento de datos: Implementar soluciones para la captura y almacenamiento eficiente de datos provenientes de diversas fuentes.
• Limpieza y preprocesamiento de datos: Asegurar que los datos estén limpios y listos para su análisis, aplicando técnicas de limpieza y transformación.
• Optimización de bases de datos: Ajustar bases de datos para mejorar su rendimiento y escalabilidad.
• Integración de datos: Facilitar la correcta integración de datos provenientes de distintas fuentes.
• Mantenimiento de sistemas de datos: Asegurar el funcionamiento continuo y eficiente de los sistemas de datos.
• Monitorización y ajuste de flujos de datos: Supervisar y ajustar los pipelines y flujos de datos para mantener su rendimiento y confiabilidad.
• Calidad del dato: Implementar y mantener prácticas para asegurar la precisión, consistencia y fiabilidad de los datos.
• Gestión del ciclo de vida del dato: Gestionar el ciclo de vida de los datos desde su creación hasta su eventual archivado y eliminación.
• Orquestación de pipelines de datos: Implementar y gestionar herramientas de orquestación de flujos de trabajo como Apache Airflow, AWS Step Functions, o Google Cloud Composer para asegurar la automatización y eficiencia de los pipelines de datos.
• Ingesta de datos Batch y/o Streaming: Desarrollar e implementar procesos de ingestión de datos en lotes y en tiempo real utilizando herramientas como Apache Kafka, Change Data Capture (CDC), y AWS Kinesis.

Debes tener experiencia en:

• Proyectos con grandes volúmenes de datos como Data Engineer
• Construcción de RAG y/o Agentes
• Cloud -AWS
• Desarrollo Python

¿Por qué Paradigma?

Libertad con responsabilidad
Confiamos en las personas para organizar su trabajo de forma flexible, favoreciendo el equilibrio entre la vida personal y profesional sin perder de vista los objetivos y el impacto de nuestro trabajo. Tendrás la posibilidad de trabajar en un modelo de trabajo remoto o híbrido.

Una comunidad de referencia
Formarás parte de una comunidad ágil y tecnológica activa, donde compartir conocimiento, aprender de otros expertos y contribuir al desarrollo de las mejores prácticas del sector.

Acompañamiento desde el primer día

Contarás con el apoyo de un Buddy que te ayudará en tu integración, resolverá tus dudas y facilitará que te sientas parte de Paradigma desde el inicio.

Excelencia técnica como seña de identidad
Nos apasiona la tecnología y apostamos por el desarrollo continuo de nuestras capacidades. El conocimiento, la calidad y la mejora constante forman parte de nuestra cultura.
También apostamos por el aprendizaje continuo y tendrás acceso a un plan anual de formación, certificaciones oficiales y espacios de aprendizaje diseñados para impulsar tu desarrollo profesional.

Beneficios
Además de un entorno de trabajo cercano y colaborativo, ofrecemos seguro médico 100% subvencionado, retribución flexible a través de Edenred, 25 días de vacaciones anuales y otros beneficios orientados al bienestar de las personas.

Conócenos mejor aquí: YouTube Paradigma Digital

Contacta con nosotros en [e-mail]