Data Engineer: Build Robust Pipelines for AI-Ready Data

Keyrus; Bordeaux; Sur place; EUR 60 000 - 90 000; Plein temps

Résumé du poste

Keyrus recherche un Data Engineer passionné par les pipelines de données et les plateformes modernes pour construire des systèmes d’IA opérationnels.

Vous concevrez et industrialiserez des pipelines, déployerez des plateformes data cloud et rendrez la donnée exploitable par des modèles IA. Autonomie et rigueur requises, avec une forte capacité à documenter et transférer les pipelines.

Qualifications

• Maîtrise avancée de SQL et pipeline design.
• Python fort et expérience Spark/Kafka en production.
• Plateformes data cloud: Snowflake/BigQuery/Databricks.
• Orchestration: Airflow ou Dagster, dbt pour transformation.
• Conception streaming et gestion de données en temps réel.
• Bases vectorielles pour usages RAG et préparation de jeux de données IA.

Responsabilités

• Concevoir et industrialiser des pipelines de données robustes, de la donnée brute à l'exploitation.
• Déployer et exploiter des plateformes data modernes pour rendre la donnée accessible et gouvernée.
• Rendre la donnée exploitable par des systèmes d'IA générative et agentique.
• Garantir qualité, fraîcheur et traçabilité via tests et contrats de données.
• Transformer rapidement une maquette en preuve de concept exploitable.
• Mettre en place la restitution BI lorsque nécessaire.

Connaissances

SQL

Python

Java/Scala

Apache Spark

Airflow/Dagster

dbt

Snowflake/BigQuery/Databricks

Kafka

Vector DBs

Model prompting

Data tests/contracts

Data modeling

Streamlit

Pipelines docs

English (professional)

Outils

Spark

Dagster

Airflow

dbt

Snowflake

BigQuery

Databricks

Kafka

Pinecone/Milvus/Chroma

Anthropic/OpenAI/Mistral/ Gemini

Streamlit

Description du poste

Keyrus recherche un Data Engineer passionné par les pipelines de données et les plateformes modernes pour construire des systèmes d’IA opérationnels.

Vous concevrez et industrialiserez des pipelines, déployerez des plateformes data cloud et rendrez la donnée exploitable par des modèles IA. Autonomie et rigueur requises, avec une forte capacité à documenter et transférer les pipelines.