Data & AI Engineer - Databricks - Freelance (H/F)

Brief IA; La Garenne-Colombes; Hybrid; EUR 111,000 - 166,000; Full time

Benefits offered by this job

2 jours de télétravail/semaine

Job summary

Brief IA recherche un(e) ingénieur Data/ML freelance pour industrialiser des cas d’IA générative sur Databricks. Vous rejoignez l’équipe IT d’une business unit et assurez la production robuste et sécurisée des solutions.

Vous concevrez et déployerez des agents et systèmes multi‑agents, gérerez les pipelines Spark/Delta Lake et instaurerez une stratégie LLMOps avec traçabilité et coût maîtrisé.

Qualifications

• Expertise confirmée en data engineering ou ML engineering sur Databricks.
• Expérience concrète en IA générative, avec au moins un projet agent ou RAG mis en production.
• Bonne maîtrise de Python (PySpark, SDK LLM, API).
• Pratique des sujets d’évaluation, de monitoring et de gouvernance des LLM.

Responsibilities

• Qualifier les cas d'usage IA avec les équipes métier et IT.
• Donner aux LLM et aux agents un accès gouverné à la connaissance de l'entreprise.
• Concevoir et développer des agents et systèmes multi-agents.
• Construire et maintenir les pipelines de données qui alimentent les solutions IA.
• Mettre en place le LLMOps : évaluation, tracing et versioning avec MLflow, CI/CD et Databricks Asset Bundles.
• Assurer une veille sur les nouveautés Databricks AI et partager les bonnes pratiques.
• Présenter l’avancement et les démos aux parties prenantes.

Skills

Databricks

Data engineering

ML engineering

Python (PySpark)

LLM/Governance

Tools

Lang Graph

Claude Agent SDK

OpenAI Agents SDK

Databricks Agent Bricks

Job description

CONTEXTE

Nous accompagnons un grand acteur international de l'énergie dans l'industrialisation de ses cas d'usage d'IA générative. Vous rejoignez l'équipe IT d'une de ses business units, qui a déjà mené plusieurs POC et souhaite maintenant les passer en production de façon robuste, sécurisée et maîtrisée en coûts, sur une plateforme Databricks.

Missions

• Qualifier les cas d'usage IA avec les équipes métier et IT : faisabilité, valeur, architecture cible (agent, multi-agents, agentic retrieval)
• Donner aux LLM et aux agents un accès gouverné à la connaissance de l'entreprise (Vector Search, Genie, outils MCP, Model Serving, AI Gateway) et concevoir les stratégies de contexte (sélection des sources, mémoire, prompt engineering)
• Concevoir et développer des agents et systèmes multi-agents (Lang Graph, Claude Agent SDK, OpenAI Agents SDK, Databricks Agent Bricks), avec orchestration, guardrails et human-in-the-loop
• Construire et maintenir les pipelines de données qui alimentent les solutions IA (Spark, Delta Lake, Lakeflow / DLT), sur des données structurées et non structurées (documents, PDF, séries temporelles)
• Mettre en place le LLMOps : évaluation (LLM-as-a-judge, golden datasets), tracing et versioning avec MLflow, déploiement via CI/CD et Databricks Asset Bundles, monitoring qualité, latence et coûts en production
• Assurer une veille sur les nouveautés Databricks AI, LLM et frameworks agentiques
• Présenter l'avancement et les démos aux parties prenantes et partager les bonnes pratiques avec la communauté IT

INFORMATIONS PRATIQUES

• Localisation : La Garenne-Colombes (92)
• Rythme : 2 jours de télétravail par semaine
• Mission en freelance
• 1. Expertise confirmée en data engineering ou ML engineering sur Databricks
• 2. Expérience concrète en IA générative, avec au moins un projet agent ou RAG mis en production
• 3. Bonne maîtrise de Python (PySpark, SDK LLM, API)
• 4. Pratique des sujets d'évaluation, de monitoring et de gouvernance des LLM
• 5.