Tech Lead IA Générative & Python — LLM en Production

Aleysia; Paris; Hybrid; EUR 80,000 - 120,000; Full time

Benefits offered by this job

Télétravail 2 jours/semaine

Job summary

Aleysia recherche un Développeur IA Senior Python pour accompagner un client dans l'évolution et la fiabilisation des solutions IA génératives. Vous concevrez des chaînes d'extraction d'informations et industrialiserez les approches validées.

Vous évaluerez et comparerez les modèles LLM, gérerez l'observabilité et travaillerez avec les équipes techniques et métiers pour augmenter les compétences autour des méthodes d'évaluation et des coûts/latences.

Qualifications

• 5 ans d'expérience en développement exigés.
• Au moins 2 ans sur des produits LLM en production.
• Maîtrise avancée de Python et développement testé.

Responsibilities

• Concevoir des chaînes d'extraction d'informations structurées à partir de textes libres, avec des approches adaptées (Function Calling, sorties structurées, validation et réparation des résultats).
• Construire et maintenir des cas d'évaluation, mener des expérimentations et comparer prompts et modèles selon des critères mesurables.
• Évaluer la fiabilité des juges LLM et identifier biais et variabilité entre exécutions.
• Comparer et sélectionner les modèles en arbitrant qualité, coût et latence dans un environnement souverain (Mistral, AWS Bedrock UE).
• Industrialiser les approches validées pour leur mise en production: code testé, observabilité, gestion des pannes et suivi des dérives.
• Transmettre ton expertise et faire monter l'équipe en compétences sur les méthodes d'évaluation.

Skills

Python avancé

5+ ans d'expérience en développement

2 ans sur LLM en production

Évaluation des LLM

Extraction d'informations structurées

Comparaison d'approches

Transmission des connaissances

Tools

AWS Bedrock

Job description

Aleysia recherche un Développeur IA Senior Python pour accompagner un client dans l'évolution et la fiabilisation des solutions IA génératives. Vous concevrez des chaînes d'extraction d'informations et industrialiserez les approches validées.

Vous évaluerez et comparerez les modèles LLM, gérerez l'observabilité et travaillerez avec les équipes techniques et métiers pour augmenter les compétences autour des méthodes d'évaluation et des coûts/latences.