Mettre le principe à l’épreuve
Dans ce scénario, suivez trois étapes : qualifier les documents et permissions, puis évaluer la recherche avant la génération, avant de tester réponses, citations et refus lorsque les sources manquent.
Suivre pertinence des passages, exactitude des réponses, citations correctes et cas où le système doit s’abstenir.
Cet exemple est pédagogique et fictif : il illustre un raisonnement, pas un résultat observé chez un client ni une obligation valable dans tous les contextes.
Un corpus gouverné, un jeu d’évaluation et une chaîne de traçabilité des réponses.
Application à votre contexte
Ce cas est fictif et sert à raisonner, non à promettre un résultat. Adaptez le périmètre, les acteurs et les contraintes, puis identifiez ce qui pourrait confirmer ou contredire votre diagnostic.
Décrivez la tâche autorisée, les données accessibles et ce que le système ne doit jamais faire seul. Constituez un jeu d'évaluation représentatif et séparez les essais des données utilisées pour améliorer la solution. Prévoyez le refus, l'incertitude et l'escalade humaine.