Ce que cela change en pratique
Exemple fictif : deux procédures contradictoires sont indexées, la réponse doit distinguer leurs versions plutôt que les fusionner.
Pour apprécier l’utilité, comparer une situation avant et après sur le même périmètre. L’effet recherché doit être reconnu par les métiers : une meilleure décision, un délai réduit, une information plus fiable ou une dépendance mieux maîtrisée.
Suivre pertinence des passages, exactitude des réponses, citations correctes et cas où le système doit s’abstenir.
Application à votre contexte
Décrivez le changement attendu du point de vue d'un utilisateur ou d'un responsable métier. Une livraison n'est pas encore un bénéfice : précisez le résultat observable qui justifiera l'effort.
Décrivez la tâche autorisée, les données accessibles et ce que le système ne doit jamais faire seul. Constituez un jeu d'évaluation représentatif et séparez les essais des données utilisées pour améliorer la solution. Prévoyez le refus, l'incertitude et l'escalade humaine.