Établir un diagnostic
Un gain apparent peut disparaître lorsque l’on inclut vérification humaine, erreurs et intégration.
Classer les informations en trois états : constaté, déclaré mais non confirmé, et inconnu. Cette distinction rend les prochaines vérifications plus utiles qu’une note de maturité attribuée sans preuve.
Comparer les résultats de l’IA à une méthode de référence sur des cas représentatifs, y compris les exceptions importantes.
Mesurer qualité utile, temps net gagné, taux de correction et coût complet par tâche.
Application à votre contexte
Confrontez les entretiens, les documents et au moins une observation de fonctionnement. Conservez les divergences : elles sont souvent plus instructives qu'un score de maturité calculé trop tôt.
Distinguez la plausibilité d'une réponse de son exactitude. Testez les informations manquantes, les documents contradictoires, les droits d'accès et les instructions malveillantes présentes dans les données. Un lien vers une source n'établit pas automatiquement que cette source soutient la réponse.
Trois actions de départ
- Décrire le problème et la situation de référence
- Comparer les solutions et risques
- Définir des critères d’essai et d’arrêt