Établir un diagnostic
Une moyenne satisfaisante peut masquer des échecs graves sur une sous-population ou une situation rare.
Classer les informations en trois états : constaté, déclaré mais non confirmé, et inconnu. Cette distinction rend les prochaines vérifications plus utiles qu’une note de maturité attribuée sans preuve.
Faire noter à l’aveugle les résultats selon une grille métier, puis vérifier les désaccords et erreurs les plus coûteuses.
Suivre les mesures adaptées à la tâche, les erreurs critiques, les refus utiles et la stabilité entre versions.
Application à votre contexte
Confrontez les entretiens, les documents et au moins une observation de fonctionnement. Conservez les divergences : elles sont souvent plus instructives qu'un score de maturité calculé trop tôt.
Distinguez la plausibilité d'une réponse de son exactitude. Testez les informations manquantes, les documents contradictoires, les droits d'accès et les instructions malveillantes présentes dans les données. Un lien vers une source n'établit pas automatiquement que cette source soutient la réponse.
Trois actions de départ
- Construire un jeu d’essai représentatif
- Définir des critères mesurables et seuils justifiés
- Analyser les erreurs avant la décision de déploiement