Objectif
Comparer le résultat obtenu au résultat attendu.
Cours
Avoir fait une action ne veut pas dire que le problème est résolu.
Distinguez :
- l'action réalisée ;
- le résultat obtenu ;
- le résultat attendu ;
- l'écart entre les deux ;
- la décision : on valide, ou on continue.
Exemple — exemple inventé
| Ce qu'on mesure | Attendu | Obtenu |
|---|---|---|
| Temps de traitement | ≤ 10 min | 13 min |
| Taux d'erreur | ≤ 2 % | 1,5 % |
Le taux d'erreur respecte le critère, mais pas le temps. Le résultat n'est donc pas entièrement validé.
Exercice
Une procédure devait passer de 20 à 10 minutes, avec un taux d'erreur de 2 % au plus. Après le changement :
- temps : 11 minutes ;
- taux d'erreur : 1 %.
La procédure a-t-elle atteint tous les critères ?
Correction
Non. L'un des deux critères n'est pas atteint.
Deuxième exercice
Un salon de coiffure a mis en place l'envoi automatique de SMS de rappel la veille des rendez-vous, pour réduire les rendez-vous oubliés. Les SMS partent bien, sans aucune erreur. Mais un mois plus tard, le nombre de rendez-vous oubliés n'a pas baissé.
Question : peut-on dire que le problème est réglé ?
Correction
D. Non. Le fait que les SMS partent bien (l'action fonctionne) ne suffit pas : le résultat attendu, moins de rendez-vous oubliés, n'est pas atteint. Il faut regarder l'écart entre attendu et obtenu, chercher pourquoi (les clients lisent-ils les SMS ? l'heure d'envoi est-elle bonne ?) et décider de la suite, sans conclure trop vite.
À retenir
« Ça fonctionne » ne veut pas dire « le résultat attendu est atteint ».
Synthèse
Faire ≠ réussir. Il faut toujours comparer avec le résultat réel.
Avec une IA — Comparer sans confondre écart et cause
Usage utile
À partir d'un tableau de chiffres, une IA peut aider à faire une première comparaison entre attendu et obtenu.
Il faut cependant lui dire précisément ce qu'elle doit comparer et ce qu'elle ne doit pas en déduire.
Exemple
Données :
| Ce qu'on mesure | Attendu | Obtenu |
|---|---|---|
| Temps | ≤ 10 min | 13 min |
| Erreurs | ≤ 2 % | 1,5 % |
Demande (prompt) :
« Compare uniquement les valeurs attendues et obtenues. Indique les critères respectés et non respectés. Ne cherche pas les causes des écarts. »
Exemple de réponse d'une IA
« Le taux d'erreur est conforme. Le temps de traitement dépasse le seuil. Il faudrait donc chercher pourquoi le traitement est lent. »
La première partie répond à la demande. La seconde propose une étape suivante, mais ce n'est pas encore une explication.
Exercice IA 1 — Repérer ce que l'IA a ajouté
L'IA répond :
« Le temps dépasse 10 minutes parce que les employés sont mal formés. »
Les données ne disent rien sur la formation des employés.
Question : que faites-vous de l'explication « les employés sont mal formés » ?
Correction
Réponse : B.
Explication : seul le dépassement du temps est établi par les données. La mauvaise formation est une explication ajoutée par l'IA : c'est une hypothèse, à vérifier avant toute décision.
Exercice IA 2 — Demander un tableau de contrôle
Vous demandez à une IA un tableau en trois colonnes : attendu, obtenu, statut (atteint ou non). Quelle phrase ajouter à votre demande pour qu'elle s'en tienne au constat ?
Correction
Réponse : C.
Explication : cette limite rend la réponse plus facile à vérifier : on obtient un constat, pas une interprétation. B pousse au contraire l'IA à inventer des causes.
Exercice IA 3 — Décider de la suite
Après comparaison, un critère est atteint et l'autre non. Vous demandez à l'IA ce qu'il serait utile de savoir de plus. Elle répond :
« Pour aller plus loin, vous pourriez : »
Question : pour la décision à prendre (le critère de temps n'est pas atteint), gardez-vous ou écartez-vous chaque proposition ?
Correction
Correction de référence : non. Seule la proposition 1 aide directement à comprendre le critère non atteint (le temps). Les autres peuvent être intéressantes mais ne font pas avancer cette décision. La décision de continuer dépend de l'importance du critère manqué et du risque, pas du nombre d'analyses que l'IA peut proposer.
Dans votre activité
Le réflexe : après une action, mettez côte à côte ce que vous attendiez et ce que vous avez obtenu, chiffre contre chiffre. « Ça marche » ne suffit pas.
Par exemple (cas inventé) : une esthéticienne envoie maintenant un rappel par SMS pour réduire les rendez-vous manqués. Attendu : 2 absences par semaine au plus. Obtenu : 3 la première semaine, 1 la deuxième. Écart : objectif atteint une semaine sur deux. Il est trop tôt pour dire que c'est réglé.
Avec une IA : elle peut faire le tableau « attendu / obtenu ». Mais gardez séparés l'écart (ce que vous constatez), son explication (une idée à vérifier) et la décision (la vôtre).