Un critère éliminatoire (auto-fail en anglais), ou erreur critique, est un critère de la grille d’écoute qui ramène toute l’évaluation à zéro dès qu’il n’est pas respecté. Il est réservé aux manquements que rien d’autre ne peut compenser, comme une infraction de conformité ou une erreur dans le traitement des données.
En bref
- Un critère ne mérite ce statut que si un seul manquement est grave et vérifiable.
- Une longue liste de critères éliminatoires cache en général un problème de pondération.
- Avec l’évaluation automatisée, le risque principal devient le faux positif.
- Rédigez les critères éliminatoires de façon restrictive et reliez chacun à des preuves.
Pourquoi certaines erreurs ne se compensent pas
La plupart des évaluations qualité sont un calcul de moyenne. Une grille d’évaluation découpe une conversation en critères, chacun rapporte des points, et le total décrit la qualité de l’interaction. Cela fonctionne parce que la plupart des signaux de qualité se compensent entre eux : une résolution lente peut être rattrapée par une explication particulièrement claire.
Le critère éliminatoire est l’exception à cette logique. Il pose qu’un élément précis n’entre pas dans la moyenne : s’il se produit, l’évaluation vaut zéro, quel que soit le reste. Les équipes parlent aussi d’échec automatique, d’erreur critique ou d’erreur fatale, et il figure en général dans une section à part en haut de la grille plutôt que comme une ligne pondérée. La raison : certaines erreurs sont d’une autre nature qu’une note basse. Une modification de compte effectuée sans vérifier l’identité du client n’est pas une interaction médiocre. C’est une interaction qui n’aurait jamais dû avoir lieu, et la compenser par un ton aimable donne une image fausse de ce qui s’est passé.
Quand un critère peut ramener une note à zéro
Comme un critère éliminatoire l’emporte sur tout le reste, ce statut devrait être le plus difficile à obtenir sur une grille d’écoute. En résumé, le test est le suivant : un seul manquement doit être réellement grave, assez objectif pour que deux évaluateurs s’accordent toujours sur le fait qu’il a eu lieu, vérifiable à partir des preuves dans la transcription, et sous le contrôle du conseiller. Un critère qui échoue à l’un de ces points a sa place dans la partie pondérée, avec un poids élevé : il pèse toujours sur la note et apparaît toujours dans le coaching, mais il ne remet pas tout à zéro.
Le test complet, avec des exemples détaillés des critères qui le passent et de ceux qui échouent, se trouve dans notre guide des critères éliminatoires en QA (en anglais). La distinction à retenir ici est simple : la question n’est jamais « est-ce important ? ». Presque tout ce qui figure sur une grille est important. La question est de savoir si un seul cas est impossible à compenser.
Exemples de critères éliminatoires et pondérés dans une grille d’écoute
Quelques exemples rendent la frontière concrète.
| Critère | Éliminatoire ou pondéré | Pourquoi |
|---|---|---|
| Identité non vérifiée avant une modification de compte | Éliminatoire | Objectif, visible dans la transcription et grave à lui seul |
| Mention obligatoire ou formule de consentement omise | Éliminatoire | Les mots ont été dits ou non, et l’omission peut invalider l’interaction |
| Données sensibles mal traitées | Éliminatoire | Binaire, appuyé sur des preuves et rien d’autre dans la conversation ne le compense |
| Ton impoli ou méprisant | Très pondéré | Sérieux, mais les évaluateurs placent la limite différemment, il échoue donc au test du « toujours d’accord » |
| Occasion de vente additionnelle manquée | Pondéré, faible | Une préférence commerciale, pas un manquement grave |
Les critères éliminatoires avec l’évaluation automatisée
La définition ne change pas quand une machine évalue, mais le profil de risque, si. Un système de notation peut se tromper de deux façons sur un critère éliminatoire : il se déclenche alors qu’il ne devrait pas, ou il passe à côté d’un vrai manquement. Ces deux erreurs ne se valent pas. Un critère éliminatoire manqué, c’est le même angle mort qu’avait déjà l’échantillonnage manuel. Un faux positif, en revanche, inflige un zéro à quelqu’un qui n’a rien fait de mal, et dès que le plateau a vu le système se tromper sur une décision aussi lourde, chaque autre note devient contestable.
C’est cette asymétrie qui impose de rédiger les critères éliminatoires automatisés de façon restrictive, de les paramétrer en privilégiant la précision, et de faire pointer chaque zéro vers les lignes exactes qui l’ont déclenché. Une note que vous pouvez relier aux preuves peut être vérifiée et, si elle est fausse, corrigée. Une note que vous ne pouvez pas relier n’est qu’une accusation assortie d’un chiffre. Kaizo relie chaque note, critères éliminatoires compris, aux preuves dans la conversation. Pour voir ce que cela donne sur vos propres conversations, réservez une démo. La précision, les contestations et le coaching après un zéro sont traités en détail dans le guide des critères éliminatoires (en anglais).
Questions fréquentes
Qu’est-ce qu’un critère éliminatoire en QA ?
Un critère éliminatoire, aussi appelé échec automatique ou erreur critique (auto-fail en anglais), est un critère qualité qui ramène toute une évaluation à zéro dès qu’il n’est pas respecté, quelle que soit la façon dont le reste de la conversation s’est déroulé. Il existe pour les manquements qui ne se compensent pas, comme une infraction de conformité ou une erreur dans le traitement des données, qu’une bonne performance ailleurs ne peut pas rattraper.
Quelle différence entre un critère éliminatoire et un critère pondéré ?
Un critère pondéré apporte des points à une note moyenne : un échec fait baisser le total sans l’anéantir. Un critère éliminatoire se situe hors de la moyenne et ramène toute l’évaluation à zéro au premier manquement. Un critère ne devient éliminatoire que si un seul cas est grave, objectif, vérifiable à partir de preuves et sous le contrôle du conseiller. Sinon, il a sa place dans la partie pondérée.
Quels exemples de critères éliminatoires peut-on citer ?
Les exemples courants sont : ne pas vérifier l’identité d’un client avant une modification de compte, omettre une mention obligatoire ou une formule de consentement, mal traiter des données sensibles, ou prendre un engagement interdit, comme un remboursement que la politique ne prévoit pas. Chacun est objectif, visible dans la transcription et assez grave à lui seul pour rendre l’interaction inacceptable.
L’IA peut-elle appliquer automatiquement des critères éliminatoires ?
Oui, et les critères objectifs, comme le fait de savoir si l’identité a été vérifiée, sont précisément ce que l’évaluation automatisée traite de la façon la plus fiable. À condition que chaque critère soit vérifié sur des conversations déjà notées par des évaluateurs, rédigé de façon restrictive pour éviter les faux positifs, et relié aux preuves qui l’ont déclenché, afin qu’un zéro puisse être vérifié plutôt qu’accepté sur parole.
Combien de critères éliminatoires une grille d’écoute doit-elle compter ?
Le moins possible. Une longue liste de critères éliminatoires cache en général un problème de pondération : la question n’est jamais de savoir si un critère est important, car presque tout ce qui figure sur une grille l’est, mais si un seul cas est impossible à compenser. Un critère qui échoue à ce test a sa place dans la partie pondérée, avec un poids élevé : il pèse toujours sur la note et apparaît toujours dans le coaching, sans tout remettre à zéro.
