Een knock-out criterium in kwaliteitsmonitoring (in het Engels auto-fail), ook wel kritieke fout genoemd, is een QA-criterium dat de hele beoordeling op nul zet zodra het wordt geschonden. Het is bedoeld voor fouten die door niets anders te compenseren zijn, zoals een compliance-overtreding of een fout in de omgang met gegevens.
In het kort
- Een criterium komt alleen in aanmerking als één overtreding ernstig en controleerbaar is.
- Een lange lijst knock-out criteria wijst meestal op een wegingsprobleem.
- Bij geautomatiseerde beoordeling zijn valse positieven het grootste risico.
- Formuleer knock-out criteria strikt en koppel elk ervan aan bewijs.
Waarom sommige fouten niet te middelen zijn
De meeste QA-beoordelingen zijn een rekensom met gemiddelden. Een scorecard deelt een gesprek op in criteria, elk criterium levert punten op en het totaal laat zien hoe goed de interactie was. Dat werkt omdat de meeste kwaliteitssignalen tegen elkaar wegvallen: een trage oplossing kan worden goedgemaakt door een uitzonderlijk heldere uitleg.
Een knock-out criterium is de uitzondering op die logica. Het bepaalt dat één ding niet in het gemiddelde meetelt: gebeurt het, dan is de beoordeling nul, ongeacht wat er verder goed ging. Teams spreken ook van automatische onvoldoende, kritieke fout of fatale fout, en het staat meestal in een eigen sectie bovenaan de scorecard in plaats van als gewogen regel. De reden is dat sommige fouten van een andere orde zijn dan een lage score. Een accountwijziging zonder dat de identiteit van de klant is gecontroleerd, is geen middelmatige interactie. Het is een interactie die nooit had mogen plaatsvinden, en die middelen tegen een vriendelijke toon geeft een vertekend beeld van wat er is gebeurd.
Wanneer een criterium een score op nul mag zetten
Omdat een knock-out criterium alles overstemt, zou die status op een scorecard het moeilijkst te verdienen moeten zijn. Kort gezegd luidt de toets: één overtreding moet echt ernstig zijn, zo objectief dat twee reviewers het er altijd over eens zijn dat ze plaatsvond, controleerbaar aan de hand van bewijs in het transcript, en binnen de invloed van de medewerker liggen. Een criterium dat op een van die punten zakt, hoort in plaats daarvan met een hoge weging in het gewogen deel. Daar drukt het nog steeds op de score en komt het nog steeds terug in de coaching, maar zet het niet alles op nul.
De volledige toets, met uitgewerkte voorbeelden van criteria die er wel en niet voor slagen, staat in onze gids over knock-out criteria in QA (in het Engels). Het onderscheid dat je hier moet onthouden is eenvoudig: de vraag is nooit “is dit belangrijk?”. Bijna alles op een scorecard is belangrijk. De vraag is of één enkel geval door niets te compenseren is.
Voorbeelden van knock-out criteria in kwaliteitsmonitoring
Een paar voorbeelden maken de grens concreet.
| Criterium | Knock-out of gewogen | Waarom |
|---|---|---|
| Identiteit niet gecontroleerd voor een accountwijziging | Knock-out | Objectief, zichtbaar in het transcript en op zichzelf ernstig |
| Verplichte disclaimer of toestemmingstekst weggelaten | Knock-out | De woorden zijn gezegd of niet, en het weglaten kan de interactie ongeldig maken |
| Gevoelige gegevens verkeerd behandeld | Knock-out | Binair, onderbouwd met bewijs en door niets anders in het gesprek te compenseren |
| Onbeleefde of afwijzende toon | Zwaar gewogen | Serieus, maar reviewers leggen de grens verschillend, dus het zakt voor de toets “altijd eens” |
| Gemiste upsell-kans | Gewogen, laag | Een commerciële voorkeur, geen ernstige fout |
Knock-out criteria bij geautomatiseerde beoordeling
De definitie verandert niet als een machine de beoordeling doet, het risicoprofiel wel. Een beoordelingssysteem kan op twee manieren fout zitten bij een knock-out criterium: het slaat aan terwijl dat niet had gemoeten, of het mist een echte overtreding. Die twee fouten zijn niet even zwaar. Een gemiste knock-out is hetzelfde gat dat handmatige steekproeven al hadden. Een onterechte knock-out geeft een nul aan iemand die niets fout heeft gedaan, en zodra de werkvloer heeft gezien dat het systeem zo’n zware beslissing verkeerd neemt, wordt elke andere score betwistbaar.
Die asymmetrie is de reden dat geautomatiseerde knock-out criteria strikt geformuleerd en op precisie afgestemd moeten zijn, en dat elke nul moet verwijzen naar de precieze passages die hem hebben veroorzaakt. Een score die je kunt herleiden tot het bewijs, kun je controleren en, als hij fout is, corrigeren. Een score die je niet kunt herleiden, is gewoon een beschuldiging met een getal erbij. Kaizo koppelt elke score, knock-out criteria inbegrepen, aan het bewijs in het gesprek. Wil je zien hoe dat eruitziet op je eigen gesprekken? Boek een demo. Precisie, bezwaarprocedures en coaching na een nul worden uitgebreid behandeld in de gids over knock-out criteria (in het Engels).
Veelgestelde vragen
Wat is een knock-out criterium in QA?
Een knock-out criterium, ook wel automatische onvoldoende of kritieke fout genoemd (in het Engels auto-fail), is een QA-criterium dat een hele beoordeling op nul zet zodra het wordt geschonden, hoe de rest van het gesprek ook verliep. Het bestaat voor fouten die niet te compenseren zijn, zoals een compliance-overtreding of een fout in de omgang met gegevens, die goede prestaties elders niet kunnen goedmaken.
Wat is het verschil tussen een knock-out criterium en een gewogen criterium?
Een gewogen criterium draagt punten bij aan een gemiddelde score, dus een fout verlaagt het totaal maar maakt het niet waardeloos. Een knock-out criterium staat buiten het gemiddelde en zet de hele beoordeling bij één overtreding op nul. Een criterium komt alleen in aanmerking als knock-out criterium als één geval ernstig, objectief, met bewijs controleerbaar en binnen de invloed van de medewerker is. Anders hoort het in het gewogen deel.
Wat zijn voorbeelden van knock-out criteria?
Veelvoorkomende voorbeelden zijn: de identiteit van een klant niet controleren voor een accountwijziging, een verplichte disclaimer of toestemmingsverklaring weglaten, gevoelige gegevens verkeerd behandelen, of een verboden toezegging doen, zoals een terugbetaling die het beleid niet toestaat. Elk daarvan is objectief, zichtbaar in het transcript en op zichzelf ernstig genoeg om de interactie onaanvaardbaar te maken.
Kan AI knock-out criteria automatisch toepassen?
Ja, en objectieve criteria, zoals de vraag of de identiteit is gecontroleerd, zijn precies wat geautomatiseerde beoordeling het betrouwbaarst afhandelt. De voorwaarde is dat elk criterium wordt getoetst aan gesprekken die reviewers al hebben beoordeeld, strikt wordt geformuleerd om valse positieven te voorkomen, en herleidbaar is tot het bewijs dat het heeft geactiveerd, zodat een nul te controleren is in plaats van op goed vertrouwen te worden aangenomen.
Hoeveel knock-out criteria hoort een scorecard te hebben?
Zo weinig mogelijk. Een lange lijst knock-out criteria wijst meestal op een wegingsprobleem: de vraag is nooit of een criterium belangrijk is, want bijna alles op een scorecard is belangrijk, maar of één enkel geval door niets te compenseren is. Een criterium dat die toets niet doorstaat, hoort met een hoge weging in het gewogen deel, waar het nog steeds op de score drukt en terugkomt in de coaching zonder alles op nul te zetten.
