Naar de inhoud

Best practice

Overdracht van AI-agent naar medewerker beoordelen

Overdracht van AI-agent naar medewerker en terug: wat je in beide richtingen scoort, welke fouten op de naad ontstaan en hoe je ze ziet bij goede scores.

· 5 min. lezen

Gecontroleerd door Dominik Blattner, oprichter van Kaizo

Op deze pagina

Kwaliteitscontrole van de overdracht scoort het moment waarop een gesprek overgaat tussen een AI-agent en een mens, in beide richtingen. De overdracht van AI-agent naar medewerker (en terug) is waar gemengde klantenservice het vaakst stukloopt, en scores per agent missen dat, omdat de fout bij de overgang hoort.

In het kort

  • Overdrachten van AI naar mens en van mens naar AI gaan op verschillende manieren mis.
  • Van AI naar mens gaat het mis door een late escalatie, verloren context of geen bruikbare reden.
  • Van mens naar AI gaat het mis wanneer een onopgeloste case teruggaat naar de automatisering.
  • Containment en afhandeltijd zien het niet. Lees het hele gesprek.

Waarom de overdracht een eigen faalpunt is

Als je een menselijke medewerker en een AI-agent beoordeelt, scoor je twee helften van een gesprek dat steeds minder uit twee helften bestaat. In een gemengd model kan een klant beginnen bij een AI-agent (in het Engels), naar een persoon geëscaleerd worden en voor een opvolging teruggestuurd worden naar de automatisering, allemaal in één thread. Elke deelnemer kan op zijn eigen stuk goed scoren terwijl het gesprek als geheel een slechte ervaring is, want de schade ontstond bij de overgang en hoort bij geen van beiden.

Dat is de blinde vlek. Een scorecard per agent beoordeelt wat elke partij met het gesprek deed zolang ze het had. Over het moment waarop ze het doorgaf zegt die niets, en juist daar loopt gemengde klantenservice meestal stuk. De overdracht moet als afzonderlijk moment gescoord worden.

Overdracht van AI-agent naar medewerker: wat je scoort bij een escalatie

Dit is de bekendere richting, en die heeft drie faalwijzen die je expliciet wilt scoren.

Timing: escaleerde de agent op het juiste moment?

Te laat komt het meest voor. Een agent die blijft proberen terwijl hij duidelijk vastzit, laat de klant rondjes draaien voordat hij een gefrustreerde klant overdraagt. Te vroeg escaleren verspilt de automatisering en de tijd van de medewerker. Het criterium is of de escalatie plaatsvond op het punt waarop de agent geen voortgang meer boekte, en dat zie je in het transcript.

Context: kreeg de medewerker wat hij nodig heeft?

De slechtste overdracht laat de klant opnieuw beginnen. Scoor of de escalatie de geschiedenis, de diagnose tot dan toe en wat de klant echt wil meegaf, zodat de medewerker de case geïnformeerd opent in plaats van blanco. Een overdracht die context verliest, maakt van één gesprek er twee.

Reden: was de escalatie begrijpelijk?

Een escalatie met alleen het label ‘geëscaleerd naar mens’ zegt de medewerker niets. Scoor of de reden van de overdracht is vastgelegd in een vorm waar de ontvangende persoon iets mee kan. Dit is een van de criteria op een scorecard voor AI-agents, maar het wordt pas zichtbaar als je over de naad heen leest.

Van mens naar AI: de richting die niemand scoort

De omgekeerde overdracht is nieuwer en minder onderzocht, en gaat mis op manieren die je makkelijk mist.

Overdracht van mens naar AIZo ziet het er goed uitDe fout waarop je scoort
Een case teruggeven aan de automatisering voor opvolgingDe AI heeft de oplossing en de volgende stap is echt routineDe medewerker geeft een onopgeloste case terug om de eigen wachtrij leeg te maken
Een deeltaak delegeren midden in het gesprekDe AI kan de specifieke taak afronden en netjes teruggevenDe AI kan de draad niet oppakken en de klant verliest de continuïteit
Geautomatiseerde opvolging na de oplossingDe opvolging klopt met wat er echt is opgelostDe automatisering gaat in tegen wat de medewerker net heeft gedaan, of vergeet het

Zo scoor je een overdracht in de praktijk

De eenheid van beoordeling is het gesprek over de overgang heen, niet het segment aan een van beide kanten. Dat heeft drie praktische gevolgen.

Beoordeel de hele thread

Scoor de continuïteit over de naad: bleef de context behouden, hoefde de klant zich niet te herhalen, ging de tweede partij verder waar de eerste stopte? Dat is onmogelijk als je kwaliteitscontrole het AI-deel en het menselijke deel als aparte records bekijkt, en zo slaan de meeste tools ze op.

Dek elke overdracht af: zeldzaam per tweetal, overal in totaal

Twee specifieke agents dragen misschien zelden aan elkaar over, dus een steekproef per agent mist overdrachten bijna per definitie. Over de hele operatie zijn ze overal. 100% van de gesprekken scoren (in het Engels) is wat overdrachtsfouten zichtbaar maakt als patroon in plaats van als incidentele klacht. Bij UiPath heeft Kaizo 100% van de QA geautomatiseerd, met 200% ROI en een stijging van 8% in de kwaliteitsscore.

Zie het op je eigen gesprekken. Kaizo scoort 100% van je supportgesprekken en zet de resultaten om in coaching. Demo boeken.

Gebruik een beoordelaar die aan geen kant van de overgang staat

Een fout bij de overdracht roept een ongemakkelijke vraag op: lag het aan de AI, die slecht escaleerde, of aan de medewerker, die een rommeltje teruggaf? Kaizo scoort de naad op basis van het bewijs, en elke bevinding wijst naar de exacte beurten waar de continuïteit brak. Zo kun je de routering verbeteren in plaats van over de schuld te discussiëren. De volledige werkwijze staat in kwaliteitscontrole van AI-agents en chatbots.

Veelgestelde vragen

Wat is kwaliteitscontrole van de overdracht?

Kwaliteitscontrole van de overdracht is het beoordelen van het moment waarop een gesprek overgaat tussen een AI-agent en een mens, in beide richtingen. Ze behandelt de overgang als een eigen beoordelingseenheid, omdat een overdracht kan mislukken (verloren context, late escalatie, een onopgeloste case die wordt teruggegeven) zelfs als zowel de mens als de AI goed scoort op het eigen segment.

Wat scoor je bij een escalatie van AI naar medewerker?

Drie dingen: timing (escaleerde de agent op het punt waarop hij geen voortgang meer boekte, in plaats van te laat of te vroeg), context (kreeg de medewerker de geschiedenis en de diagnose, zodat de klant niet opnieuw hoeft te beginnen) en reden (is de escalatie vastgelegd in een vorm waar de ontvangende persoon iets mee kan).

Wat gaat er mis bij een overdracht van mens naar AI?

De belangrijkste fouten zijn een medewerker die een onopgeloste case teruggeeft aan de automatisering om de eigen wachtrij leeg te maken, delegeren aan een AI die de draad niet kan oppakken en zo de continuïteit breekt, en geautomatiseerde opvolging na de oplossing die ingaat tegen wat de medewerker net deed of het vergeet. Deze richting is nieuwer en wordt zelden gescoord.

Waarom missen QA-scores per agent problemen bij de overdracht?

Omdat de fout tussen de records zit. Een scorecard per agent beoordeelt wat elke partij deed zolang ze het gesprek had, niet wat er bij de overgang gebeurde. Om de overdracht te scoren moet je de hele thread over de naad heen lezen. Daarom moet het gesprek als één eenheid worden opgeslagen en beoordeeld, niet als twee.

Waarom is een steekproef niet genoeg om overdrachten te scoren?

Twee specifieke agents dragen zelden aan elkaar over, dus een steekproef per agent mist overdrachten bijna per definitie. Over de hele operatie zijn overdrachten juist overal. Pas als je 100% van de gesprekken scoort, worden overdrachtsfouten zichtbaar als patroon in plaats van als incidentele klacht.

Verder lezen

Op deze pagina

Zie dit op je eigen gesprekken

We scoren een steekproef van je echte tickets op basis van jouw standaarden, zodat het voorbeeld van jou is.

Vertrouwd door internationale supportteams

  • Foot Locker
  • SteelSeries
  • Canva
  • GetYourGuide
  • Instacart