Meertalige kwaliteitscontrole betekent dat je je klantgesprekken in elke taal die je aanbiedt scoort tegen één gedeelde standaard, zodat een 90 in het Pools hetzelfde betekent als een 90 in het Engels. Je hebt één scorecard nodig met een paar criteria per taal, een kalibratieset per taal en genoeg dekking om ook kleine talen überhaupt te scoren.
In het kort
- Met een klein QA-team loopt de steekproef eerst vast in de kleine talen: sommige wachtrijen krijgen helemaal geen beoordeling door een moedertaalspreker.
- De meeste criteria zijn in elke taal hetzelfde, terwijl register, spelling en lokaal beleid controles per taal vragen.
- Zes stappen zetten het op: één scorecard, criteria per taal, een kalibratieset per taal, elk gesprek scoren, kalibratie over talen heen en rapportage per taal.
- Vergelijk talen alleen op genoeg gesprekken, met een eenvoudige regel voor wanneer een verschil echt is.
- Beoordelaars met de taal als moedertaal, vertaalde beoordelingen en AI-scoring hebben elk hun plaats, en de meeste teams combineren ze.
Voor de platformkant laat de pagina over kwaliteitscontrole in de klantenservice zien hoe Kaizo elk gesprek scoort tegen je eigen criteria.
Waarom loopt meertalige kwaliteitscontrole vast met een klein QA-team?
Meertalige kwaliteitscontrole loopt vast omdat QA-analisten alleen talen kunnen beoordelen die ze lezen. Een team van twee dekt zo twee of drie talen goed en laat de rest onbeoordeeld. De totale steekproef ziet er prima uit, terwijl hele wachtrijen ongecontroleerd blijven.
Rekenvoorbeeld (illustratieve cijfers, geen data van Kaizo). Een supportteam handelt 40.000 gesprekken per maand af in acht talen. Twee QA-analisten beoordelen elk 25 gesprekken per dag, 20 dagen per maand: 1.000 beoordelingen, of één op de 40 gesprekken. De ene analist leest Engels en Duits, de andere Engels en Frans.
| Taal | Gesprekken per maand | Medewerkers | Beoordelingen in de moedertaal per maand | Beoordelingen per medewerker per maand |
|---|---|---|---|---|
| Engels | 16.000 | 40 | 400 | 10 |
| Duits | 8.000 | 20 | 300 | 15 |
| Frans | 5.000 | 12 | 300 | 25 |
| Spaans | 4.000 | 10 | 0 | 0 |
| Nederlands | 2.500 | 6 | 0 | 0 |
| Italiaans | 2.000 | 5 | 0 | 0 |
| Pools | 1.500 | 4 | 0 | 0 |
| Portugees (Brazilië) | 1.000 | 3 | 0 | 0 |
| Totaal | 40.000 | 100 | 1.000 | 10 |
Op papier dekt QA één op de 40 gesprekken. In de praktijk krijgen 11.000 gesprekken per maand, meer dan een kwart van het volume, geen beoordeling in de eigen taal, en krijgen 28 medewerkers nooit een QA-score in hun eigen taal. Die medewerkers worden op niets gecoacht, of op een machinevertaling van hun werk die niemand heeft gecontroleerd.
De kosten zijn niet abstract. In de enquête van CSA Research uit 2020 onder 8.709 consumenten in 29 landen zei 75% dat ze eerder opnieuw bij hetzelfde merk zouden kopen als de klantenservice in hun taal was. De taal aanbieden is het halve werk; weten dat de support in die taal goed is, is de andere helft.
Welke QA-criteria verschillen per taal?
De meeste QA-criteria zijn taalneutraal: een juist antwoord, een gevolgde procedure en een geverifieerde identiteit betekenen in elke taal hetzelfde. Register, spelling, namen en lokaal beleid zijn taalgebonden en hebben per taal een eigen definitie nodig.
Gebruik deze tabel om je scorecard te sorteren voordat je hem vertaalt:
| Criterium | In elke taal hetzelfde? | Wat je per taal definieert |
|---|---|---|
| Juist antwoord | Ja | Niets, als je kennisbank in die taal bestaat |
| Procedure gevolgd | Ja | Lokale stappen, zoals een ander retouradres of een andere vervoerder |
| Identiteit geverifieerd | Ja | Niets, tenzij de controles per land verschillen |
| Grenzen van het beleid | Grotendeels | Lokale juridische termen, zoals herroepingstermijnen of garantieregels |
| Toon en empathie | Grotendeels | Hoe “warm” klinkt: formele of informele aanspreekvorm (Sie of du, vous of tu) |
| Spelling en grammatica | Nee | De eigen regels van de taal en je huisstijl |
| Namen en begroetingen | Nee | Lokale volgorde van namen, titels en gewoontes bij begroetingen |
| Producttermen | Nee | Je goedgekeurde woordenlijst per taal, zodat medewerkers dezelfde woorden gebruiken als je helpcenter |
Schrijf de taalneutrale criteria één keer.
Voeg daarna per taal een korte notitie toe aan de criteria met “Grotendeels” of “Nee”, bijvoorbeeld: “Duits: spreek de klant aan met Sie, tenzij hij zelf eerst du schreef.” Zo houd je één scorecard en één score, terwijl elke taal naar haar eigen regels wordt beoordeeld.
Onze gids over soft skills scoren in QA laat zien hoe je criteria voor toon in elke taal controleerbaar maakt.
Meertalige kwaliteitscontrole opzetten in zes stappen
Om meertalige kwaliteitscontrole op te zetten, schrijf je één scorecard, voeg je taalnotities toe, bouw je een kalibratieset per taal, scoor je elk gesprek, kalibreer je over talen heen en rapporteer je de resultaten per taal.
Stap 1: schrijf één scorecard
Begin bij je huidige scorecard en houd die als de enige. Een aparte scorecard per taal ziet er netjes uit, maar maakt de scores onvergelijkbaar. Moet je daarbij de weging herzien, lees dan hoe je criteria op je QA-scorecard weegt.
Stap 2: voeg taalnotities toe aan de criteria die ze nodig hebben
Gebruik de tabel hierboven om de criteria te vinden die per taal verschillen, en voeg per taal een notitie van één regel toe. Vraag een moedertaalspreker in elk team, vaak een ervaren medewerker of teamleider, de notities voor zijn taal te schrijven en te controleren.
Stap 3: bouw een kalibratieset per taal
Kies per taal 20 tot 30 eerdere gesprekken met goede, gemiddelde en mislukte afhandeling, en laat ze scoren door een beoordelaar met die taal als moedertaal. Die set wordt de referentie voor die taal. Onze gids over een golden set bouwen (Engelstalig) beschrijft hoe je de gesprekken kiest en het eens wordt over de scores.
Stap 4: scoor elk gesprek in zijn eigen taal
Scoor gesprekken in de taal waarin ze zijn geschreven of gevoerd, niet in een vertaling. Een vertaling strijkt precies glad wat je wilt controleren: register, formulering en producttermen. Gebruik je AI-scoring, test die dan tegen de kalibratieset van elke taal voordat je erop vertrouwt, zoals ons validatieprotocol (Engelstalig) beschrijft.
Stap 5: kalibreer over talen heen
Neem één keer per kwartaal vijf gesprekken per taal, vertaal ze naar één gedeelde taal, alleen voor de bespreking, en laat beoordelaars uit elke taal ze samen scoren.
Het doel is niet om grammatica in een vertaling te beoordelen. Het doel is te controleren dat “juist antwoord” en “beleid gevolgd” overal op dezelfde manier worden gelezen. De opzet van zulke sessies staat in hoe je QA-kalibratiesessies houdt (Engelstalig).
Stap 6: rapporteer per taal en per criterium
Toon de QA-score per taal en per criterium, naast het volume en het aantal gescoorde gesprekken. Een gemiddelde per taal verbergt welk criterium achter een verschil zit, en een overzicht per criterium zonder volume nodigt uit tot conclusies op basis van tien gesprekken.
Bekijk het in een live demo. Kaizo scoort 100% van je gesprekken tegen je eigen criteria en koppelt elke score aan het bewijs in het gesprek. Plan een gesprek.
Hoe vergelijk je de kwaliteit tussen talen eerlijk?
Vergelijk talen criterium per criterium, alleen waar elke taal genoeg gescoorde gesprekken heeft, en beschouw een verschil pas als echt wanneer het groter is dan wat toeval bij dat volume zou opleveren.
Een beslisregel die je kunt gebruiken (voorbeeldaannames, toets ze aan je eigen data):
| Voorwaarde | Wat je doet |
|---|---|
| Minder dan 100 gescoorde gesprekken in een taal deze maand | Nog niet vergelijken; rapporteer de score met het aantal |
| Verschil van minder dan 5 punten op een criterium | Beschouw het als ruis; blijf het volgen |
| Verschil van 5 punten of meer, met minstens 100 gesprekken aan elke kant | Lees tien mislukte gesprekken uit de taal die lager scoort |
| Hetzelfde criterium twee maanden na elkaar laag in één taal | Pak de oorzaak aan: content, proces, training of de taalnotitie |
Waarom 5 punten en 100 gesprekken?
Als individuele QA-scores spreiden met een standaardafwijking van ongeveer 15 punten, heeft het gemiddelde van 100 scores een standaardfout van 1,5 punt. Het verschil tussen twee zulke gemiddelden heeft een standaardfout van ongeveer 2,1 punt, dus een verschil van 5 punten is ongeveer 2,4 standaardfouten: waarschijnlijk geen toeval.
Met 30 gesprekken aan elke kant zou hetzelfde verschil ruim binnen de ruis vallen.
Controleer bij het lezen van de mislukte gesprekken eerst de oorzaak voordat je de medewerkers de schuld geeft. Een lage score op “juist antwoord” in één taal komt vaak door een ontbrekend of verouderd helpcenterartikel in die taal. Een lage score op “procedure gevolgd” kan een lokaal proces zijn dat niemand heeft vastgelegd.
Moedertaalbeoordelaars, vertaling of AI-scoring?
Beoordelaars met de taal als moedertaal oordelen het best maar schalen niet, machinevertaling schaalt maar verbergt register en formulering, en AI-scoring dekt elk gesprek maar moet per taal worden getoetst aan moedertaalbeoordelaars. De meeste teams combineren alle drie.
| Methode | Sterk in | Zwak in | Gebruik het voor |
|---|---|---|---|
| Moedertaalbeoordelaars | Toon, register, formulering, lokale verwachtingen | Dekking: één beoordelaar per taal past zelden in het budget | Kalibratiesets, betwiste scores, coaching in de taal van de medewerker |
| Beoordeling via machinevertaling | Eén analist kan elke taal lezen | Grammatica, register en producttermen verdwijnen in de vertaling | Alleen taalneutrale criteria controleren |
| AI-scoring in de oorspronkelijke taal | Elk gesprek in elke taal op dezelfde manier scoren | Moet per taal worden getest voordat je erop vertrouwt | Dekking van alle talen, signaleren wat een moedertaalbeoordelaar moet lezen |
| Uitbestede moedertaalbeoordelaars | Snel een taal toevoegen | Kalibratie met je eigen team kost werk | Grote talen zonder interne beoordelaars |
Volgens de site van Kaizo werkt de sentimentanalyse in de talen die je team ondersteunt, en zijn de coachingkaarten beschikbaar in elke grote supporttaal. Foot Locker gebruikt Kaizo in meerdere Europese talen. Vraag voor de exacte talen die Kaizo scoort, en hoe criteria per taal worden toegepast, in de demo naar je eigen talenmix.
Zo begin je met meertalige kwaliteitscontrole
Begin bij je kleinste talen, niet bij je grootste: maak een lijst van elke taal, het volume en hoeveel gesprekken vorige maand een beoordeling in de eigen taal kregen. De talen met nul zijn je eerste gat, en een kalibratieset van 20 gesprekken voor elk ervan is je eerste stap.
Wil je zien hoe Kaizo één standaard toepast op elk gesprek, ga dan naar het QA-platform van Kaizo.
Veelgestelde vragen
Werkt één QA-scorecard in meerdere talen?
Ja, en dat is ook de bedoeling. Houd de criteria die overal hetzelfde betekenen, zoals juist antwoord en procedure gevolgd, en voeg per taal een korte notitie toe waar de regels verschillen, bijvoorbeeld over de formele aanspreekvorm of spelling. Eén scorecard houdt de scores vergelijkbaar tussen talen en teams.
Moeten QA-beoordelaars de taal spreken die ze scoren?
Voor toon, register en spelling wel: die kun je niet betrouwbaar via een vertaling beoordelen. Voor taalneutrale criteria, zoals of het antwoord juist was of de procedure werd gevolgd, kan een beoordelaar met een vertaling werken. Zet moedertaalbeoordelaars in voor kalibratie en betwiste scores, ook als het meeste scoren anders verloopt.
Hoe doe je kwaliteitscontrole in een taal die niemand in het QA-team spreekt?
Bouw een kalibratieset met een moedertaalspreker, vaak een ervaren medewerker uit dat team, en gebruik die om te controleren wat die taal scoort, of dat nu een vertaalde beoordeling is of AI-scoring. Laat de moedertaalspreker daarna elke maand de mislukte gesprekken beoordelen. Dat kost veel minder tijd dan een steekproef beoordelen.
Moet je medewerkers scoren op grammatica in hun tweede taal?
Scoor grammatica waar ze het begrip of je merk raakt, en zet dat in de taalnotitie. Veel teams laten spelling en grammatica minder zwaar wegen dan een juist antwoord en de juiste procedure, en scoren fouten die de betekenis veranderen, niet kleine vergissingen die een klant niet zou opmerken.
Hoeveel gesprekken per taal heb je nodig om QA-scores te vergelijken?
Als vuistregel minstens 100 gescoorde gesprekken per taal per periode voordat je gemiddelden vergelijkt, en meer voor criteria die zelden van toepassing zijn. Daaronder kunnen een paar ongewone gesprekken het gemiddelde enkele punten doen verschuiven. Rapporteer de score dan met het aantal en wacht af.
