Il campionamento nel controllo qualità consiste nel valutare una parte delle conversazioni con i clienti, spesso due o tre ticket per operatore a settimana, invece di tutte. Esiste perché la revisione manuale è lenta: è un modo per aggirare un limite di capacità, ed è affidabile solo quanto il campione è rappresentativo.
In breve
- Un campione dà una lettura approssimativa del team, ma è troppo ridotto per valutare il singolo operatore.
- Le conversazioni più difficili sono proprio quelle che hanno meno probabilità di finire nel campione.
- La valutazione automatica elimina il limite di capacità, per questo la copertura totale sta sostituendo il campionamento nella misurazione degli operatori.
- Il campionamento resta utile per verificare che revisori o sistemi di valutazione assegnino punteggi coerenti.
Cosa significa campionamento nel controllo qualità del customer care
Nel controllo qualità del customer care, il campionamento è semplicemente la scelta di valutare alcune conversazioni e non altre. Dato che un revisore può leggere solo un certo numero di ticket o ascoltare un certo numero di chiamate al giorno, il team QA sceglie una parte, la valuta con la scheda di valutazione e usa il risultato per rappresentare il tutto.
Una forma comune è un numero fisso per operatore a settimana, scelto in base al tempo disponibile dei revisori.
La parola da notare è rappresentare. Le conversazioni del campione stanno al posto di tutte quelle che non sono state valutate, e l’intero valore dell’esercizio dipende da quanto bene lo fanno. Quando il campione rappresenta bene il tutto, il campionamento è un risparmio ragionevole. Quando non lo fa, ogni conclusione che se ne trae poggia su conversazioni che nessuno ha davvero guardato.
Un chiarimento, perché il termine circola tra settori diversi: qui campionamento significa selezionare conversazioni con i clienti da valutare. Non ha nulla a che vedere con il campionamento statistico del controllo qualità nella produzione industriale, che è una pratica diversa con uno scopo diverso.
Perché i team campionano, e quanto costa
Il campionamento è la risposta a un vincolo concreto. Se il suo team gestisce migliaia di conversazioni a settimana e ha un paio di revisori, leggere tutto è impossibile, quindi si legge una fetta. Non c’è nulla di sbagliato in questa logica. Il problema è ciò che quella fetta può e non può sostenere.
Un campione piccolo dà un’idea approssimativa di come va il team nel complesso, e per questo è adeguato. Va in difficoltà nel momento in cui lo si usa per giudicare una persona, perché poche conversazioni sono una finestra minuscola, e spesso sfortunata, sul mese di qualcuno. Due operatori di pari qualità possono apparire molto diversi su un campione piccolo solo per via delle conversazioni estratte. C’è poi un problema di selezione: le conversazioni che più avrebbero bisogno di una revisione, le escalation complicate e quelle andate storte senza rumore, sono spesso quelle con meno probabilità di finire nel campione, perché i revisori tendono a scegliere conversazioni rapide da valutare. La trattazione statistica completa è in why a small QA sample cannot support agent-level decisions (in inglese).
Un esempio concreto: cosa vede un campione settimanale
Prendiamo un operatore ipotetico che gestisce 100 conversazioni via e-mail e chat a settimana, due delle quali vengono valutate. Il punteggio qualità di quella settimana poggia sul 2% del suo lavoro. In un mese, otto conversazioni ne rappresentano quattrocento, e una sola settimana negativa può nascere da un’estrazione sfortunata.
Ora guardi quanto peso devono reggere quelle otto conversazioni. Se una è un rapido reset della password e un’altra una lunga contestazione di rimborso, il punteggio riflette soprattutto quali ticket sono stati estratti, non come lavora l’operatore. Se l’operatore ha gestito male tre escalation quel mese, è molto probabile che nessuna fosse nel campione, e il colloquio di coaching non avviene mai. Portare il campione a cinque a settimana aiuta un po’ e costa più ore a un revisore, che è esattamente il compromesso che il campionamento doveva evitare.
Campionamento o copertura totale nel controllo qualità
Il campionamento valuta una parte dimensionata sulla capacità dei revisori, mentre la copertura totale valuta ogni conversazione. Il campionamento basta per una lettura approssimativa del team; la copertura totale è ciò che serve per le decisioni sul singolo operatore e per individuare le tendenze. Il vincolo che rendeva necessario il campionamento sta scomparendo, perché il controllo qualità automatico può ormai valutare ogni conversazione, e questo cambia la scelta.
La valutazione automatica, come AutoPilot di Kaizo, applica la sua scheda di valutazione a tutte le conversazioni invece che a una fetta scelta. Se nel frattempo sta decidendo quanto campionare, la nostra guida alla scelta di un piano di campionamento QA (in inglese) confronta le opzioni una accanto all’altra.
| Campionamento | Copertura totale | |
|---|---|---|
| Cosa viene valutato | Una parte, dimensionata sulla capacità dei revisori | Ogni conversazione |
| Utile per | Una lettura approssimativa del team | Decisioni sul singolo operatore e individuazione delle tendenze |
| Punto cieco | Le conversazioni mai estratte, comprese le peggiori | Richiede fiducia nel sistema di valutazione automatica, che va quindi verificato |
| A cosa serve il campione | Misurare la qualità | Verificare il sistema di valutazione, non misurare gli operatori |
Cosa vedono i team quando smettono di campionare
I team che passano da un campione manuale alla valutazione automatica riportano più copertura e meno lavoro di preparazione, non solo numeri più grandi. In EverHelp il controllo qualità è passato da un campione costruito a mano alla valutazione automatica sui criteri di ciascun progetto; la copertura QA è cresciuta del 270% e la preparazione del coaching è calata del 75% in sedici domini.
La storia cliente di EverHelp (in inglese) spiega come ha funzionato su molti progetti dei clienti. In UiPath, Kaizo ha automatizzato il 100% del controllo qualità con un ROI del 200% e un aumento dell’8% del punteggio qualità. In entrambi i casi il cambiamento è stato lo stesso: il punteggio ha smesso di poggiare su una manciata di conversazioni che qualcuno aveva avuto il tempo di leggere.
Lo veda sulle sue conversazioni. Kaizo valuta il 100% delle sue conversazioni di assistenza con la sua scheda di valutazione e trasforma i risultati in coaching. Prenota una demo.
Dove il campionamento ha ancora senso
La copertura totale non rende inutile il campionamento; lo sposta verso un compito migliore. Quando ogni conversazione viene valutata automaticamente, non si campiona più per misurare gli operatori. Si campiona per verificare la misurazione: per confermare che i revisori concordino tra loro e che un sistema di valutazione automatica concordi con i suoi revisori, cosa che con l’automazione conta di più, non di meno.
È un uso legittimo e continuativo di un campione, e diventa più importante con l’automazione perché ora un unico sistema di valutazione determina ogni punteggio. Le pratiche collegate sono la calibrazione e la validazione della valutazione QA con l’AI (in inglese).
Il passaggio dal campionamento alla copertura è anche ciò che permette al controllo qualità di smettere di essere motivo di discussione in reparto. Quando il punteggio di un operatore poggia su due conversazioni, è facile contestarlo. Quando poggia su tutte, e ogni punteggio rimanda alle evidenze, la discussione passa dal chiedersi se il campione fosse equo a ciò che le conversazioni mostrano davvero. È la tesi di scoring 100% of conversations (in inglese).
Quando il campionamento nel controllo qualità basta
Il campionamento nel controllo qualità basta quando il team è piccolo, i volumi sono bassi e l’obiettivo è un’idea generale della qualità, non decisioni sui singoli operatori. Se pochi operatori gestiscono un numero modesto di ticket a settimana, un responsabile può leggerne a mano una buona parte, e un campione può già essere vicino alla copertura totale.
Il campionamento è anche un primo passo sensato per un team che non ha ancora una scheda di valutazione. Automatizzare la valutazione di ogni conversazione aiuta solo quando si sa che cosa si sta valutando, quindi costruire e calibrare la scheda di valutazione su un campione manuale viene prima. Quando il team cresce, o quando i punteggi iniziano ad alimentare coaching, valutazioni delle prestazioni o premi, le dimensioni ridotte del campione diventano il problema, ed è il momento di guardare al controllo qualità automatico.
Domande frequenti
Che cos’è il campionamento nel controllo qualità del customer care?
È la pratica di valutare una parte delle conversazioni con i clienti invece di tutte, di solito alcune per operatore per periodo. Esiste perché la revisione manuale è lenta e le conversazioni sono sempre più di quante i revisori riescano a leggere. Le conversazioni del campione sono trattate come rappresentative del tutto, quindi il metodo vale quanto il campione è davvero rappresentativo.
Perché il campionamento è un problema per valutare il singolo operatore?
Perché poche conversazioni sono una finestra minuscola sul mese di un operatore, e quali conversazioni vengono estratte conta moltissimo. Due operatori di pari qualità possono ottenere per caso punteggi molto diversi sul campione, e le conversazioni più difficili, che più avrebbero bisogno di revisione, sono spesso quelle con meno probabilità di finire nel campione. Un campione dimensionato sulla capacità dei revisori è troppo ridotto per sostenere una decisione su una persona.
Quante conversazioni dovremmo campionare?
Non esiste un numero universale. La maggior parte dei team dimensiona il campione sul tempo dei revisori, spesso due o tre conversazioni per operatore a settimana, che bastano per una lettura approssimativa del team ma non per decisioni su un singolo operatore. Se i punteggi alimentano coaching o valutazioni, il campione deve essere molto più ampio, ed è per questo che i team passano a valutare ogni conversazione.
Come dovremmo scegliere le conversazioni per un campione QA?
La selezione casuale mantiene il campione il più rappresentativo possibile, perché impedisce ai revisori di scegliere conversazioni rapide da valutare. Alcuni team aggiungono estrazioni mirate, come escalation o valutazioni basse dei clienti, per vedere i casi più difficili. Le tenga separate nei report, perché un’estrazione mirata non rappresenta il lavoro complessivo di un operatore.
Il campionamento nel controllo qualità è uguale a quello della produzione industriale?
No. Nel customer care, campionamento significa selezionare conversazioni da valutare. Non ha nulla a che vedere con il campionamento statistico di accettazione usato nel controllo qualità industriale, che ispeziona una parte delle unità fisiche rispetto a una tolleranza di difetti. I due condividono una parola, non uno scopo.
La copertura totale del controllo qualità sostituisce del tutto il campionamento?
Lo sostituisce per misurare gli operatori, perché ogni conversazione può essere valutata. Lo mantiene per un compito diverso: verificare il sistema di valutazione, confermando che i revisori concordino tra loro e che un sistema di valutazione automatica concordi con i suoi revisori. Con l’automazione questo uso del campionamento diventa più importante, non meno.
Termini correlati
- Why a small QA sample cannot support agent-level decisions (in inglese)
- How to score 100% of conversations (in inglese)
- QA monitoring cadence (in inglese)
- Calibrazione call center: cos’è e come si fa
- What is 100% QA coverage? (in inglese)
