Przejdź do treści

Poradnik

Containment rate chatbota: definicja i pułapki

Containment rate to odsetek rozmów, które agent AI lub chatbot kończy bez udziału konsultanta. Wzór, przykład i dlaczego zatrzymana nie znaczy rozwiązana.

· 6 min czytania

Zweryfikowane przez Dominik Blattner, założyciel Kaizo

Na tej stronie

Containment rate (wskaźnik zatrzymania rozmów w kanale automatycznym) to odsetek rozmów, które agent AI lub chatbot kończy bez przekazania do konsultanta. Liczy rozmowy, które nigdy nie trafiły do człowieka, więc klient, który się poddał, liczy się tak samo jak klient, którego problem został rozwiązany.

W skrócie

  • Containment rate mierzy deflekcję, a nie rozwiązanie sprawy.
  • Wysoki containment rate może ukrywać złe doświadczenie klienta.
  • Uczciwie czyta się go tylko obok sprawdzenia, ile zatrzymanych rozmów faktycznie zakończyło się rozwiązaniem.
  • To sprawdzenie jest zadaniem kontroli jakości: trzeba przeczytać rozmowę i ocenić ją według kryteriów.

Jak oblicza się containment rate

Containment rate oblicza się, dzieląc liczbę rozmów, które automatyzacja zakończyła bez eskalacji do człowieka, przez wszystkie rozmowy, które w tym samym okresie trafiły do kanału automatycznego. Wynikiem jest wartość procentowa. Łatwo ją wyciągnąć z logu routingu i dlatego często jest to pierwsza liczba, jaką raportuje wdrożenie bota.

Containment rate = rozmowy rozwiązane bez eskalacji do człowieka / wszystkie rozmowy obsłużone przez automatyzację.

Jeśli więc w ciągu tygodnia do agenta AI trafia 1 000 rozmów, a 650 z nich nigdy nie dociera do człowieka, containment wynosi 65%. Atrakcyjność tej miary jest oczywista: niemal bezpośrednio przekłada się na koszty, bo zatrzymana rozmowa nie zajmuje czasu konsultanta. Właśnie dlatego zwykle staje się liczbą, po której ocenia się wdrożenie bota, i dlatego zasługuje na więcej uwagi, niż zwykle dostaje.

Dlaczego containment rate może wprowadzać w błąd

Containment rate może wprowadzać w błąd, bo większość pomiarów w ogóle nie sprawdza rozwiązania sprawy. Sprawdza tylko brak człowieka. Klient, który się poddał, porzucił czat albo odszedł z błędną odpowiedzią, jest liczony jako zatrzymany, dokładnie tak samo jak klient, którego problem został rozwiązany. Różnica między tymi dwoma wynikami to miejsce, w którym ta miara zawodzi.

Słabym punktem jest słowo „rozwiązane” we wzorze. Rozmowa liczy się jako zatrzymana, jeśli klient dostał to, czego potrzebował, i odszedł zadowolony. Liczy się jako zatrzymana także wtedy, gdy klient nie znalazł drogi do konsultanta i się poddał, gdy porzucił czat w połowie, gdy dostał błędną odpowiedź i tego nie zauważył, albo gdy bot odpowiedział na pytanie, którego klient nie zadał, a ten zamknął okno. Każdy z tych przypadków jest porażką i każdy z nich poprawia containment rate.

To tworzy przewrotną zachętę. Najszybszy sposób na podniesienie containment to utrudnienie eskalacji, a bot, który ukrywa drogę do człowieka, pokaże lepszy wynik niż bot, który proponuje pomoc, gdy tylko utknie. Miara nagradza dokładnie to zachowanie, które najbardziej szkodzi relacji z klientem. To samo martwe pole dotyczy wskaźnika deflekcji, który liczy rozmowy utrzymane z dala od konsultantów, nie pytając, czy dobrze się zakończyły.

Containment rate a wskaźnik rozwiązania spraw

Containment rate liczy rozmowy, które zakończyły się bez człowieka, a wskaźnik rozwiązania spraw liczy rozmowy, w których problem klienta został faktycznie rozwiązany. Pierwszy jest przybliżeniem unikniętych kosztów, drugi wykonanej pracy. Klient, który się poddaje, to sukces dla containment i porażka dla rozwiązania spraw, dlatego obie liczby trzeba czytać razem.

Containment rateWskaźnik rozwiązania spraw
Co liczyRozmowy zakończone bez człowiekaRozmowy, w których problem klienta został faktycznie rozwiązany
Klient, który się poddajeLiczony jako sukcesLiczony jako porażka
Czego jest przybliżeniemUniknięte kosztyWykonana praca
Jak go mierzyćOdczyt logu routinguLektura rozmowy

Jak uczciwie korzystać z containment rate

Proszę traktować containment rate jako sygnał efektywności, nigdy jako miarę samodzielną. Warto zestawić go ze sprawdzeniem rozwiązania spraw: ile zatrzymanych rozmów faktycznie rozwiązało problem klienta, a ile było porzuceniami lub błędnymi odpowiedziami z etykietą „zatrzymane”. Obie liczby najlepiej raportować obok siebie, tak aby wzrost containment nie mógł ukryć spadku odsetka rozwiązanych spraw.

Odpowiedź wymaga sprawdzenia, co powiedział agent AI i czy było to poprawne, kompletne i właściwe, a to jest pytanie z zakresu kontroli jakości, nie analityki. To ta sama dyscyplina, którą stosuje się wobec konsultanta, zastosowana wobec bota: przeczytać interakcję, ocenić ją według kryteriów i powiązać wynik z dowodem. Nasz przewodnik o tym, jak mierzyć containment rate, nie oszukując samych siebie (po angielsku), pokazuje, jak to zrobić, a tekst o kontroli jakości agentów AI i chatbotów opisuje metodę oceny, która za tym stoi.

Praktyczny przykład kryteriów: do karty oceny, której Państwo już używają dla rozmów agentów AI, wystarczy dodać jedno kryterium, „Czy rozmowa zakończyła się rozwiązaniem problemu klienta?”, z trzema wynikami: rozwiązana, porzucona lub błędna odpowiedź. Każda zatrzymana rozmowa dostaje tę ocenę, a każda ocena wskazuje fragment rozmowy, który ją uzasadnia. Containment dzieli się wtedy na część, która przyniosła oszczędność, i część, która tylko przeniosła problem w inne miejsce.

Gdzie zatrzymane rozmowy idą źle: przekazanie do konsultanta

Zatrzymane rozmowy najczęściej idą źle w momencie, w którym agent AI powinien był przekazać sprawę człowiekowi, a tego nie zrobił. Spóźnione przekazanie, brak ścieżki eskalacji albo przekazanie, które gubi kontekst, pojawiają się jako containment albo jako sfrustrowany klient, nigdy jako oczywisty błąd w logu routingu.

Dlatego sprawdzanie containment i sprawdzanie przekazania to ta sama praca. Nasz przewodnik o ocenie przekazania rozmowy między AI a konsultantem opisuje, co oceniać w obu kierunkach tego przejścia, a tekst o wskaźnikach AI w obsłudze klienta pokazuje, które liczby raportować obok containment.

Kaizo ocenia 100% rozmów konsultantów i agentów AI według Państwa własnej karty oceny, a każdy wynik prowadzi do dowodu w rozmowie, dzięki czemu zatrzymane rozmowy można sprawdzić pod kątem faktycznego rozwiązania i odróżnić je od porzuceń. W UiPath Kaizo zautomatyzowało 100% QA, osiągając 200% ROI i wzrost wyniku jakości o 8%.

Proszę zobaczyć to na własnych rozmowach. Kaizo ocenia 100% Państwa rozmów z klientami i zamienia wnioski w coaching. Umów demo.

Kiedy sprawdzanie containment nie jest dla Państwa

Sprawdzanie rozwiązania spraw w zatrzymanych rozmowach nie opłaca się, gdy automatyzacja obsługuje tylko kilka rozmów tygodniowo: przy takim wolumenie ktoś może przeczytać wszystkie. Jest też przedwczesne, jeśli nie mają Państwo jeszcze karty oceny dla konsultantów, bo agenta AI należy oceniać według tego samego standardu. Warto zacząć od niej, a potem rozszerzyć ją na bota.

Najczęściej zadawane pytania

Jaki containment rate jest dobry?

Nie ma jednego benchmarku, który warto przytaczać, bo sam containment rate nie mówi, czy klienci otrzymali pomoc. Wysoki wynik uzyskany przez ukrycie ścieżki eskalacji jest gorszy niż niższy wynik, przy którym każda zatrzymana rozmowa została naprawdę rozwiązana. Containment warto oceniać na tle sprawdzenia rozwiązania spraw, a nie średniej branżowej.

Czym containment rate różni się od wskaźnika deflekcji?

Te pojęcia często stosuje się zamiennie. Oba opisują rozmowy utrzymane z dala od konsultanta. Deflekcja czasem oznacza konkretnie skierowanie klienta do samoobsługi, zanim rozmowa się zacznie, a containment zwykle oznacza rozmowę, którą automatyzacja prowadzi do końca. Oba mają to samo martwe pole: żaden z nich domyślnie nie sprawdza, czy problem klienta został rozwiązany.

Czy wysoki containment rate oznacza, że agent AI działa dobrze?

Sam w sobie nie. Containment liczy brak człowieka, a nie obecność rozwiązania, więc klient, który porzuca czat, jest liczony jako zatrzymany. Aby wiedzieć, czy agent AI działa, trzeba zestawić containment ze sprawdzeniem rozwiązania spraw, które czyta rzeczywiste rozmowy i ocenia, czy każda z nich rozwiązała problem.

Jak sprawdzić, czy zatrzymana rozmowa została naprawdę rozwiązana?

Oceniając samą rozmowę, a nie wynik routingu. Oznacza to ocenę tego, co powiedział agent AI, według kryteriów: czy odpowiedź była poprawna, kompletna i właściwa, i czy problem klienta zakończył się rozwiązaniem, a nie porzuceniem. To to samo podejście do kontroli jakości, które stosuje się wobec konsultantów, zastosowane do rozmów zautomatyzowanych.

Co oznacza containment rate w call center?

W call center containment rate zwykle opisuje odsetek kontaktów, które system automatyczny, taki jak menu głosowe (IVR) lub chatbot, kończy bez przełączenia klienta do konsultanta. Obliczenie i martwe pole są takie same: klient, który się rozłącza albo rezygnuje, liczy się jako zatrzymany.

Czy niski containment rate to zawsze zły znak?

Nie. Niższy containment rate może oznaczać, że agent AI szybko przekazuje rozmowę, gdy utknie, co często jest lepszym doświadczeniem dla klienta. Liczy się to, czy zatrzymane rozmowy zostały rozwiązane i czy eskalowane trafiły do człowieka na czas i z zachowanym kontekstem.

Czy rozmowy agentów AI powinny być oceniane według tej samej karty oceny co rozmowy konsultantów?

W większości tak. Poprawność, ton i rozwiązanie sprawy dotyczą obu, więc jeden standard sprawia, że liczby są porównywalne. Boty zwykle potrzebują kilku dodatkowych kryteriów, takich jak trzymanie się granic wyznaczonych przez zasady firmy i przekazanie rozmowy we właściwym momencie, które opisuje nasz przewodnik o jednej karcie oceny dla konsultantów i agentów AI.

Powiązane pojęcia

Na tej stronie

Zobacz to na własnych rozmowach

Ocenimy próbkę Państwa prawdziwych zgłoszeń według Państwa standardów, tak aby przykład był Państwa.

Zaufały nam zespoły obsługi klienta na całym świecie

  • Foot Locker
  • SteelSeries
  • Canva
  • GetYourGuide
  • Instacart