Pular para o conteúdo

Guia

Auto QA: o que é a monitoria automatizada e como funciona

O que é Auto QA? A monitoria automatizada avalia cada conversa de atendimento com o seu formulário, não uma amostra. Como funciona e como se compara à manual.

· Atualizado em · 7 min de leitura

Revisado por Dominik Blattner, fundador da Kaizo

Auto QA, também escrito AutoQA, é a monitoria de qualidade automatizada no atendimento ao cliente: um software avalia as conversas com um formulário de monitoria, para que cada conversa possa ser verificada em vez de uma amostra lida à mão.

Ele lê a transcrição completa, aplica os seus critérios e anexa a cada nota a evidência que a sustenta. É o motor de uma gestão da qualidade no atendimento moderna. Para escolher, implantar e confiar nessa abordagem, veja o guia completo de QA automatizado.

Em resumo

  • Aplica o seu próprio formulário de monitoria a cada conversa assim que ela é encerrada.
  • A qualidade passa a ser acompanhada continuamente, e não em ciclos de revisão agendados.
  • Notas ligadas às evidências podem ser verificadas e contestadas.
  • Os líderes de equipe gastam o tempo fazendo coaching, e não avaliando.

O que significa Auto QA

Auto QA significa que um software, normalmente com IA, avalia as conversas de suporte com o mesmo formulário que um monitor de qualidade humano usaria. AutoQA, Auto QA e QA automatizado são grafias da mesma ideia, e alguns fornecedores chamam a prática mais ampla de Auto QM (gestão de qualidade automatizada).

QA vem de quality assurance, a garantia de qualidade: verificar se uma conversa foi correta, seguiu as regras, foi bem conduzida e resolvida. A novidade é o “auto”. Em vez de um líder ler alguns tickets por semana, o software lê todos e deixa uma nota e um comentário em cada um. O que continua humano é o padrão: você define o que é um bom atendimento, e o software aplica.

Como funciona o Auto QA

O Auto QA funciona em cinco etapas: conecta-se ao seu helpdesk, adota o seu formulário, é testado em conversas que os monitores já avaliaram, avalia cada nova conversa no encerramento e alimenta o coaching.

1. Conectar o helpdesk

A ferramenta se conecta ao helpdesk ou CRM onde suas conversas já estão, como Zendesk ou Salesforce Service Cloud. Chats e e-mails já são texto; as ligações são transcritas antes.

2. Carregar o formulário de monitoria

Você traz os critérios que a equipe já usa: saudação, precisão, processo, tom e resolução, além de eventuais critérios de reprovação automática (em inglês). Cada critério precisa de uma descrição escrita do que significa cumpri-lo, porque é com base nela que a IA julga.

3. Testar antes de ativar

Numa boa implantação, a IA avalia primeiro um conjunto de conversas que os monitores já avaliaram, e os resultados são comparados critério por critério. Onde divergem, o critério é reescrito. Nosso protocolo de validação (em inglês) mostra como fazer esse teste em uma semana.

4. Avaliar cada conversa no encerramento

A partir daí, cada conversa resolvida é avaliada automaticamente. Cada nota vem com um comentário e um link para as linhas da transcrição que a geraram, para que monitores e agentes vejam por que perderam pontos.

5. Revisar, contestar e fazer coaching

As notas alimentam painéis por agente, equipe e critério. Os agentes podem contestar uma nota, os monitores verificam os casos duvidosos e os líderes fazem coaching sobre padrões, e não sobre tickets isolados.

O que é avaliado em uma conversa

O Auto QA pode avaliar qualquer critério visível na transcrição. Ele é mais confiável em verificações de sim ou não e precisa das descrições mais precisas em critérios de julgamento, como a empatia.

Tipo de critérioExemploComo o Auto QA lida com ele
Processo e conformidadeIdentidade verificada antes de uma alteração na contaMuito confiável: a etapa aconteceu ou não
PrecisãoO prazo de reembolso informado bate com a políticaConfiável se a ferramenta puder ler sua base de conhecimento
ResoluçãoO problema real do cliente foi resolvidoBom, com uma definição clara por motivo de contato
Tom e empatiaA frustração reconhecida antes da respostaExige redação precisa e calibração com os monitores
Qualidade da escritaOrtografia, gramática, próximo passo claroMuito confiável em chat e e-mail

O padrão é o mesmo dos monitores humanos: critérios vagos geram notas contestadas. Se dois dos seus monitores discordariam sobre um critério, a IA não vai resolver a discussão por você. Nosso guia para escrever critérios que uma IA consegue avaliar (em inglês) transforma critérios vagos em critérios verificáveis.

Auto QA ou monitoria manual

A monitoria manual é limitada pela quantidade de tickets que uma pessoa consegue ler, por isso a maioria das equipes avalia só uma pequena parte das conversas. Numa enquete do Call Centre Helper com centrais de atendimento (2016), 68% disseram avaliar 2% ou menos das interações. O Auto QA elimina esse teto.

DimensãoMonitoria manualAuto QA
CoberturaUma amostra pequena, muitas vezes 2% ou menosAté 100% das conversas
EsforçoTempo contínuo dos monitoresFunciona automaticamente
ConsistênciaVaria conforme o monitor e o diaUm formulário, aplicado sempre do mesmo jeito
RapidezPor ciclo de revisão, dias ou semanas depoisAssim que cada conversa é encerrada
Ponto forteNuances, casos-limite, calibraçãoVolume, tendências, verificações de conformidade

A revisão manual não desaparece. Ela passa a cuidar das conversas que exigem julgamento, da calibração e das contestações. Para o lado dos custos, veja monitoria manual ou automatizada.

Avaliação totalmente automática ou revisão assistida

O Auto QA existe em duas formas: a avaliação totalmente automática, em que o software avalia e comenta cada conversa sozinho, e a revisão assistida, em que ele pré-preenche um formulário que uma pessoa edita e aprova.

Na Kaizo, cada uma tem seu nome. O AutoPilot avalia cada conversa com os seus critérios assim que ela é resolvida e deixa notas e comentários sem que ninguém precise trabalhar uma fila de revisão.

O Auto QA da Kaizo é a versão assistida: automatiza as verificações de rotina, como gramática, ortografia e cumprimento de procedimentos, pré-preenche os critérios e redige o feedback para um monitor editar e aprovar. Muitas equipes usam as duas: a automação completa para a cobertura e a revisão assistida para as conversas que precisam de um olhar humano.

Por que as equipes de suporte automatizam a monitoria

As equipes automatizam porque a amostragem deixa a maioria das conversas com clientes sem leitura: problemas e oportunidades de coaching passam despercebidos, e a nota de qualidade se apoia em um punhado de tickets. Avaliar cada conversa transforma a qualidade em uma tendência, e não em uma amostra. O mesmo vale quando um agente de IA atende parte da fila: avaliar as conversas dele ao lado das conversas da sua equipe é a metade de qualidade do monitoramento de agentes de IA.

Também muda o que os monitores fazem na semana. Na SteelSeries, uma equipe de suporte de 30 pessoas com tickets longos e técnicos, os resumos com IA reduziram pela metade o tempo de monitoria sem que o processo deixasse de encontrar problemas. Esse tempo volta para o coaching, a calibração e a correção dos processos que continuam gerando os mesmos erros.

O Auto QA não é o primeiro passo certo para todas as equipes. Se uma ou duas pessoas atendem algumas dezenas de conversas por semana, ler você mesmo com um checklist curto cobre o mesmo terreno.

Como começar

Comece pelo formulário que você já tem, e não pela ferramenta. Ajuste cada critério até que dois monitores o avaliariam da mesma forma, defina quais critérios reprovam a conversa de imediato e escolha um conjunto de conversas já avaliadas para testar a IA.

Depois conecte o helpdesk, compare as notas da IA com as dos monitores e ative a cobertura total só quando os critérios estiverem alinhados.

Veja em uma demo ao vivo com dados de exemplo realistas. Agende uma reunião.

Perguntas frequentes

Auto QA é o mesmo que QA agêntico?

O QA agêntico é um tipo de Auto QA em que agentes de IA vão além de dar notas: trabalham continuamente sem que uma pessoa inicie cada ciclo, investigam padrões em muitas conversas e propõem ações, como um coaching ou uma mudança de processo, que uma pessoa aprova. Auto QA é o termo mais amplo e inclui também a automação baseada em regras.

O Auto QA funciona com o meu helpdesk?

O Auto QA lê as conversas dos sistemas que você já usa, então depende das integrações de cada ferramenta. A Kaizo funciona de forma nativa dentro do Zendesk e do Salesforce Service Cloud e avalia as conversas onde elas já estão, sem exportar transcrições nem mudar o jeito de trabalhar dos agentes.

O Auto QA consegue avaliar 100% das conversas?

Sim. Como não depende do tempo dos monitores, o Auto QA pode avaliar cada conversa em vez de uma pequena amostra manual, e a cobertura se mantém quando o volume cresce. A maioria das equipes ainda deixa os casos duvidosos, as contestações e a calibração com uma pessoa, então cobertura total não significa que ninguém lê mais as conversas.

O Auto QA é preciso?

O Auto QA é tão preciso quanto seus critérios são claros. Verificações objetivas, como a confirmação de identidade ou um aviso obrigatório, são avaliadas com muita confiabilidade; critérios de julgamento, como a empatia, precisam de descrições precisas. Teste a ferramenta em conversas que os monitores já avaliaram e meça a concordância por critério antes de confiar nas notas.

O Auto QA substitui os monitores de qualidade?

Não. O Auto QA elimina o trabalho de ler e dar notas, mas são as pessoas que continuam definindo o padrão, calibrando os critérios, tratando as contestações e fazendo coaching com os agentes. Os monitores passam menos tempo preenchendo formulários e mais tempo nas conversas e padrões em que o julgamento deles muda o resultado.

Termos relacionados

Nesta página

Leituras relacionadas

Veja isso em uma demo ao vivo

Apresentamos a Kaizo com conversas de exemplo realistas, para você ver o exemplo avaliado, explicado e transformado em coaching.

A escolha de equipes de atendimento no mundo todo

  • Foot Locker
  • Canva
  • GetYourGuide
  • Instacart
  • BlaBlaCar
  • UiPath