Saltar al contenido

Control de calidad

Misma conversación, misma nota.

Las sesiones de calibración consiguen que sus revisores evalúen los casos límite de la misma manera, para que una diferencia en una nota signifique una diferencia en la conversación y no en quién la revisó.

Sesiones

Los desacuerdos, a la vista y resueltos.

Pase una conversación por varios revisores, compare dónde divergieron y acuerden qué significa realmente el criterio. El resultado actualiza la rúbrica en lugar de quedarse en la memoria de alguien.

  • La deriva de los revisores, visible en lugar de invisible
  • Los casos límite, resueltos dentro de los criterios
  • Los nuevos revisores se incorporan con un estándar acordado

Cómo funciona

Cómo se desarrolla una sesión de calibración, en cuatro pasos

  1. Elegir los casos límite

    Escoja unas pocas conversaciones que estén en el límite de un criterio: las que generan discusión entre revisores o las que un revisor nuevo probablemente evaluaría distinto.

  2. Pasarlas por varios revisores

    Cada revisor evalúa las mismas conversaciones con la misma scorecard.

  3. Comparar dónde difieren las notas

    Mire dónde se separaron los revisores y comenten por qué. El desacuerdo suele reducirse a qué significa realmente un criterio.

  4. Escribir la decisión en la rúbrica

    Acuerden el significado y actualicen la descripción del criterio, para que el resultado quede en la rúbrica y no en la memoria de alguien. AutoPilot aplica la nueva descripción a cada evaluación futura.

Ejemplo práctico

Un criterio, tres revisores

Una ilustración de una sesión típica, no un caso de cliente.

  1. El criterio

    «El agente confirma que el problema está resuelto antes de cerrar el ticket».

  2. El desacuerdo

    Dos revisores aprueban un chat porque el agente preguntó «¿Puedo ayudarle en algo más?». El tercero lo suspende porque el cliente nunca confirmó la solución.

  3. La decisión

    El equipo acuerda que para aprobar hace falta la confirmación del cliente, o un seguimiento cuando el cliente no responde, y lo añade a la descripción del criterio.

  4. El resultado

    La próxima vez que aparezca el caso, todos los revisores lo evalúan igual, y los revisores nuevos aprenden la regla en la rúbrica.

Para profundizar: qué es la calibración de QA, cómo organizar sesiones de calibración que eliminen el sesgo al evaluar y cómo crear un golden set con el que comprobar la evaluación.

FAQ

Preguntas frecuentes

¿Hay que calibrar AutoPilot?

No. Interpreta la rúbrica de forma idéntica cada vez, y de eso se trata. La calibración es para los revisores humanos que trabajan junto a él.

¿Con qué frecuencia deberíamos calibrar?

La mayoría de los equipos hacen una sesión al mes, y siempre que un estándar cambia de forma significativa.

¿Debe un agente recurrir una nota causada por un error del sistema?

Sí. Si un fallo de una herramienta o de un proceso causó el error, la nota no dice nada del agente. Coméntelo con el revisor y lleve el caso a la próxima sesión de calibración; si el equipo está de acuerdo, añada a la descripción del criterio cómo evaluar esa situación, para que no vuelva a contar en contra de un agente.

¿Quién debe participar en la calibración?

Todas las personas que evalúan conversaciones: revisores de QA, líderes de equipo que revisan y revisores nuevos, que se forman con el estándar acordado.

Seguridad y cumplimiento

SOC 2 Type II, ISO 27001 y RGPD

Informes de auditoría, certificados y políticas en un solo lugar.

Trust Center ›
  • Insignia G2 Users Love Us, lea las reseñas de Kaizo en G2G24.9/5 en G2
  • Sello AICPA SOC 2SOC 2 Type IIAuditado
  • Marca ISO 27001ISO 27001Certificado
  • Estrellas del RGPDGDPRConforme

Descubra cuánto difieren sus revisores

Pasaremos las mismas conversaciones por su equipo y le mostraremos dónde divergen las notas.

La confianza de equipos de atención al cliente de todo el mundo

  • Foot Locker
  • Canva
  • GetYourGuide
  • Instacart
  • BlaBlaCar
  • UiPath