Auto QA

Reportes › Auto QA es sólo para admins. Cubre los últimos 90 días por defecto y sólo cuenta evaluaciones de Auto QA completadas: las de Co-pilot que todavía están En curso no entran. Se filtra por Scorecards, Reviewees y Grupos; el rango es Evaluaciones completadas en.

Resumen

Cuántas gestiones evaluó la IA y cuánto cambian los puntajes cuando una persona los corrige. Cinco tarjetas:

• Evaluaciones: cuántas hizo Auto QA en el período.
• Puntaje promedio original: el promedio de lo que propuso la IA en cada ticket.
• Puntaje promedio corregido: el promedio del puntaje con el que quedó cada ticket, después de revisiones y disputas.
• Error absoluto medio: el tamaño promedio de la brecha entre el puntaje propuesto y el final, medido por ticket. Las evaluaciones que nadie corrigió aportan cero.
• Evaluaciones corregidas: el porcentaje de evaluaciones cuyo puntaje total cambió, con el detalle «N de M».

Y tres gráficos por período: Evaluaciones (un clic en una barra abre Completadas por Auto QA con el período), Puntaje promedio original y corregido (dos líneas) y Error absoluto medio y evaluaciones corregidas (barras y línea).

Original y corregido

Si las dos líneas van juntas, las personas están de acuerdo con la IA. Si se separan, hay criterios que se corrigen seguido: la pestaña Precisión dice cuáles.

Precisión

Mide cuántos de los criterios que una persona revisó quedaron como los puso la IA: (criterios revisados − criterios corregidos) / criterios revisados. Tiene cuatro tarjetas (Criterios revisados, Criterios corregidos, Precisión de los criterios y Puntajes sin calibrar, hoy en «—»), el gráfico Precisión en el tiempo y las tablas Precisión por criterio y Precisión por revisor. La explicación completa, con qué cuenta como revisado y corregido, está en Precisión.

Puntajes de evaluación

La lista de todas las correcciones a Auto QA del período, una fila por criterio corregido, de la más reciente a la más antigua, de a 25:

Columna	Contenido
Ticket	El reviewee (enlace a la evaluación), el scorecard y la fecha de la evaluación.
Criterio	El criterio corregido.
Auto QA	El rating que puso la IA, sus causas raíz y su comentario.
Corrección	El rating final, las causas raíz y el comentario de la persona. Si el rating no cambió, la marca sin cambio de rating.
Feedback para Auto QA	Lo que escribió quien corrigió, o el comentario de la disputa aceptada.
Corregido por	Quién y cuándo.

Es la forma más rápida de comprobar un patrón antes de cambiar la instrucción de un criterio. En esta pestaña no hay Mostrar por. Las correcciones nacen en Revisar y corregir y en las disputas sobre Auto QA.