Calidad: qué respuestas quitar, y quién lo decide

La pestaña Calidad enseña las respuestas que se desvían del resto, con el dato concreto por el que salen señaladas. No quita nada sola: señalar y quitar son dos cosas, y la segunda la decides tú.

Qué se señala

En una tarea de tree test, respuesta a respuesta:

• Demasiado rápida: menos de tres segundos. Nadie lee un enunciado y recorre un menú en ese tiempo.
• Tiempo atípico: muy lejos de lo que tardó el resto, medido con la mediana y no con la media, porque a la media la mueven justo los valores que se buscan.
• Mucho más rápida que las demás: por debajo de un tercio de la mediana de esa tarea.
• Se rindió sin abrir ningún apartado: dijo que no lo buscaría ahí sin mirar el menú.

En un card sorting, persona a persona: mucho más rápida que las demás, todo en un grupo, un grupo por tarjeta, poco parecida al resto y casi nada colocado.

Cómo se lee lo de «poco parecida al resto»

Es lo que más se presta a leerse de más. Lo que se ha medido es que esa persona coincide con las demás mucho menos de lo normal en este estudio, no que agrupara al azar: puede ser una arquitectura minoritaria perfectamente pensada. Por eso el umbral es relativo y no un número fijo —un parecido de 0,28 es mucho con sesenta tarjetas y poco con diez— y por eso no se señala a nadie por esto con menos de cinco personas.

Si se señala casi todo, mira el criterio

Cuando lo señalado pasa de la mitad, la pantalla no premarca nada y lo avisa. Un señalamiento así casi nunca quiere decir que las respuestas sean malas: suele querer decir que el criterio no encaja con ese estudio, porque todo el mundo tardó parecido o porque son pocas y la mediana no significa nada.

Quitar y volver a meter

Lo que quitas queda guardado con su motivo, con quién fue y cuándo, y se puede volver a meter una a una desde «Ver lo que está fuera». Ni siquiera se borra al devolverla: queda marcada, para que la historia del estudio se pueda contar entera.

Y el informe lo dice siempre arriba: «estas cifras están hechas sin 12 respuestas de tarea excluidas». Un informe con respuestas quitadas que no lo dijera no se podría defender delante de nadie.