El proceso de reserva termina en una pantalla de confirmación, pero la persona que participa ha seleccionado la fecha equivocada. Si la sesión se considera un éxito o no depende de lo que el estudio quería medir. La tasa de éxito de la tarea, también llamada tasa de finalización, es útil precisamente cuando el equipo ha acordado qué significa realmente completar la tarea.
El cálculo básico consiste en dividir el número de intentos completados con éxito entre el número de intentos válidos y multiplicarlo por 100. En un estudio de ejemplo donde 16 de 20 participantes completan la misma tarea con éxito, la tasa de éxito observada es del 80 %. Esto describe a esta muestra bajo estas condiciones de estudio; no es una afirmación exacta sobre cada futuro cliente.
Define el éxito antes de ver las sesiones
Escribe un criterio observable que encaje con el objetivo del participante. Llegar al pago, comprar cualquier entrada y comprar la entrada adecuada son resultados distintos. El escenario de la tarea debe plantear el objetivo sin desvelar el camino, mientras que el plan de investigación recoge qué considerará el observador como un éxito.
La introducción de Nielsen Norman Group a la tasa de éxito explica el valor de esta métrica tan directa. Su utilidad depende de aplicar un criterio coherente al evaluar, sobre todo cuando alguien recibe ayuda, lo deja a medias o cree haberlo logrado cuando no es así.
Decide de antemano cómo gestionar la ayuda del moderador y los fallos técnicos. Una interrupción provocada por un problema técnico de las herramientas de prueba puede excluirse según una regla documentada; que una persona abandone el producto porque no puede avanzar es información clave sobre la experiencia. Descartar los intentos fallidos sin dejar constancia haría que el porcentaje fuera engañoso.
Haz visible el éxito parcial
Algunas tareas tienen varios resultados interesantes. Alguien puede encontrar la cuenta adecuada pero entender mal las condiciones de retirada, o rellenar un formulario solo después de que el moderador le señale un campo obligatorio. Registra estos casos para que la cifra final no tape una dificultad importante.
Si el informe utiliza un criterio de éxito binario, especifica qué casos se consideran válidos. Si incluye una categoría independiente de éxito parcial o una puntuación ponderada, explica ese criterio y evita presentar el resultado como si fuera un porcentaje de finalización normal y corriente. El criterio de evaluación debe mantenerse estable entre las versiones que se comparen.
Un breve apunte sobre la dificultad observada suele ser más útil para quien diseña que una simple etiqueta. «Fallido» solo indica un resultado; «seleccionó la fecha de entrega correcta pero no pudo continuar tras un error en la dirección» señala algo que el equipo puede investigar.
Muestra la incertidumbre junto al porcentaje
Las muestras pequeñas generan estimaciones poco precisas. Indicar un 80 % sin el denominador hace que cuatro éxitos en cinco intentos parezcan equivalentes a 80 de cada 100, aunque la precisión varía mucho. Incluye el número de intentos válidos y un intervalo de confianza adecuado cuando el estudio esté pensado para estimar una tasa.
La investigación de Sauro y Lewis sobre intervalos en tasas de finalización analiza métodos adecuados para este caso. Evita aplicar un intervalo simétrico simple de forma automática, sobre todo cerca del cero o del 100 %, y no des por hecho que una pequeña diferencia entre las tasas observadas suponga una mejora contrastada.
Combina la finalización con cómo ha sido la experiencia
El éxito por sí solo no dice si una tarea ha sido lenta, confusa o frustrante. Las observaciones, los errores y la Single Ease Question pueden ayudar a explicar la experiencia detrás del resultado. Alguien puede lograrlo a base de ensayo y error, mientras que otra persona puede tomar el camino equivocado con total seguridad.
En los test de prototipos, conviene también distinguir entre una limitación propia del prototipo y un problema que seguiría presente en el diseño final. Compara tasas solo cuando las tareas, los participantes, los criterios de evaluación y las condiciones del estudio permitan esa comparación. El resultado debería ayudar al equipo a decidir qué mejorar, con suficiente contexto para entender lo que el número no cuenta.
