
Tests moderados vs. no moderados: cuándo sentarte con el usuario
En un test moderado un facilitador acompaña y puede preguntar; en uno no moderado el usuario va solo. Diferencias, riesgos y cuándo elegir cada uno según NN/g.
¿Qué ofrece cada uno?
En un test moderado, el facilitador tiene el control. Puede seguir una pista cuando el participante dice algo inesperado, pedirle que explique lo que piensa y aclarar una tarea que no entendió. NN/g indica que las pruebas moderadas remotas son, frente a las presenciales, a menudo más baratas, menos largas y más cómodas para el participante. Su reto en sesión es decidir cuándo hablar y cuándo dejar el silencio.
En un test no moderado, el participante está solo con la prueba. Según NN/g, sirve cuando el foco del estudio son unos pocos elementos concretos o cuando quieres comprobar el efecto de un cambio relativamente menor. Es útil con plazos ajustados, porque los participantes pueden completar las sesiones a su ritmo, incluso a la vez. El costo está en la profundidad: las preguntas de seguimiento están predefinidas y son iguales para todos, nadie ayuda en tiempo real, y el facilitador no sabe cómo fue la sesión hasta que termina. Además, las sesiones pueden ser más silenciosas, porque nadie recuerda al participante que piense en voz alta.
¿Cuáles son los riesgos de cada uno?
El riesgo del test moderado es la preparación. NN/g advierte que puede exigir mucha preparación previa, sobre todo al configurar la herramienta, y recomienda elegir una que sea fácil de acceder e instalar para los participantes. Las herramientas centradas en móvil pueden ser inestables y no admitir todas las versiones de iOS o Android. A esto se suma un riesgo conocido de cualquier sesión con facilitador: una pregunta mal formulada puede dirigir la respuesta.
El riesgo del test no moderado es la calidad de la participación. NN/g señala como principal peligro a los participantes problemáticos. Respondent añade que quien sabe que nadie lo observa puede tomarse la prueba menos en serio, explorar menos el diseño o no representar a tu público. Detectar y retirar esos casos es parte del análisis.
¿Cómo escribir tareas para una prueba sin facilitador?
Como nadie está para aclarar, la redacción importa más. NN/g propone que la tarea sea realista y accionable, y que no dé pistas ni describa los pasos. Su ejemplo: en vez de “Compra unos zapatos Nike naranjas para correr”, mejor “Compra un par de zapatos por menos de 40 dólares”, que deja al participante comparar con sus propios criterios. Evitar pistas no significa ser vago: describe la necesidad, no el botón. En vez de “Suscríbete al boletín con el botón X”, escribe “Busca la forma de recibir por correo información sobre los próximos eventos”.
Antes de lanzar, NN/g aconseja un piloto, un ensayo general con una o dos personas. Revela si los participantes entienden las tareas, cuánto dura la sesión y si hay fallos en el material. Si va bien, sus datos incluso pueden servir en los resultados finales.
¿Cuántos participantes necesito, y qué se mide?
NN/g recomienda cinco participantes para un estudio cualitativo típico con un solo grupo de usuarios, con el fin de descubrir la mayoría de los problemas más comunes. La prueba cualitativa busca hallazgos y explicaciones; la cuantitativa recoge métricas, como el éxito de la tarea o el tiempo, y es la indicada para tener un punto de referencia. Si necesitas lo segundo, cambia el diseño del estudio, no solo el número de personas.
Para reclutar bien, la guía de reclutamiento ayuda a que el grupo sea representativo, algo que un test no moderado pone aún más a prueba.
¿Cuándo conviene cada uno?
Un test moderado conviene cuando:
- el problema es complejo y necesitas entender el razonamiento detrás de cada acción;
- la población es difícil de alcanzar y cada sesión vale mucho;
- estás probando un concepto temprano y quieres corregir la pregunta sobre la marcha.
Un test no moderado conviene cuando:
- tu pregunta se limita a pocos elementos o al efecto de un cambio pequeño;
- necesitas resultados rápidos y los participantes están dispersos;
- quieres que cada persona participe a su hora, desde su propio entorno.
Muchos equipos combinan ambos: moderado para descubrir y no moderado para comprobar. Si tu prueba es en un dispositivo móvil, revisa también las pruebas de usabilidad en móvil.
¿Y si el moderador es una IA?
Existe una tercera vía: un agente de IA que da la tarea, hace preguntas de sondeo y pide pensar en voz alta. La evidencia todavía es limitada y tiene costos propios, que se explican en tests de usabilidad moderados por IA.
Ejemplo
Ejemplo ilustrativo: un equipo quiere saber por qué los usuarios de una app de clases de cocina no completan la inscripción. Primero hace cinco tests moderados remotos y descubre que la mayoría entiende mal el botón “Reservar plaza”, porque cree que ya está inscrita. El equipo cambia el texto del botón y lanza un test no moderado con la tarea “Apúntate a una clase de pastas para el sábado”, después de un piloto con dos personas que detectó una instrucción confusa. El test comprueba si el cambio resolvió el problema, sin repetir las sesiones largas.
Para tu próximo estudio: decide qué pregunta necesitas responder. Si necesitas entender por qué, empieza con moderado; si necesitas comprobar un cambio concreto, considera un no moderado con piloto previo.
Errores comunes
- Lanzar un test no moderado sin piloto, con tareas que nadie revisó.
- Hacer preguntas dirigidas en un test moderado.
- Dar tareas con los pasos incluidos, en lugar de objetivos.
- Usar el no moderado para descubrir problemas desconocidos, cuando no hay quien repregunte.
- Subestimar la preparación de un test moderado remoto.
- Reclutar personas que no representan al público objetivo.
Fuentes
- Remote Usability Tests: Moderated and Unmoderated, Nielsen Norman Group (Amy Schade, 2013)
- Remote Moderated Usability Tests: How to Do Them, Nielsen Norman Group (Kate Moran y Kara Pernice, 2020)
- Remote Usability Testing Study Guide, Nielsen Norman Group
- Usability (User) Testing 101, Nielsen Norman Group (Kate Moran, 2019)
- Turn User Goals into Task Scenarios for Usability Testing, Nielsen Norman Group (Marieke McCloskey, 2014)
- Pilot Testing: Getting It Right (Before) the First Time, Nielsen Norman Group (Amy Schade, 2015)
- Unmoderated Usability Testing 101: How To Get Started, Respondent (Jose Gallegos, 2022)