Juan Carlos García (úsalo) examina otro de los informes sobre la accesibilidad de los sitios web universitarios. Esta vez se trata del elaborado por Disc@pnet, más completo, exhaustivo y actualizado que los anteriores. También aprovecha para hacer una razonable crítica metodológica del informe:

No obstante, lo peor de este estudio, en nuestra modesta opinión, tiene que ver con el test de usuarios (...)
en este estudio, se les pedía a los participantes que realizaran unas tareas y, en lugar de anotar si se hacía con éxito o no la tarea, se les preguntaba su opinión, en cuanto a satisfacción de usuario. Es decir, se confundía el concepto de éxito en la consecución de una tarea específica con el de usabilidad percibida.

De hecho son dos variables que ni siquiera tienen por qué tender a moverse en paralelo y su influencia la una en la otra sería muy baja.

Mientras que la usabilidad percibida, la satisfacción de uso y la estética sí demuestran una alta correlación entre sí (véase otro interesante post en úsalo); como demuestra el trabajo de Frøkjær et al. (2000) las tres variables que componen la usabilidad real - eficacia, eficiencia y satisfacción de uso - presentan una baja correlación entre sí, "debiendo considerarse como aspectos independientes de la usabilidad y ser incluidos todos en la evaluación de la usabilidad".

Esto quiere decir que el análisis aislado de una de estas variables (satisfacción) resulta excesivamente sesgado y mostrará escasa coincidencia con los resultados que se hubieran obtenido evaluando todas las variables.

Personalmente, además, siempre se me ha planteado otra duda respecto a los test con usuarios. Si bien queda demostrada su validez como herramienta de evaluación de la usabilidad en el marco de procesos de Diseño Centrado en el Usuario; ¿son un método igualmente útil o idóneo para la evaluación comparativa de usabilidad?

Bibliografía:
Frøkjær, E., Hertzum, M., Hornbæk, K. (2000), Measuring Usability: Are Effectiveness, Efficiency, and Satisfaction Really Correlated?. Proceedings of ACM Conference on Human Factors in Computing Systems (CHI’2000), the Haag, the Netherlands, 1st-6th April 2000, p. 345-352.
Disponible en: http://www.akira.ruc.dk/~mhz/Research/Publ/CHI2000_preprint.pdf

Posts relacionados:
Úsalo. La accesibilidad de los portales universitarios.
Úsalo. La mujer del César. Usabilidad percibida.
Véaseademás. Usabilidad Web de las Universidades Españolas.
Véaseademás. Accesibilidad de los sitios web de las Universidades Españolas.