Métricas y Medición de Usabilidad

Las métricas de usabilidad cuantifican qué tan bien las personas utilizan un sistema, capturando el rendimiento, como el éxito de la tarea y el tiempo, así como la satisfacción subjetiva a través de cuestionarios estandarizados.

Definition

Las métricas de usabilidad son medidas cuantitativas de la calidad de la interacción, incluyendo medidas de rendimiento como la efectividad y la eficiencia, y medidas de satisfacción autoinformadas, utilizadas para comparar, contrastar y seguir la usabilidad de un sistema.

Scope

Este tema abarca el aspecto cuantitativo de la evaluación: métricas de rendimiento como la tasa de éxito de la tarea, el tiempo en la tarea y el recuento de errores; métricas de autoinforme de instrumentos estandarizados como la Escala de Usabilidad del Sistema; y el análisis y la presentación de informes de estas medidas, incluidos los intervalos de confianza y la evaluación comparativa. Aborda cómo recopilar números fiables e interpretarlos. No cubre la observación cualitativa del comportamiento, tratada en las pruebas de usabilidad, ni los modelos cognitivos predictivos, tratados en los modelos cognitivos de interacción.

Core questions

• ¿Qué métricas de rendimiento capturan la efectividad y la eficiencia?
• ¿Cómo miden los cuestionarios estandarizados la usabilidad percibida y la satisfacción?
• ¿Cómo deben resumirse los datos de usabilidad con la incertidumbre adecuada?
• ¿Cómo se pueden utilizar las métricas para comparar y contrastar diseños?

Key concepts

• tasa de éxito de la tarea
• tiempo en la tarea
• tasa de error
• Escala de Usabilidad del Sistema (SUS)
• calificación de satisfacción
• intervalo de confianza
• evaluación comparativa
• métricas de eficiencia y efectividad

Key theories

Métricas de rendimiento y satisfacción

La usabilidad se mide a lo largo de dimensiones complementarias: rendimiento objetivo como la finalización de tareas, el tiempo y los errores, y satisfacción subjetiva capturada a través de calificaciones, que juntas operacionalizan los componentes de efectividad, eficiencia y satisfacción de la usabilidad.

Cuestionarios de usabilidad estandarizados

Instrumentos validados como la Escala de Usabilidad del Sistema y los cuestionarios de IBM proporcionan puntuaciones fiables y comparables de la usabilidad percibida, lo que permite la evaluación comparativa entre sistemas y a lo largo del tiempo.

Estadísticas para la investigación de usuarios con muestras pequeñas

Dado que los estudios de usabilidad a menudo tienen muestras pequeñas, se necesitan métodos apropiados, intervalos de confianza, intervalos de Wald ajustados para proporciones y cuidado con las pruebas de significación para extraer conclusiones defendibles.

Clinical relevance

Las métricas de usabilidad cuantitativas permiten a los equipos establecer objetivos, seguir el progreso y justificar las decisiones de diseño ante las partes interesadas; las puntuaciones estandarizadas como SUS proporcionan un lenguaje común para comparar productos y se utilizan en los informes de la industria y en cierta documentación reglamentaria de usabilidad.

History

A medida que el trabajo de usabilidad maduró, el campo desarrolló instrumentos estandarizados: la Escala de Usabilidad del Sistema de Brooke apareció en 1996 y los cuestionarios de satisfacción de IBM poco antes. Textos de Tullis y Albert y de Sauro y Lewis consolidaron las métricas y las estadísticas de muestras pequeñas en las décadas de 2000 y 2010, haciendo de la medición cuantitativa de la experiencia de usuario una parte rutinaria de la práctica.

Key figures

• Thomas Tullis
• Bill Albert
• Jeff Sauro
• James R. Lewis
• John Brooke

Seminal works

• brooke1996
• tullis2013
• sauro2016

Frequently asked questions

¿Qué es la Escala de Usabilidad del Sistema?

La Escala de Usabilidad del Sistema (SUS) es un breve cuestionario de diez ítems que produce una única puntuación de 0 a 100 que refleja la usabilidad percibida de un sistema por parte de los usuarios. Debido a que es rápida, fiable y ampliamente utilizada, las puntuaciones SUS se pueden comparar entre productos y con puntos de referencia establecidos.

¿Por qué informar los intervalos de confianza para las métricas de usabilidad?

Los estudios de usabilidad a menudo tienen muestras pequeñas, por lo que un solo promedio puede ser engañoso. Los intervalos de confianza muestran el rango de valores plausibles para la métrica verdadera, comunicando cuánta incertidumbre rodea una estimación y evitando conclusiones demasiado confiadas a partir de datos limitados.