Usability-Tests

Usability-Tests bewerten eine Schnittstelle, indem sie repräsentative Benutzer bei dem Versuch, realistische Aufgaben zu lösen, beobachten und dabei feststellen, wo sie Schwierigkeiten haben, erfolgreich sind oder Fehler machen.

Definition

Usability-Tests sind eine Bewertungsmethode, bei der repräsentative Benutzer repräsentative Aufgaben mit einem System ausführen, während Beobachter ihr Verhalten, ihre Fehler und Kommentare aufzeichnen, um Usability-Probleme zu entdecken und die Leistung zu messen.

Scope

Dieses Thema behandelt die empirische Bewertung von Schnittstellen mit realen Benutzern: die Planung von Testaufgaben, die Rekrutierung repräsentativer Teilnehmer, die Durchführung von „Think-aloud“- und Beobachtungssitzungen sowie die Erfassung von Leistungsdaten und verbalen Berichten. Es befasst sich mit formativen Tests zur Problemfindung und -behebung sowie mit summativen Tests zur Leistungsbewertung, zusammen mit Überlegungen zur Stichprobengröße. Es behandelt weder Experteninspektionsmethoden wie die heuristische Evaluation, die separat behandelt werden, noch die statistische Behandlung von Metriken, die unter Usability-Metriken und -Messung behandelt wird.

Core questions

• Wie werden realistische Testaufgaben und repräsentative Teilnehmer ausgewählt?
• Was ist das „Think-aloud“-Protokoll und welche Art von Daten liefert es?
• Wie unterscheiden sich formative und summative Usability-Tests in ihrem Zweck?
• Wie viele Teilnehmer werden benötigt, um die meisten Usability-Probleme zu finden?

Key concepts

• repräsentative Aufgaben
• repräsentative Benutzer
• „Think-aloud“-Protokoll
• formative vs. summative Tests
• Aufgabenerfolg und -abschluss
• Moderation und Moderatoreffekte
• Stichprobengröße
• Beobachtung und Protokollierung

Key theories

„Think-aloud“-Protokoll

Benutzer aufzufordern, ihre Gedanken während der Ausführung von Aufgaben zu verbalisieren, externalisiert ihre Überlegungen und Verwirrungspunkte; Ericssons und Simons Analyse verbaler Berichte stellte fest, wann solche Berichte den Inhalt des Arbeitsgedächtnisses gültig widerspiegeln.

Formatives Testen mit kleiner Stichprobe

Empirische Studien legen nahe, dass eine kleine Anzahl von Teilnehmern einen großen Teil der Usability-Probleme aufdeckt, was iterative Tests mit mehreren kleinen Runden anstelle einer großen Studie unterstützt.

Testplanung und Moderation

Effektive Usability-Tests basieren auf gut gewählten Aufgaben, einem neutralen Moderator, der es vermeidet, Teilnehmer zu beeinflussen, und einer sorgfältigen Aufzeichnung, sodass beobachtete Schwierigkeiten die Schnittstelle und nicht die Testumgebung widerspiegeln.

Clinical relevance

Usability-Tests sind die direkteste Methode, um zu sehen, wie reale Personen ein Produkt verwenden, und werden in der Software-, Web- und Geräteentwicklung weit verbreitet angewendet; in regulierten Bereichen wie bei medizinischen Geräten liefern summative Usability-Tests den Nachweis, dass beabsichtigte Benutzer ein System ohne gefährliche Fehler bedienen können.

History

Aufbauend auf den Traditionen der Mensch-Faktor-Tests wurden Usability-Tests in den 1980er und 1990er Jahren zu einem zentralen Bestandteil der Softwareentwicklung. Die Arbeit von Ericsson und Simon aus dem Jahr 1980 begründete die Verwendung verbaler Berichte, und praktische Leitfäden von Dumas und Redish sowie anderen standardisierten die Planung und Durchführung von Tests. Die Debatte über die optimale Stichprobengröße, angestoßen von Virzi und Nielsen, prägte die moderne formative Praxis.

Debates

Wie viele Benutzer sind ausreichend, um Usability-Probleme zu finden?

Einflussreiche Studien argumentierten, dass eine kleine Anzahl von Benutzern die meisten Probleme aufdeckt, aber Kritiker merken an, dass dies von der Problemhäufigkeit und der Aufgabenabdeckung abhängt, sodass für komplexe Systeme oder summative Aussagen größere oder wiederholte Tests erforderlich sein können.

Key figures

• Jakob Nielsen
• Joseph Dumas
• Janice Redish
• K. Anders Ericsson
• Herbert A. Simon

Seminal works

• nielsen1993
• ericsson1980
• virzi1992

Frequently asked questions

Was ist die „Think-aloud“-Methode?

Bei der „Think-aloud“-Methode werden die Teilnehmer gebeten, laut auszusprechen, was sie denken, während sie Aufgaben bearbeiten. Dies offenbart ihre Erwartungen, Verwirrung und Denkweise in Echtzeit und hilft den Evaluatoren zu verstehen, nicht nur wo Benutzer scheitern, sondern auch warum.

Benötigen Usability-Tests ein spezielles Labor?

Nein. Obwohl spezielle Labore mit Aufnahmegeräten nützlich sind, können wertvolle Usability-Tests in einem Büro, in der eigenen Umgebung eines Teilnehmers oder remote über das Internet durchgeführt werden. Am wichtigsten sind realistische Aufgaben, repräsentative Benutzer und sorgfältige Beobachtung, nicht teure Einrichtungen.