Realer Nutzertest

Usability Lab im Einsatz

Der Nutzertest ist die am weitesten verbreitete Usability-Analyse-Methode und wird im allgemeinen auch als "Usability Lab" bezeichnet.

Mit Hilfe des Nutzertests werden reale Situationen (Aufgaben angelehnt an die typsichen Use-Cases einer Anwendung oder Website) nachgestellt und beobachtet. Die Beobachtungen sind Indikatoren für Schwachstellen, Zufriedenheit und Motivation (siehe auch Motivationsmodell) des Benutzers.

Messverfahren:

Videoaufzeichnung von Monitorsignal und Probandenverhalten in Bild-in-Bild-Technik
Zeitmessung
Klickpfadanalyse
Optional: Post-Test Fragebogen und/oder Interview zur Erfassung subjektiver wahrgenommener /verarbeiteter Faktoren
Optional: Pre-Test zum Vergleich vor/nach der Aufgabe und zur Erfassung der Nutzertypologie (z.B. Fähigkeiten, Präferenzen)

Resultate:

Aussagekräftige Indikatoren für Schwachstellen anhand Nutzerbeobachtung, Gespräch oder lautes Denken
Grad der Zielerreichung bzw. Abbruchquote
Quote der Fehlerbewätligung (Recovery-Quote)
Zeitmessung / Ermittlung von Effizienz des Systems
Aussagekräftiges Feedback und Bewertung über subjektive Wahrnehmung anhand Interview / Fragebogen
sowie weitere individuell zu definierende Indikatoren

Aufschluss über Fragen:

Wird die Website über Suchmaschinen gefunden?
Werden die richtigen Einstiegspunkte gefunden?
Erkennt der Benutzer den Absender bzw. versteht er den Sinn der Seite?
Funktionieren Navigationskonzept und Orientierung?
Können die Inhalte in der Navigation (Struktur) korrekt aufgelöst / zugeordnet werden?
Ist die Anordnung der Elemente erwartungskonform? Unterstützt die Gestaltung und das Layout die Benutzbarkeit oder lenken sie ab?
Sind Bezeichnungen und Semantik erwartungskonform oder werden Worte nicht verstanden bzw. korrekt zugeordnet?
Entsprechen Abläufe und Prozesse (bei Anwendungen, Formularen, Suchfunktion, Warenkorb / Bestellung, etc.) den Erwartungen?
Fühlen sich die Benutzer jederzeit sicher?

Subjektive Feedbacks der Kunden:

Wie ist die Wirkung der ästhetischen Gestaltung auf den Benutzer? Unterstützt oder behindert sie die Benutzbarkeit?
Wie ist die Gesamtwirkung der Website auf emotionaler Ebene? Kann sie die Marke unterstützen oder ist sie kontraproduktiv?
Welchen Nutzwert haben die Informationen?
Wie hoch ist die Gesamtzufriedenheit? War die Website angemessen gestaltet?
Hat die Benutzung Spaß gemacht? Wie hoch war der "Joy-of-use"?

Weitere Differenzierung:

Die Nutzertests können anhand klarer Aufgabenstellungen und Vorgaben durchgeführt werden oder aber auch mit relativ viel Freiheit für den Proband. Je nach Zielsetzung der Anwendung oder Website kann auch ein freier Test Aufschluss über die Nutzerpräferenzen geben (Cognitive Walkthrough).

Weiterhin kann festgelegt werden, ob die Nutzer über Kommentare (Lautes Denken) mehr Aufschlüsse über die momentan stattfindenen kognitiven Prozesse Preis geben sollen ober ob sie in einer möglichst realen Situation beobachtet werden sollen (Lautes Denken kostet z.B. Zeit und verzerrt die Situation)

Dabei werden spontane Kommentare (z.B. zu Nutzungsproblemen), Bewertungen und Gedankenwiedergaben (sog. Protokolle lauten Denkens) aufgezeichnet.

Empfehlung:

Nutzertests eignen sich hervorragend zur Analyse der Usability aus Nutzersicht. Studien haben ergeben, dass in Nutzertests mit 5 Probanden bereits 60% der Schwachstellen identifiziert werden können. Die Auswertung von Nutzertests ist jedoch aufgrund der vielen Daten komplex und aufwändig. Die richtige Interpretation kann nur von Spezialisten vorgenommen werden - besonders "lautstarke" Probanden verzerren sonst den Auswirkungsgrad, der einer Schwachstelle beigemessen wird und umgekehrt.

Der Nutzertest eignet sich besonders in Kombination mit der Experten-Evaluation. Studien haben ergeben, dass Nutzer nicht alle Schwachstellen zu Tage bringen - dafür finden sie jedoch genau die Details mit hoher Auswirkung, die Experten nicht entdecken können.

Sind Ihnen einige Begriffe unklar?
Dann schauen Sie doch einfach mal in unserem Usability-Glossar nach. Dort werden die gängigsten Usability-Begriffe und -Definitionen erklärt.