Remote Usability Tests

Werden die User noch dazu über eine Plattform vermittelt, so ergeben sich kaum noch Hürden bei der Durchführung eines User Tests. Wir erklären die neue Methode und benennen die gängigsten Anbieter.

Den Remote Usability Test kann der Benutzer in seiner gewohnten Umgebung durchführen.

Bei einem Usability Test einer Webseite werden die Tester gebeten typische Aufgaben durchzuführen, wie zum Beispiel den Erwerb eines bestimmten Produktes. Hierzu sollte man vor dem Test qualitative Ziele (subjektive Bewertung durch die Nutzer) und quantitative Ziele (messbare Ergebnisse, z.B. Dauer einer Aktion oder Fehlerraten) festlegen, die dann mit dem Test überprüft werden. Häufig wird dabei auch das Empfinden des Nutzers bei der Benutzung evaluiert, um das Erleben des Produkts zu verbessern. Aus den Ergebnissen eines solchen Tests lassen sich anschließend Verbesserungsmöglichkeiten ableiten. So lässt sich die Bedienung beschleunigen, Unsicherheiten lassen sich verringern, Fehler lassen sich verhindern.

Usability Test im Labor

Bei herkömmlichen Usability Tests kommt der Tester in einen speziellen Raum, das Labor, und wird dort von einem Moderator durch den Test geführt. Der Benutzer erhält eine oder mehrere Aufgaben. Der Moderator sieht ihm während des Tests über die Schulter und notiert sich Fragen und Probleme. Wichtig ist, dass der Moderator nur eingreift, sollte der Benutzer an einer Stelle nicht weiter kommen und ihn nicht unnötig beeinflusst. Die Aktionen des Nutzers werden ebenfalls festgehalten, zum Beispiel per Videoaufzeichnung (Screencast). Im Idealfall wird der Nutzer selbst auch auf Video aufgezeichnet, damit man später nochmal dessen Reaktionen beim Testen nachvollziehen kann. Die Tester müssen zudem rekrutiert werden, was teuer und zeitaufwändig ist. Die Tester müssen sich neben dem eigentlichen Test ja auch noch für An- und Abreise Zeit nehmen. Der Aufwand eine Studie im Labor durchzuführen ist dadurch relativ hoch und die Studie selbst relativ teuer.

Die Anzahl der Testteilnehmer unterscheidet sich je nach Einsatzgebiet und Zielgruppen. Nach Usability-Urgestein Jakob Nielson [1][2] genügen aber bereits fünf Personen um die häufigsten Probleme in einem Usability Test herauszufinden. Wegen der bereits angesprochenen Hürden und Kosten lohnt es sich auch kaum mehr Nutzer zu testen. Nielsen empfiehlt daher lieber weniger Nutzer in einen Test zu nehmen, dafür aber mehrere Iterationen durchzuführen. Mehrere Iterationen bieten den Vorteil, dass man zum einen die Änderungen, die sich durch vorherige Tests ergeben haben, überprüfen kann und zum anderen kann man auch noch weitere Problemfelder aufdecken.

Remote Usability Test

Ein Remote Usability Test ist einem Usability Test im Labor relativ ähnlich. Der Hauptunterschied ist, dass die testenden Personen den Test von ihrem eigenen Rechner aus machen können und nicht in ein Usability Labor fahren müssen. Sie erledigen den Test somit in ihrer gewohnten Arbeits- oder Lebensumgebung. Anfangs haben Sie allerdings Einstiegshürden zu überwinden. So müssen sie eventuell eine Screencast-Software herunterladen und installieren oder sich gar eine Webcam kaufen, falls dies vom Anbieter so gewünscht ist. Sind diese Hürden aber erst einmal gemeistert, so ist der Aufwand für die Teilnehmer eines Remote Usability Tests wesentlich geringer im Vergleich zum Test im Labor. Da kein teures Equipment für das Labor angeschafft werden muss und die Vergütungen für Tester im Regelfall niedriger sind, sind die Kosten für eine Remote Usability Studie meist geringer als im Labor.
Um auf weitere Vor- bzw. Nachteile eines Remote Usability Tests einzugehen sollte man zwischen moderierten und unmoderierten Tests unterscheiden, da sich daraus teils große Unterschiede ergeben.

Ein moderierter Test hat wie ein Usability Test im Labor den Vorteil, dass dem Testenden im äußersten Fall weiter geholfen werden kann. Außerdem lassen sich Kommentare der Benutzer besser der jeweiligen Situation zuordnen, als wenn der Benutzer lediglich einen Kommentar nach dem Test abgibt. Man könnte dies zwar auch mit einem Videomitschnitt lösen, jedoch ist anzunehmen, dass es Testern leichter fällt einer echten Person ihre Gedanken mitzuteilen, als dem Computer. Außerdem reden sie eventuell nicht, wenn sie nicht direkt dazu aufgefordert werden.

Der Vorteil von unmoderierten Remote Usability Tests liegt im wesentlich geringeren Aufwand auf Seiten der Usability Spezialisten und der freien Zeiteinteilung der Tester. So lassen sich auch problemlos mehrere hundert Personen für einen Test heranziehen, ohne den Zeitaufwand für einen Durchlauf zu vervielfachen.

Remote Usability Test Anbieter

Mittlerweile gibt es zahlreiche Anbieter welche Remote Usability Tests durchführen. Es gibt zahlreiche Konfigurationsmöglichkeiten für diese Tests: Von der Zahl der Probanden über die Auswahl der Zielgruppe bis hin zur kompletten Auswertung der Ergebnisse und dem reinen Toolanbieter ist vieles denkbar. Um einen kleinen Überblick zu geben, fassen wir hier einige Tools und Anbieter mit den wichtigsten Kerndaten zusammen.

Full Service Anbieter

Diese Anbieter rekrutieren die Testpersonen, führen den Test durch und liefern auf Wunsch komplette Auswertungen.

Tool Anbieter

Die Tool Anbieter rekrutieren selbst keine Testpersonen sondern bieten nur die technische Infrastruktur zur Testdurchfürung.

Referenzen:
[1] Why You Only Need to Test with 5 Users Jakob Nielsen’s Alertbox: March 19, 2000
[2] How Many Test Users in a Usability Study? Jakob Nielsen’s Alertbox: June 4, 2012

© uxcite - User Experience Beratung