Moderiertes Testing ist die Spielart des Usability-Tests, bei der eine Testleitung während der Sitzung dabei ist: Sie gibt die Aufgaben aus, hält das laute Denken in Gang und fragt nach, wenn eine Reaktion unklar bleibt. Der Ort spielt dabei keine Rolle. Im Besprechungsraum wird genauso moderiert wie über eine Videokonferenz mit Bildschirmfreigabe. Der Gewinn liegt in den Antworten auf die Warum-Frage, die eine Aufzeichnung allein nicht hergibt.
- Moderiertes Testing
Usability-Test, bei dem eine Testleitung während der Sitzung dabei ist, die Aufgaben ausgibt und im Gespräch nachfragt.
Beispiel: „Den neuen Konfigurator haben wir moderiert geprüft, weil wir nach jedem Abbruch direkt nachfragen wollten.“Auch: Moderated Testing. Der Begriff sagt nichts über den Ort. Sitzungen aus der Ferne sind genauso moderiert, solange jemand live dabei ist und eingreifen kann.
Häufige Fehlverwendung: Moderieren als Helfen zu verstehen. Wer den nächsten Schritt verrät, verliert genau die Stelle, die der Test aufdecken sollte.
Was die Testleitung tatsächlich tut
Die Testleitung liest die Aufgabe vor und beobachtet dann, ohne zu kommentieren. Verstummt das laute Denken, hilft eine offene Frage: „Was erwartest du hinter diesem Link?“ Gerät die Testperson in eine Sackgasse, wird sie erst herausgeholt, wenn deutlich ist, dass sie aus eigener Kraft nicht weiterkommt. Das Protokoll führt möglichst eine zweite Person, damit die Leitung nicht zwischen Zuhören und Schreiben pendelt.
Rückfragen kommen nach der Aufgabe. Wer mitten im Suchen gefragt wird, wechselt aus dem Handeln ins Erklären und sucht danach anders weiter.
Wofür sich der Aufwand lohnt
Moderiert prüfen wir vor allem früh, solange ein Wireframe oder ein Klickprototyp auf dem Tisch liegt. Solche Entwürfe haben Lücken zwischen den Bildschirmen, und die lassen sich im Gespräch überbrücken. Der zweite Fall sind Aufgaben mit Fachwissen: Bei einer Preisanfrage im Maschinenbau ist die Reihenfolge der Eingaben oft erst im Nachfragen zu verstehen.
Auch wenn die Ursache offen ist, hilft die Begleitung. Eine Aufzeichnung zeigt, dass jemand drei Minuten im Filter hängt. Erst die Rückfrage klärt, ob ihm die Bezeichnung fremd war oder ob er die Mehrfachauswahl übersehen hat.
Die Grenzen des Verfahrens
Anwesenheit verändert das Verhalten. Testpersonen erklären sich, entschuldigen sich für Umwege und bemühen sich sichtbar, die Aufgabe zu lösen. Im Alltag hätten sie die Seite an derselben Stelle längst verlassen. Dieser Beobachtereffekt lässt sich abmildern, indem die Leitung am Anfang klarstellt, dass hier die Oberfläche geprüft wird und ein Abbruch ein brauchbares Ergebnis ist.
Dazu kommt der Aufwand. Jede Sitzung kostet einen Termin mit Vorlauf und Nachbereitung, dazu die übliche Quote an Absagen. Das hält die Zahl der Teilnehmer klein und macht die moderierte Form für belastbare Kennzahlen zur falschen Wahl.