Es ist einfach sinnvoll, die richtigen Werkzeuge für die Aufgabe zu haben. Was die UX-Forschung betrifft, so sammeln wir durch Benutzertests einen Großteil unserer Daten, und die Methoden, mit denen wir sie durchführen, scheinen fast endlos.
Heute befassen wir uns mit unmoderierten Usability-Tests, wie sie sich von ihrem Gegenstück, den moderierten Usability-Tests, unterscheiden und welche Vor- und Nachteile das System hat.
Moderierte vs. unmoderierte Usability-Tests - was ist der Unterschied?
Der Hinweis liegt zweifelsohne in der Frage. Man muss kein Raketenwissenschaftler sein, um festzustellen, dass es sich bei einem moderierten Test um einen Test handelt, bei dem die Testperson von einem Moderator geleitet wird (und das ist er!). Ganz gleich, ob er im Raum anwesend ist oder die Studie per Video- oder Audioanruf aus der Ferne durchführt, er bringt eine Präsenz in den Prozess ein, die das Verhalten und die Reaktionen der Teilnehmer verändert.
Ein Moderator kann den Benutzer anleiten, wenn er vom Weg abkommt, kann Fragen beantworten, die Richtung der Studie ändern oder bestimmte Aktionen und Fragen vertiefen, sobald sie auftauchen.
Bei unmoderierten Usability-Tests gibt es jedoch keine solche Kontrolle. Ohne einen Moderator ist der Benutzer völlig auf sich allein gestellt und muss die Anweisungen des Softwaretools, das die Veranstaltung durchführt, selbst interpretieren.
Vor- und Nachteile von moderierten und unmoderierten Usability-Tests
Unmoderiert |
Moderiert |
|
| Benutzerfokus und Konzentration | Möglicherweise niedrig | Hoch |
| Ohne Moderator können die Probanden kommen und gehen, wie sie wollen, sich durch die Studie beeilen, wenn sie sich nicht voll engagieren, oder einfach nur die Aufgabe erfüllen und für ihre Leistung bezahlt werden. | ||
| Geschwindigkeit und Effizienz | Schnell | Zeitaufwendig |
| Ohne die Notwendigkeit, Interviews vor Ort oder aus der Ferne zu arrangieren und zu planen, und ohne die Zeit, die für die Durchführung jeder Nutzerstudie erforderlich ist, sind unmoderierte Tests wesentlich schneller und kostengünstiger.
Mit einem bereits vorhandenen Teilnehmerpool kann ein unmoderierter Test fast sofort nach der Erstellung des Tests durchgeführt werden. Die Organisation und Durchführung eines moderierten Tests kann jedoch Monate dauern. |
||
| Konsistenz der Daten | Einheitlich | Offen für Manipulation |
| Es gibt kaum Möglichkeiten, Handlungen oder Urteile zu beeinflussen, wenn man unmoderierte Teilnehmer sich selbst überlässt, es sei denn, die Fragen und Aufgaben sind mit einer ungewollten Voreingenommenheit geschrieben. Moderierte Tests bieten mehr Möglichkeiten für Abweichungen und Verzerrungen (bewusst oder unbewusst). | ||
| Test-Skalierung | Einfach und umfassend | Zeitaufwendig und kostspielig |
| Wo keine menschliche Interaktion involviert ist, ist es viel einfacher, unmoderierte Tests auf eine beliebig große Testgruppe auszuweiten. Die Automatisierung ermöglicht es Ihnen, Ihr Netz auf einen so großen Pool auszuweiten, wie Sie es in demselben Zeitrahmen benötigen.
Moderierte Tests sind zeit- und ressourcenmäßig begrenzt, was zu kleineren Lerngruppen führt, die durch die Kosten und die Verfügbarkeit geeigneter Moderatoren eingeschränkt sind. |
||
| Internationaler und Fernzugriff | Unkompliziert | Problematisch |
| Wenn Sie sich an ein internationales Publikum wenden, müssen Sie Zeitzonen, Sprachbarrieren, Kulturen, Technologien und vieles mehr berücksichtigen.
Unmoderierte Ferntests der Gebrauchstauglichkeit werden jedem dieser Punkte weitaus besser gerecht als ihr moderiertes Gegenstück es je könnte. |
||
| Nachfolgende Befragung | Schlecht | Ideal |
| Ein Gespräch mit Ihren Testteilnehmern eignet sich hervorragend für Folgefragen während des Tests. Natürlich ist es möglich, in einem unmoderierten Test Folgefragen zu stellen, aber man muss schon ein Gedankenleser sein, um die Tiefe zu erreichen, die ein Moderator im Handumdrehen erreichen kann. | ||
| Rekrutierung von Teilnehmern | Einfach | Präzise |
| Ein Großteil der Teilnehmerqualität hängt davon ab, dass die Software oder der Dienst einen unmoderierten Test anbietet, weshalb es von Vorteil ist, dass sie in der Regel einen Pool möglicher Nutzer bereithalten. Wenn Ihr Produkt jedoch nicht auf einen breiten Markt ausgerichtet ist, müssen Sie sich auf deren Teilnehmerfilter verlassen.
Nur wenige geben Nischenwerte an, so dass jede Rückmeldung für diese Studien irrelevant sein könnte. Wenn Sie Ihren eigenen Studienpool in der Studiensoftware zusammenstellen können, erhalten Sie natürlich relevantere Daten, aber das könnte in einer Praxis, die beides einsparen will, Zeit und weitere Ressourcen kosten. |
||
| Ergebnis der Verarbeitung | Gemischt | Stark |
| Je nach Ziel der Studie kann es sein, dass Sie eine bestimmte Art von Daten einer anderen vorziehen. Wenn es beispielsweise darum geht, Verhalten zu verstehen, eignen sich qualitative Daten, einschließlich Video- und Audioreaktionen und Beobachtungen, oft besser. Automatisierte Transkripte können bei umfangreicheren Studien die Arbeit beschleunigen, aber im Idealfall kann ein Moderator die wichtigsten Ergebnisse miterleben und sie entsprechend markieren.
Umfragetypische Studien, bei denen hauptsächlich quantitative Daten erhoben werden, sind viel einfacher zu verarbeiten, vor allem bei diesen umfangreichen Studien. Metriken lassen sich leicht einordnen oder gruppieren, wobei Zeiten, Raten, Prozentsätze und Skalen eine leicht umsetzbare Darstellung bieten. |
||
Für welche Projekte ist unmoderierte Usability-Testbarkeit am besten geeignet?
Manchmal ist ein Telefongespräch viel effizienter als eine E-Mail oder eine SMS. Doch wie oft haben Sie schon eine Stunde lang an einem Telefonat oder einer Besprechung teilgenommen und sich gefragt, warum man nicht einfach eine E-Mail mit denselben Punkten schicken konnte?
Das ist bei moderierten und unmoderierten Usability-Tests nicht anders. Moderierte Tests funktionieren wie Gespräche, bei denen ein wechselseitiger Kommunikationsfluss Teil des Prozesses ist. Daher eignen sie sich für komplexe Studien, bei denen das Nutzerverhalten schwer zu verstehen und zu beobachten ist. Sie können auf Körpersprache, verdächtige Pausen, Verwirrung und mehr achten.
Unmoderierte Tests eignen sich für die Validierung neuer Funktionen und Konzepte oder wenn Sie spezielle Fragen haben. In vielerlei Hinsicht ist das unmoderierte Usability-Testing eine tiefer gehende, technisch versiertere Umfrage. Aber lassen Sie sich davon nicht einschränken; viele Funktionen sind in der gesamten Palette der Dienstleistungen verfügbar.
Wie funktionieren unmoderierte Usability-Tests?
Sie können den Prozess in sechs Schritte unterteilen:
- Definieren Sie Ihre Ziele
- Wählen Sie die beste Software für Ihr Studium
- Erstellen Sie die Studienaufgaben und Fragen
- Durchführen von Pilotversuchen
- Überlegen Sie, wie Sie geeignete Teilnehmer rekrutieren können
- Synthese der neu gewonnenen Daten
1. Definieren Sie Ihre Ziele
Wie bei jeder Studie müssen Sie mit dem beginnen, was Sie erreichen wollen. Ohne Ziele testet man nur um des Testens willen.
Wenn Sie Ihre Ziele klar definiert haben, müssen Sie als Nächstes entscheiden, welche Tools am besten geeignet sind, um die Daten zu erfassen. Müssen Sie Vorgänge per Video aufzeichnen, um detaillierte Interaktionen und das Verhalten der Nutzer zu überwachen? Oder sind einfache Fragen mit Ja- und Nein-Antworten oder Bewertungsskalen ausreichend? Davon hängt ab, welche Art von Benutzer und Dienst Sie benötigen.
2. Wählen Sie die beste Software für Ihr Studium
Ihre Ziele helfen Ihnen bei der Entscheidung, wie Sie Probleme und Lösungen am besten aufdecken und welche Art von Software sich am besten für die jeweilige Aufgabe eignet. Allerdings sind nicht alle unmoderierten Tools für Usability-Tests gleich, daher ist es wichtig, herauszufinden, welche Tools Ihnen die idealen Daten liefern.
Die gute Nachricht ist, dass es eine große Auswahl gibt, wenn Sie sich für einen unmoderierten Usability-Test entscheiden. Sie variieren in Bezug auf Funktionalität und Preis und sollten in der Lage sein, ein Programm zu finden, das Ihren Zwecken entspricht. Es ist wichtig, die Tools zu testen, bevor Sie sie für Ihre Studie einsetzen.
3. Erstellen Sie die Studienaufgaben und Fragen
Die Erstellung von Lernfragen und Aufgabenstellungen ist eine Kunst. Bei einem moderierten Test kann der Moderator jederzeit eingreifen, um einen Teilnehmer wieder auf den richtigen Weg zu bringen, und steht auch für Fragen zur Verfügung, bei denen sich der Teilnehmer verlaufen hat.
Bei einem unmoderierten Test gibt es diesen Luxus nicht, daher müssen die Anweisungen, Anleitungen und Fragen absolut sicher sein. Glauben Sie uns, es ist nicht einfach, solch detaillierte Anweisungen zu schreiben, ohne den Nutzern Hinweise zu geben oder sie zu beeinflussen.
Wenn Ihre Benutzer irgendeinen Punkt des Tests nicht verstehen oder eine Anweisung falsch interpretieren, kann dies dazu führen, dass der gesamte Datensatz unbrauchbar wird und Sie beide Ihre Zeit verschwenden.
4. Durchführung von Pilotversuchen
Pilotversuche für einen unmoderierten Usability-Test sind unerlässlich. Bei moderierten Tests können Sie in den Prozess eingreifen, ihn neu bewerten oder ändern, während er stattfindet. Bei unmoderierten Tests können Sie nach der Übergabe an Ihre Testpersonen nichts mehr gegen die Fehler oder Auslassungen unternehmen, die Sie nicht erkannt haben.
Sie sollten alle technologischen Prozesse, Kompatibilitäten und Funktionen testen, um die beabsichtigte Bereitstellung und Leistung sicherzustellen. Durch Pilottests auf verschiedenen Plattformen mit unterschiedlichen Nutzern haben Sie mehr Möglichkeiten, Fallstricke zu entdecken, bevor der Test live geht.
5. Überlegen Sie, wie Sie geeignete Teilnehmer rekrutieren können
Wenn Sie eine bestimmte Zielgruppe haben, muss Ihre Studie diese widerspiegeln, sonst verschwenden Sie Ihre Zeit und Ihr Geld.
Wenn Sie Ihre eigenen Teilnehmer mit der von Ihnen gewählten Software verwenden können, dann ist das großartig. Wenn Sie eine Auswahl aus einem fremden Pool treffen müssen, müssen Sie sich stark auf die Ihnen zur Verfügung stehenden Filter stützen.
6. Synthese der neu gewonnenen Daten
Die Art und Weise, wie Sie Ihre Daten sammeln, bestimmt, wie Sie sie zusammenfassen, um die Erkenntnisse zu gewinnen, die zur Verbesserung Ihrer Website, App, Software oder Funktionen erforderlich sind. Wie bei allen Studien müssen die Ergebnisse quantifiziert und in leicht verständlichen Mechanismen und Vorschlägen präsentiert werden.
Schlussfolgerung
Um sicherzustellen, dass Sie das Beste aus jedem Test herausholen, müssen Sie überlegen, welche Methoden die gewünschten Ergebnisse liefern. Es gibt gute Gründe, warum wir mehrere Studien zusammen einsetzen; jedes Instrument hat seine Stärken, wie wir in diesem Artikel über unmoderierte vs. moderierte Usability-Tests gezeigt haben.
Wir sind immer gesprächsbereit, wenn Sie wissen möchten, welche Art von Studien und Dienstleistungen für Ihr Projekt am besten geeignet sind. Rufen Sie uns einfach an oder schreiben Sie uns, wir helfen Ihnen gerne weiter.
Wenn Sie möchten, dass UX24/7 Ihnen dabei hilft, eine gute Praxis zu etablieren, wann und wie Sie unmoderierte Usability-Testing-Techniken einsetzen, senden Sie uns eine E-Mail an hello@ux247.com.
[...] hat sich kürzlich mit unmoderierten Usability-Tests beschäftigt, deren Vor- und Nachteile aufgelistet und einen einfachen Sechs-Schritte-Leitfaden für [...]