Wir haben uns kürzlich mit folgenden Themen befasst unmoderierte Usability-Testsmit einer Auflistung der Vor- und Nachteile und einem einfachen Sechs-Schritte-Leitfaden für den Umgang damit.
In diesem Artikel betrachten wir die andere Seite der Medaille und untersuchen die Vorteile von moderierten (persönlichen) Usability-Tests und was dies für die von Ihnen gesammelten Daten bedeutet.
Wann sollten Sie moderierte Usability-Tests einsetzen?
Erstens können Sie moderierte Tests nur dann durchführen, wenn Sie die Zeit und die Ressourcen haben, um sie zu verwirklichen. Wenn das Budget kein Problem ist, würden wir sagen, dass moderierte Tests in fast allen Fällen genauere Ergebnisse liefern. Das Leben ist jedoch nicht immer so einfach, und vielleicht sind solch detaillierte Informationen nicht immer notwendig. Als UX-Forscher müssen wir unsere Schlachten entsprechend auswählen, je nachdem, welche Informationen wir aufdecken müssen.
Angenommen, das Budget stimmt mit Ihren Bedürfnissen überein und kann einen geeigneten Teilnehmerpool abdecken: Welche Arten von Produkttests erzielen den größten Nutzen aus dieser Option?
Moderierte Usability-Tests sind der bevorzugte Ansatz für komplizierte oder komplexe ProdukteDiese Methode eignet sich besonders für die Erstellung von Prototypen und frühen Optionen sowie für Lösungen, die die Nutzer zu eigenen Erkundungsfragen zwingen. Es ist auch ideal geeignet für EntdeckungstestsPrüfung bestehender Dienste auf Probleme und Fragen, die möglicherweise unter dem Radar geflogen sind.
Ob aus der Ferne oder persönlich durchgeführt, moderierte Tests ermöglichen eine bessere Beobachtung, Kontrolle und Erkundung und liefern eine Datentiefe, die von ihrem unmoderierten Gegenstück nicht erreicht wird.
Moderierte vs. unmoderierte Usability-Tests - eine kurze Zusammenfassung
Ohne die Einrichtung eines Studienlabors oder einer geeigneten Umgebung oder die Organisation von Reisen für Teilnehmer und Moderatoren zu einem geeigneten gemeinsamen Ort ist die Durchführung unmoderierter Tests schneller und kostengünstiger.
Es ist ein schneller und effizienter Weg, um Produkte und Funktionen anhand vorgegebener Aufgaben oder durch das Sammeln von Daten durch speziell entwickelte Fragen zu validieren.
Ohne einen Moderator, der die Studie leitet und jeden Teilnehmer bei den Feinheiten des Vorgangs, seinem Verhalten und seiner Mimik beobachtet und nach tieferen Erklärungen für bestimmte Handlungen sucht, kann es jedoch passieren, dass die Designer in komplexeren Situationen nicht die Daten finden, die sie sich erhoffen.
Die Vorteile von moderierten Usability-Tests
Betrachten wir moderierte Usability-Tests als Echtzeit-Interviews, die auf der Durchführung bestimmter Übungen basieren. Der Moderator kann die ultimative Kontrolle über jede Situation übernehmen und jeden Teilnehmer dazu anleiten, die Aufgaben auszuführen, die Aufschluss darüber geben, wie das Produkt und der Benutzer funktionieren.
Wann immer ein Teilnehmer unsicher ist, hat er eine zentrale Anlaufstelle, um Hilfe anzufordern und zu erhalten. Was bedeutet das nun für das Testen?
Höheres Maß an Engagement
Wenn ein Moderator die Studie leitet, ist es viel wahrscheinlicher, dass sich jeder Teilnehmer auf die jeweilige Aufgabe konzentriert. Bei unmoderierten Tests können die Teilnehmer kommen und gehen, wie sie wollen, und sich von allem und jedem in ihrer Umgebung ablenken lassen.
Durch eine kontinuierliche Konversation während des Tests und seiner Aufgaben kann jeder Moderator ein gutes Verhältnis und Vertrauen aufbauen und die Teilnehmer motivieren, ihr Bestes zu geben.
Es ist auch eine Gelegenheit, leiseren und weniger selbstbewussten Teilnehmern zu einer wirkungsvolleren Stimme zu verhelfen.
Stärkere Kontrolle
Moderierte Live-Tests ermöglichen dem Moderator die vollständige Kontrolle über jede Aufgabe und deren Richtung. Fällt ihm etwas Ungewöhnliches auf, hat er die Möglichkeit, einen völlig anderen Weg einzuschlagen, um unerwartete oder bisher nicht gesehene Daten zu erhalten. Sie können auch auf verwirrte oder frustrierte Blicke reagieren und fragen, was und warum die Leistung nicht einfach war und wie sie verbessert werden könnte.
Direkte Kommunikation ermöglicht den Zugang zu sofortigen Folgefragen
Die Moderatoren leiten nicht nur Aufgaben um, wenn sie in die falsche Richtung laufen, sondern stellen auch detaillierte Folgefragen zu den Aktionen und Beobachtungen der einzelnen Benutzer. Diese Kontrolle liefert weitaus mehr Daten zu neuen oder erwarteten Problemen und ermöglicht es den Designern, die effizientesten und effektivsten Lösungen zu finden.
Leichte physische Beobachtung, einschließlich Mimik, Verhalten und Produktverwendung
Die Teilnehmer geben durch Körpersprache, Mimik und Manierismen Hinweise und Zeichen, die sie vielleicht nicht in gesprochenen Worten oder schriftlichen Antworten ausdrücken. Durch die genaue Beobachtung lassen sich Pausen und Probleme leichter erkennen, was bei einem unmoderierten Verfahren nicht möglich wäre.
Manchmal führen die subtilsten Anzeichen zu den wertvollsten Gelegenheiten - Dinge, die bei anderen Arten von Tests leicht übersehen werden könnten.
Die Nachteile von moderierten Usability-Tests
Während die Vorteile recht überschaubar sind, sind die Nachteile moderierter Tests nicht zu übersehen, insbesondere wenn wir die besten Daten von unseren Probanden erhalten wollen.
Eine Möglichkeit zur Verzerrung der Antworten
Wenn ein Moderator jeden Test und jede Aufgabe durchführt, besteht die Möglichkeit, dass er die Teilnehmer unbewusst zu dem Ergebnis führt, das er erwartet oder erhofft. Selbst ein Hauch von Suggestion in ihren Fragen könnte dazu führen, dass die Nutzer eine Antwort geben, von der sie glauben, dass der Moderator sie hören will, anstatt das, was sie tatsächlich denken und fühlen.
Teilnehmer können sich unter Beobachtung weniger natürlich verhalten
Ein guter Moderator ermutigt seine Teilnehmer, sich zu entspannen und sich so zu verhalten, wie sie es tun würden, wenn sie nicht dabei wären. Das ist jedoch eine Fähigkeit, die Übung erfordert. Auch die besten Moderatoren werden mit Teilnehmern arbeiten, die ein wenig nervös sind oder weniger gut darauf reagieren, so genau beobachtet und beaufsichtigt zu werden.
Kostspieliger und erfordert mehr Ressourcen für die Einrichtung
Wie bereits erwähnt, sind die Kosten bei moderierten Tests höher; zu den finanziellen Auswirkungen kommt der zusätzliche Zeit- und Arbeitsaufwand für die Organisation und Durchführung der einzelnen Studien. Angesichts dieser zusätzlichen zeitlichen und finanziellen Beschränkungen sind die Stichprobengrößen tendenziell kleiner, was zu weniger genauen statistischen Daten führen kann.
Erstellung eines moderierten Usability-Testplans
Beim Entwurf von moderierten und unmoderierten Usability-Testplänen gibt es viele Ähnlichkeiten. Die folgenden Phasen ähneln zum Beispiel ziemlich stark dem Prozess, der in unserer unmoderierte Usability-Test-SeiteDie Hauptunterschiede liegen in der Regel in der Gestaltung und Durchführung der Prüfung und ihrer Aufgaben.
- Definieren Sie Ihre Ziele.
- Definieren Sie die Teilnehmerkriterien und erstellen Sie Ihren Benutzerpool.
- Entwerfen und erstellen Sie Ihren Testprozess.
- Führen Sie Pilotversuche durch.
- Führen Sie die abgeschlossenen Tests durch.
- Synthetisieren Sie die neuen Daten.
- Analysieren Sie die Ergebnisse und präsentieren Sie Ihre Erkenntnisse.
Die Durchführung von Tests in Person ermöglicht weitaus freiere Skripte und Anleitungen. Bei der Konzeption Ihrer Tests - und viele UX-Forschungsoptionen eignen sich für jede Art und Phase von Usability-Tests - müssen Sie jedoch die am besten geeignete Option auswählen, die Ihnen die benötigten Daten liefern kann.
Durchführung von moderierten Usability-Tests
Ein einfacher Überblick könnte folgendermaßen aussehen:
- Einführung ? Gehen Sie das Verfahren und die Erwartungen durch und versuchen Sie, den Benutzer zu beruhigen.
- Interview vor der Sitzung ? Erkundigen Sie sich nach der Vorgeschichte, dem Verhalten und den Gewohnheiten des Teilnehmers und stellen Sie gegebenenfalls vorbereitende Fragen zum Produkt, zur Branche oder zu anderen relevanten Bereichen.
- Durchführen der Aufgaben ? Alle Aufgaben sollten auf vordefinierte Ziele ausgerichtet sein.
- Interview nach der Sitzung ? Stellen Sie die Fragen, die nicht so wichtig waren, dass sie den Testfluss gestört hätten, wie sie das Produkt empfunden haben und was man hätte besser machen können, um mehr über die Erfahrung herauszufinden. Und bedanken Sie sich immer bei den Teilnehmern für ihre Hilfe bei der Studie.
Bei moderierten Tests gibt es noch weitere Faktoren, die sorgfältig bedacht werden müssen:
- Zeit- und Testpläne berücksichtigen ? Die Erstellung eines Testplans für eine große Anzahl von Teilnehmern kann eine Herausforderung sein.
- Planen Sie, wie die Leistungen der Teilnehmer aufgezeichnet werden sollen, und wählen Sie die von Ihnen bevorzugten Überwachungsinstrumente.
- Stellen Sie sicher, dass Sie die Aufgaben in einer bestimmten Reihenfolge konzipieren und durchführen, um einen natürlichen Ablauf der Tests zu gewährleisten.
Tipps für Moderatoren von Usability-Tests
Idealerweise sollte jeder Moderator Erfahrung in der Durchführung von Tests haben und mit der UX-Forschung und dem zu untersuchenden Produkt gut vertraut sein.
Die folgenden Punkte bieten jedoch ein paar grundlegende Tipps für diejenigen, die ihre eigenen Usability-Tests planen.
- Seien Sie klar und prägnant?behalten Sie einen gleichmäßigen Ton und bewahren Sie die Konsistenz zwischen den Teilnehmern.
- Versuchen Sie nicht, den Antworten der Teilnehmer zuzustimmen oder sie abzulehnen. Versichern Sie ihnen, dass es kein Richtig oder Falsch gibt; der Wert liegt in ihren Antworten und Handlungen.
- Zeichnen Sie alle Sitzungen auf - es ist von großem Nutzen, Interviews und Aufgabengespräche aufzuzeichnen und zu transkribieren.
- Machen Sie sich Notizen oder bestimmen Sie ein zweites Teammitglied, das diese für Sie macht.
- Geben Sie den Teilnehmern genügend Zeit und Raum, um jede Aufgabe zu überdenken und zu erkunden.
- Bleiben Sie während der Aufgaben so ruhig wie möglich, es sei denn, es ist notwendig, etwas zu sagen.
- Sie wissen, wann Sie sich einmischen sollten (und wann nicht) und wie Sie dies am besten tun, ohne den Prozess zu stören.
- Lassen Sie die Schlussfolgerungen bis zum Ende der Prüfung ruhen und konzentrieren Sie sich auf die Aufgabe, die vor Ihnen liegt.
- Achten Sie genau auf körperliche Gesten und Veränderungen im Ausdruck.
- Verwenden Sie nach Möglichkeit persönliche und relevante Daten, um das Engagement der Teilnehmer zu erhalten und die Aufgaben realistisch zu gestalten.
- Ermutigen Sie die Teilnehmer, zu beschreiben, was sie gerade tun, wo immer es angebracht ist.
- Üben Sie Skripte und machen Sie sich mit der Technologie vertraut, die Sie einsetzen wollen. Pilotversuche sind die ideale Gelegenheit, um Probleme zu beseitigen, bevor die eigentlichen Tests beginnen.
- Überlassen Sie nichts dem Zufall - erstellen Sie Checklisten für jede Aufgabe und jede Phase.
- Bleiben Sie bei jedem Test auf dem richtigen Weg ? auch wenn es notwendig ist, unvorhersehbare Wege zu erforschen, wenn sie passieren, hält Ihr Testprogramm den Fluss und die Kontinuität zwischen Aufgaben und Teilnehmern aufrecht.
Zusammenfassung
Es gibt erhebliche Unterschiede zwischen unmoderierten und moderierten Usability-Tests. Die Wahl der für den Zweck geeigneten Option hängt vom Design- und Forschungsteam und den Ressourcen ab. Wie bei jedem Test ist es wichtig, Ziele zu definieren, die Sie erreichen wollen, und die Methoden, die Sie zur Ermittlung Ihrer Daten verwenden, sollten sich an diesen Zielen orientieren.
Richtig durchgeführt, decken Usability-Tests unerwartete Probleme auf und validieren Ideen und Produktentwicklungen. Es ist ein wesentlicher Bestandteil der UX-Forschung und eine wertvolle Ressource zur Untersuchung von Usability-Problemen, Gedanken, Werten und Verhaltensweisen der Nutzer und zur Verbesserung ihrer Erfahrungen.
Wenn Sie mehr über diese interessante und potenziell äußerst nützliche Technik erfahren möchten, rufen Sie uns an unter +44(0)800 024624 oder senden Sie uns eine E-Mail an hello@ux247.com.
