Wer, was und warum – Ein Leitfaden für Benutzertestmethoden

Der grundlegende Zweck von Benutzertests besteht darin, die Hauptbenutzer eines digitalen Produkts besser zu verstehen und sich in sie hineinzuversetzen. Leider sind Benutzertests oft ein nachträglicher Einfall.

Von der Kartensortierung bis hin zu Usability-Studien werden im UX-Design verwendete Benutzertestmethoden entwickelt, um den Benutzer in den Entscheidungsprozess einzubeziehen. Viele Projekte werden jedoch nur mit Stakeholder-Feedback eines Prototyps abgeschlossen. Dieser Mangel an Benutzererfahrungstests hat zwei Gründe: der wahrgenommene negative ROI von Benutzertests in Verbindung mit der Sorge um Umfangszunahme.

Der wahrgenommene ROI von Benutzertestmethoden

Aus Designersicht bedarf die Durchführung von Usability-Studien keiner Verstärkung. Jeder UX-Designer, der jemals beobachtet hat, wie Menschen Schwierigkeiten haben, Aufgaben mit ihrem Prototyp auszuführen, versteht den Wert von Benutzertests. Leider hatten die meisten Führungskräfte, Ingenieure und Projektmanager noch nie das Privileg, einem Usability-Test beizuwohnen, und müssen sich wahrscheinlich auf andere Weise von der Bedeutung von Benutzertests überzeugen.

Daten belegen die Steigerung des ROI

Die Benutzerfreundlichkeit ist direkt mit der Kundenloyalität und dem Kaufverhalten verbunden – Studien von Jakob Nielsen vom NN/g deuten darauf hin, dass, wenn etwa 10 % eines Redesign-Budgets für Benutzertestmethoden ausgegeben werden, die Benutzerfreundlichkeit des Produkts um durchschnittlich 135 % steigt.

Unternehmens-Fallstudie

Wenn Benutzer die gesuchten Informationen leicht selbst finden können, verringert dies die Frustration und verbessert ihre Erfahrung.

Millionen von Benutzern besuchen jedes Jahr die Support-Website von Mozilla Firefox. Viele Besuche werden zu Fragen, die im Support-Forum gestellt werden. Mit einem auf Auffindbarkeit optimierten Design reduzierte Mozilla innerhalb von neun Wochen nach iterativen Designtests die Supportanfragen um 70 % .

Fallstudie Einzelhandel

Das internationale Farbenunternehmen Dulux wusste, dass das Hauptproblem beim Online-Verkauf von Farbe die Frage war: „Wie wird meine Wand aussehen, wenn die Farbe getrocknet ist?“ Um dies zu umgehen, konzipierten sie eine Augmented-Reality-App namens Dulux Visualizer , um den Verbrauchern zu helfen, sich „ein Bild zu machen, bevor sie es malen“, und beauftragte Webcredible mit der Erstellung der Anwendung.

Durch Benutzerforschung, User Journey Mapping und Usability-Tests erstellte das Webcredible-Team eine App, die den Verkauf von Testfarben um 65 % und die Suche bei Fachhändlern um 92 % steigerte .

Scope Creep Aversion

Der zweite Grund, warum Benutzertests übersehen werden, betrifft weniger die Führungskraft als vielmehr den Projektmanager. Fast jeder Designer hat schon einmal einen Projektmanager sagen hören, dass aufgrund einer knappen Frist keine Zeit für Benutzertests bleibt.

Projektmanager verstehen nur drei Komponenten, die für ein Projekt wichtig sind: Zeit, Kosten und Umfang. Ziehen Sie an einem und ein anderer wird sich verschieben. Wenn beispielsweise einem Projekt weitere Funktionen hinzugefügt werden, verlängert sich die Zeitleiste oder es werden weitere Ressourcen hinzugefügt. Aus diesem Grund zögert ein PM, sich zu bewegen, wenn ein Zeitplan festgelegt ist. Wenn Designer dies verstehen, können sie diese Tendenzen mit etwas UX-Schulung über die verschiedenen verfügbaren Methoden, ihren Umfang und ihr Budget bekämpfen. Schauen wir uns eine Reihe von Benutzertestmethoden an, die UX-Designer anwenden können, um die Benutzerfreundlichkeit digitaler Produkte zu bewerten.

Die vielen Arten von Benutzertestmethoden

Es gibt viele Arten von Benutzertests, von Verhaltens- und Einstellungstests bis hin zu qualitativen und quantitativen, jeweils mit einer festgelegten Anzahl von Teilnehmern für optimale Ergebnisse.

Einstellungs- und Verhaltenstests werden zusammengefasst als „was die Leute sagen“ vs. „was die Leute tun“. Oft sind die beiden sehr unterschiedlich.

Qualitatives und quantitatives Testen wird als „direkte Beobachtung“ vs. „indirekte Messung“ beschrieben. Quantitative Testdaten werden immer eine bestimmte Menge, Menge oder Bandbreite ausdrücken, während qualitative Testdaten Informationen über Qualitäten enthalten.

Jeder dieser Begriffe fällt unter formativ oder summativ. Dieses Zitat von Robert E. Stake, emeritierter Professor für Pädagogik an der University of Illinois, fasst es gut zusammen: „Wenn der Koch die Suppe probiert, ist das prägend. Wenn die Gäste die Suppe probieren, ist das summativ.“

Qualitative Verhaltenstests für Benutzer

Diese Art von Benutzertest beobachtet, was eine kleine Anzahl von Teilnehmern in verschiedenen Situationen tut, sei es in ihrer Arbeitsumgebung, wenn sie ihrer normalen Routine nachgeht, oder um Aufgaben in einem kürzlich entworfenen Prototypen zu erledigen. Diese Tests erfordern die geringste Anzahl von Teilnehmern und können daher am einfachsten davon überzeugt werden, einen Projektmanager einzubeziehen.

Was ist die optimale Teilnehmerzahl bei Usability-Tests?

Laut dem Buch A Mathematical Model of the Finding of Usability Problems werden fünf Usability-Testteilnehmer 85 % der Probleme innerhalb der getesteten Benutzeroberfläche aufdecken. Für beste Ergebnisse sollte dies mit drei Entwurfsiterationen für insgesamt 15 Teilnehmer durchgeführt werden.

Usability-Studien werden oft mitten in einem Projekt durchgeführt, nachdem ein erstes Design erstellt wurde. Anstatt zu warten, bis ein Produkt auf den Markt gebracht wurde, um Usability-Probleme zu entdecken, können die gesammelten Daten zur Verbesserung des Produkts verwendet werden, wenn es einfacher ist, Änderungen an der Designspezifikation vorzunehmen.

Um die vorgeschlagene Anzahl von fünf Benutzern pro Design-Iteration zu erreichen, führte das NN/g 83 Usability-Tests bei verschiedenen Kunden mit Studien von 2 bis 28 Teilnehmern durch. Die Ergebnisse zeigten eine signifikante Zunahme von Wiederholungsbefunden mit nur wenigen neuen Befunden nach fünf Teilnehmern. Die wichtigste Schlussfolgerung ist, dass alle Usability-Tests zumindest einige Erkenntnisse erbracht haben.

12 Benutzer deckten 33 Probleme beim Testen der Benutzererfahrung auf

Die Entwickler einer neuen App für Krebsüberlebende kontaktierten Marketade, um drei Wochen vor der Produkteinführung Usability-Tests durchzuführen. Über einen Zeitraum von zwei Wochen führte Marketade iterative Usability-Tests mit 12 Benutzern durch: 8 Krebsüberlebende und 4 Betreuer. Ihre Usability-Tests ergaben 33 Usability-Probleme, von denen 9 schwerwiegend waren.

Das Wichtigste, was all diese Fallstudien gemeinsam haben, ist, dass kleine Testgruppen einen großen Einfluss auf die Endnutzbarkeit eines Produkts haben können. Produktmanager, Projektmanager und andere Beteiligte können leichter für Benutzertests an Bord geholt werden, wenn gezeigt wird, dass es nicht Hunderte von Teilnehmern (und wochenlange Zeit) braucht, um aussagekräftige Ergebnisse zu sammeln.

Qualitative Einstellungstests von Benutzern

Für diesen Test untersuchen UX-Forscher kleine Gruppen von Teilnehmern, um zu verstehen, wie sie über ein Produkt, eine Architektur oder ein Design denken. Qualitative Einstellungstests erfordern etwas mehr Teilnehmer als qualitative Verhaltensstudien, aber nicht viel mehr.

Kartensortierung

Eine Studie wurde durchgeführt, um die Mindestanzahl der erforderlichen Card-Sorting-Teilnehmer zu verstehen, und fand heraus, dass 15 Benutzer eine einfache Architektur durch eine Card-Sorting-Übung schnell verbessern können, während 30 Teilnehmer für größere Architekturen wie Intranets und Portale empfohlen werden. Card Sorting wird oft mitten in einem Projekt durchgeführt, nachdem die Informationsarchitektur geprüft wurde.

Schwerpunktgruppen

Neuere Untersuchungen zeigen, dass 3 bis 6 Fokusgruppen mit 8 bis 10 Teilnehmern 90 % der Themen innerhalb eines Datensatzes identifizieren können. Diese Fokusgruppen werden typischerweise während der Strategiephase eines Projekts durchgeführt. Es gibt viele Übungen, die mit Fokusgruppenteilnehmern durchgeführt werden können, von partizipativen Designübungen bis hin zu offenen Diskussionen.

Qualitatives Einstellungsbeispiel

Die User-Experience-Firma Etre hat enorme Anstrengungen unternommen, um die Eurostar-Informationsarchitektur zu verbessern. Ihre Website enthielt 11.000 Webseiten und PDFs, von denen 80 Seiten grundlegend für die Architektur waren. Etre verwandelte jede Kernseite in eine Karte für eine umfangreiche Kartensortierübung. Sie verstanden die Notwendigkeit von 20 Teilnehmern pro Benutzergruppe, aber bei 9 Benutzergruppen umfasste ihre Übung 180 Teilnehmer, die jeweils 80 Karten sortierten und 14.400 Artikel für den Katalog produzierten!

Glücklicherweise nutzte Etre eine Online-Card-Sorting-Ressource, die die Daten automatisch in verdauliche Erkenntnisse sortierte. Während das Kartensortieren nur eine Komponente in einem größeren Webdesign-Aufwand war, verzeichnete Eurostar eine Umsatzsteigerung von 24 % oder 26 Millionen Pfund Sterling gegenüber dem Vorjahr sowie einen Anstieg des Website-Verkehrs um 2,2 %.

Quantitative Verhaltenstests von Benutzern

Für diesen Studientyp sind mindestens 20 Teilnehmer erforderlich, oft auch mehr. Bei quantitativen Studien suchen UX-Forscher nach Mustern in den gesammelten Daten. Je mehr Teilnehmer also teilnehmen, desto genauer sind die Daten.

Heatmaps

Das NN/g stellte fest, dass 39 Benutzer erforderlich sind, um die erforderlichen Heatmap-Details für Eyetracking-Übungen bereitzustellen. Für jede getestete Seite sind mindestens 30 Sätze guter Eye-Tracking-Daten erforderlich, was im Durchschnitt 39 tatsächlichen Benutzern entspricht, um diesen Datensatz zu erhalten (da die Eye-Tracking-Technologie nicht perfekt ist). Eye-Tracking für Heatmaps wird normalerweise durchgeführt, nachdem ein neues Design ausgeführt wurde.

Quantitative Studien

Für quantitative Studien werden mindestens 20 Teilnehmer empfohlen. Wie Usability-Tests werden diese Studien durchgeführt, um zu verstehen, wie sich ein Benutzer verhält, indem er eine Reihe von Aufgaben erledigt. Der Unterschied besteht darin, wie die Daten gesammelt werden, d. h. durch Fernbetrachtung anstelle von Eins-zu-Eins-Übungen. Sie werden oft gegen Ende durchgeführt, nachdem das Produkt oder ein interaktiver Prototyp online gehostet wurde.

Da für diese Art von Studien mehr Benutzer erforderlich sind, können sie länger dauern und teurer in der Durchführung sein. Aus diesem Grund werden sie weniger häufig verwendet als viele qualitative Benutzertestmethoden.

Erhöhte Benutzerbindung

Durch die quantitative Forschungsseite UserTesting hat Evernote die Benutzerbindung auf mehreren Geräten um 15 % gesteigert. Durch das Hosten ihres Produkts auf UserTesting.com und die Nutzung ihres vielfältigen Publikums konnte Evernote nachvollziehen, wo Benutzer auf Probleme gestoßen sind. Die Verwendung dieser Arten von Benutzertesttools ist besonders wertvoll für Produkte, die ein breites Publikum haben, bei dem ein vielfältiges Feedback von Benutzern hilfreich ist. Andere Lösungen funktionieren möglicherweise besser für Produkte mit einer sehr spezifischen, definierten Gruppe von Benutzern.

Quantitative Einstellungstests von Benutzern

Der teilnehmerlastigste Test ist die quantitative Einstellungsübung. Ziel ist es, zu verstehen, was eine große Gruppe von Personen über ein Produkt denkt, mit dem Ziel, die Antworten in aussagekräftigen Diagrammen und Grafiken für eine einfache Nutzung zusammenzustellen.

Umfragen

Die Umfrageteilnehmer variieren je nach Größe der Produktpopulation. Optimale Ergebnisse beinhalten eine Fehlerspanne von 5 % (oder weniger) und ein Konfidenzniveau von mindestens 95 %. Mit einem Stichprobenrechner können Sie die erforderliche Teilnehmerzahl ermitteln.

Beispielsweise benötigt eine kleine Website mit 100 Einwohnern nur 80 Umfrageteilnehmer, während eine beliebte Website mit 100.000 Einwohnern 383 Umfrageteilnehmer benötigen würde. Umfragen werden sowohl zu Beginn als auch am Ende eines Projekts durchgeführt.

Quantitatives Einstellungsbeispiel

Während Walmart.ca viele statistische Website-Daten sammelte, erzählten ihre Daten ohne Kundeneinblicke nur die halbe Wahrheit. Durch die Einbeziehung menschlicher Daten durch Website-Umfragen zusammen mit ihren Transaktionsdaten konnte Walmart das vollständige Bild sehen und das Website-Layout verbessern, was wiederum seinen Umsatz um 13 % steigerte.

Zusammenfassung

Das Zeigen von harten Daten kann Entscheidungsträger davon überzeugen, Ressourcen für Benutzertests aufzuwenden. Der Benutzer ist das Rückgrat eines Produkts und der wahre Zweck des User Experience Designs; Die Implementierung einiger der in diesem Artikel beschriebenen Benutzertestmethoden, um qualitative und quantitative Daten zu sammeln, um zu beweisen, was funktioniert und was nicht, sollte für jeden UX-Designer oberste Priorität haben.

Lassen Sie uns wissen, was Sie denken! Bitte hinterlassen Sie unten Ihre Gedanken, Kommentare und Ihr Feedback.

Weiterführende Literatur im Toptal Design Blog:

• Der wahre ROI von UX: Die Executive Suite überzeugen
• So führen Sie Usability-Tests in sechs Schritten durch
• Daten aus Usability-Tests in die Tat umsetzen, ohne verrückt zu werden
• So führen Sie effektive UX-Forschung durch – Ein Leitfaden
• Die 10 UX-Ergebnisse, die Top-Designer verwenden