Die besten Fragen für deinen Usability Test Fragebogen

Wie einfach ist deine Website zu bedienen? In einem Usability Test findest du heraus, welche möglichen Usability Probleme es gibt und durch was deine User in ihrer User Experience gestört werden. In diesem Artikel stellen wir dir vor, was genau ein Usability Test ist und geben dir einige Fragen an die Hand, die du in deinem eigenen Test verwenden kannst.

Was ist ein Usability Test?

Usability lässt sich am besten mit „Gebrauchstauglichkeit“, „Benutzerfreundlichkeit“ oder „Nutzbarkeit“ übersetzen. In einem Usability Test wird vornehmlich das Nutzerverhalten und die Funktionalität einer Website, App oder eines Produktes getestet. Mithilfe der Ergebnisse soll die User Experience (UX) verbessert werden, weswegen die Tests oftmals in der Beta Phase oder sogar vor dem Launch des Testobjekts durchgeführt werden. Sie werden außerdem eingesetzt, um die Barrierefreiheit digitaler Produkte zu testen oder wenn eine Website oder App im Zuge eines Relaunches eine neue Struktur erhält.

Die Begriffe User Experience (UX) Test, User Test und Usability Test werden häufig synonym verwendet. Tatsächlich lassen sich UX Tests und Usability Tests eher als Kategorien eines User Tests lesen.

Usability Tests versuchen Antworten auf Fragen wie „Wie kommen User von A nach B?“, „Finden sie alles, was sie suchen und wenn nein, was erschwert ihnen die Navigation?“ oder „Interagieren die User mit der Website und wenn nein, was hält sie davon ab?“ zu finden.

Auch in der Lokalisierung sind Usability Tests eine gute Idee, da so herausgefunden werden kann, ob lokale Konventionen und Eigenheiten korrekt übersetzt und verstanden wurden.

Empfehlenswert ist es, etwa zehn Testpersonen pro Testobjekt zu haben. Nutzen 10 Personen aus unterschiedlichen Lebensrealitäten dein Produkt/Website/App, finden sie (fast) alle Bugs und sind als Gruppe heterogen genug, um unterschiedliche Nutzungsverhalten aufzuweisen.

Durchführungsmethoden von Usability Tests

Es gibt drein grundsätzliche Methoden, Usability Tests durchzuführen.

In Persona oder digital

Du kannst einen Test entweder mit den Testpersonen vor Ort oder digital ausführen. Eine Umfrage vor Ort bedeutet selbstverständlich mehr Aufwand, da Räumlichkeiten organisiert werden müssen und du Testzeiten und Slots mit den Personen koordinieren musst.

Digital befragen kannst du zum Beispiel direkt in deiner App oder auf deiner Website oder du verschickst eine Usability Umfrage per E-Mail an deine Newsletter-Subscriber.

Moderiert vs unmoderiert

Bei einem moderierten Test hast du direkten Kontakt zu den Testpersonen und stehst für Rückfragen zur Verfügung. Du fragst eher nach dem Warum hinter ihrem Verhalten. Die User füllen in einem unmoderierten Test den Fragebogen ohne Kontakt zu den Forschenden aus. Dadurch kannst du schwerer Rückfragen stellen und du kannst nicht sichergehen, ob deine Testpersonen die Fragen richtig verstanden haben. Unmoderierte Tests eignen sich gut für Tests, die aus der Ferne durchgeführt werden, obwohl du selbstverständlich auch bei Long Distance Tests in einem gemeinsamen Zoom-Call moderieren kannst.

Qualitativ vs quantitativ

Bei einem qualitativen Test fragst du ebenfalls eher nach dem Warum hinter dem Verhalten deiner Nutzenden. Quantitative Fragebögen legen hingegen den Fokus auf Data Collection & Analysis, um vergleichbare Daten zu haben. Dadurch kann zum Beispiel die Gebrauchstauglichkeit einer App anhand einer Likert Skala vor und nach dem Relaunch miteinander verglichen werden. Oft werden innerhalb eines Fragebogens sowohl qualitative als auch quantitative Fragen gestellt.

Die 4 Phasen

Zu einem Standard-Usability-Test gehören meistens vier Phasen: Screening, Pre-Test, Test & Post-Test. Je nach Umfang und Methodik deines Tests sind nicht immer alle Phasen vertreten.

Screening

Bei einem Screening wird eine breite Masse an Personen befragt, da das Ziel, die Nutzerkriterien zu überprüfen. In einem Screening entscheidet sich, wer am eigentlichen Test überhaupt teilnehmen „darf“. Wenn du den Test über eine externe Website ausrollst oder auf Daten-Pools von Marktforschungsunternehmen zugreifst, möchtest du schließlich passende Testpersonen finden.

Um die passenden Teilnehmenden zu finden, stellst du in diesem Schritt deswegen demografische Fragen: Name, Alter, Wohnort, Haushaltseinkommen, Familienstatus, Bildungsabschluss, etc. Bietest du Produkte in einem höherpreisigen Segment an oder möchtest gezielt Teilnehmende in ländlichen Gebieten befragen, lohnt sich ein Screening.

Spielst du den Test als Umfrage auf einer Website aus oder verschickst ihn in einem Newsletter an deine Subscriber, ist ein Screening manchmal hinfällig.

Das Screening setzt voraus, dass du einen großen Pool an potenziellen Teilnehmenden hast. Fallen zum Beispiel alle Personen über 35 Jahren raus, muss deine Zielgruppe dennoch groß genug sein, um belastbare Ergebnisse produzieren zu können.

Pre-Test

Der Pre-Test kann, je nach Ziel deines Tests, ebenfalls optional sein. Im Pre-Test werden vorhandenes Wissen und vorherige Erfahrungen abgefragt, um die Ergebnisse des Tests hinterher besser einordnen zu können. Betreibst du eine Website für internationale Snacks, ist es hilfreich zu wissen, ob deine Teilnehmenden Vorwissen zu Snacks haben oder nicht — sie finden hinterher unter Umständen schneller zu den Cheesecake Pockys, weil sie wissen, dass es sich um eine japanische Süßigkeit handelt. Das Vorwissen kann dir helfen, Ausreißer besser zu kategorisieren.

Aber auch Fragen rund um dein Unternehmen und deine Marke können im Pre-Test gestellt werden. Spielst du den Test über deine eigenen Kanäle aus, ist das aber oft nicht notwendig.

Test

Die Befragung während der Testphase ist oft involvierter. Du stellst Rückfragen, lässt die User erklären, warum sie so gehandelt haben, wie sie gehandelt haben und bietest Hilfestellungen und Ergänzungen über den Rahmen des Fragebogens hinaus an.

Rückfragen stellen oder das Warum erfahren kannst du aber auch in einem unmoderierten Test. PollHero bietet dir dafür Logiken & Routing an. Damit kannst du nach Gründen für bestimmte Bewertungen fragen, gezielt nach der Meinung zu besonderen Bereichen auf der Website fragen oder basierend auf vorherigen Antworten gezielte Aufgaben stellen.

Die eigentliche Testphase ist fokussierter auf Open End und Warum-Fragen, damit du die Verständlichkeit deiner Website oder App besser evaluieren und die Aussagen der Testpersonen klarer verstehen kannst — auch in einem unmoderierten Test.

Allgemein gilt: Für einen qualitativen Test solltest du mindestens 10 Testpersonen haben, quantitative Tests brauchen meist mehr User, um genügend Daten für eine aufschlussreiche Evaluation zu sammeln.

Post-Test

Der Post-Test ist gut, um Feedback über den Test zu sammeln und einen allgemeinen Eindruck über die User Experience deiner Teilnehmenden zu erhalten.

Hier geht es weniger um die Usability und viel mehr um die Erfahrung und den Gesamteindruck deines Online Shops oder deiner App.

Beispiel-Fragen für deinen Usability Test Fragebogen

Im Folgenden möchten wir dir die besten Fragen für deinen Usability Test Fragebogen vorstellen. Je nach genauem Ziel deines Tests sowie deiner Branche kannst du die Fragen anpassen. In jedem Fall helfen sie dir dabei, Usability Probleme auf deiner Seite oder App zu erkennen und entsprechend zu beheben.

Screening Fragen

Mit Screening Fragen kernst du deine Nutzenden besser kennen. Durch Logiken kannst du die Umfrage einfach beenden, wenn jemand nicht in deine Zielgruppen-Auswahl fällt.

• Wie alt bist du? (entweder Zahleneingabe als Freitext oder Range als Single Select)
• Wo wohnst du? (entweder Stadt/Bundesland als Freitext oder Range mit Einwohnendenanzahl als Single Select)
• Wie hoch ist das Haushaltseinkommen? (Range als Single Select)
• Was ist dein höchster Bildungsstand? (Single Select)
• Wie viele Personen wohnen mit dir in deinem Haushalt? (Freitext oder Single Select)
• Hast du Kinder? Wenn ja, wie viele/welches Alter? (Single Select mit Folgefrage als Range Single Select oder Freitext)
• In welchem Bereich arbeitest du? (Freitext)
• Mit welchem Geschlecht identifizierst du dich? (Single Select)

Achte bei den sensiblen privaten Fragen darauf, deinen Testpersonen immer die Option „möchte ich nicht angeben“ zu bieten.

Pre-Test Fragen

Mit den Pre-Test Fragen kannst du mehr Informationen über den Wissenstand deiner User erhalten. Das kann für die Auswertung des Usability Tests sinnvoll und hilfreich sein.

• Hast du schon einmal von unserem Unternehmen gehört? (die Frage ist selbstverständlich überfällig, wenn du die Teilnehmenden aus deiner Kundschaft akquirierst)
• Wie oft benutzt du unsere Produkte/unseren Service? (Range als Single Select)
• Wie oft besuchst du unsere Website? (Range als Single Select)
• Hast du jemals Produkte aus der Kategorie X benutzt? (Single Select)
• Mit welchem Device shoppst du für gewöhnlich online? (Single Select)
• Wie gut kennst du dich mit X aus? (Single Select)
• Welche Apps nutzt du, um online einzukaufen/Videos zu schauen/Nachrichten zu lesen/…? (Multi Select)

Test Fragen

Der „richtige“ Usability Test findet erst jetzt statt. Hier findest du heraus, wie gut sich die User auf deiner Website oder in deiner App zurechtfinden.

• Finde Produkt X auf unserer Website und beschreibe, wie du zu dem Produkt gelangt bist. (Freitext)
• Welche dieser beiden Optionen bevorzugst du und warum? (Freitext)
• Wie fandest du das Checkout-Erlebnis/Layout der Website/Navigation der Website/…? (Freitext)
• Was war deine Erfahrung beim Erledigen von X? (zB bei einer Bestellung oder dem Löschen eines Artikels aus dem Warenkorb) (Freitext)
• Was denkst du über die Produktbeschreibungen auf den Produktseiten? (Freitext)
• Was glaubst du sind die Hauptmerkmale von Produkt/Service/SaaS X? (Freitext)

Post-Test Fragen

Die Post-Test Fragen sammeln vor allem Feedback über die Erlebnisse und die User Experience deiner Teilnehmenden.

• Was ist dein Gesamteindruck der Website? (Freitext)
• Was ist das Beste/Schlechteste an X? (Freitext)
• Was würdest du an X ändern? (Freitext)
• Welches Argument überzeugt dich am meisten davon, X zu nutzen? (Freitext)

Fazit

Ein gut geplanter Usability Test mit einem durchdachten Fragebogen ist der Schlüssel, um wertvolle Erkenntnisse über das Nutzerverhalten und mögliche Usability Probleme zu gewinnen. Mit den richtigen Fragen kannst du gezielt die Gebrauchstauglichkeit deiner Website oder App verbessern und so die User Experience nachhaltig steigern. Die Anzahl der Freitext-Fragen während des Tests zeigt dir, wie wichtig Warum-Fragen sind, um mehr über das Verhalten deiner User zu erfahren. Nutze die vorgestellten Fragen als Vorlage oder Inspiration, um deinen eigenen Usability Test Fragebogen effektiv zu gestalten.