Ablauf eines Usability Tests

Definition von Test-Zielen und Rahmenbedingungen

Vor dem Test-Projekt werden zunächst, meist noch in der Angebotsphase, die Testziele definiert, und über geeignete Testmethoden entschieden.

In dieser Phase klären wir folgende Fragen:

• Wie umfangreich ist der zu testende Bereich der Anwendung?
• Welche Bereiche sollen NICHT getestet werden?
• Welche Zielgruppen werden zur UX Testung verwendet?
• Wieviele Testpersonen sind sinnvoll?
• Welche Testmethode kommt zum Einsatz?
• Auf welchen Geräten wird getestet?
• Wo finden die Tests statt?
• Ist eine Eyetracking-Analyse sinnvoll?

Die genaue Vorgehensweise passen wir an die Bedürfnisse unserer Kunden an, z.B. um in einem agilen Entwicklungsprozess Ergebnisse möglichst rasch liefern zu können.

Kick-off, Test-Planung

Erster Schritt des Projekts ist die Testplanung, z.B. in einem Kick-off Meeting.
Es erfolgt die Zeit- und Ressourcenplanung, und die Abstimmung von Terminen mit dem Auftraggeber.
Wenn (technisch) möglich, analysieren wir bereits zuvor kurz Ihr Produkt, ohne Anleitung oder Einschulung, um einen möglichst unbeeinflussten ersten Eindruck zu erhalten.

Rekrutierung der Testpersonen

Als nächster Schritt werden die Teilnehmer rekrutiert. Die genaue Definition des Testpersonen-Profils wird mit dem Auftraggeber abgesprochen. Die Rekrutierung erfolgt meist aus unserem Online Panel (ca. 4000 Teilnehmer). Unser Auftraggeber kann aber natürlich auch selbst Testpersonen rekrutieren. Um genau die richtige Zielgruppe zu gewinnen, erstellen wir einen Fragebogen (Screener), in welchem die Anforderungen erhoben werden, z.B. "ist noch kein Kunde des Auftraggebers", "kauft Möbel beim Tischler", "würde online einen Vertrag abschließen" etc.
Die ausgewählten Testpersonen werden zu individuellen Terminen eingeladen. Dafür erhalten sie üblicherweise eine Bezahlung (Incentive).

Test-Vorbereitung

Gleichzeitig mit der Rekrutierung oder danach wird das Test-Skript erstellt und mit dem Auftraggeber abgestimmt. Selbstverständlich können Fragen des Auftraggebers ergänzt werden. In Probedurchläufen wird das Testskript getestet. Vor den eigentlichen Test-Sitzungen wird die Labor-Technik vorbereitet, z.B. Kameras und Aufnahmeverfahren konfiguriert, Übertragung in den Beobachtungsraum sichergestellt und Testszenarien am Testgerät zusammengestellt.

Wo finden die Usability Tests statt?

Die Test Sessions können in unserem Usability Labor oder remote (als Online Meeting) oder an beliebigen anderen Orten stattfinden. Der Ort kann auf Kundenwunsch auch flexibel gewählt werden, z.B. um es den Testpersonen zu überlassen, ob sie lieber remote teilnehmen oder im Usability Labor. Blinde Personen bevorzugen es auch oft, wenn der Testleiter zu ihnen kommt und sie sich den Weg zu uns ins Labor ersparen können.

Test-Durchführung

Jetzt finden der Reihe nach die Test-Sitzungen statt. Der Auftraggeber kann die Usability-Tests im Beobachtungsraum mitverfolgen. Auf Wunsch kann eingeplant werden, dass jede Test-Sitzung nach dem Test mit dem Auftraggeber diskutiert wird.

Während der Usability Test Sitzungen lösen Testpersonen die Aufgaben des Testskripts bzw. führen die geplanten Use Cases durch. Ein erfahrener Moderator führt das qualitative Interview und versucht durch umsichtige Vorgehensweise möglichst viele Erkenntnisse zu den Fragestellungen zu gewinnen.

Bei jeder Usability-Testung hat der Auftraggeber die Möglichkeit per Einwegspiegel und Videodirektübertragung die Testungen live zu beobachten.

Die Testungen können mittels spezieller Usability-Testing-Software aufgezeichnet werden: Bildschirminhalte, Video & Audio, Augenbewegungen der Testperson und Maus-Bewegungen - je nachdem, was im Projekt benötigt wird.

Auswertung der Testdaten

Nach den Usability/UX Testungen analysiert unser Experten-Team die Protokolle und Aufzeichnungen. Etwaige Usability Hürden werden analysiert, geklärt, warum sie auftreten und es werden konkrete und realisierbare Lösungsvorschläge erarbeitet, um die Probleme zu beheben.

Ergebnisse

Bei der Art der Auswertung richten wir uns nach den Bedürfnissen unseres Auftraggebers und dessen Entwicklungsprozess.
Von gemeinsamen Auswertungs-Meetings nach jedem Testtag bis zum detaillierten Bericht nach den Test-Sessions ist alles möglich.

Bericht

Die Test-Ergebnisse werden in einem Bericht detailliert zusammengefasst. Usability Schwachstellen werden aufgezeigt und nach Schweregrad bewertet (nach J. Nielsen). Zu jeder Usability Schwachstelle wird ein Lösungsvorschlag erarbeitet.

Präsentation

In einer Präsentation werden die Findings zusammengefasst und mit Ihrem Entwicklungsteam diskutiert.
Optional erhalten Sie Video-Ausschnitte der wichtigsten Szenen aus den Usability-Tests oder auch die Full-Videos der Test-Sessions.

Durchlaufzeit von Usability-Tests

Ein durchschnittlicher Usability-Test hat eine Durchlaufzeit von ca. 2 Wochen. Experten Reviews einer Software oder Webapplikation dauern zwischen 24 Stunden bis 1 Woche.
Je nach vom Auftraggeber gewünschter Vorgangsweise können z.B. für einen agilen Entwicklungsprozess auch sehr rasch Ergebnisse geliefert werden.

Kontaktieren Sie uns für ein unverbindliches
Beratungsgespäch!