Teil 2: Usability Testing bei sovanta: Vorbereitung

Alexander Lenhart
sovanta — Design Lab
6 min readApr 17, 2019

Siehe vorherigen Artikel zur Einleitung des Usability Testings.

Rechtzeitiges Timing

Um valide Testergebnisse zu erhalten, sollte das Projekt bereits eine fundierte Grundlage besitzen — der grundlegende Prozess sollte mithilfe von Customer Journeys und/oder User Stories mit unseren Kunden gemeinsam bereits erarbeitet sein. Darüber hinaus ist eine Visualisierung dieser mit Hilfe von Wireframes oder bereits Mockups notwendig. Meist ist dieser Zeitpunkt kurz vor der Entwicklung eines Projektes. Natürlich kann am Live-System oder auch bereits nach dem Go-Live immer ein Usability Test für stetige Verbesserungen durchgeführt werden.

Wer nimmt an dem Testing teil?

Grundlegend gibt es beim Testing 3 verschiedene Teilnehmer;
Wir von der sovanta führen die Rolle des Moderators aus. Als Moderator stellen wir die eigentlichen Aufgaben des Tests und leiten. Abhängig vom Projekt entwickeln wir eine Anwendung für den internen Gebrauch unserer Kunden oder für den Kunden unserer Kunden (friendly Customer) — somit kann er als Proband auftreten und/oder als Observer, der den Test mit seinem Kunden von außen beobachtet.

(first draft © Teresa Herzog)

Moderator und Protokollant: sovanta AG
Wir führen durch den eigentlichen Test und werten diesen anschließend aus.

Proband: Kunde oder deren Kunden (friendly Customer)
Er wird durch den Test geführt und bewältigt kleinere Aufgaben und gibt in einem offenen ehrlichen Gespräch Feedback zur Anwendung.

Observer: Kunde
Er betrachtet von außen das Geschehen und kann in dieser Zeit den Ablauf nicht unterbrechen oder verändern.

In unserem Beispiel sind die Testprobanden aus unterschiedlichen Bereichen, die mit den Produkten des Industrieunternehmens wiederum ihre eigene Produktion bestücken. Der Observer ist hier ein Mitarbeiter des Projektteams des Industrieunternehmens.

Die Grundlage für ein erfolgreiches Testing.

Was wir für ein erfolgreiches Usability Testing benötigen lässt sich auf folgende Dinge runterbrechen:

· UX Designer der sovanta (Moderator)

· Entscheidungsträger unserer Kunden (Proband oder Observer)

· Potentielle friendly Customer unserer Kunden (Proband)

· Definierte Testaufgaben

· Click-Dummy mit Wireframes oder Mockups

· Testing Tool

Eine weitere Grundlage bildet …

· ein gemeinsames Verständnis des Prozesses der Anwendung mit unseren Kunden.

· der Clickdummy 1:1 den Pfad für die Testaufgaben wiederspiegeln.

(first draft © Teresa Herzog)

Der Proband oder auch Friendly Customer

Um ein aussagekräftiges Ergebnis zu erhalten, ist eine Teilnehmeranzahl von 3–5 ideal. Wir empfehlen unseren Kunden immer Probanden zu suchen, die sich untereinander unterscheiden. Sei es das Alter, der Bildungsgrad oder die berufliche Position. Nachdem die potentiellen Probanden feststehen und die Kontaktdaten vorliegen erfolgt die Einladung, die wir von der sovanta versenden:

Beispiel für eine Einladung:

“Hallo Herr Mustermann,

meine Name ist Hans Dieter, ich bin User Experience Designer bei der sovanta AG. Wir arbeiten gemeinsam mit unserem Musterkunden an deren E-Commerce Plattform.

Wir arbeiten nach dem User Centered Design Prinzip daher steht bei uns der Endnutzer immer im Mittelpunkt. Im Zuge der Konzeption der E-Commerce Plattform setzen wir daher auch auf Friendly Customer Tests. Susanne Mustermann aus von unserem Musterkunden hatte daher ja bereits Kontakt mit Ihnen aufgenommen.

Bei diesem Test geht es darum gemeinsam mit Ihnen durch die Plattform bzw. Applikation zu gehen und verschiedene von uns vorbereitete Szenarien zu testen.

Dadurch wollen wir eventuelle Usability-Schwachstellen der Plattform aufdecken und ihr Feedback einsammeln.

Ich würde jetzt gerne einen 30–60 Minuten Termin mit Ihnen vereinbaren. Dafür kann ich die folgenden Zeitslots anbieten:

Dienstag: 2.04.2019: 10:00–11:00 Uhr
Dienstag: 2.04.2019: 15:00–16:00 Uhr
Mittwoch: 3.04.2019: 10:00–11:00 Uhr
Mittwoch: 3.04.2019: 14:00–15:00 Uhr

Falls es an diesen Terminen nicht klappen sollte,
könnten wir auch den gleichen Zeitslot eine Woche später anbieten.

Geben Sie uns einfach Bescheid welcher der Termine für Sie am besten passt.

Viele Grüße und Danke Ihnen im Voraus
sovanta AG ”

Die Testaufgaben

Die Testaufgaben basierend auf den Customer Journeys, die wir mit den Kunden erarbeitet haben. Sie werden aufgeteilt in kleinere User Stories. Wir beschränken uns hierbei auf ca. 7–10 konkrete Testaufgaben. Inhaltlich sind die Aufgaben so mit unseren Kunden abgestimmt, dass der Proband sich in seinem Szenario wie in einer realen Arbeitssituation befindet.

(first draft © Teresa Herzog)

In unserem Beispiel kann es folgende Testaufgaben geben:

“Stellen Sie sich vor, Sie benötigen für die Arbeit in Ihrem Labor eine Verbindung auf chemischer Basis. Sie besuchen nun zum ersten Mal die e-Commerce Plattform vom Industrieunternehmen, die Ihnen ein Kollege vor ein paar Tagen empfohlen hat. Glücklicherweise hat Ihnen ihr Kollege seinen Account für ihr Institut bereits per E-Mail zugeschickt. Loggen Sie sich ein und suchen sie nach Palladiumverbindungen.”

Das verfolgte Ziel wäre hier: Einloggen, Suche nach einem Produkt

(…)

“… 4 Wochen später kommen Sie ins Büro und Ihre Kollegin fragt an, wo die Bestellung bleibt und ob man mal nachsehen könnte, wie der Status der Bestellung ist. Schauen Sie nun in der Übersicht Ihrer letzten Bestellungen nach. Gehen Sie danach zurück auf die Startseite.

Das verolgte Ziel wäre hier: Status Check in der Order History des Webshops

“Abschließend würden wir Sie gerne nach dem Allgemeinen Eindruck zur Anwendung fragen. Gibt es Punkte, die Ihnen besonders gefallen haben und welche nicht?”

Das verfolgte Ziel wäre hier: Generelle Anmerkungen bzw. Einblicke

Einladung und Vorbereitung zum Testing

Ungefähr 1–2 Wochen vor dem Testing koordinieren wir einen 1-stündigen Termit dem Probanden. Falls der Proband ein friendly Customer unseres Kunden ist, wird unser Kunde natürlich als potentieller Observer mit eingeladen. Nicht zu vergessen ist das Einverständnis einer Datenschutzerklärung.

(first draft © Teresa Herzog)

In dieser Vorlaufzeit sollte der Proband die technischen Vorrausetzungen erfüllen bzw. umsetzen;

· Verfügbarkeit von einer Webcam

· Verfügbarkeit eines Mikrophons bzw. Lautsprechers

· Installation von notwendigen Browsern bzw. Plugins

Beispiel für ein Briefing:

“Hallo Herr Mustermann,

anbei finden Sie den geplanten Termin für das User Testing. Vielen Dank für Ihre Bereitschaft uns bei der Entwicklung mit Ihrem Feedback zu helfen.

Am Tag des Testings machen wir eine initiale Vorstellung in Skype bzw. über Telefon — danach wechseln wir dann in das Testsystem.

Leider können wir Ihnen keinen Dummy vorab zur Verfügung stellen, da wir den initialen Eindruck gerne festhalten möchten. Es wird sich dabei nur um einen Click-Dummy handeln.

Bitte bereiten Sie folgende Dinge für den Test vor:

- Verfügbarkeit von Headset und Webcam

- Installation des Browsers Chrome

Unser Musterkunde wird Ihnen vorab die Informationen zum Datenschutz mitteilen. Wir freuen uns auf einen aufschlussreichen Test mit Ihnen!

Viele Grüße
sovanta AG ”

Das Testing-Tool

Als Testing-Tool empfehlen und nutzen wir lookback. Es ermöglicht eine stabile und qualitative Testsituation zwischen Moderator und Proband. Die Testsession wird im Hintergrund aufgezeichnet und kann jederzeit abgerufen, bearbeitet und kommentiert werden. Neben einer Bildschirm, Ton und Webcam-Übertragung, können auch die Testaufgaben in einem gemeinsamen Chatfenster übermittelt und dokumentiert werden.

(white labeld Testing Situation)

Die Woche vor dem Usability Test

In der Zeit vor dem eigentlichen Test überprüfen wir intern mit unseren Kolleginnen und Kollegen, ob unsere Vorbereitungen für einen reibungslosen Ablauf noch Lücken aufweisen. Wir überprüfen die eigentliche Aufgabenstellung, den Clickdummy und spielen das Testszenario von A bis Z einmal durch.

In unserem Beispiel gehen wir auf unseren Kollegen zu, die nicht Teil des Projektes sind und führen intern einen Test unter reellen Bedingungen durch. Dadurch kann das Setup und die eigentliche Durchführung verbessert werden.

Der Artikel zur Durchführung folgt.

--

--