Meilenstein 5: Usability Evaluierung¶

Lernziele

Sie können einen Usability Test als Moderator und Beobachter durchführen
Sie können sich auf das Beobachten beschränken und widerstehen der Versuchung Test-BenutzerInnen zu schulen
Sie können Usability Probleme anhand von kleinsten Anzeichen der Test-BenutzerInnen erkennen
Sie können Usability Probleme präzise benennen und dokumentieren

Vorbemerkung¶

Führen Sie die Usability Evaluation und das Design Review wie im weiteren Verlauf beschrieben durch und dokumentieren sie die Vorbereitung, Durchführung und Auswertung entsprechend. Fügen sie auch Fotos des/r Usability-Tests hinzu.
Bereiten Sie entspr. Testprotokolle vor. Sie können sich hier an der vorgegebenen Checkliste orientieren, d.h. betrachten Sie die Checklisten als “Rohmaterial” und machen Sie daraus Protokollformulare.
Die Testprotokolle sollen den EntwicklerInnen bei der weiteren Verbesserung helfen.
Keine Angst, die Verbesserungen müssen Sie nicht mehr umsetzen.
Eine Vorlage zur Evaluation der Applikationen (mit Beispielen für eine intuitive TV-Fernbedienung) findet sich in Moodle: https://lernen.h-da.de/mod/resource/view.php?id=218415
Fügen Sie alle zu erstellenden Artefakte (Testprotokolle, die sie für eine andere Gruppe erstellt haben etc.) der Projektmappe hinzu und bennenen sie diese entsprechend. Achten sie auf die Einhaltung der Deadline.

ACHTUNG: Verspätete Abgaben können nicht gewertet werden!

Aufgaben¶

Usability Test¶

Führen sie einen (oder mehrere) Usability Tests unter Zuhilfenahme der Thinking Aloud Methode durch. Achten sie hierbei insbesondere auch auf die verschiendenen Schritte zur Testvorbereitung und dokumentieren sie alle Schritte der Testdurchführung entsprechend.

Achten sie auf eine korrekte Vorbereitung und Durchführung

Wichtig: Sofern sie nicht in der entsprechenden VO-Einheit besucht haben, machen sie sich mit den Vorbereitungs- und Durchführungsmodalitäten vertraut. Die entsprechenden Informationen finden sie in den Unterlagen.

Zum Usability Test greifen Sie bitte wieder auf Ihre Stereotypen zurück. Falls sie keinen Zugriff mehr auf diese Personen haben, dann bitten sie Leute aus ihrem Freundes- und Bekanntenkreis, in diese Rolle zu schlüpfen. Nutzen sie hierzu die Stereotypbeschreibungen aus Meilenstein #2 und bitten sie ihre Testteilnehmenden, sich mit der Person vertraut zu machen.

Thinking Aloud¶

Der/Die Test-BenutzerIn arbeitet die Test-Aufgaben (vgl. Anwendungsszenarios und Anforderungen) ab. Der/Die Test-ModeratorIn gibt keine Erklärung und keine Hilfestellung und ermuntert den/die Test-BenutzerIn lediglich zum „lauten Denken“. Der/Die Test-BeobachterIn protokolliert.

Interview¶

Direkt anschließend interviewen Test-ModeratorIn und Test-BeobachterIn den/die Test-BenutzerIn, um eventuelle offene Fragen zu klären. Der/Die Test-BeobachterIn protokolliert.

Usability Inspection¶

Vorbereitung¶

Suchen Sie sich eine Peer-Gruppe für die Usability Inspection und auch für das Design Review
Bestimmen sie innerhalb der Gruppe, wer die die Inspection und das Review übernimmt. Am besten führen sie dies mit mehreren ihrer Gruppenmitglieder zusammen mit der anderen Peer-Gruppe durch. Im Idealfall sind alle Mitglieder beider Gruppen anwesend.
Bereiten sie Inspection- und Review-Vorlagen für die App ihrer Peer-Gruppe vor. Diese Protokollvorlagen unterscheiden sich idR von denen ihrer Peer-Gruppe. Nutzen sie hierfür das im Rahmen der Lehrveranstaltung bereit gestellte Material.

Durchführung¶

Führen Sie die Usability Inspection und das Design Review für die Applikation ihrer Peer-Gruppe durch. Beurteilen Sie die verschiedenen Aspekte kritisch und hinterfragen Sie getroffene Designentscheidungen.
Dokumentieren Sie alles ausführlich (inkl. Metadaten zur Durchführung) und stellen Sie das Inspektionsprotokoll ihrer Peer-Gruppe zur Verfügung.
Fügen Sie IHR Protokoll (=das Protokoll, welches Sie für die andere Gruppe erstellt haben) Ihrer Projektmappe hinzu; das von der Peer-Gruppe erhaltene Protokoll zu IHRER App brauchen sie nicht in die Projektmappe mit aufzunehmen — dieses müssen sie allerdings für die Verbesserungen auswerten.

Checksliste zur Usability Inspection

Wenden Sie die “Checkliste zur Usability Inspection” auf die mobile App Ihrer Peer-Gruppe an. Übertragen Sie die allgemeinen Regeln sinnvoll auf die Applikation. Protokollieren Sie eventuelle Probleme und Defizite so, dass die EntwicklerInnen verstehen, inwiefern die App verbessert werden sollte.

Wichtig ist, dass IHRE Arbeitsleistung (=ihre Protokoll-Vorlagen und angefertigte Protokolle für die Peer-Gruppe) in IHRER Projektmappe dokumentiert ist.

Design Review¶

Bewerten Sie die Applikation Ihrer Peer-Gruppe unter verschiedenen Design-Aspekten wie bspw.

Eine Auswahl möglicher Design-Aspekte

Schrift gut lesbar?
Icons gut erkennbar und Funktion verständlich?
Farbgebung
Größe der Bedienelemente
Sinnvolle Gruppierung der Bedienelemente?
Abstände und Ränder
Sinnvolles Verhalten beim Drehen des Smartphones (keine Zustandsänderung, kein Abbruch von Abläufen)

Beziehen sie sich hier insbesondere auf die in der Einheit Visual Design kennengelernten Designaspekte intuitiver Applikationen.

Liste der Verbesserungen¶

Reflektieren Sie innerhalb Ihrer Gruppe die Ergebnisse der verschiedenen Evaluierungsverfahren. Welche Ergebnisse und Erkenntnisse lassen sich ableiten?
Erstellen Sie eine Liste mit pot. Schwachpunkten und sich daraus ergebenden Verbesserungsvorschlägen.

Konkrete Benennung der Schwachpunkte

Benennen Sie Schwachpunkte so konkret wie möglich; pauschale “Schulnoten” helfen nicht weiter. Es muss klar ersichtlich sein, was in einem nächsten Entwicklungsschritt verbessert bzw. optimiert werden würde.

Ergebnisse¶

Ihre Projektmappe muss folgende ausgearbeitete Artefakte enthalten:

Ergebnisse

Liste der Testfälle
Protokoll des Thinking aloud Tests und ggf. nachgelagertem Interview
Usability Inspection Protokoll (Vorlage + Protokoll)
Dokumentiertes Design Review für die Peer-Gruppe
Liste mit Verbesserungen (→ abgeleitet aus den unterschiedlichen Protokollen)