Zahlen, Daten, Fakten Mobil World Usability Day Stuttgart, 14. November 2013

Jakob Biesterfeldt Managing Director, UserZoom GmbH @jbiest

free WEBINAR

free WEBINAR

2  

free WEBINAR

•  Mobile UX •  Zahlen, Daten, Fakten – was wollen wir messen? •  Tools & Methoden – wie messen wir? •  Fragen & Antworten

Inhalt

free WEBINAR

3  

free WEBINAR

Mobile UX

„Ich weiß nicht, welche Stimmungsaufheller oder sonstige Rauschmittel der Autor benutzt, aber mit der Realität hat der Artikel herzlich wenig zu tun. (...) Die Krankenhaus-Software, die ich kenne, ist tastaturverliebt, alles andere als intuitiv zu bedienen, grottenlangsam (von Röntgenbildern via WLAN-Übertragung gar nicht zu reden), für fast jede zusätzliche Funktion wird ein weiteres Programm mit neuer Benutzerschnittstelle aufgerufen, Zoom-Funktionen fehlen völlig, die “Fieberkurve” auf dem Computer (erst recht mit Einbindung der Patienten-Medikation) existiert nur auf Rechnern, die auf der Medica ausgestellt werden. Das ist zum großen Teil dem Versagen der Medical-IT-Softwarehersteller (Bedienungs-Standards sind was für Weicheier) anzukreiden...“

free WEBINAR

4  

free WEBINAR

•  Generelle UX und Usability Prinzipien gelten: Einfach & schnell tun können, was zu tun ist.

•  Zusätzlich gelten für Mobile UX: o  Sofa, U-Bahn, Krankenbett, Büro? Umgebung & Kontext o  E-Mail oder SMS? Spezielle Use Cases o  Handy, Tablet, Laptop…? Multi-Device, Multi-Task o  Pinch, Zoom, Tap? Interaktions-Design o  Portrait oder Landscape? Technische Vielfalt

Mobile UX

free WEBINAR

5  

free WEBINAR

Was wollen wir messen?

Geschäftsziele

Web Analytics KPIs

UX Zahlen, Daten, Fakten

Foto: kevinzim http://www.flickr.com/photos/86624586@N00/

free WEBINAR

6  

free WEBINAR

Usability Kriterien & Fragen •  Effektivität – können Nutzer tun, was

sie tun möchten? •  Effizienz – …mit angemessenem

Aufwand? •  Zufriedenheit – sind Nutzer mit der

Qualität der Interaktion zufrieden?

Was wollen wir messen?

Messwerte •  Success Rate – Wie viele Nutzer sind

erfolgreich? •  Time on Task – Wie lange dauert

das? •  Satisfaction Ratings – Wie zufrieden

sind Nutzer?

free WEBINAR

7  

free WEBINAR

Weitere UX Daten und Messwerte •  Anzahl und Schwere von Usability Problemen •  UX Faktoren – subjektive, emotionale Faktoren (z.B. Vertrauenswürdigkeit) •  Verhaltensdaten (z.B. wie steigen Nutzer in eine Aufgabe ein – über die Suche,

über die Navigation?) •  Informationen über Nutzer, deren Anforderungen und deren Kontext

Was wollen wir messen?

free WEBINAR

8  

free WEBINAR

•  Um vergleichen zu können – über die Zeit, Design-Varianten, mit dem Wettbewerb, zwischen Zielgruppen, zwischen Ländern, zwischen Endgeräten…

•  Absichern von Gestaltungsentscheidungen •  Kommunikation intern – Kollegen und Vorgesetzte überzeugen •  UX Faktoren – Vielfalt der Meinungen und emotionalen, subjektiven Faktoren

erfassen

Warum wollen wir messen?

free WEBINAR

9  

free WEBINAR

Wie messen wir?

Usability  Tes4ng  

Unmoderiert,  remote  

Moderiert,  qualita4v  

Usability  Labor  

Remote  

Quan4ta4v  

Qualita4v  

free WEBINAR

10  

free WEBINAR

Wie messen wir?

Usability  Tes4ng  

Moderiert,  qualita4v  

Usability  Labor  

mrtappy.com

+  Körpersprache  +  Details  -­‐  Aufwand  -­‐  Zahlen  

free WEBINAR

11  

free WEBINAR

Wie messen wir?

Usability  Tes4ng  

Moderiert,  qualita4v   Remote  

+  Rekru4erung  +-­‐  Kontext  

-­‐  Körpersprache  -­‐  Aufwand  -­‐  Zahlen  

Skype + Morae blog.mailchimp.com/remote-usability-testing-on-mobile-devices/

free WEBINAR

12  

free WEBINAR

Wie messen wir?

Usability  Tes4ng  

Unmoderiert,  remote   Qualita4v   +  Kosten  

+-­‐  Aufwand  +-­‐  Details  

-­‐  Körpersprache  -­‐  Zahlen  

usertesting.com/mobile

free WEBINAR

13  

free WEBINAR

Wie messen wir?

Usability  Tes4ng  

Unmoderiert,  remote  

Quan4ta4v  

Qualita4v   -­‐  Körpersprache  +-­‐  Details  +  Zahlen  +  Kosten  +  Aufwand  

free WEBINAR

14  

free WEBINAR

Wie messen wir?

1. Studie konzipieren und implementieren

2. Teilnehmer einladen

3. Hunderte Nutzer nehmen vom eigenen Endgerät aus teil

4. Daten werden im Tool aggregiert und zur Auswertung vorbereitet

free WEBINAR

15  

free WEBINAR

•  Ergebnisse & Auswertung – typische Metriken o  Completion Rate (Success Rate)

•  Error Rate •  Abandon Rate •  Timeout Rate

o  Time on Task (auch subjektiv empfundener Zeitaufwand)) o  Bewertungen (Usability, Content, Zufriedenheit – pro Aufgabe und insgesamt) o  Usability Probleme (Anzahl, Schwere)

Ergebnisse & Auswertung

free WEBINAR

16  

free WEBINAR

Aufgabe  

Validierung  

Timeout  Ques4ons  

Abandon  Ques4ons  

Error  Ques4ons  

Success  Ques4ons  

Erfolg  BuWon  

Abbrechen  BuWon   Timeout  

Ergebnisse & Auswertung

free WEBINAR

17  

free WEBINAR

Ergebnisse & Auswertung

free WEBINAR

18  

free WEBINAR

Ergebnisse & Auswertung

Die Website ist…

free WEBINAR

19  

free WEBINAR

Ergebnisse & Auswertung

free WEBINAR

20  

free WEBINAR

Videos

•  Pro Aufgabe pro Nutzer •  Selektiv auswerten:

o  Non-Success o  Sehr lange Bearbeitungsdauer o  Schlechte Bewertungen o  Interessante Kommentare…

•  Clips generieren, Marker setzen

Ergebnisse & Auswertung

free WEBINAR

21  

free WEBINAR

Zusammenfassung Ergebnisse und Daten aus mobilen Online Usability Tests:

•  Quantitative UX Messdaten •  Quantitative “Self-reported” Daten •  Qualitatives Nutzerfeedback •  Verhaltensdaten (Clickstreams) •  Qualitative, quantifizierbare Video Screen Recordings

Ergebnisse & Auswertung

free WEBINAR

22  

free WEBINAR

•  Ziel: Optimale UX auf mobilen Geräten •  Viele Wege führen zum Ziel, es kommt auf das Ziel an, welchen Weg wir

beschreiten.

•  Quantitative Messdaten komplettieren rein qualitative Daten: Risikomanagement, Vergleich, Kommunikation

•  Mobile URUT (Unmoderated Remote Usability Testing) ist vergleichsweise kostengünstig, agil und skalierbar und ermöglicht eine höhere Testfrequenz

•  Mobile URUT erreicht Nutzer in ihrem natürlichen Kontext

Fazit

free WEBINAR

23  

free WEBINAR

Vielen Dank!

Jakob Biesterfeldt Managing Director, UserZoom GmbH

München @jbiest

www.linkedin.com/company/userzoom

@UserZoom_DE

www.userzoom.de

Sprechen Sie uns gerne an: UserZoom GmbH

Ainmillerstr. 11 80801 München

Haben Sie Fragen?