på plats på distans automatiserat

Magnus Burell

Testa användningen

HM film

Exempel på användningstest: http://vimeo.com/25181153

Så funkar vanliga anv.test

Traditionellt användningstest ”tänka högt”

+ Hur systemet/webbplatsen fungerar i verklig använding

+ Få svar på varför något är ett problem

+ Förtydliga, ställa följdfrågor och improvisera

+ Fånga detaljer, kroppsspråk

-  Få personer (3 - 12st)

-  Ganska dyrt

-  Konstlad testsituation

”Med 5 användare hittar du 80% av de allvarligaste

användbarhetsproblemen”

Vi testar för sällan men

Varför?

•  Vi nöjer oss med att testa funktion, inte användningskvalitet

•  Vi har inte tid – Rekrytera – Genomföra – Analysera och Presentera

•  Vi behöver testa mindre saker, ofta

Vad är, Varför, När passar

Distanstestning

Exempel distanstest

Vad är distans-användnings-test?

På 5 dagar 300 klickade på inbjudan

90 startade testet 58 slutförde

Det är en djungel där ute...

Bild: http://www.slideshare.net/usableinterface/unmoderated-remote-usability-testing-good-or-evil-4446847

Vad kan testas?

Vilka kör distanstester? Bi

ld: h

tttp

://w

ww

.use

rtes

ting

.com

Två sorters distanstester

•  Med testledare live via skärmdelning

•  Filmer •  Få deltagare

•  Själv via webbaserade verktyg

•  Filmer eller rapporter •  Många deltagare

(ofta fler än 50st)

Modererat Automatiserat

Modererat

Skärmdelning Spela in skärm och röst

Modererat

Bild: http://voiceontheweb.biz/skype-world/skype-software/skype-41-beta-launched-will-that-be-video-or-desktop-sharing/

+ Naturligare testmiljö

+ Hittar lika många fel som på-plats-tester

+ Geografiskt spridda användare

+ Observatörer från tredje plats

? Får ärligare svar över telefon

-  Risk för teknikstrul

-  Kräver bra uppkoppling och lite teknik-orädda deltagare

-  Missar kroppspråk

? Svårare skapa förtroende och trygg testsituation

Modererat För- och nackdelar

Automatiserat

Varianter 1.  Scenariobaserade

–  Testa flöden –  Rapport: Loop11, Userzoom –  Film: Openhallway

2.  Klicktester –  testa enstaka sidor, jämföra två designvarianter –  Intuition HQ, Verifyapp

3.  Kortsortering –  testa innehållstruktur och rubriker –  Optimalsort

(Visualiserad webbanalys) –  ClickTale

Automatiserat

Ger kvalitativa och kvantitativa resultat

•  Film – skärm, röst, ansiktsuttryck •  Kommentarer och enkätsvar •  Rapporter och visualiseringar

Automatiserat

Exempel på rapportdata

•  Andel klarade, misslyckade, avbrutna uppgifter

•  Tid och klick per uppgift •  Första klick •  Klickflöde (besök i vilken ordning) •  Var deltagarna gjort ”fel” eller avbrutit •  Heatmaps – musrörelser, klick •  Skattningar •  Fritextsvar

Loop11.com

Openhallway.com

Bild: www.hemnet.se/inspiration testat med openhallway.com

intuitionHQ.com

Optimalsort Bild: http://www.optimalworkshop.com/optimalsort.htm

UserZoom.com

Gör så här 1.  Bestäm vad du vill testa och välj passande verktyg

2.  Skriv och stäm av testfrågor

3.  Rekrytera deltagare via webbplats, kundpanel, e-post, Facebook, Twitter

4.  Sjösätt och se resultaten börja trilla in

5.  Analysera och agera

6.  Testa igen

Automatiserat

Tips!

•  1-5 tydliga avgränsade uppgifter •  Varva med skattningsfrågor och

kommentarsmöjligheter •  Testa testet! •  Max 10-15 minuter

•  Hellre flera korta test än ett långt

Automatiserat

För- och nackdelar

+ Billigare

+ Snabbare

+ Mindre konstlat naturlig testmiljö

+ Geografiskt utspridda användare

+ Fler användare

-  Begränsat till specifika, avgränsade testfrågor

-  Följdfrågor

-  Missar kroppspråk

Automatiserat

Välja verktyg

Ofta enkelt att komma igång, men •  Svenskt gränssnitt? •  Prismodell? •  Vilket resultat och data? •  Spara ner filmer och rapporter? •  Rekrytering?

– Egna användare – Panel med utländska användare – Panel med svenska användare –  Live-rekrytering (Ethio)

Vad är svårt med distanstester?

När passar distanstester •  Komplettera dina

traditionella användningstester

•  Testa avgränsade frågor i varje iteration

•  När du varken har tid/råd att testa

•  … i influensatider

Testa gratis redan idag!

•  Avsätt 30 minuter •  Välj en uppgift på er webbplats •  Testa gratis med Loop11.com eller

Openhallway.com •  Skicka länken till vänner

3 praktiska boktips

Remote research http://www.rosenfeldmedia.com/books/remote-research/

Användbarhet i pratiken gratis wikibok http://anvandbarhet.se/

Gratis!

Praktisk brukerstestning http://www.brukskvalitet.no/praktiskbrukertesting/

Lästips Välja verktyg http://remoteresear.ch/tools/

http://www.alistapart.com/articles/quick-and-dirty-remote-user-testing/

För- och nackdelar distanstest http://www.uxmatters.com/mt/archives/2010/01/unmoderated-

remote-usability-testing-good-or-evil.php

http://johnnyholland.org/2010/06/02/pros-and-cons-of-remote-usability-testing/

Hör av dig om du vill prata distanstester

magnus.burell@inuse.se 0761 - 36 37 57 Twitter: @mburell

Inuse Consulting 60 konsulter - Stockholm, Göteborg, Malmö www.inuse.se blogg: www.inuseful.se