tools for data-driven design: remote ux research
TRANSCRIPT
Tools for Data-driven design:Remote UX research
Lauri ApajalahtiService Design Lead @DNA
@LApajalahti
DNA BusinessOur values
709
#Fast#Bold#Straightforward
Vision & mission
Employees in DNA Business
DNA Ltd. Total revenue in 2014 : 833.5m€
The most satisfiedcustomers
Employees in
DNA Ltd. 1748
DNA Business Revenue 2014
211m€
EPSI Rating
Focus on customer service
Every third
DNA employee works
in customer service
#1
Information architecture (IA) focuses on organizing, structuring, and labeling content in an effective and sustainable way.
Research question:
How to design an IA-model that1. Supports both customer (large enterprice and SMEs) and
DNA employees needs?
2. Provides intuitive FTU and is easy to learn?
STEP 1 - CARD SORTING
Create few different IA-models
STEP 2 - TREE TESTING
Test IA-models with customers
STEP 3 - TREE TESTING
Validate the chosen IA-model with customers
Method:
Remote User Research
ThinkLabel all the relevat terms used
in menu structures (Minun yritykseni & TSO)
TestRun the test with DNA Business employees.
In the test participants will:1. Categorize content
2. Label the groups
AnalyseAnalyse the results
(~150 answers)Create 4 different IA-
models
Step 1 – Card sorting (DNA internal)
ThinkSet max. of 10 relevant tasks (the
primary use cases)
TestRecruit participants (email
4000 DNA customers)In the test participants will• Go through all the tasks• Navigate to chosen
destination and set theiranswer
(”I’d find it here”)
Analyse1. Analyse the results
(~500 answers)2. Create IA-model for
step 3
Step 2 – Tree testing (customers)
Task 1 2 3 4 5 6 7 8 9 10
Uusi
hen
kil o
Pek
ka a
loitt
aa ty
oske
ntel
yn y
rityk
sessan
ne.
Tila
a Pe
kalle
puh
elin
ja li
ittym
a.
Tila
amas
i puh
elin
ei o
le s
aapu
nut v
iikon
sisalla v
aikk
a ni
in
luva
ttiin
. Tar
kast
a m
ist a
ong
elm
a jo
htuu
.
Tila
amas
i puh
elin
on
saap
unut
ja P
ekka
on
k ayt
t any
t sit a
ahke
rast
i. Pe
kka
pyytaa
nos
tam
aan
liitt
yman
dat
apak
etin
koko
a. M
uuta
Pek
an li
ittym
an d
atap
aket
in k
okoa
.
Pekk
a m
atku
stel
ee p
aljo
n tyos
s aan
. Tar
kast
a Pe
kan
viim
e
kuun
puh
elin
lask
un s
uuru
us.
Peka
sta
tule
e yr
ityks
enne
han
kinn
oist
a va
staa
va. A
nna
Peka
lle o
ikeu
s til
ata
j arje
stel
mas
t a p
uhel
imia
ja li
ittym
i a.
Huo
maa
t, et
t a y
rityk
senn
e in
tern
et o
n ol
lut v
iime
aiko
ina
hida
s. T
arka
sta
yrity
ksen
ne la
ajak
aist
an kay
ttoa
ste
edel
lisel
t a k
uulta
.
Yrity
ksen
ne in
tern
et-y
htey
s on
poi
kki.
Ilmoi
ta v
iast
a
DN
A:ll
e.
Laaj
akai
sta
onge
lmaa
ei o
le v
iel a
korja
ttu.
Sel
vit a
kui
nka
nope
asti
DN
A o
n si
tout
unut
kor
jaam
aan
yrity
ksen
ne
laaj
akai
stao
ngel
man
.
Ong
elm
a la
akai
stay
htey
dessa o
n ko
rjatt
u. T
arka
sta
mika
oli v
ian
syyna.
Yksi
yrit
ykse
nne
toim
ipis
teis
t a m
uutt
aa. J
arje
sta
laaj
akai
stay
htey
s uu
teen
oso
ittee
seen
.
Total Successes 116 97 68 82 69 77 103 29 91 27Total Success % 93 % 81 % 58 % 69 % 58 % 66 % 88 % 25 % 78 % 23 %
AL
Direct Success % 89 % 68 % 50 % 62 % 14 % 56 % 81 % 13 % 56 % 12 %
Indirect Success % 4 % 13 % 8 % 8 % 44 % 10 % 7 % 12 % 21 % 11 %
Total Success % 93 % 81 % 58 % 69 % 58 % 66 % 88 % 25 % 78 % 23 %
JH
Direct Success % 45 % 14 % 41 % 35 % 71 % 68 % 89 % 35 % 49 % 27 %
Indirect Success % 22 % 21 % 4 % 2 % 16 % 13 % 7 % 13 % 29 % 9 %
Total Success % 67 % 35 % 46 % 38 % 87 % 81 % 96 % 48 % 78 % 36 %
Card sorting
Direct Success % 61 % 24 % 24 % 45 % 43 % 50 % 72 % 24 % 25 % 9 %
Indirect Success % 9 % 3 % 10 % 9 % 3 % 7 % 14 % 7 % 20 % 12 %
Total Success % 69 % 27 % 34 % 53 % 46 % 58 % 85 % 32 % 45 % 21 %
TSO
Direct Success % 18 % 61 % 6 % 2 % 68 % 1 % 14 % 29 % 3 %
Indirect Success % 11 % 3 % 1 % 1 % 7 % 1 % 14 % 21 % 2 %
Total Success % 30 % 64 % 7 % 3 % 74 % 2 % 28 % 50 % 5 %
Step 2: Results
Task 1 2 3 4 5 6 7 8 9 10
Uusi
hen
kil o
Pek
ka a
loitt
aa ty
oske
ntel
yn y
rityk
sessan
ne.
Tila
a Pe
kalle
puh
elin
ja li
ittym
a.
Tila
amas
i puh
elin
ei o
le s
aapu
nut v
iikon
sisalla v
aikk
a ni
in
luva
ttiin
. Tar
kast
a m
ist a
ong
elm
a jo
htuu
.
Tila
amas
i puh
elin
on
saap
unut
ja P
ekka
on
k ayt
t any
t sit a
ahke
rast
i. Pe
kka
pyytaa
nos
tam
aan
liitt
yman
dat
apak
etin
koko
a. M
uuta
Pek
an li
ittym
an d
atap
aket
in k
okoa
.
Pekk
a m
atku
stel
ee p
aljo
n tyos
s aan
. Tar
kast
a Pe
kan
viim
e
kuun
puh
elin
lask
un s
uuru
us.
Peka
sta
tule
e yr
ityks
enne
han
kinn
oist
a va
staa
va. A
nna
Peka
lle o
ikeu
s til
ata
j arje
stel
mas
t a p
uhel
imia
ja li
ittym
i a.
Huo
maa
t, et
t a y
rityk
senn
e in
tern
et o
n ol
lut v
iime
aiko
ina
hida
s. T
arka
sta
yrity
ksen
ne la
ajak
aist
an kay
ttoa
ste
edel
lisel
t a k
uulta
.
Yrity
ksen
ne in
tern
et-y
htey
s on
poi
kki.
Ilmoi
ta v
iast
a
DN
A:ll
e.
Laaj
akai
sta
onge
lmaa
ei o
le v
iel a
korja
ttu.
Sel
vit a
kui
nka
nope
asti
DN
A o
n si
tout
unut
kor
jaam
aan
yrity
ksen
ne
laaj
akai
stao
ngel
man
.
Ong
elm
a la
akai
stay
htey
dessa o
n ko
rjatt
u. T
arka
sta
mika
oli v
ian
syyna.
Yksi
yrit
ykse
nne
toim
ipis
teis
t a m
uutt
aa. J
arje
sta
laaj
akai
stay
htey
s uu
teen
oso
ittee
seen
.
Total Successes 116 97 68 82 69 77 103 29 91 27Total Success % 93 % 81 % 58 % 69 % 58 % 66 % 88 % 25 % 78 % 23 %
AL
Direct Success % 89 % 68 % 50 % 62 % 14 % 56 % 81 % 13 % 56 % 12 %
Indirect Success % 4 % 13 % 8 % 8 % 44 % 10 % 7 % 12 % 21 % 11 %
Total Success % 93 % 81 % 58 % 69 % 58 % 66 % 88 % 25 % 78 % 23 %
JH
Direct Success % 45 % 14 % 41 % 35 % 71 % 68 % 89 % 35 % 49 % 27 %
Indirect Success % 22 % 21 % 4 % 2 % 16 % 13 % 7 % 13 % 29 % 9 %
Total Success % 67 % 35 % 46 % 38 % 87 % 81 % 96 % 48 % 78 % 36 %
Card sorting
Direct Success % 61 % 24 % 24 % 45 % 43 % 50 % 72 % 24 % 25 % 9 %
Indirect Success % 9 % 3 % 10 % 9 % 3 % 7 % 14 % 7 % 20 % 12 %
Total Success % 69 % 27 % 34 % 53 % 46 % 58 % 85 % 32 % 45 % 21 %
TSO
Direct Success % 18 % 61 % 6 % 2 % 68 % 1 % 14 % 29 % 3 %
Indirect Success % 11 % 3 % 1 % 1 % 7 % 1 % 14 % 21 % 2 %
Total Success % 30 % 64 % 7 % 3 % 74 % 2 % 28 % 50 % 5 %
Step 2: Results
ThinkSame tasks than in step 2
TestRecruit participants (email
3500 DNA customers)In the test participants will• Go through all the tasks• With each navigate to
chosen destination and set their answer(”I’d find it here”)
Analyse1. Analyse the results
(? answers)2. Design prototype with
the chosen IA-model.
Step 3 – Tree testing (customers)
Current phase