Föreläsning 6, Analys
150918
Föreläsning 6:
Analys och tolkning –
från insamling till insikt
FSR: 5, 8
Rogers et al. Kapitel 8
Översikt
•  Kvalitativ och kvantitativ analys
•  Källor
•  Steg i analys
•  Sammanställa och sammanfatta
•  Hjälpmedel som stöd för analys
•  programvara
•  affinity diagram
150918
Analys
2
Kvalitativt och kvantitativt
•  Kvantitativ analys – numeriska metoder för att
fastställa storlek, omfattning, mängd; statistik
•  Kvalitativ analys – redogörelser för vilken typ av
innehåll man hittat; representeras som teman,
mönster, berättelser; baseras på reaktioner,
kommentarer, beteenden
•  Tänk på hur data och siffror
presenteras!
150918
MDI
Analys
3
1
Föreläsning 6, Analys
150918
Källor
Vilka data har samlats in?
•  Info om testpersonerna
•  Anteckningar
•  Inspelningar
•  Formulär
•  Ifyllda enkäter
•  Loggningar
•  Dagböcker
150918
Analys
4
Analysfasen
Analys = noggrann undersökning; sönderdelning
Omfattar
•  sammanställning av data
•  sammanfattning av data
•  identifiera problem (i formativ
utvärdering)
Detta ligger till grund för
•  orsaker till problem, tolkning
•  förslag till åtgärder, omdesign
150918
Analys
5
Sammanställa data
Vad gör man med det man samlat in?
•  Enkäter sammanställs i databas eller dokument
•  Eventuellt transkribera inspelade intervjuer eller
tänka-högt-sessioner
•  Välja ut bilder ur loggningar
•  Inspelningar beskrivs så noggrant tiden tillåter
150918
MDI
Analys
6
2
Föreläsning 6, Analys
150918
Sammanfatta data
•  Hitta nyckelkommentarer
•  Eventuella statistiska beräkningar
•  Hur stämmer användbarhetskraven med
iakttagelserna?
•  Sticker något resultat ut?
•  Teman
–  problemtyper
Hur kopplar man
ihop blocken?
Varför fungerar
inte papperskorgen?
150918
Analys
7
Identifiera problem
•  Om kraven uppfylls är man klar
•  Problem kan vara
–  Användaren gör fel
–  Kunde inte genomföra uppgiften
–  Osäker på hur man fortsätter
–  Något tar för lång tid
–  Användaren blir frustrerad
–  Användaren behöver använda papper och penna
–  Användaren osäker på om den lyckats
?
?
?
?
150918
Analys
8
Tre metoder att sammanfatta:
•  Tabelluppställningar,
diagram, visuella
presentationer
•  Beskrivande statistik
–  Medel, median, typvärde
•  Tolkande statistik, signifikans
150918
MDI
Analys
Number of errors made
Number of errors made
Kvantitativa data
10
8
6
4
2
0
0
5
10
15
20
User
Internet use
< once a day
once a day
once a week
2 or 3 times a week
once a month
9
3
Föreläsning 6, Analys
150918
Att beskriva tabellen nedan
•  67 % av användarna klarade uppgiften i närheten av
uppsatt mål
•  Genomsnittstiden för uppgiften var drygt 20
sekunder
•  Två erfarna användare klarade uppgiften nära
uppsatt mål, medan en oerfaren behövde 55
sekunder, långt ifrån uppsatt mål
150918
Analys
10
Hjälpmedel för dataanalys
•  Kalkylblad (Excel t.ex.) – relativt enkelt att använda,
grafhantering
•  Statistikprogram, t.ex. SPSS
•  Hjälpmedel för kvalitativ dataanalys
–  Kategorisering och temabaserad analys, t.ex.
NVivo (tidigare N6)
–  Kvantitativ analys av
textbaserade data
–  t.ex. diskursanalys
•  CAQDAS Networking Project, i University of Surrey
(http://caqdas.soc.surrey.ac.uk/)
150918
Analys
11
Kvalitativa data
•  Ofta källan till insikter om varför det är problem, vad
som orsakar problemen
•  Citat: ”Jag tvekar eftersom jag inte ser hur jag ska
gå vidare nu”
•  Observationer som tydliggör ett krångligt
interaktionsförfarande
•  Tänk på att ta hänsyn till skillnader mellan
testanvändare och verkliga användare,
testsammanhang och verkligt sammanhang
–  ekologisk validitet
150918
MDI
Analys
12
4
Föreläsning 6, Analys
150918
Att gruppera kommentarer
•  Kronologisk ordning
•  Problemets vikt
•  Avser viss del av gränssnittet/interaktionen
•  Tydliga respektive otydliga problem
•  Lätta respektive svåra att åtgärda
•  Uppgift
•  Man kan använda sig av s.k. kodscheman
Se upp med
•  För vida kategorier, allt i en
•  För smala kategorier, en för varje problem
150918
Analys
13
“Affinity diagram”
Släktskapsdiagram
•  Att föra ihop iakttagelser/resultat till en helhet
•  Ett sätt att organisera
•  Kategorierna styrs av materialet
•  För att generera idéer
Arbetsgång
•  skriv ner dem på lappar
•  sortera i grupper
•  skapa rubrikkort/lapp
•  rita det slutgiltiga diagrammet
150918
Analys
14
Affinity diagram
Slumpordning
Diagram
Tema 1
150918
MDI
Analys
Tema 1
Tema 3
15
5
Föreläsning 6, Analys
150918
Tolkningsfasen
•  Handlar om att förstå varför något blir ett problem
•  Kan röra sig om
–  Olämplig konceptuell modell
•  struktur
•  Olämpliga val av termer
–  Olämplig placering (jfr perception, föreläsning 7)
–  Inkonsekvens
–  Missade krav, osv.
–  Brott mot designprinciper
•  Om det är svårt att hitta tolkningar behöver man
kanske utvärdera mer
150918
Analys
16
Att diskutera
•  Vilka olika sätt att gruppera sina
resultat kan man tänka sig?
•  I vilka steg kan man dela in analysfasen?
•  Vilken typ av verktyg kan vi se som används i
analysfasen? Hur används de?
•  Vad händer om man inte tar med en analysfas? Hur
går man vidare? Hur påverkar det slutresultatet
(designen)?
150918
MDI
Analys
17
6