Föreläsning 6, Analys 150918 MDI 1
Föreläsning 6, Analys 150918 Föreläsning 6: Analys och tolkning – från insamling till insikt FSR: 5, 8 Rogers et al. Kapitel 8 Översikt • Kvalitativ och kvantitativ analys • Källor • Steg i analys • Sammanställa och sammanfatta • Hjälpmedel som stöd för analys • programvara • affinity diagram 150918 Analys 2 Kvalitativt och kvantitativt • Kvantitativ analys – numeriska metoder för att fastställa storlek, omfattning, mängd; statistik • Kvalitativ analys – redogörelser för vilken typ av innehåll man hittat; representeras som teman, mönster, berättelser; baseras på reaktioner, kommentarer, beteenden • Tänk på hur data och siffror presenteras! 150918 MDI Analys 3 1 Föreläsning 6, Analys 150918 Källor Vilka data har samlats in? • Info om testpersonerna • Anteckningar • Inspelningar • Formulär • Ifyllda enkäter • Loggningar • Dagböcker 150918 Analys 4 Analysfasen Analys = noggrann undersökning; sönderdelning Omfattar • sammanställning av data • sammanfattning av data • identifiera problem (i formativ utvärdering) Detta ligger till grund för • orsaker till problem, tolkning • förslag till åtgärder, omdesign 150918 Analys 5 Sammanställa data Vad gör man med det man samlat in? • Enkäter sammanställs i databas eller dokument • Eventuellt transkribera inspelade intervjuer eller tänka-högt-sessioner • Välja ut bilder ur loggningar • Inspelningar beskrivs så noggrant tiden tillåter 150918 MDI Analys 6 2 Föreläsning 6, Analys 150918 Sammanfatta data • Hitta nyckelkommentarer • Eventuella statistiska beräkningar • Hur stämmer användbarhetskraven med iakttagelserna? • Sticker något resultat ut? • Teman – problemtyper Hur kopplar man ihop blocken? Varför fungerar inte papperskorgen? 150918 Analys 7 Identifiera problem • Om kraven uppfylls är man klar • Problem kan vara – Användaren gör fel – Kunde inte genomföra uppgiften – Osäker på hur man fortsätter – Något tar för lång tid – Användaren blir frustrerad – Användaren behöver använda papper och penna – Användaren osäker på om den lyckats ? ? ? ? 150918 Analys 8 Tre metoder att sammanfatta: • Tabelluppställningar, diagram, visuella presentationer • Beskrivande statistik – Medel, median, typvärde • Tolkande statistik, signifikans 150918 MDI Analys Number of errors made Number of errors made Kvantitativa data 10 8 6 4 2 0 0 5 10 15 20 User Internet use < once a day once a day once a week 2 or 3 times a week once a month 9 3 Föreläsning 6, Analys 150918 Att beskriva tabellen nedan • 67 % av användarna klarade uppgiften i närheten av uppsatt mål • Genomsnittstiden för uppgiften var drygt 20 sekunder • Två erfarna användare klarade uppgiften nära uppsatt mål, medan en oerfaren behövde 55 sekunder, långt ifrån uppsatt mål 150918 Analys 10 Hjälpmedel för dataanalys • Kalkylblad (Excel t.ex.) – relativt enkelt att använda, grafhantering • Statistikprogram, t.ex. SPSS • Hjälpmedel för kvalitativ dataanalys – Kategorisering och temabaserad analys, t.ex. NVivo (tidigare N6) – Kvantitativ analys av textbaserade data – t.ex. diskursanalys • CAQDAS Networking Project, i University of Surrey (http://caqdas.soc.surrey.ac.uk/) 150918 Analys 11 Kvalitativa data • Ofta källan till insikter om varför det är problem, vad som orsakar problemen • Citat: ”Jag tvekar eftersom jag inte ser hur jag ska gå vidare nu” • Observationer som tydliggör ett krångligt interaktionsförfarande • Tänk på att ta hänsyn till skillnader mellan testanvändare och verkliga användare, testsammanhang och verkligt sammanhang – ekologisk validitet 150918 MDI Analys 12 4 Föreläsning 6, Analys 150918 Att gruppera kommentarer • Kronologisk ordning • Problemets vikt • Avser viss del av gränssnittet/interaktionen • Tydliga respektive otydliga problem • Lätta respektive svåra att åtgärda • Uppgift • Man kan använda sig av s.k. kodscheman Se upp med • För vida kategorier, allt i en • För smala kategorier, en för varje problem 150918 Analys 13 “Affinity diagram” Släktskapsdiagram • Att föra ihop iakttagelser/resultat till en helhet • Ett sätt att organisera • Kategorierna styrs av materialet • För att generera idéer Arbetsgång • skriv ner dem på lappar • sortera i grupper • skapa rubrikkort/lapp • rita det slutgiltiga diagrammet 150918 Analys 14 Affinity diagram Slumpordning Diagram Tema 1 150918 MDI Analys Tema 1 Tema 3 15 5 Föreläsning 6, Analys 150918 Tolkningsfasen • Handlar om att förstå varför något blir ett problem • Kan röra sig om – Olämplig konceptuell modell • struktur • Olämpliga val av termer – Olämplig placering (jfr perception, föreläsning 7) – Inkonsekvens – Missade krav, osv. – Brott mot designprinciper • Om det är svårt att hitta tolkningar behöver man kanske utvärdera mer 150918 Analys 16 Att diskutera • Vilka olika sätt att gruppera sina resultat kan man tänka sig? • I vilka steg kan man dela in analysfasen? • Vilken typ av verktyg kan vi se som används i analysfasen? Hur används de? • Vad händer om man inte tar med en analysfas? Hur går man vidare? Hur påverkar det slutresultatet (designen)? 150918 MDI Analys 17 6
© Copyright 2024