Usability ITU, forår 2008 7. Brugervenlighedstest/usabilitytest ITU F2008.

Præsentationer af emnet: "Usability ITU, forår 2008 7. Brugervenlighedstest/usabilitytest ITU F2008."— Præsentationens transcript:

1 Usability ITU, forår 2008 7. Brugervenlighedstest/usabilitytest ITU F2008

2 Usability ITU, forår 2008 2 Tidsplan for brugertest på dette kursus Ugerne 10, 11 (påskeugen) og 12 (besøg på KMD) 3 uger til at rekruttere, planlægge, afprøve, foretage test, evaluere og dokumentere. Se Kuniavsky kapitel 10 om: –Rekruttering –Valg af features der ønskes testet –Design af testopgaver

3 Usability ITU, forår 2008 3 Forskellige begrundelser for test –Den eneste måde reelt at vurdere om: Brugerne oplever vores produkt som brugervenligt Produktet kan løse de opgaver/mål som brugerne har Produktet kan opfylde de mål vi har sat Alle vores designvalg var gode… –Fordi aktiv glemsel er en psykologisk umulighed: Designere kan ikke frigøre sig fra den viden, de har erhvervet sig under processen. –Fordi folks reaktioner ikke kan forudses fuldstændigt –Gennemsnitsbrugeren findes ikke.

4 Usability ITU, forår 2008 4 Sådan foregår det typisk (helt overordnet) Sæt en bruger foran en computer Stil opgaver til det der testes Bed brugeren tænke højt Lyt til og observer udførelsen af opgaverne: Hvilke problemer opstår for brugeren Deltagere: –Moderator/testleder –Bruger(e) –Observatør(er)

5 Usability ITU, forår 2008 5 Om tests generelt Test skal ikke bevise, de skal informere Testning er en iterativ proces Sikre at produktet er: –Nyttigt, relevant, formålstjenstligt –Effektivt (alt efter hvordan det vurderes) –Engagerende, skaber brugsglæde –Har en brugervenlig interaktion –Let at lære/huske/forstå Og lignende kvalitetsegenskaber

6 Usability ITU, forår 2008 6 Typiske fejltagelser og misforståelser Brugertest sker ofte for lidt, for sent og af de forkerte grunde: Brugertest er ikke et afsluttende tjek eller godkendelse En brugertest er ikke en engangsfornøjelse Brugertest bør ikke stå alene Fokusgrupper forveksles med brugertestning Derfor: –Test tidligt og test ofte –Sammensæt test med andre metoder

7 Usability ITU, forår 2008 7 Variationer og metodiske forskelle Typen af det fysiske setup Typen af moderation Tænke-højt Antallet af brugere Segmentering og rekruttering Typen af data indsamlet Lokal test – fjerntest Modereret og umodereret test

8 Usability ITU, forår 2008 8 Kvalitet i en brugertest Testopgaverne Valg af testdeltagere – også moderator ’Samtale’ under selve testen Skjult hjælp og andre uhensigtsmæssigheder Interpersonel kontakt mellem deltagere Debriefing Kommunikation med udviklingsteam Brugervenlig rapport

9 Usability ITU, forår 2008 9 Dogmer Test med bare 1 bruger er 100% bedre end ikke at teste nogen Det kan være bedre at teste 1 bruger i begyndelsen end 50 mod slutningen

10 Usability ITU, forår 2008 10 Kilde: Rolf Molich Dialogdesign.dk

11 Usability ITU, forår 2008 11 Højere budget (>100.000 kr)

12 Usability ITU, forår 2008 12 KMD Testcenter

13 Usability ITU, forår 2008 13

14 Usability ITU, forår 2008 14

15 Usability ITU, forår 2008 Fordele ved lab?

16 Usability ITU, forår 2008 16 Billig, nem, hurtig, enkel – mobilt? Et lokale computer, software, mikrofon, webcam Få deltagere, rekrutteret fra arbejde, familie og venner Intet forstudie og enkel testplan

17 Usability ITU, forår 2008 17 Kilde: Rolf Molich Dialogdesign.dk

18 Usability ITU, forår 2008 18 ”Lost-our-lease test” Billig i drift - gentages ofte under udviklingsproces: –test konkurrenternes sider under projektplanlægningen (giver træning) –test ”get it” og navngivning med grov-skitser –test ”get it” og basal navigation med udkast til side-designs –test ”get it” og nøgle-opgaver med html prototype –test nøgle-opgaver med et funktionsdueligt site –”Næste dør” test af alle nye sider 13 test m. 3 brugere af 700 kroner = 27.300 kr. Kilde: Steve Krug

19 Usability ITU, forår 2008 19 Testrum, lavt budget

20 Usability ITU, forår 2008 Design af testopgaver Testens krop

21 Usability ITU, forår 2008 21 Design: Forberedelse Det handler først om, med HVEM og HVAD der skal testes. Lav et manuskript, med introduktion, opgaver og afslutning. Bestem jer for et fysisk og digitalt setup Afprøv opgaver og test helt konkret og praktisk Evaluér både indhold og udførelse

22 Usability ITU, forår 2008 22 Design: Testopgaver: Er baseret på et mål der er relevant for deltageren (målgruppen) Har det rigtige omfang, ikke for bredt, ikke for specifikt Dækker spørgsmål der er vigtige for produktet og virksomhedens succes Mere specifikt: –Mulige, det skal kunne lade sig gøre –Relevante og realistiske –I realistisk sekvens, ikke opdigtet. –Har et endeligt og forudsigeligt sæt af mulige løsninger –Har et tydeligt slut-punkt som brugeren kan genkende –Fordrer handling, ikke mening –Have en realistisk længde – de må ikke gå kold.

23 Usability ITU, forår 2008 23 Design: Prioritering af testopgaverne (Kuniavsky, side 269)

24 Usability ITU, forår 2008 24 Design: Eksempel på opgaveskabelon (Snyder, paper prototyping, side 133 – se www.paperprototyping.com)www.paperprototyping.com

25 Usability ITU, forår 2008 25 Design: Kvalitativ/kvantitativ Man kan godt tilføje nogle kvantitative målinger (metrikker): –Hvor mange fejl de laver –Hvor tit de selv kommer videre –Hvor mange der gennemfører –Tidsforbrug? Det kan fx være metrikker beskrevet i en kravspecifikation eller et udbud.

26 Usability ITU, forår 2008 26 Udførelsen Kort invitation – Giv ikke for meget væk fra starten Sørg for at beskriv at det ikke deltageren der testes og at denne ikke kan lave fejl Start med noget opvarmning – ”kuglepen legen” eller en hurtig trunk test. Noter observationer og giv dem en graduering når det er muligt. Afsluttende interview/debriefing

27 Usability ITU, forår 2008 27 Undervejs: ”Tænke højt” protokol Autentisk afdækning af kognitive processer Giver forskellige resultater afh. af forsøgspersonens evner og sværhedsgraden Kan influere på problemløsningen – indbygget dilemma Uforudsigelig og påvirket af situationen Alternativt ’Mind tape’ eller andre retrospektive metoder

28 Usability ITU, forår 2008 28 Undervejs: Roller under testen Facilitator/testleder/moderator – afgørende funktion Logger - tager noter eller fører ’log’ Observatør(er) – ser på eller tager også noter Publikum – inviter altid alle med! Deltager(e) – dem der laver opgaverne Hvor mange deltagere?

29 Usability ITU, forår 2008 29 Startup: Interview-teknikker, 1 Usability interviews er oftest formelle og følger en standardstruktur tilrettelagt på forhånd - sjældent “åbne”: Timeglasmodel 1.Introduktion 2.Opvarmning 3.Generelle spørgsmål 4.Dybdefokus 5.Tilbageblik 6.Opsamling

30 Usability ITU, forår 2008 30 Startup: Interview-teknikker, 2 Definer dine centrale begreber - og brug helst dem som brugeren anvender selv Lad være med at fremtvinge meninger Genformulering af brugerudsagn som spørgsmål (”Papegøjeteknikken”) Følg op med eksempler - når du har fået et svar Sørg for at forbinde forklaringer til de foreliggende materialer

31 Usability ITU, forår 2008 31 Undervejs: Moderator skal: Carolyn Snyder: Stewardesse, sportskommentator og forsker Være god ved forsøgspersonerne –etisk og moralsk opførsel Leve sig ind i dem (empatisk) Se ”tankeboblerne” over brugernes hoved Følg op ikke-verbale udtryk Undgå af give hints/hjælp/vejledning Spørge ind: Bore - bore – bore Spørge ”hvorfor” en masse Improvisere og være på

32 Usability ITU, forår 2008 32 Undervejs: Moderator skal: Tænke i ”før og efter” brugerens handlinger –Før: forventning – efter: forløsning Undgå at stille spørgsmål der indeholder en forhåndsbedømmelse Hold fokus på et emne af gangen Brug åbne spørgsmål og undgå binære spørgsmål Giv korte promts for at holde brugerens taleflow

33 Usability ITU, forår 2008 33 Undervejs: Velegnede promts ”Hvad nu?” ”Hvad tænker du på?” ”Hvad skete der?” ”Hvad fik at vide?” ”Husk at tænke højt”…

34 Usability ITU, forår 2008 34 Undervejs: Uegnede promts ”Hvor er du havnet henne?” ”Hvad sidder du og leder efter?” ”Er du med på hvad der foregår?” ”Har du lagt mærke til at links ikke skifter farver når de har været ’besøgte’?”

35 Usability ITU, forår 2008 35 Afslutning: Velegnede sammenfatninger ”Er det logisk og overskueligt bygget op?” ”Kan du lide hjemmesidens udseende?” ”Er det noget du tror du vil kunne bruge til noget i det daglige?” ”Hvad synes du alt i alt om hjemmesiden?”

36 Usability ITU, forår 2008 36 Opsamling & evaluering Sørg for at honorar eller gave matcher setup’et Sig pænt tak Få etableret mulig fremtidig dialog I gruppen: Diskuter resultat og noter med det samme Evaluer og optimer testen Evaluer også deltagerne

37 Usability ITU, forår 2008 37 Afrapportering Diagnostisk information: Fejlene Preskriptiv information:Hvad der skal gøres for at rette disse Overvej som altid modtagergrupper Start med et opsamling af de vigtigste ting: Prioritering Giv kort beskrivelse af metoden: Reliabilitet og validitet Derefter gennemgang af selv testresultater

38 Usability ITU, forår 2008 38 Eksempel på tidsplan, 3 uger (Kuniavsky)

39 Usability ITU, forår 2008 Alternativer Brugertest af mobile enheder

40 Usability ITU, forår 2008 40 Noldus.com

41 Usability ITU, forår 2008 41 Tak for i aften Efter påske, besøg på KMD i Ballerup Tog fra hovedbanen til malmparken + kort gåtur 15 min. Dem der følges med Charlotte får turen betalt Indgang syd – vær der 16.45, program til ca. 19.00 Gæstekort Opdeling i to grupper: Testcenter / OGR To grupper skal have testopgaver med til tests KMD giver en sandwich og en lille gave Vi ses...