Mitt foredrag til BITS' medlemsmøte "Tror du at du kan brukertesting?" 03.06.2010. Jon Gunnar Wold fra Steria og Jostein Magnussen fra Netlife Research holdt foredrag om hhv. forberedelse og gjennomføring (moderering) av brukertest mens mitt bidrag omhandlet observasjon (og analyse).

1. BITS – observasjon og brukertesting (( C:-} Haakon Halvorsen(( Leder av Brukeradferd / Usability Specialist e-post: haakon.halvorsen@tarantell.no mobil: 99296717 twitter: @haakonha

2. Oppmerksomhetstesten: Tell antall pasninger mellom de hvitkledde spillerne

3. Resultatet 50% Ser ikke den dansende bjørnen i det hele tatt. NB! En gruppe som fikk i oppdrag å se på de svarte spillerne la merke til bjørnen dobbelt så mange ganger! 3

4. Brukeropplevelse er som magi If you try to dramatize a routine for a brother conjurer, you will merely bore him–unless he sees something in your routine that he can use in his own act.... When you work out a routine for laymen, test it on a friend who knows nothing about conjuring. Ask for his detailed criticism. Then try your routine on another friend and get his opinion. If several laymen find fault with the same spot in your routine, it is bad. He goes on to detail the pitfalls of taking the spectator’s diagnosis too literally: "A layman’s diagnosis of what is wrong will usually be false and will often be absurd, but he almost always puts his finger on the point where the problem lies. - Bruce Tognazzini “Tog” 4

5. Brukertesting er som… 5

6. Hvordan foregår en brukertest? Brukeren blir presentert for en rekke testoppgaver Interaksjonen som skjer med systemet blir tatt opp og lagret som videofiler. Han/hun blir filmet med to videokameraer og blir også overvåket fra PC til PC forbindelse for å se musbevegelser mm. På observasjonsrommet registreres brukerens handlinger, analyseres og loggføres av observatør(er)

7. Aktørene i brukertesten B A

8. Haakons topp 7 liste om brukerne (etter 10 år med brukertesting) 1. De er dumme! 2. De har tunnelsyn! 3. De er late! 4. De er trege! 5. De juger! 6. De liker ikke forandring! 7. De glemmer! MEN: brukerne har ALLTID rett :D OG: det er din feil! 8 A

9. Hva måles (vanligvis)? Effectiveness Suksessraterogfeil Efficiency Tidsbruk pr. oppgave Satisfaction Brukereneskarakter 9 B

10. Noen tips for observasjon av brukere Vit hva du skal se etter: Tenk igjennom mulige scenarier og test oppgavene på deg selv og vær forberedt! Legg inn stikkord i testscriptet slik at du og alle som skal observere vet litt hva de skal se etter. Brukere skal sees ikke høres! Mer om dette senere…. Noter gjerne banale hendelser og marker tidspunktet for når noe vesentlig skjer slik at det er lett å finne tilbake. Dette ser man ofte etter at det har skjedd og man rekker ofte ikke å skrive ned hva som faktisk skjedde. Banale hendelser skaper ofte et mønster som du får bruk for senere. 10 B

11. Brukere skal sees, ikke høres! Når testdeltakere bruker ord og setninger som: «Jeg ville ha…» «Andre ville ha gjort…» «Hvis denne knappen hadde vært rød…» «Jeg klarte ikke dette, men andre ville ha…» Dvs. alle antakelser og hypoteser brukerne gjør om sine egne og andres handlinger kan du se bort fra! MEN… 11 B

12. Lytt til brukerne dine! Når de gir svar på spørsmål som: «Hva tror du vil skje hvis du klikker på denne?» «Kan du forklare meg hva du kan gjøre her?» «Hva er dine erfaringer med dette fra før?» «Hva forventer du å finne på nettsiden?» Dvs. deres forventninger til hva som skal skje og hva de har opplevd før kan måles opp mot det som faktisk skjer der og da! All informasjon som er nyttig for å forstå hvordan de tenker er også nyttig. 12 B

13. Hvem bør observere brukertesten? Brukertest bør sees av hele prosjektgruppen Designer Informasjonsarkitekt Prosjektleder Programmerere Fra kunde bør deltakere komme fra: Ledelse Markedsføring Kundestøtte IKT! MEN sørg for at hver person ser minst 2 personer. Det er veldig lett å få et helt feil bilde av en test dersom man er uheldig og observerer en person som enten er «for god» eller «for dårlig». 13 B

14. Retningslinjer for observatørene: Bruk «innestemmen» Behandle deltakerne med respekt Se hva brukerne gjør, ikke legg vekt på subjektive meninger om design eller interaksjon. Diskuter funn med de andre i pausen mellom deltakerne Ta med en stor dose tålmodighet! Hvis du bare kommer for å spise pizza og drikke brus…. Ok, det hadde vært billigere å sitte på Peppes ;) 14 B

15. Brukertest er bare 1 av mange metoder!

16. Tarantells metoder innenfor Brukeradferd KVALITATIV Ekspertevaluering Brukerintervjuer Brukertesting Feltstudier Fokusgrupper Eyetracking Cardsorting Personas HOLDNING ADFERD Persepsjonsanalyse Finnbarhetstest Sidetrafikk Polling Logganalyser Spørreundersøkelser KVANTITATIV

17. Ta kontakt! (( C:-} Haakon Halvorsen(( Leder av Brukeradferd / Usability Specialist haakon.halvorsen@tarantell.no mobil 992 96 717 @haakonha