Effektiv fjernbrukertesting

I løpet av høsten 2006 gjennomførte vi i Halogen to fjernbrukertester (engelsk: remote usability testing), med til sammen 21 brukere fra fem forskjellige land. Vi testet både eksisterende nettsted og ny funksjonalitet som kun lå på en intern testsite.

Testene ble gjennomført med nettmøteløsningen WebEx og tatt opp med skjermopptakeren Morae. Ved å bruke høyttalertelefon og vanlig mikrofon, fikk vi også tatt opp både det vi og brukeren sa. Kvaliteten på opptakene ble akseptable, selv om oppløsningen på skjermbildene ble noe lavere enn ved tradisjonell testing og talen hadde telefonkvalitet.

Fordeler ved tester over nett

• Krever mindre av brukerens tid da Internett gjør det unødvendig å reise til et teststed
• Tidsbesparelsen gjør det enklere å rekruttere testpersoner
• Bedre utvalg av brukere, da geografisk tilhørighet ikke er til hinder
• Siden testpersonene kan testes i sitt vanlige miljø, blir det en mer realistisk kontekst. Man får dermed avdekket mer relevante bruksproblemer
• Enklere å gjennomføre internasjonale brukertester med testpersoner i ulike land
• Lavere kostnader da man sparer reiseutgifter

Utfordringer

• Rekruttering i utlandet var en utfordring, selv om det hjalp med kontakter oppgitt av kunden. Utenlandske rekrutteringsbyrå brukte langt mer tid enn vi er vant med
• Ekstra deltakere bør på forhånd identifiseres i tilfelle frafall
• Oppkobling til nettmøtet tok i noen tilfeller ganske lang tid, slik at det ble mindre tid igjen til selve testen
• Brukerne må ha større datakunnskap enn i tradisjonelle tester for å kunne logge seg på nettmøtet. Og det ble vanskelig å hjelpe testpersonene med dette over telefon. WebEx var veldig greit å bruke, men bød likevel på en del hinder
• Det er nødvendig at både testleder og testperson har en forholdsvis rask nettforbindelse. Store forsinkelser i enkelte av testene vi gjorde førte til at det ble vanskelig for oss å følge med på hva brukeren gjorde, og problematisk for testpersonen å aksessere testsiten via vår maskin
• Brukeren kan ikke ha brannmur som hindrer ham/henne i å delta. En av våre testpersoner kunne ikke gjennomføre, da brannmuren trolig hindret bruk av WebEx
• Det er ekstra viktig at brukeren tenker høyt i en fjernbrukertest, siden forsinkelsen kan gjøre det vanskelig for testleder og observatør å følge med på hva som skjer
• Brukertest på et språk som ikke er testpersonens morsmål, kan være problematisk. En av våre tyske testpersoner forsto ikke spørsmålet som ble stilt på engelsk

Hvordan gjøre fjernbrukertesting?

Planlegging

Som i vanlige brukertester må man definerer hva man vil finne ut, og hvilke målgrupper som skal være representert. På bakgrunn av dette utformer man testoppgaver som kan gi ønskede svar. Man må også bestemme hvilket verktøy man ønsker å bruke for å gjennomføre selve testen.

Rekruttering av brukere krever god planlegging og tid. Vi i Halogen har både rekruttert selv og brukt rekrutteringsbyrå, og anbefaler en kombinasjon av tips fra nettstedeier og byrå.

Oppsett

En fjernbrukertest krever at man benytter en løsning for online-møte der man kan dele programmer med hverandre. Da kan testleder og observatør følge med når testpersonen bruker et program på sin skjerm, samtidig som brukeren har kontroll over egen maskin. Testleder kan også la testpersonen få kontroll over sin maskin slik at løsninger som ennå ikke er lansert også kan testes.

Gjennomføring av testen

Gjennomføring av selve fjernbrukertester skiller seg ikke i stor grad fra vanlige brukertester.

• Man bør ikke bruke mer enn en time totalt, og det anbefales å sette av de første ti-femten minuttene til å få logget brukeren på nettmøtet
• Testoppgavene blir gitt muntlig, ideelt sett på testpersonens morsmål.
• Testpersonen blir bedt om å tenke høyt slik at testleder og observatør får bedre forståelse for hva som skjer
• Man pleier å gi testpersonen en gave som takk for hjelpen

Dokumentasjon

• Bakgrunnsmateriale: Det er vanlig å ta opp det som skjer under testen, som et supplement til notater. Det finnes flere programmer som er spesialisert på fjernbrukertesting, for eksempel UserVue fra Techsmith og Ethnio. I disse kan man koble seg sammen med brukere, observere dem og enkelt ta opp det som skjer. Halogen har ikke testet disse spesialtilpassede løsningene, men vi antar at de gjør gjennomføringen av fjernbrukertester enklere. Man kan også bruke nettmøte og en vanlig skjermopptakere som Morae eller Camtasia som Halogen har gjort
• Presentasjon og anbefalinger: Det er essensielt at funnene fra testen blir presentert til de ansvarlige for nettstedet, sammen med anbefalinger til videre utvikling eller testing. Det aller beste er å presentere funnene i en klar forretningsmessig og strategisk sammenheng, da helst med målbare gevinster. Et annet tips er å fremlegge positive funn med forbedringspunkter, slik at de ansvarlige for løsningen ikke føler seg truet eller kritisert. Videre er det viktig at funn fra en brukertest forankres i organisasjonen og at nettstedet faktisk forbedres

Når benytte fjernbrukertesting?

Vi i Halogen mener ikke at fjerntesting bør erstatte tradisjonell testing, men være et alternativ. Når testens formål er definert, kan man velge metode. Kan man finne representanter for målgruppen i nærmiljøet, anbefales tradisjonell brukertest. Er hensikten å finne ut hvordan løsningen fungerer ulike steder i verden, kan fjernbrukertesting være rett metode.