Hvordan fjerntestning blev en spilskifter

(Kamilla Liljedahl)

Som UX-designere hos SVTi er vi ansvarlige for løbende at tale med vores brugere, der forstår både deres adfærd, udfordringer og behov og oversætter disse til brugerindsigt. Da pandemien fik os til at arbejde eksternt, og social afstand blev den nye norm, vores standard måde at indsamle denne information på; afholdelse af brugertestsessioner på kontoret; var ikke længere en mulighed.

Vi blev tvunget til at flytte vores brugerfeedback-sessioner online, og på trods af de bekymringer, vi havde på forhånd, har vi nu fundet en metode, som vi er blevet meget glad for. Vi vil forsøge at dele vores vigtigste takeaways fra de sidste otte måneder af UX-fjernundersøgelse og diskutere, hvorfor vi ikke ser os flytte tilbage til vores præ-pandemiske måder til brugertest.

Første ting først, her ser vores generelle forskningsproces ud:

Vi ser behovet for brugerfeedback; enten gennem lige op-brugstest eller en mere formativ tilgang med brugerinterviews; i vores daglige arbejde med forskellige dele af SVT Play. Efter at have besluttet en tilgang sammen med teamet definerede vi forskningsspørgsmål, der hjalp os med at danne testopsætningen og kriterierne for deltagerrekruttering. I rekrutteringsfasen forberedte vi observationsrum, protokoller til notering, testopsætning og tidsplan. To uger senere bød vi brugere velkommen i vores permanent bebyggede stue på kontoret.

En bebygget stue på kontoret til testsessioner
Ligegyldigt hvor hyggelig vores bebyggede stue på kontoret er, er det svært at slå den rigtige ting

Mellem hver testsession sad de to testledere og observatører ned og opsummerede det, vi lige havde hørt. Kort efter testdagen mødtes vi igen til en syntesesession, der ville føre os til de vigtigste brugerindsigter, vi ville dele med teamet og resten af ​​den tekniske organisation.

Mange af trinnene beskrevet ovenfor er naturligvis stadig vigtige dele af vores proces, mens andre er blevet overflødige eller erstattet.

Går fjernt

Ikke længe efter pandemien ramte, og vi natten over begyndte at arbejde hjemmefra, vi gjorde springet i fjerntest. Lad os grave i vores vigtigste takeaways og tip, plus nogle myte-busting, alt stammer fra de testrunder, vi har foretaget online i forskellige teams og projekter i løbet af året.

Først og fremmest er de aspekter, vi forventede ville have være fordele ved fjerntest:

Indsamling af feedback fra nord til syd. Da det var nødvendigt at besøge vores kontor til vores brugerinterviews før pandemien giver fjerntest os nu mulighed for let og omkostningseffektivt at indsamle brugerindsigt fra mennesker i hele Sverige. Dette er fantastisk, da det giver os mulighed for at validere vores produkt fra mere forskellige perspektiver, hvilket er i tråd med SVTs mission som helhed at repræsentere alle.

“uden pendeltid kommer mere mangfoldighed i vilkår for besættelse og tilgængelighed ”

En række forskellige erhverv. For fjernbetjening, langt fra alle havde mulighed for at tage sig tid ud af deres dag til at besøge os, men uden pendeltid kommer mere mangfoldighed med hensyn til besættelse og tilgængelighed.

Følgende er aspekter, der oprindeligt ikke var en del af os i betragtning fjernbetjening, men det viste sig at være meget værdifuldt for os:

Din egen enhed inden for rækkevidde. Under brugervenlighedstest fra hjemmet kan deltagerne nu bruge deres egne enheder, hvilket var en rigtig spilskifter. Hvis de er mest fortrolige med den bærbare computer, vi har mødet på, kan de bare begynde at dele deres skærm. Hvis de normalt bruger SVT Play på deres tv, kan de bare gribe deres fjernbetjening, vende deres bærbare computer og vise os, hvordan de interagerer med den på en autentisk måde.

Dokumentation: Udført. Hvis du er fortrolig med brugervenlighedstest eller brugerinterviews, ved du, at der er masser af dokumentation, der er nødvendig, hvis du vil dele indsigt, samle kvalitative data eller bare få en spand inspiration til fremtidig forskning. De fleste dele af vores dokumentation var naturligvis digital, før covid-19 endda var en del af vores ordforråd, men nu har vi konverteret selv de sidste par fysiske bits. Et eksempel er vores elskede post-its på whiteboards, nu erstattet med digitale versioner af de to, hvilket sparer os værdifuld tid, som vi kan bruge på analyse.

Som du sikkert har bemærket nu, er vi blevet meget glade for test af fjernbruger.Men selvfølgelig er der som med alt også ulemper . Her er et par ting, vi har bemærket, nogle mere generelle og andre mere specifikke for vores produkt:

Testotyper af prototyper. Når vi sad i et fysisk rum med respondenten, kunne vi altid give dem en enhed med vores nyeste prototype eller produktversion endnu ikke rullet ud. Men når vi er fjernt, skal vi holde os til prototyper, der kan køres på en hvilken som helst enhed, eller blot vise dem vores prototype eller produktversion på en delt skærm og bede dem om at tænke højt og instruere os om, hvordan de vil navigere i det, hvilket er selvfølgelig ikke ideel.

Nå stadig ikke alle. Mennesker fra en række erhverv er stadig hårde for at nå ud til feedback-sessioner, og når pandemien er forbi, kan det være, at vi er mere begrænsede med hensyn til repræsenterede erhverv, end hvad vi i øjeblikket oplever.

Nej naturligt observatørsamarbejde. Under de fysiske testsessioner sad observatørerne i samme rum og kunne hurtigt kontrollere eventuelle uklarheder i fortolkninger med hinanden. Dette er ikke noget stort, og vi kunne efterligne dette ved at have et separat taleopkald mellem observatørerne, men indtil videre har vi ikke testet dette.

Værd at bemærke: Selvom vi altid spørger vores deltagere i slutningen af sessionen hvordan de oplevede det, har vi ikke analyseret, hvordan vores brugere oplever forskellen fra persontest. Desuden er hjemmemiljøet en naturlig ramme for at bruge vores service, hvilket gør det til den ideelle ramme for en feedback-session for os, men det er selvfølgelig ikke tilfældet for alle produkter og tjenester.

Fjern myte- busting

Vi nævnte, at vi havde nogle bekymringer om fjerntest, før vi prøvede det. Det er derfor, vi mener, at du ikke skal lade dem stoppe dig.

Bekymring 1: ved at mødes online når vi kun tech-kloge deltagere. At hoppe på et videoopkald med fremmede og give dem feedback er ikke noget, vi kan forvente, at folk generelt er villige til at gøre, så ved at teste fjernbetjening risikerer vi at skæve vores brugerdata .

Virkelighed: 2020 var året, alle, teknisk kloge eller ej, blev tvunget til at få venner med videoopkald såvel som med andre digitale tjenester og muligheder. Pandemien fik os til at foretage et digitalt spring på 5 år fremad . På en mere generel note vil vi aldrig helt fjerne den skævhed, der følger med at indsamle kvalitativ feedback – vi kan arbejde med hvilke incitamenter vi giver deltagerne, og hvilke tidspunkter vi tilbyder til vores test, men vi vil altid være begrænset til at nå ud til folk, der er villige til brug tid og energi på at give os deres feedback.

Bekymring 2: at møde online er for begrænset og upersonligt. Vi ville ikke være i stand til at oprette forbindelse til vores respondenter på en måde, der er nødvendig for testen eller interviewet, og vi ville gå glip af vigtige nuancer i, hvad brugeren virkelig føler og tænker.

Virkelighed: Selvom det ikke er det samme at møde digitalt som at møde personligt, er vi nu fra vores fjernoplevelser sikre på, at vi er i stand til at forbinde nok med og opleve nok fra vores deltagere også over video. En refleksion: dette er sandsynligvis lettere nu end før 2020, igen i forbindelse med det digitale spring og det faktum, at vi alle har været nødt til at omfavne video for at opretholde selv vores nære forhold.

Tip til test

Sidst men ikke mindst, her er et par hænder på tip baseret på hvad vi har set i vores fjerntest:

  • Fremhæv mødelinket, periode. For at undgå at miste værdifuld testtid på tekniske spørgsmål skal du bare få deltageren til mødet ved at fremhæve mødelinket øverst i invitationens e-mail. Andre relevante mødeoplysninger kan gå efter linket. Nogle deltagere vil forberede sig omhyggeligt, og andre gør det ikke, så tag også hensyn til alle TL; DRs derude.
  • Håndtering af observatør (in) synlighed . I fysiske tests var vores observatører stort set usynlige, mens de nu er deltagere i det digitale møde. At fortælle brugeren, at vi gerne vil invitere et par kolleger til at lytte og sikre sig, at det er OK, er derfor lige så vigtigt som før. Vores observatører forbinder dæmpet og med video slået fra for at mindske følelsen af ​​at få en tilskuer til at se. Hvis de vil stille opfølgningsspørgsmål, videresender de disse til den tekniske testledning gennem en separat chat under testsessionen.
  • Bærbar computer, der krammer .Til mobil eller tablet har vi testet og forelsket os i kram af bærbar computer (ja, vi savner alle sammen kramning personligt!) – brugeren vender den bærbare computer rundt og justerer vinklen på webkameraet, så vi kan se interaktionerne, mens brugeren holder ved berøringsenheden. Gennem dette er det endnu lettere for os at følge interaktionerne, end det var i vores fysiske testsessioner.
Laptop krammer i aktion

Så er fjerntestning blevet en spilskifter? Svaret for os er Y-E-S. De bekymringer, vi havde på forhånd, var ikke så problematiske, som vi troede, de ville være, og der viste sig at være masser af ulemper ved at gå fjernt. For os er det lettere at nå hele Sverige det vigtigste, hvilket gør fjernbetjening til en rigtig spilskifter.

Vi tvivler på, at vi vender tilbage til at have personlige brugersessioner som vores standard foran os, men vi udelukker ikke at bruge dem, når det giver mening. Og når vi går ind i det nye år, er vi interesserede i at fortsætte med at skærpe vores færdigheder til fjerntest og bringe værdifuld brugerindsigt til organisationen.

Hvad er dine erfaringer med fjerntest? Vi vil meget gerne høre dem!

Af Elin Nevdahl og Kamilla Liljedahl

Skriv et svar

Din e-mailadresse vil ikke blive publiceret. Krævede felter er markeret med *