Wie Remote-Tests zu Game Changer wurden

(Kamilla Liljedahl)

Als UX-Designer bei SVTi sind wir für das kontinuierliche Gespräch verantwortlich Unsere Benutzer verstehen sowohl ihr Verhalten als auch ihre Herausforderungen und Bedürfnisse und setzen diese in Benutzererkenntnisse um. Als die Pandemie uns dazu brachte, aus der Ferne zu arbeiten, und soziale Distanzierung zur neuen Norm wurde, unserer Standardmethode zum Sammeln dieser Informationen; Abhalten von Benutzertestsitzungen im Büro; war keine Option mehr.

Wir waren gezwungen, unsere Benutzer-Feedback-Sitzungen online zu stellen, und trotz der Bedenken, die wir zuvor hatten, haben wir jetzt eine Methode gefunden, die wir sehr gern haben. Wir werden versuchen, unsere wichtigsten Erkenntnisse aus den letzten acht Monaten der Remote-UX-Forschung zu teilen und zu diskutieren, warum wir nicht zu unseren vorpandemischen Methoden des Benutzertests zurückkehren.

Das Wichtigste zuerst, So sah unser allgemeiner Forschungsprozess aus:

Wir würden die Notwendigkeit von Benutzer-Feedback erkennen. entweder durch direkte Usability-Tests oder durch einen formativeren Ansatz mit Benutzerinterviews; in unserer täglichen Arbeit mit verschiedenen Teilen von SVT Play. Nachdem wir gemeinsam mit dem Team über den Ansatz entschieden hatten, definierten wir Forschungsfragen, die uns dabei halfen, den Testaufbau und die Kriterien für die Rekrutierung von Teilnehmern zu formulieren. Während der Rekrutierungsphase haben wir Beobachtungsräume, Protokolle für Notizen, Testaufbau und Zeitplan vorbereitet. Zwei Wochen später begrüßten wir Benutzer in unserem permanent bebauten Wohnzimmer im Büro.

Ein bebautes Wohnzimmer im Büro für Testsitzungen
Egal wie gemütlich unser bebautes Wohnzimmer im Büro ist, es ist schwer, die Realität zu übertreffen.

Zwischen jeder Testsitzung setzten sich die beiden Testleiter und Beobachter zusammen und fassten zusammen, was wir gerade gehört hatten. Kurz nach dem Testtag trafen wir uns erneut zu einer Synthesesitzung, die uns zu den wichtigsten Erkenntnissen der Benutzer führte, die wir mit dem Team und dem Rest der technischen Organisation teilen würden.

Viele der oben beschriebenen Schritte sind natürlich immer noch wichtige Teile unseres Prozesses, während andere überflüssig geworden oder ersetzt wurden.

Remote gehen

Nicht lange nach der Pandemie haben wir über Nacht angefangen, von zu Hause aus zu arbeiten machte den Sprung in Remote-Tests. Lassen Sie uns einen Blick auf unsere wichtigsten Erkenntnisse und Tipps sowie auf einige Mythen werfen, die alle aus den Testrunden stammen, die wir im Laufe des Jahres in verschiedenen Teams und Projekten online durchgeführt haben.

Zunächst sind die Aspekte aufgeführt, die wir erwartet hatten Vorteile beim Remote-Testen:

Feedback von Nord nach Süd einholen. Da ein Besuch in unserem Büro erforderlich war Für unsere Benutzerinterviews vor der Pandemie ermöglichen uns Remote-Tests jetzt, auf einfache und kostengünstige Weise Benutzererkenntnisse von Menschen in ganz Schweden zu sammeln. Dies ist großartig, da es uns ermöglicht, unser Produkt aus verschiedenen Perspektiven zu validieren, was im Einklang mit der Mission von SVT steht, alle zu vertreten.

„Ohne Pendelzeit kommt mehr Vielfalt in Berufsbedingungen und Zugänglichkeit ”

Eine Vielzahl von Berufen. Pre remote, far Jeder hatte die Gelegenheit, sich die Zeit zu nehmen, um uns zu besuchen, aber ohne Pendelzeit kommt es zu mehr Vielfalt in Bezug auf Beruf und Zugänglichkeit.

Die folgenden Aspekte wurden von uns ursprünglich nicht berücksichtigt Remote-Zugriff, aber das hat sich für uns als sehr wertvoll erwiesen:

Ihr eigenes Gerät in Reichweite. Während Usability-Tests von zu Hause aus können Teilnehmer jetzt ihre eigenen Geräte verwenden, was ein echter Spielveränderer war. Wenn sie mit dem Laptop, auf dem wir das Meeting abhalten, am besten vertraut sind, können sie einfach ihren Bildschirm freigeben. Wenn sie normalerweise SVT Play auf ihrem Fernseher verwenden, können sie einfach ihre Fernbedienung greifen, ihren Laptop umdrehen und uns zeigen, wie sie auf authentische Weise damit interagieren.

Dokumentation: Fertig. Wenn Sie mit Usability-Tests oder Benutzerinterviews vertraut sind, wissen Sie, dass ausreichend Dokumentation erforderlich ist, um Erkenntnisse auszutauschen, qualitative Daten zu sammeln oder Lassen Sie sich einfach von der zukünftigen Forschung inspirieren. Die meisten Teile unserer Dokumentation waren natürlich digital, bevor covid-19 überhaupt Teil unseres Vokabulars war, aber jetzt haben wir sogar die letzten physischen Teile konvertiert. Ein Beispiel sind unsere beliebten Post-its auf Whiteboards, die jetzt durch digitale Versionen der beiden ersetzt werden. Dies spart uns wertvolle Zeit für die Analyse.

Wie Sie wahrscheinlich inzwischen bemerkt haben, haben wir Remote-Benutzertests sehr gern.Aber natürlich gibt es wie bei allem, auch Nachteile . Hier sind einige Dinge, die wir bemerkt haben, einige allgemeiner und andere spezifischer für unser Produkt:

Testbarkeit von Prototypen. Wenn wir mit dem Befragten in einem physischen Raum sitzen, können wir ihm jederzeit ein Gerät mit unserem neuesten Prototyp oder unserer neuesten Produktversion übergeben, die noch nicht eingeführt wurde. Da wir jedoch fern sind, müssen wir uns an Prototypen halten, die auf jedem Gerät ausgeführt werden können, oder ihnen einfach unseren Prototyp oder unsere Produktversion auf einem freigegebenen Bildschirm anzeigen und sie bitten, laut nachzudenken und uns zu erklären, wie sie darin navigieren würden Natürlich nicht ideal.

Immer noch nicht alle erreichen. Menschen aus verschiedenen Berufen sind immer noch hart Um nach Feedback-Sitzungen zu greifen, und wenn die Pandemie vorbei ist, sind wir möglicherweise in Bezug auf die vertretenen Berufe eingeschränkter als das, was wir derzeit erleben.

Nein natürliche Beobachterzusammenarbeit. Während der physischen Testsitzungen saßen die Beobachter im selben Raum und konnten schnell Unklarheiten bei der Interpretation miteinander überprüfen. Dies ist nichts Wichtiges, und wir könnten dies nachahmen, indem wir einen separaten Sprachanruf zwischen den Beobachtern führen, aber bisher haben wir dies nicht getestet.

Bemerkenswert: Obwohl wir unsere Teilnehmer immer am Ende von fragen In der Sitzung, in der sie es erlebt haben, haben wir nicht analysiert, wie unsere Benutzer den Unterschied zu persönlichen Tests erleben. Darüber hinaus ist die häusliche Umgebung eine natürliche Umgebung für die Nutzung unseres Service, was sie zur idealen Umgebung für eine Feedback-Sitzung für uns macht. Dies ist jedoch natürlich nicht bei allen Produkten und Dienstleistungen der Fall.

Remote-Mythos- Busting

Wir haben erwähnt, dass wir einige Bedenken hinsichtlich Remote-Tests hatten, bevor wir es ausprobiert haben. Deshalb denken wir, dass Sie sich nicht von ihnen aufhalten lassen sollten.

Problem 1: Wenn wir uns online treffen, erreichen wir nur technisch versierte Teilnehmer. Wenn wir mit Fremden auf einen Videoanruf springen und ihnen Feedback geben, können wir nicht erwarten, dass die Leute im Allgemeinen dazu bereit sind. Wenn wir also Remote testen, riskieren wir, unsere Benutzerdaten zu verzerren

Realität: 2020 war das Jahr, in dem jeder, ob technisch versiert oder nicht, gezwungen war, sich mit Videoanrufen sowie mit anderen digitalen Diensten und Möglichkeiten anzufreunden. Die Pandemie hat uns dazu gebracht, einen digitalen Sprung von 5 Jahre vorwärts zu machen. Allgemeiner gesagt, wir werden die Verzerrung, die mit dem Sammeln von qualitativem Feedback einhergeht, niemals vollständig beseitigen. Wir können damit arbeiten, welche Anreize wir den Teilnehmern geben und welche Zeitfenster wir für unsere Tests anbieten, aber wir werden uns immer darauf beschränken, Menschen zu erreichen, die dazu bereit sind Nehmen Sie sich Zeit und Energie, um uns Feedback zu geben.

Problem 2: Online-Meetings sind zu eingeschränkt und unpersönlich. Wir könnten uns nicht auf eine Weise mit unseren Befragten verbinden, die für den Test oder das Interview erforderlich ist, und wir würden wichtige Nuancen in dem, was der Benutzer wirklich fühlt und denkt, verpassen.

Realität: Obwohl digitales Treffen nicht dasselbe ist wie persönliches Treffen, sind wir aufgrund unserer entfernten Erfahrungen zuversichtlich, dass wir in der Lage sind, genug mit unseren Teilnehmern in Verbindung zu treten und genug von ihnen wahrzunehmen auch über Video. Eine Überlegung jedoch: Dies ist jetzt wahrscheinlich einfacher als vor 2020, was wiederum den digitalen Sprung und die Tatsache betrifft, dass wir uns alle auf Video einlassen mussten, um auch unsere engen Beziehungen aufrechtzuerhalten.

Tipps zum Testen

Zu guter Letzt finden Sie hier einige praktische Tipps, die auf den Ergebnissen unserer Remote-Tests basieren:

  • Markieren Sie den Besprechungslink, Punkt. Um zu vermeiden, dass wertvolle Testzeit bei technischen Problemen verloren geht, können Sie den Teilnehmer an der Besprechung beteiligen, indem Sie den Besprechungslink oben in der Einladungs-E-Mail markieren. Andere relevante Besprechungsinformationen können nach dem Link angezeigt werden. Einige Teilnehmer möchten sich sorgfältig vorbereiten, andere nicht. Berücksichtigen Sie daher auch alle TL; DRs da draußen.
  • Umgang mit Beobachter (in) Sichtbarkeit . Bei physischen Tests waren unsere Beobachter praktisch unsichtbar, während sie jetzt am digitalen Meeting teilnehmen. Es ist daher genauso wichtig wie zuvor, dem Benutzer mitzuteilen, dass wir einige Kollegen zum Zuhören einladen möchten, und sicherzustellen, dass dies in Ordnung ist. Unsere Beobachter verbinden sich stumm und mit ausgeschaltetem Video, um das Gefühl zu verringern, dass eine Menge zuschaut. Wenn sie weitere Fragen stellen möchten, geben sie diese während der Testsitzung über einen separaten Chat an den technischen Testleiter weiter.
  • Laptop umarmt .Für Handys oder Tablets haben wir das Umarmen von Laptops getestet und uns in sie verliebt (ja, wir alle vermissen es, uns persönlich zu umarmen!) – der Benutzer dreht den Laptop um und passt den Winkel der Webkamera so an, dass wir die Interaktionen währenddessen sehen können Der Benutzer hält sein Touch-Gerät. Dadurch ist es für uns noch einfacher, die Interaktionen zu verfolgen als in unseren physischen Testsitzungen.
Laptop umarmt sich in Aktion

Ist Remote-Testen zu einem Game Changer geworden? Die Antwort für uns ist Y-E-S. Die Bedenken, die wir zuvor hatten, waren bei weitem nicht so problematisch, wie wir es uns vorgestellt hatten, und es stellte sich heraus, dass die Fernbedienung viele Vorteile mit sich brachte. Für uns ist es am wichtigsten, ganz Schweden leichter zu erreichen, was Remote zu einem echten Spielveränderer macht.

Wir bezweifeln, dass wir wieder persönliche Benutzersitzungen als Standard haben werden. aber wir schließen nicht aus, sie zu verwenden, wenn es Sinn macht. Und zu Beginn des neuen Jahres möchten wir unsere Fähigkeiten im Bereich Remote-Tests weiter verbessern und wertvolle Erkenntnisse für Benutzer in das Unternehmen einbringen.

Welche Erfahrungen haben Sie mit Remote-Tests gemacht? Wir würden sie gerne hören!

Von Elin Nevdahl und Kamilla Liljedahl

Schreibe einen Kommentar

Deine E-Mail-Adresse wird nicht veröffentlicht. Erforderliche Felder sind mit * markiert.