it-swarm.com.de

UX in freier Wildbahn vs UX beobachtet

Kürzlich hatte ich das Glück, direkt neben einem Benutzer im Zug zu sitzen, der zufällig eine der von mir entworfenen Apps verwendet. Ohne dies ihnen mitzuteilen, konnte ich beobachten, wie sie die App nutzen. Obwohl sie nicht so laut nachdachten wie in Benutzertestsitzungen, war es sehr aufschlussreich zu sehen, wie sie es verwenden.

Was kommt zu der Frage, ob ihr Verhalten anders ist, wenn Benutzer wissen, dass sie beobachtet werden, als Benutzer für eine Benutzertestsitzung einzubeziehen? Oder noch schlimmer, wenn ein Anreiz gegeben wird. Wenn ja, würde das die Forschung fehlerhaft machen?

59
Ameen Akbar

Ja, es ist als Hawthorne-Effekt bekannt und eine von vielen kognitiven Vorurteilen, die beim Ausführen von Usability-Testsitzungen zu beachten sind.

Von Wikipedia

Der Hawthorne-Effekt (auch als Beobachter-Effekt bezeichnet) ist eine Art von Reaktivität, bei der Individuen einen Aspekt ihres Verhaltens als Reaktion auf ihr Bewusstsein, beobachtet zu werden, modifizieren.

Macht es die Forschung fehlerhaft? Na ja, in gewisser Weise. Das heißt aber nicht, dass es sich nicht lohnt, es zu tun. Sie können dies bis zu einem gewissen Grad abmildern - indem Sie die Testeinrichtungen so natürlich und komfortabel wie möglich gestalten, nicht in einem Laborkittel mit Zwischenablage stehen, im Allgemeinen freundlich und menschlich sind und nicht wie eine Maschine. Und (wichtig) dem Benutzer im Voraus zu sagen, dass Sie nicht sie testen, sondern das System.

Aber Voreingenommenheit wird immer da sein, Sie müssen sich dessen bewusst sein, versuchen, mit mehreren Methoden und Benutzern zu testen, und nach dem Testen nicht davon ausgehen, dass sich die Personen während des Tests genau so verhalten, wie sie sich in der „realen Welt“ verhalten. .

Sie erhalten jedoch weiterhin nützliche Testdaten von Personen, auch wenn diese wissen, dass sie überwacht werden. Die Leute werden sich noch mehr bemühen, Probleme in einem Labor zu lösen als zu Hause. Wenn sie also nicht herausfinden können, wie sie zur Kasse in Ihrem E-Commerce-Shop gelangen, wenn Sie sie in einem Labor testen, dann wirklich weiß, dass du ein Problem hast - weil die Leute zu Hause längst gerettet wären.

70
JonW

Wie die Antwort von JonW besagt, gibt es den Hawthorne-Effekt.

Es gibt jedoch einige Verhaltensweisen, die Sie möglicherweise in einer natürlichen Umgebung beobachten können, wenn Sie den ethnografischen Forschungsansatz verwenden und nicht einen Benutzer, der einen testet.

Benutzertests werden häufiger in einer künstlichen Umgebung durchgeführt, die von den Benutzertestern eingerichtet wurde, einige mit unterschiedlichem natürlichen Gefühl für den Benutzer. Ethnografische Forschung wird ausschließlich vor Ort in der eigenen Umgebung durchgeführt. Es kann einige andere Probleme aufwerfen, die Benutzertests möglicherweise nicht aufgreifen.

Wenn Sie beispielsweise jemanden an seinem Schreibtisch beobachten, der Post-its mit Passwörtern, Anleitungen usw. zur Vorgehensweise hat, ist dies ein Hinweis darauf, dass die UX verbessert werden muss, um die Arbeit zu vereinfachen. Benutzertests können dies möglicherweise nicht erfassen. Während Sie also beobachten, wie der Benutzer Ihre App im Zug verwendet, hat sie möglicherweise einige andere Dinge präsentiert, die in einem Labor nicht passiert wären.

Ich würde nicht sagen, dass es fehlerhaft ist, ich würde es sagen bietet eine andere Perspektive und einige alternative Ergebnisse und Beobachtungen, die Benutzertests in einer Laborumgebung möglicherweise nicht hervorheben und umgekehrt.

5
UIO

Wie die anderen Antworten zeigen, gibt es einen Namen für dieses Phänomen, und es ist fehlerhaft.

Aber auch das Beobachten des Benutzers ohne dessen Wissen ist fehlerhaft, einfach weil Sie nicht wissen, was er denkt. Sie mögen eine bestimmte Funktion hassen, lassen sich aber damit abfinden, weil sie keine andere Wahl haben.

Die fehlerfreieste Prüfung/Beobachtung, die Sie erhalten können, ist die Verwendung Ihrer eigenen Software. Ich meine nicht, dass Sie es nur als Teil Ihrer Aufgabe zum Testen der Software verwenden, sondern dass Sie eine solche Software genau so verwenden müssen, wie es Ihre Zielgruppe tut.

So viele hochkarätige Softwareprodukte werden tatsächlich erstellt, z. Basecamp - Sie verwenden Basecamp wahrscheinlich, um die Entwicklung von Basecamp zu verwalten. Google Mail - Personen in Google verwenden wahrscheinlich Google Mail, um miteinander zu kommunizieren. React - Leute auf Facebook verwenden wahrscheinlich React, um ihre Website zu erstellen.

Auf der anderen Seite weist ein Netflix-Film zufällige Störungen auf, wenn Sie versuchen, ihn mit Untertiteln in Chrome anzusehen. Dies liegt wahrscheinlich daran, dass noch niemand in Netflix Chrome] verwendet hat, um einen Netflix-Film mit Untertiteln anzusehen.

1
Andy