Payer les sujets de test pour les tests utilisateurs / tests bêta
J'ai lu que les groupes de discussion sont une mauvaise façon de mener des recherches sur les utilisateurs car ils attirent des groupes de discussion professionnels qui travaillent dans le "circuit" des groupes de discussion pour gagner leur vie. Cela présente évidemment des inconvénients majeurs car vous obtenez des opinions "d'experts" au lieu d'un échantillonnage aléatoire d'utilisateurs typiques. De plus, si une personne participe régulièrement à des groupes de discussion ou le fait pour gagner sa vie, ses commentaires sont susceptibles d'être influencés par les sessions passées.
Mais je ne vois pas ce problème comme étant différent pour les tests utilisateur. Je vois souvent des annonces offrant de l'argent pour participer à des tests bêta ou pour être un testeur utilisateur. Des sites comme usertesting.com offrent des récompenses en espèces aux utilisateurs qui s'inscrivent aux sites de test (10 $ par site), donc vraisemblablement leurs sujets de test seront également des utilisateurs testeurs "professionnels" qui participent à un grand nombre d'études pour gagner plus d'argent. . D'autres sociétés comme UserZoom recrutent des utilisateurs dans des "sociétés de panels professionnels", qui, je suppose, rémunèrent également leurs membres.
Le paiement des testeurs d'utilisateurs est-il donc une bonne pratique ou compromet-il les données que vous en tirez? Si ce n'est pas une bonne pratique, quelles sont les alternatives pour obtenir un grand nombre de sujets de test impartiaux? Les tirages au sort seraient-ils plus efficaces?
Je sais que de nombreux sites sélectionnent simplement au hasard des visiteurs pour participer aux tests des utilisateurs. Mais que se passe-t-il si vous êtes embauché pour effectuer des tests d'utilisabilité pour un nouveau service qui n'a pas suffisamment de trafic pour recruter suffisamment de bêta-testeurs?
J'ai lu une étude récente selon laquelle 90% des problèmes d'interface utilisateur peuvent être découverts par les 5 premiers utilisateurs de test. (Je ne me souviens malheureusement pas du lien, peut-être que quelqu'un d'autre peut le faire). Cela se vérifie également dans mon expérience, mais l'astuce consiste, comme indiqué ci-dessus, à s'assurer que l'utilisateur ne connaît pas votre interface utilisateur et vos intentions, et à garder les non contaminés tout au long du processus.
Comme vous n'en avez pas besoin, il ne devrait pas être difficile de trouver 5 à 10 amis d'amis ou de parents ou tout ce que vous pourriez (comme indiqué ci-dessus) simplement remercier et offrir un bon déjeuner à après. Le paiement en espèces réel ajoute un stress et des attentes inutiles au processus, ce qui n'est pas l'expérience que vos utilisateurs réguliers auront. Idéalement, le test se déroule également dans un endroit assez décontracté afin qu'ils ne soient pas effrayés par la scène/ne le considèrent pas comme une sorte de test d'intelligence et prêtent plus d'attention, par exemple, aux questions fréquentes et autres, qu'ils ne le feraient normalement.
La sélection d'un échantillon représentatif est un problème difficile, un problème que vous ne pouvez pas résoudre avec un budget de 10 $ par testeur de toute façon. Cela affecte tous les sondages.
Ce dont vous avez besoin est en fait pas un échantillon représentatif de la population générale. Vous voulez un échantillon qui représente vos utilisateurs. C'est beaucoup plus simple. Votre échantillon n'a pas besoin d'être exempt de biais - il n'a tout simplement pas besoin d'avoir un biais dans les aspects liés au système testé.
Pensez-y de cette façon: pour combien de sites, vous devez inclure un riziculteur chinois qui n'a jamais eu accès à un ordinateur auparavant? Il doit y en avoir des millions et des millions, mais vous n'en avez pas besoin. (Désolé, M. Li, pour vous avoir stéréotypé)
Alors, déterminez: quels sont les utilisateurs potentiels? Comment les gens utilisent - ou sont censés utiliser - votre système? Avez-vous des cas d'utilisation avec des utilisateurs typiques? choisissez des utilisateurs fictifs représentatifs à partir de cela, par exemple:
- "utilisateur expérimenté de gadget-junkie"
- "PDG luddite"
- "son patron le fait et il n'aime pas ça"
Essayez de trouver des représentants pour cela. Il n'est pas nécessaire que ce soit un PDG, mais quelqu'un d'impatient, pas de connaisseur en informatique avec beaucoup de choses en tête. (maman? C'est toi?)
Concernant la question ultime:
Mais que se passe-t-il si vous êtes embauché pour effectuer des tests d'utilisabilité pour un nouveau service qui n'a pas assez de trafic pour recruter suffisamment de bêta-testeurs?
Demandez simplement à vos amis et invitez-les à dîner après.
En ce qui concerne votre dernière question, en dehors de la famille et des amis, j'utilise des services de petites annonces gratuites, par exemple craigslist pour trouver des utilisateurs potentiels aléatoires.
La clé est de filtrer les candidats intéressés (avant de les appeler) en leur posant des questions importantes (sondage en ligne ou téléphone) qui sont pertinentes pour savoir comment vous "grouperiez" vos échantillons. Par exemple, une question comme "Avez-vous déjà effectué une inscription en ligne?" peut être très important lorsque vous souhaitez mesurer l'efficacité de votre nouveau flux d'enregistrement; selon vos objectifs de test ou votre public cible, vous pouvez avoir votre première ligne de filtrage basée sur cette simple question.
Je l'aime de cette façon dans un sens qu'il est plus personnel et cela me donne également une chance de promouvoir le service sous test. Cela peut être utile, surtout lorsque vous supposez qu'il s'agit d'un nouveau service.
J'ai généralement attribué aux participants une carte-cadeau. Oui, je leur ai dit dès le départ.
Dans la recherche universitaire, obtenir un ensemble de participants à l'étude est tout autant un problème, et il n'y a pas de réponse simple. Essentiellement, si vous offrez une forme quelconque de récompense extrinsèque, vous attirerez alors un certain type de personnes attirées par les récompenses. Si vous n'offrez pas de récompense, vous n'attirerez que les personnes qui sont prêtes à vous aider pour rien.
La seule vraie réponse est que vous devez amener les gens de quelque manière que ce soit qui vous convient, mais assurez-vous de tirer des conclusions sur la base des exemples de considérations.