Test avec des utilisateurs nouveaux ou expérimentés
Un peu de trame de fond d'abord: je mets en place un test d'utilisabilité impliquant les dossiers médicaux électroniques (DME). Le test doit suivre certains projet de directives de test (long pdf) mis en place par le National Institute of Standards and Technology (NIST) pour identifier les problèmes d'utilisabilité qui pourraient affecter la sécurité des patients. Ces projets de normes sont encore quelque peu flexibles et peuvent être commentés.
Ma question vient des exigences de sélection des participants (p. 39):
Les utilisateurs sont censés connaître les DME mais pas le produit spécifique qu'ils testent.
J'ai deux questions à ce sujet:
N'y a-t-il pas un avantage à tester un mélange d'utilisateurs nouveaux et expérimentés? Les nouveaux utilisateurs peuvent identifier des choses qui n'ont pas de sens, mais les utilisateurs expérimentés peuvent révéler une mauvaise convivialité qui pourrait causer des problèmes (par exemple, une cécité d'erreur/d'avertissement).
Les nouveaux utilisateurs sont censés recevoir une formation sur le produit spécifique immédiatement avant d'être testés. Existe-t-il un moyen de former les utilisateurs sur un produit relativement complexe comme celui-ci et de ne pas biaiser leurs tests d'utilisabilité immédiatement après?
Dans Don't Make Me Think: A Common Sense Approach to Web Ergonomie par Steve Krug, il note quelques points très intéressants qui, selon moi, sont pertinents pour votre question.
L'importance de recruter des utilisateurs représentatifs est surestimée. Il est bon de faire vos tests avec des gens qui ressemblent à ceux qui utiliseront votre site, mais il est beaucoup plus important de tester tôt et souvent.
Il continue en mentionnant quelque chose avec lequel je suis fortement d'accord dans la section sur recruter librement et noter sur une courbe: "nous sommes tous des débutants sous la peau." Si vous regardez de près un expert, vous trouverez souvent quelqu'un qui se débrouille également - juste à un niveau supérieur.
De plus, il est mentionné que ce n'est généralement pas une bonne idée de définir un site afin que seule une vue très étroite de votre public cible puisse l'utiliser.
Si vous concevez un site pour les comptables en utilisant une terminologie que vous pensez que tous les comptables comprendront, ce que vous découvrirez probablement, c'est qu'un petit nombre mais non négligeable de comptables ne sauront pas de quoi vous parlez.
Si un débutant peut l'utiliser, un expert le peut. De plus, les experts ne sont pas souvent rebutés par quelque chose de suffisamment clair pour quelqu'un qui est nouveau.
Il existe cependant des exceptions à ces "règles de base", et si votre site est destiné à être utilisé exclusivement par un type d'utilisateur et ce n'est pas plus difficile à recruter dans ce groupe, alors il n'y a pas de bonne raison de ne pas le faire. Cependant, à la fin de la journée, tout test est évidemment meilleur que pas de test.
Tout d'abord, je suis d'accord avec GotDibbs; il est PLUS important de tester tôt et fréquemment tout au long du processus.
Cependant, en ne testant pas sur les "experts"/votre véritable groupe cible, vous risquez de manquer certains commentaires, questions, etc. utiles que seul un professionnel pourrait proposer. Ces commentaires pourraient vous donner des informations précieuses lors de la conception pour les besoins de vos utilisateurs.