Dois-je inviter des utilisateurs existants à mon test de convivialité sommative?
Je suis sur le point de faire un test de convivialité sommative sur une application avec un groupe de participants. Je suis convaincu que je devrais surtout inviter des personnes qui ne connaissent pas l'application pour voir comment elles se portent lors de la première rencontre avec l'interface.
Cependant, je suis également curieux de savoir comment les clients existants utilisent l'application.
Inviter des utilisateurs existants nuirait-il trop aux résultats de mon test d'utilisabilité sommative? Dois-je plutôt inviter les utilisateurs existants à un test séparé? Y a-t-il un avantage à inclure les utilisateurs existants?
Inviter des utilisateurs existants nuirait-il trop aux résultats de mon test d'utilisabilité sommative?
Oui
Dois-je plutôt inviter les utilisateurs existants à un test séparé?
Oui
Y a-t-il un avantage à inclure les utilisateurs existants?
Non
Réfléchissez à ceci: SUT est conçu pour être exécuté dans des conditions de laboratoire, avec un ensemble très spécifique de lignes directrices orientées pour définir l'étalonnage de l'utilisabilité, qui est défini après une analyse statistique rigure. Si vous mélangez votre public entre des utilisateurs expérimentés et des utilisateurs non expérimentés, vous aurez certainement un échantillon contaminé, car même s'il n'est pas impossible, il sera très difficile de distinguer ces utilisateurs. De plus, l'exécution de ANOVA vous donnera des résultats vraiment imprévisibles. Si vous avez VRAIMENT besoin de le faire, mieux vaut aller avec chi-carré (et assurez-vous d'avoir une dimension pour reconnaître les utilisateurs expérimentés et novices) ou ANOVA factorielle (jetez un oeil à un exemple de l'utilisation de l'ANOVA factorielle sur un test HCI assez similaire au vôtre, spécialement en ce qui concerne les deux façons que vous devrez définir ), mais ce sera toujours plus précis et plus facile si vous exécutez 2 tests distincts
Recrutez les participants en fonction de vos profils d'utilisateurs ou de vos personnages.
Selon le processus, la sélection des participants est basée sur les "profils d'utilisateurs" ou "personas" que vous avez développés pendant la recherche et la collecte de données.
Si vous changez les participants pendant les "tests sommatifs", cela aura certainement un impact sur le taux de conversion et vous n'obtiendrez pas les informations précises sur le système/l'application.