Le test utilisateur Exemple de test utilisateur humoristique

Le test utilisateur Exemple de test utilisateur (humoristique) : http: //www. youtube. com/watch? v=3 Qg 80 q. Tfzg. U Test utilisateur de smartphone : http: //www. youtube. com/watch? v=Ln. AS_MKl 96 A Test de site web à distance : http: //www. youtube. com/watch? v=k 2 lcf. SVSR 40

Quelles sont les différentes étapes du test ? ² D’après la vidéo du test de fruit, quelles sont les étapes du test utilisateur ?

Test de scénarios (usability testing) 1. Construction de scénarios authentiques d’après analyse de l’activité et analyse du système • Pre-test 2. Recrutement des utilisateurs 3. Passation du test utilisateurs 1. Expliquer 2. Faire passer les tâches - enregistrer 3. Questionnaires et entretien de debriefing 4. Analyse qualitative et quantitative 5. Diagnostic et proposition de remédiations.

Test de scénarios : petit jeu de rôle Exercice : deux volontaires dont un ne connaît pas le site Scénario Observateurs : - la moitié observent l’entretien : ce qui se passe, comment se déroule le test - l’autre moitié notent les problèmes rencontrés par l’utilisateur Après le test, chacun rapporte son observation (y compris les participants au jeu de rôle) Voir l’animation humoristique sur Chamilo (Documents P 4)

Passation - Recommandations � Consignes par écrit – Tâches lues par l’interviewer puis données à l’util � L’interviewer doit-il intervenir pour motiver l’util ? Oui pour soutenir, pour dire qu’on peut trouver l’info. Eviter de dire quoi faire. Eventuellement rediriger vers page d’accueil. � Quand s’arrêter de poursuivre la tâche ? Quand l’utilisateur s’exaspère !

Problèmes observés �Que s’est-il passé ? �Pourquoi était-ce un problème pour l’utilisateur

2. Recruter les utilisateurs • Représentatifs du public-cible (si possible) – Prendre les vrais utilisateurs, « pas leurs représentants » • Population homogène pour chaque échantillon de public cible • Combien de sujets – Dépend de la diversité du public cible : 5 par type de cibles est acceptable • Qui sont usagers réguliers d’internet, mais ne connaissent pas le site en question

3. Tester 3. 1. Expliquer � Je vous présenter différentes tâches que vous devrez réaliser sur un site web. � Ce test va durer … minutes. � Le but n’est pas de vous évaluer mais de savoir si le site est satisfaisant. � Il n’y a pas de bonne ou mauvaise réponse. � Je vais vous demander de penser à voix haute pendant que vous réalisez ces tâches. � Dites-moi lorsque vous pensez avoir terminé la tâche. � Puis-je vous enregistrer. . . -> enregistrer de préférence avec un enregistreur d’écran : � Screen. Flick pour Mac (http: //www. araelium. com/screenflick) � Camstudio pour Windows (http: //camstudio. org)

3. Tester 3. 2. Faire passer � Voici le site. A quoi vous fait-il penser de premier abord ? � Voici la première tâche. Lisez-là à voix haute (ou on la lit). Est-ce que vous avez compris ce qui vous est demandé ? � PENSEZ TOUT HAUT � PENSEZ TOUT HAUT… hmm… qu ’est-ce que vous êtes en train de faire ? � PENSEZ TOUT HAUT � Voici la deuxième tâche. .

3. Tester 3. 3. Ecouter � Règles classiques de l ’entretien : � Ecouter > Parler � Poser des questions sur son activité � Poser des questions neutres � Fournir un feedback neutre � Respecter les silences, laisser un petit moment après chaque tâche � Rebondir sur les points intéressants, ne pas suivre rigidement un canevas � Ne pas se laisser placer dans un rôle d’expert par l’utilisateur � Arrêter le test en cas d’échec répétitif � Prévoir un entretien post-test : � Échelles de satisfaction (voir demain) � Entretien ouvert : « qu’avez-vous pensé du site lorsque vous effectuiez les tâches demandées ? »

1. création de scénario - Exercice Le Scénario pour le test utilisateur est une série de tâches à réaliser sur le site web choisi, inspirées de l’analyse de l’activité, qui a pour objectif de mettre les participants dans une situation authentique d'utilisation du site web. Vous devez faire un test utilisateurs pour évaluer un site de cuisine comme Le Marmiton. Le public cible est large et ne concerne pas forcément des personnes férues de cuisine. Imaginez un scénario pour le test utilisateur qui comprenne au moins deux tâches. Le scénario doit réaliser une « mise en situation » authentique qui donne du sens aux différentes tâches. Postez votre scénario (formulé tel qu’il le serait pour l’utilisateur) dans openclass avec le #scenario

Qu’est-ce qu’un bon scénario ? •

3. Tester 3. 2. Phase post-test � Faire passer un des trois questionnaires conseillés � Voir Wikispaces – Questionnaire Wammi

Pratique du test utilisateur Par deux, un-e utilisateur-trice, un-e expert-e, vous changerez de rôle pour la deuxième tâche Scénario : voir feuille distribuée L’expert prend note des problèmes rencontrés par l’utilisateur pendant la passation puis rapporte dans le forum « Activité P 4 > Problèmes constatés » .

Description des problèmes utilisateurs Voir les problèmes que vous avez relevé dans Forum « Activité du 21 février » > Problèmes constatés »

Les étapes du test utilisateur Description et diagnostic des problèmes Grilles heuristiques

4. Résultats Voir Modèle dans documents Dokeos > P 4 Projet > Modèle de rapport • Critères d’évaluation – Utilisation : efficacité, efficience, apprentissage, satisfaction – Utilité – Usages • Synthèse : description générale et points positifs • Diagnostic des problèmes – Description, Citations, copie d’écran – screen cast, statistiques – Gravité : degré d’entrave à l’atteinte de la tâche – Catégorisation selon grille de critères • Propositions de solutions – Argumentées – Implémentées ou non dans le prototype 2

Pourquoi utiliser une grille ? Objectif rhétorique : pour synthétiser les problèmes rencontrés Objectif diagnostique : pour faciliter le diagnostic des problèmes rencontrés et leur résolution Deux cas de figure : pour systématiser une inspection experte pour synthétiser les résultats d’un test utilisateurs

Trois exemples de grilles ou « check -lists » Les 10 recommandations de Nielsen La norme ISO 9241 Les critères de Bastien & Scapin

Les 10 recommandations de Nielsen Document Dokeos : Principes Nielsen Inspection experte Heuristiques basées sur l ’optimisation des fameux 4 critères üapprentissage üefficience ügestion des erreurs üsatisfaction

Les normes ISO Document Dokeos : Checklist ISO Normes définissant la qualité d’un produit informatisé üPrincipes de dialogue üUtilisabilité des systèmes üPrésentation visuelle üGuidage de l’utilisateur üStyles de dialogue : menus, manipulation directe, ülangage de commande ou formulaires

Les critères de Bastien & Scapin Stratégie de construction des critères : • recueil d’un grand nombre de données expérimentales (800) et de recommandations individuelles (guidelines) • traduction de ces données en règles • distinction de classes de règles • Test expérimental de l’efficacité de la grille pour experts et non experts Références Bastien, J. M. C. , & Scapin, D. L. (1995). Evaluating a user interface with ergonomic criteria. International Journal of Human-Computer Interaction, 7, 105 -121. Site de l’auteur : http: //www. ergoweb. ca/criteres. html Documents Dokeos : Liste des critères de Bastien et Scapin plus présentation illustrée avec les sous-critères.

1. Guidage La personne qui utilise sait-elle toujours ce qu’elle doit et peut faire ? L’information est-elle clairement organisée et présentée ?

2. Charge de travail L’interface n’est-elle pas trop chargée au niveau des éléments à lire ou des actions à faire ? Source: http: //www. internetactu. net/2008/04/24/pour-une-ecologie-informationnelle/

3. Contrôle explicite Les actions entreprises par le système correspondent-elles à ce qu’attend l’utilisateur-trice ? A-t-on le contrôle sur les actions en cours ?

4. Adaptabilité Peut-on personnaliser l’interface, définir des préférences ? Y a -til une prise en compte de l’expérience (sur le site) de l’utilisateur ?

5. Gestion des erreurs Peut-on facilement éviter les erreurs et les corriger lorsqu’elles surviennent ?

6. Homogénéité / Cohérence Les éléments de l’interface sont-ils conservés pour des contextes identiques et différenciés pour des contextes différents ? codes, dénominations, formats, procédures, etc.

7. Signifiance des codes et dénominations Les codes et dénominations utilisées sont-ils signifiants, intuitifs pour les utilisateurs-trice ?

8. Compatibilité Le contenu est-il adapté aux caractéristiques du public cible et à son activité ?

Exercice A partir des problèmes que vous avez relevés dans le forum, préparer une description comme dans le modèle de la page précédente pour les trois critères qui vous ont été distribués. Si aucun des problèmes mentionnés ne correspond au critère, cherchez si un tel problème apparaît sur le site.

4. Résultats – Modèle de structure (sous forme de tableau ici mais ce n’est pas nécessaire) + copie d’écran, citations Utilisez un outil de capture d’écran tel que Jing.

Questionnaire et entretien posthoc Voir présentation Questionnaires… dans Documents Dokeos P 4

Un ensemble de méthodes