TECFA Technologies pour la Formation et lApprentissage Les

TECFA Technologies pour la Formation et l’Apprentissage Les différentes méthodologies d’évaluation en IPM Cours Ergonomie des Interactions Personne-Machine 16 novembre 2005 Mireille Bétrancourt - TECFA - FPSE

Trois types de méthodes Approche par enquête ou observation sur le terrain Approche par inspection experte Approche par tests utilisateurs

Enquêtes - Observation de terrain Objectif : Obtenir des informations sur ce que les utilisateurs pensent du système, en attendent, ou ce qu’ils en font réellement. Caractéristique : Porte sur l’usage et l’utilisation sur le terrain

Enquêtes - Observation de terrain Trois dimensions : représentation Ce que j’en sais ou crois que j’en sais attitudes Ce que j’en pense, ce que j’aime ou non… pratiques effectives Ce que je fais réellement avec le système…

Enquêtes - Observation de terrain représentation attitudes entretiens observation « traçage » pratiques effectives questionnaires focus groups

Enquêtes - Observation de terrain Relation entre utilisabilité, utilité et acceptabilité Acceptabilité sociale utilité théorique Facile à apprendre Efficient Aide la mémorisation Prévient les erreurs Satisfaisant, plaisant Acceptabilité Utilité pratique utilisabilité Cout Compatibilité Fiabilité … acceptabilité pratique Nielsen, 1993

Enquêtes - Observation de terrain Relation entre utilisabilité, utilité et acceptabilité Utilité Dillon & Morris, 1996

Enquêtes - Observation de terrain Relation entre utilisabilité, utilité et acceptabilité Acceptabilité Utilité effective Utilisabilité Ketola & Roykkee, 2001

Approches par inspection experte Objectif : Vérifier l’utilisabilité de l’interface à partir de connaissances expertes générales sur les recommandations ergonomiques Caractéristique : Doit être faite par des experts en ergonomie des IPM, mais ayant une connaissance du contexte

Approches par inspection experte Par fonctionnalité Facilité d’apprentissage Efficience Evaluation heuristique Prévention des erreurs Satisfaction Cognitive walkthrough

Approches par inspection experte Evaluation heuristique: les 10 recommandations de Nielsen Heuristiques basées sur l ’optimisation de 4 critères : apprentissage efficience gestion des erreurs satisfaction

Approches par inspection experte Evaluation heuristique: Les normes ISO Normes définissant la qualité d ’un produit informatisé Principes de dialogue Utilisabilité des systèmes Présentation visuelle Guidage de l’utilisateur Styles de dialogue : menus, manipulation directe, langage de commande ou formulaires

Approches par inspection experte Evaluation heuristique: les critères de Bastien & Scapin Stratégie de construction des critères : • recueil d’un grand nombre de données expérimentales (800) et de recommandations individuelles (guidelines) • traduction de ces données en règles • distinction de classes de règles

Approches par test utilisateurs Objectif : Vérifier que le système soit utilisable pour les utilisateurs novices Caractéristique : Doit être faite par des « vrais utilisateurs » à partir de scénarios d’usage réels

Approche par test utilisateurs Verbalisation provoquée Approche « clinique » Auto confrontation Suivi ethnographique Test de reconnaissance Test oculomoteur Approche « expérimentale » Test d ’exploration en temps limité Test de classification Test de scénarios

Pour vos projets : Analyse de la tâche Quels objectifs : Résultats attendus ? Quel public ? Contexte d’usage : où, quand, comment ? Analyse de l’activité pour l’utilisateur

Pour vos projets : Analyse du système Analyse de la tâche Analyse de l’activité pour l’utilisateur Organigrammes tâches et procédures Scénarios d’utilisation Evaluation heuristique Pb d’utilisabilité « théorique » Test utilisateur Pb d’utilisabilité effective

Références Dillon, A & Morris, M. (1996). User acceptance of information technology: theories and models, Annual Review of Information Science and Technology, 3 -32. Ketola, P. & Roykkee, M. The three facets of usability in mobile handsets Nokia, Proceedings of CHI 2001, 30 March - 5 April 2001. Nielsen, J. (1993). Usability engineering, Boston, Academic Press. Tricot, A. , Plégat-Soutjis, F. , Camps, J. -F. , Amiel, A. , Lutz, G. , & Morcillo, A. (2003). Utilité, utilisabilité, acceptabilité : interpréter les relations entre trois dimensions de l’évaluation des EIAH. In C. Desmoulins, P. Marquet & D. Bouhineau (Eds). Environnements informatiques pour l’apprentissage humain (pp. 391 -402). Paris : ATIEF / INRP.