Testing standardis certificatif lapport dune structure professionnelle dans

Testing standardisé certificatif : l'apport d'une structure professionnelle dans la mise en oeuvre d'évaluations standardisées des acquis des étudiants

Christine Grégoire, professeur à l'ISELL Sainte Croix Salvatore Tinnirello, Administrateur Délégué d’Assess Group

Rencontre avec le SMART et Assess Group Comment ai-je rencontré le SMART et Assess Group ? Pourquoi ai-je décidé de travailler avec eux ? Massification des étudiants Formation personnelle « lacunaire » en méthode d'évaluation Souci d'accroître la qualité de mes évaluations

Accompagnement Les aides que j'ai trouvées chez Assess Group Le(s) type(s) de modalité(s) de questionnement que j'utilise

Processus (1) 1. Je commande mes formu. LOMs via le site d' Assess Group : www. assess-group. be (Ex. de formu. LOM). 2. Assess Group m'envoie, dans les 2 jours ouvrables suivant la réception de ma commande, mes formu. LOMs vierges ainsi qu'une feuille pour paramétrer mon test. 3. J'envoie ensuite un fichier. xls reprenant les données relatives à mes étudiants (matricules, noms, prénoms. . . ).

Processus (2) 4. J'évalue mes étudiants. 5. Je dépose mes formu. LOMs chez Assess Group et précise les particularités de mon test : le barème de cotation, le nombre de décimales pour les scores, les intitulés des rubriques matières ou processus mentaux éventuels, . . . 6. Assess Group effectue une lecture optique de mes formu. LOMs, traite mes résultats et crée mon fichier de résultats. Ce fichier comporte les scores des étudiants avec statistiques descriptives et courbes, ainsi que l'analyse de la qualité des questions.

Processus (3) 7. Assess Group m'envoie la 1ère version de mes résultats. Il s'agit d'un fichier. pdf comprenant les scores des étudiants, l'analyse de la qualité des questions, les résultats et données statistiques du groupe (Exemple de résultats) 8. En fonction des informations reçues, j'améliore (ou non) mon test : suppression de questions, valorisation de distracteurs, ajustement de la sévérité, . . . et envoie mes desiderata chez Assess Group. 9. Assess Group effectue alors les rectifications que j'ai demandées et me transmet la nouvelle version de mes résultats.

Processus (4) 10. Si je considère la dernière version des résultats comme définitive, je le signale à Assess Group. Je reçois alors la version finale des résultats en format. xls. Sinon, la procédure reprend son cours à l'étape 8. 11. Si je le souhaite, des feedbacks individualisés pour mes étudiants peuvent être mis à disposition via le site Internet d'Assess Group.

Avantages et inconvénients Quels bénéfices retirer de ce processus ? Quelle perception de la qualité ? Quels inconvénients ? Conséquence du caractère payant du service proposé ? Quel impact au niveau institutionnel ? Quelle attractivité par rapport aux collègues ? Une traçabilité, gage d’un suivi de qualité

Perspectives Comment aller plus loin dans le processus de suivi de la qualité de mes tests ? Autres types de services offerts par Assess Group Formation au cycle CGQTS (voir communications suivantes) Audit de table de spécification (Fiche pad-tds) Relecture formelle des questions (Fiche padqcm) Mise à disposition de Feed-back (exemple) Aide à la gestion d’un projet institutionnel lié à l’évaluation

Merci pour votre attention

Assess Group ©