ANR16 DUNE0002 O LIVIER P ALOMBI UNESS Construction

ANR-16 -DUNE-0002 O LIVIER P ALOMBI- UNESS Construction automatique d’épreuves de difficultés contrôlées : Exemple sur la Banque Nationale d’Entrainement aux ECN

Les examens dématérialisés sur SIDES Etudiant : Entrainement Enseignant : Correction automatique Agent de scolarité Gestion simplifiée Toujours dans l’objectif d’améliorer la formation

L’activité sur SIDES (2018) 3 Millions de connexions 84 000 students (34 Uni) 9000 épreuves par an La BNE en chiffre SIDES en chiffres (2018)

L’activité sur SIDES (2018) 3 Millions de connexions 84 000 students (34 Uni) 9000 épreuves par an SIDES en chiffres (2018)

La banque nationale d’entrainement (BNE)

ANR-16 -DUNE-0002

ANR-16 -DUNE-0002 Learning and mangement record store

Ontologie Ontosides Interface utilisateur SIDES 3. 0: modèle en 3 couches Formulaire dynamique SPARQL End-point Etudiant Realisé par Référentiel Evaluation A pour inscrit Inscription ECN Action de répondre Langage naturel guidé Webservice Est lié à Spécialité Est lié à Objectif Sous-objectif Est composant de Questions isolés Dossier progressif ANR-16 -DUNE-0002 QRM QRU QROC A pour séquence de question Correspond à See. Also (weblink) Sources Externes MAPPING Dump Sides Extraction Sides Dbms Wiki Sides Intégration UMLS standard

Zoom sur le liage des données : Onto. SIDES ECN etu 1001 A pour inscrit Med_A 5 Correspond à enrol 10502 Realisé par act 918 Spécialité a (Hémogramme … indications et interprétation) Objectif d'apprentissage_208 … a Est lié à Hématologie '1/09/2015' A pour date d'inscription Correspond à A pour timestamp ANR-16 -DUNE-0002 '#######' Question Est lié à a q 128 Wiki Sides Spécialité a Cardiovasculaire Question Est lié à act 540 Correspond à See also a q 128

Etat actuel : 1, 5 milliards de triplets ANR-16 -DUNE-0002 2015 -2018 64 957 étudiants 457 873 questions: ◦ 66 531 questions à réponses unique ◦ 390 323 questions à réponses multiples 224 919 141 actions de réponse : ◦ 68 126 pour les étudiants de Grenoble sur 3 mois. 10

ANR-16 -DUNE-0002 Application: le profil d’un étudiant 11

ANR-16 -DUNE-0002 APPLICATION: Le calcul de la difficulté des questions en infectiologie Pour chaque question à réponse unique : Øreliée à la spécialité des maladies infectieuses, Øayant été traitée plus de 100 fois Øau moins 1 fois répondu de façon correcte donner son niveau de difficulté. 1 - Nombre d’actions de répondre correctes Nombre d’actions de répondre effectuées 12

ANR-16 -DUNE-0002 APPLICATION: Le calcul de la difficulté des questions en infectiologie

La maitrise de la difficulté des questions ANR-16 -DUNE-0002 Ø Construction automatique de tests Ø de difficulté adaptée à l’étudiant (parcours personnalisé) Ø de difficulté croissante (positionnement) Ø d’évaluation Ø Les banques de questions nationales constituent un matériel formidable à l’ère du numérique.