Formation pdagogique des enseignants nouvellement recruts Thme 15

Formation pédagogique des enseignants nouvellement recrutés Thème 15 Méthodes et modalité de confection des programmes de formation de qualité. BADDARI Kamel & HERZALLAH Abdelkarim

Objectif: Apprendre le montage de parcours selon les critères d’assurance qualité. Action 1: comprendre l’importance de l’AQ Action 2: montage de grille d’évaluation AQ Action 3: initiation à l’analyse quantitative de l’acquis de l’enseignement en LMD

COMPRENDRE L’IMPORTANCE DE L’ASSURANCE QUALITE

La qualité, un élément très relatif et essentiel ! • Elle constitue ce que les parties prenantes considèrent comme un niveau minimum, acceptable, de conditions visant à intégrer, former et accompagner l’étudiant pour son épanouissement personnel et professionnel. Pour cela; , il faut: « le développement d’une culture qualité, d’une offre de formation de qualité et le soutien à l’enseignement et à l’apprentissage (Endrizzi, 2014 ; Hénard, 2010) » • Jamais neutre • Dépend des parties prenantes • Évolue avec le temps • Elle devient un enjeu national (rôle des Etats) ET institutionnel • Peut être biaisée (rankings) 4

LE CONCEPT DE QUALITE Tentative d’une définition üExcellence, üseuil ou référence minimal, üRésultat du processus d’apprentissage (Valeur ajoutée) üAdéquation aux objectifs ( fitness for purpose » ), Le glossaire de l’UNESCO CEPES (centre européen pour l’enseignement supérieur) indique : La qualité est toujours relative, située dans un temps et dans un espace particuliers, et par conséquent, il n’y a pas, et ne saurait y avoir une définition absolue de la qualité. 5

LE CONCEPT DE QUALITE Les besoins de la qualité dans un EES ü Amélioration des performances de l’EES; ü Une culture générale intégrée (innovation, modernisation, . . . ); ü Gestion effective des ressources humaines de l'EES; ü Assurer un enseignement attractif; ü Assurer la formation continue ; ü Assurer une recherche en concordance avec les besoins de la région et du développement national ; 6

LE CONCEPT DE QUALITE les attendues de la qualité ü Efficacité de l'enseignement en impliquant l'ensemble des acteurs ü Renforcement de la visibilité et la bonne réputation de l'EES ; Mutualisation des moyens de l'EES ; Renforcement de l’évaluation interne ; Cohérence des actions des structures de l'EES; Clarification des rôles et définition des responsabilités ; Rehausser le niveau de l'étudiant sur tous les plans : physique, mental, social, psychologique ; ü Examiner les revendications des étudiants, oeuvrer à leur diminution et y trouver les solutions pertinentes ; ü Instaurer un climat d'entente, de coopération et de relations humaines saines entre tous les acteurs internes de l‘EES ; ü Assurer la cohésion et la complémentarité entre tous les membres du corps enseignant et de l'administration ; ü ü ü Promouvoir l'esprit d'équipe ; 7

LE CONCEPT DE QUALITE Réflexion 1 : Quelles sont les perceptions des parties prenantes à l’égard de la qualité ? üLes universitaires ? üLes étudiants ? Eléments de réponses: üAssimilation de la qualité au contrôle üLa direction est passive üCellule qualité trop administratif ou disposant de peu de moyens üLe concept est mal compris par les étudiants 8

LE CONCEPT DE QUALITÉ Qualité interne – Qualité externe La Qualité interne La Qualité externe Nécessaire pour l’amélioration du fonctionnement interne de l’établissement: - Mise en œuvre de moyens permettant de décrire au mieux l’organisation, - Repérer et limiter les dysfonctionnements. Les bénéficiaires de la qualité interne sont: - la direction de l’établissement, - les personnels et les étudiants. Elle permet de fournir un produit ou des services conformes aux attentes des bénéficiaires/clients. Elle passe par une nécessaire connaissance et une écoute permanente des bénéficiaires. Elle doit également prendre en compte des besoins implicites, non exprimés par les bénéficiaires. Les bénéficiaires sont : l’EES et son environnement. 9

LE CONCEPT DE QUALITÉ LA NON-QUALITé Inadéquation entre les attentes et l’offre. Ecart global entre la qualité visée et la qualité effectivement obtenue. (Exemple de non-qualité : EDT mal élaborés) 10

LE CONCEPT DE QUALITÉ qualité – non-qualité – sur-qualité Qualité : l'élément est demandé et il est réalisé Non-qualité : c'est le défaut, et c'est une situation qui doit être évitée. Sur-qualité : Elle pénalise l‘établissement, qui génère des coûts sans apporter de valeur. Situation normale : On ne parle plus de qualité mais de bon sens. 11

LE CONCEPT DE QUALITÉ Les facteurs qui influencent la qualité et se transforment en signe de non-qualité Ø le personnel : la passivité, l’indifférence, l’inattention, le manque de formation, la distraction, des lacunes dans la formation, l’absence d’initiative, le manque de concertation entre le personnel, l’ignorance des conséquences de la non qualité, le non respect des procédures à suivre lors de la production, la fatigue qui accroit le risque de commettre certains types d’erreurs (contrôle, encodage…). Ø Méthodes et Moyens : le manque d’entretien préventif des équipements, le manque de fiabilisation des machines, l’absence de pièces de rechange, un manque en termes de documentation, des mauvais réglages, des machines trop anciennes. 12

LE CONCEPT DE QUALITÉ Réflexion 2 : Parmi la liste ci-dessous, repérez le éléments de sur-qualité (sq), de non-qualité (nq) et ceux n’ayant aucune répercussion sur la qualité (oq): Fermeture de la bibliothèque à 16 h 00 3 employés sur 5 sont des femmes 3 spécialités sur 7 agréées sont mises en œuvre Tous les employés sont obligatoirement des hommes Le directeur de la bibliothèque assure un cours de Maths à Alger Les sanitaires ne sont nettoyées qu’une fois par jour Les ouvrages ne sont consultés que sur place Ouverture possible de la bibliothèque en fin de semaine 13

LE CONCEPT DE QUALITÉ Réflexion 3 : Etablir une liste d’éléments renvoyant à « la qualité » et à « la non-qualité » en enseignement et en recherche. Exemple: ü EDT mal confectionnés, ü Infrastructures inadaptées, ü Valorisation non effectuée, ü Programme mal conçu, ü Procédures de travail erronées, ü Pratiques enseignantes ne s’adaptent pas au LMD, ü Indisponibilité des enseignants. 14

LE CONCEPT DE QUALITÉ Comment instaurer la qualité ? üLe rôle du chef d’établissement d’ESS üLe rôle de l’enseignant-chercheur üL’implication des étudiants üAccompagnement des enseignants-chercheurs üL’innovation üImplication des anciens diplômés üVisibilité de l’établissement üLe monitoring üLes TIC üLe Système d’information üPlateforme numérique üBibliothèque üCo-construction de formations 15

L’assurance qualité • Les mécanismes et les dispositifs qui garantissent, préservent et améliorent la qualité de l’enseignement supérieur • Gouvernance • Formation • Recherche-innovation • Vie de l’étudiant • 3ème mission 16

A quoi sert l’assurance qualité dans mon établissement ? Finalités – – – – – : L’obligation de rendre des comptes Le contrôle ? L’amélioration continue L’information publique La recherche de la confiance La reconnaissance internationale L’attribution des moyens ? Un plan d’orientation stratégique La performance (contrat de performance) Modèles: –Evaluation/accréditation/audit des programmes/institutions Résultats : –Rapports publics ou confidentiels –Recommandations –Jugements de confiance –Décisions d’accréditation –Classements / notations 17

L’AQ…un système Politiques nationales / Politiques des institutions Institutions d’enseignement supérieur Ministère Enseignement Supérieur & Recherche Scientifique Evaluation de la pertinence (systémique, sociale, géographique…) / Evaluation de la qualité Evaluation interne / Evaluation externe D’après F. Hénard 5 Agences de garantie de la qualité 18

Audit / Accréditation / Evaluation des approches complémentaires, des exigences différentes

−Audit /Vérification : relève (souvent) de l’Etat, sur la base de données précises transmises par l’université/établissement. Ne garantit pas la qualité de la formation, mais que l’établissement répond aux exigences ministérielles. Le plus souvent national.

−Accréditation : − L’Université/établissement est directement responsable, − Elle doit indiquer comment elle a mis ou compte mettre en œuvre les moyens pour répondre aux attendus de qualité (les références), contenus dans les référentiels qualité). Auto –évaluation + évaluation externe − La charge de la preuve relève de l’Université. −Elle peut être internationale.

− La certification : pour reconnaître qu’une compétence a été acquise, qu’un processus est maîtrisé, qu’une organisation fonctionne selon les critères préalablement établis. Une certification certifie rarement une formation ou une université/établissement tout entier. al t i g i D ting Go rke a M ogle

L’évaluation pour l’amélioration : • L’Université/ établissement s’auto-évalue puis confronte sa vision à celle d’une évaluation externe. − La charge de la preuve relève de l’Université/établissement. − Elle peut être internationale. − Elle relève le plus souvent du niveau institutionnel. Les évaluations des formations pour l’amélioration affichent un tropisme institutionnel.

Imaginons une autoévaluation pour l’amélioration de la qualité…

A la question «que permettra l’autoévaluation de mon établissement» , on a répondu ceci : …de poser un diagnostic partagé sur les forces et les faiblesses de mon établissement …de donner aux inspecteurs du Ministère les moyens de mieux contrôler les dépenses …de mieux de préparer pour une accréditation externe …d’obtenir un label international …d’identifier les marges de progrès possibles de l’université/établissement de calculer le ratio enseignants / étudiants …d’examiner les revendications syndicales …d’aider l’université à se forger une culture commune Certaine A ment moyen/ long terme Non

A la question «que permettra l’autoévaluation de mon établissement» , on a répondu ceci : …d’analyser les relations entre l’université et ses partenaires …de vérifier si le président de l’université/directeur d’établissement accomplit correctement son travail …de donner des informations aux médias …de réunir des preuves pour démontrer les succès et les difficultés de l’université …d’identifier les horaires des bibliothèques …d’identifier les stratégies de développement possibles de l’université/l’établissement …d’identifier de nouvelles politiques scientifiques pour l’université / l’établissement …de comprendre les raisons des échecs de nombreux étudiants en 1ère année Certaine A ment moyen/ long terme Non

Les questions à se poser − Evaluation interne : − Qui peut conduire l’évaluation interne ? − Comment motiver mes équipes ? − Comment collecter les données ? − Comment analyser ? − Evaluation externe : − Quels profils pour les experts externes ? − Sur dossier ou visite ? − La publication ?

La conception et l’organisation de l’auto-évaluation

Repérer les étapes où la qualité peut être garantie et améliorée (ex. formation) • Politique Institutionnelle et d’Assurance Qualité – Définition de mission (ce que je fais), vision (où je vais), stratégie (comment je le fais), politique (initiatives cohérentes inscrites dans une globalité d’approche) – Soutien à l’organisation, Système d’Assurance Qualité • Intervention au niveau des programmes – Définition de programme – Mise en oeuvre du programme – Évaluation de programme • Politique d’enseignement et d’apprentissage – – – Soutien à la pédagogie Soutien à l’environnement de l’enseignement et de l’apprentissage Formation continue des enseignants Accompagnement des étudiants (ex. Orientation) Soutien à l’apprentissage des étudiants (ex Tutorat)

Les référentiels : normes, références et confiance

Des inspirations notables • Références et lignes directrices l’assurance qualité • CAMES • INQAAHE • ENQA • Arab Network for Quality Assurance • Réseau francophone Assurance Qualité • Réseau Tempus Aqi. Umed, RECET pour 31

Les références européennes La partie 1 - Les responsabilités de l’institution d’enseignement supérieur • Références et lignes directrices pour l’assurance qualité interne La partie 2 - Les responsabilités de l’agence d’assurance qualité • Références et lignes directrices pour l’assurance qualité externe La partie 3 – Les responsabilités des concepteurs et des évaluateurs des agences • Références et lignes directrices pour les agences d’assurance qualité

ESG partie 1 • Politique d’assurance qualité • Elaboration et approbation des programmes • Apprentissage, enseignement et évaluation centrés sur l’étudiant • Admission, progression, reconnaissance et certification des étudiants • Personnel enseignant • Ressources pour l’apprentissage et l’accompagnement des étudiants • Gestion de l’information • Information du public • Suivi continu et évaluation périodique des programmes • Assurance qualité externe périodique

Les grandes étapes du développement de dimension européenne de la garantie de la qualité dans l’enseignement supérieur Approfondissement Mise en place du cadre de l’EEES La qualité: Responsabilité première des institutions Coopération entre agences Système qualité et institution d’ens. nationaux de la qualité sup. Coopération européenne en garantie de la qualité 1999 Bologne Groupe E 4 ENQA EURASHE EUA ESU 2001 Prague 1998 Reco. 98 -561 -CE Révision des ESG Registre EQAR Adoption des «European Standards and Guidelines (ESG)» 2003 Berlin 2005 Bergen Utilisation d’EQAR Evaluation d’EQAR EEES 2010 2007 Londres 2006 Reco. -143 -CE Lien entre qualité/ Résultats d’apprentissage/ Cadre de certification 2009 Leuven Louvain-la. Neuve Adoption des nouveaux ESG 2012 Bucarest 2015 Erevan 2009 Reco, 2009/C 155/01 2008 Reco. 2008/C 111/01 2018 Paris

Comment parvenir à une définition commune de la qualité ? Que veut- on faire, où veut on aller ? Comment y allons nous ? Comment savons nous que nous prenons le bon chemin ? Comment changeons-nous pour nous améliorer ? 36

Logique d’un référentiel Champ Références Critères Preuves

Un exemple

Un exemple

QUESTIONNE MENT OBJECTIF ACTIONS Evaluation de Comment la qualité mesurer la qualité Mise en œuvre la qualité Assurace de la Comment qualité garantir la qualité Garantir qua la qualité est là Vérifier la qualité Faisons-nous ce qu’il faut ? Faisons-nous ce qu’il faut de bonne manière ? Sommes-nous en trains d’atteindre nos objectifs

GRILLE D’EVALUATION A. Q

LES DIFFERENTS NIVEAUX DE L’EVALUATION Enseignement contenus et méthodes d’enseignement Compétences qu’a appris l’étudiant ? Peut-il montrer comment il l’utilise ? Performance comment l’étudiant met-il en oeuvre ce qu’il a appris ? Impact quel effet ont les compétences mises en oeuvre par l’étudiant ?

QUOI EVALUER ? -La préparation de l’enseignement -Les objectifs de l’enseignement -Adéquation avec les besoins -Le contenu -Les méthodes -Les ressources utilisées -L’environnement physique -L environnement social de la formation -Le comportement de l’enseignant

Tableau de diagnostic Champ : Politique et gestion de la qualité : Référence : l’établissement développe et met en œuvre une politique d’assurance qualité efficace, de manière participative avec les parties prenantes, et faisant partie intégrante du pilotage stratégique. Critères :

Référentiel coopération-partenariats L’établissement soutient la mobilité étudiante et académique et l’internationalisation des formations et de la recherche afin de préparer les étudiants et la communauté enseignante aux enjeux du monde globalisé. Liés à la formation Liés à la recherche Mobilité : o Mobilité estudiantine : Echange simple, double diplôme, diplôme conjoint (programme de formation); stage étudiant (expérience professionnelle) ; o Mobilité académique et personnel administratif. Conception de programmes de formation conjoints Coopération nationale et régionale (entre universités/établissements et au niveau régional entre pays du Maghreb, sur la zone méditerranéenne. Recherche commune sans financement spécifique. Projet de recherche avec financement spécifique. Projet de recherche répondant à un appel externe (appels à projets ou appels d’offre; niveau national, européen et international).

Les destinataires ciblés par l’AQ Enseignants Étudiants Employeurs Cibles Support administratif Responsables d’établts

Leçons tirées de l’expérience • L’implication essentielle du recteur et des doyens • L’expérience en assurance qualité (ex. Aqi-Umed) – peut être un plus…pour développer un système d’assurance qualité interne ou une politique d’assurance qualité 47

Leçons tirées de l’expérience • L’implication de la cellule qualité interne – Légitimité, statut interne du responsable • L’indispensable sensibilisation de la communauté académique • L’expérimentation de l’implication des étudiants payera à l’avenir • La composition des groupes impacte sur le contenu et les orientations de l’auto-évaluation • La compatibilité des référentiels, un faux problème 48

Leçons tirées de l’expérience – Un climat favorable au changement • Implication de l’Etat • Influences internationales – Compétition/émulation entre les établissements • La nécessité des établissements d’être reconnus comme « prestataires » légitimes d’enseignement supérieur • “parce qu’enseigner est notre mission” on se doit l’excellence et le démontrer… • Rééquilibrer le lien entre recherche et enseignement – Qualité de l’enseignement, un future élément de choix pour les étudiants…

Atelier – Grille d’évaluation Soir la référence : L’Etat compte réduire de 20% l’usage du tabac durant l’année La règle d’interprétation: Réduction du tabagisme dans les espaces publics 1/ Déclinez au moins trois critères pour cette référence 2/ Déclinez les preuves (au moins deux) 3/ Dressez la grille d’évaluation sur l’échelle suivante: 0=médiocre, 1=insuffisant, 2=satisfaisant, 3=bien, 4=excellent 50

Atelier – Grille d’évaluation Référence : L’Etat compte réduire de 20% l’usage du tabac durant l’année Règle d’interprétation: Réduction du tabagisme dans les espaces publics Critères : Rendre moins accessible les produits du tabac Augmenter la fiscalité des produits de tabac Campagne dissuasive Preuves : Taux d’augmentation de la fiscalité sur le tabac Nombre de procès verbaux dressés. 51

initiation à l’analyse quantitative de l’acquis de l’enseignement en LMD

Acquis d’apprentissage ? C’est un énoncé de ce que l’apprenant sait, comprend et est capable de réaliser au terme d’un processus d’apprentissage. Compétences? compétences = «savoir agir en situation»

Acquis d’apprentissage et compétences Les acquis d’apprentissage doivent être définis en adéquation avec les attendus de la société et les compétences requises Milieu professionnel COMPETENCES Acquis d'apprentissage Apprenant acquis d’apprentissage doivent orienter le programme et l’évaluation. Il convient donc de s’assurer que les référentiels d’enseignement et d’évaluation soient adaptés aux acquis d’apprentissages attendus, afin que les apprenants puissent être évalués sur leur degré d’acquisition de ces acquis

Différence entre données quantitative et données qualitatives ? Données quantitatives : séries statistiques, indicateurs, etc. ) Informations qualitatives : historique, organisation, etc. ) se complètent et s’éclairent mutuellement

Bases de l’analyse quantitative des acquis d’enseignement du LMD Des informations sous forme : -d’indicateurs nationaux de tendances, de séries statistiques décrivant des évolutions, -d’indicateurs de fonctionnement et de résultats, de textes réglementaires sur les structures et l’organisation de l’établissement, - de documents sur l’activité de ses organes internes, sont à recueillir et à analyser pour chaque domaine et activité de l’établissement.

Cas qui font que l’établissement ne peut détenir des données fiables et récentes -Le mode de gestion intuitif et informel de l’établissement - Les décisions sont prises en fonction de critères personnels et de rapports de force entre les acteurs - L’opacité de l’organisation et de la gestion utilisée comme moyen de maintenir ou d’étendre la marge de liberté de certains acteurs - Le manque de personnel qualifié apte à mettre en place et utiliser efficacement un S. I

TEST Quelles sont les 3 étapes pour réaliser une auto-évaluation ? En quoi la qualité est une notion relative ? Que savez-vous sur le critère d’une référence ? Comment est-il mesuré ?

Bibliographie: Documents de l’AUF Maghreb, élaborés par F. HENARD Documents de l’AUF Maghreb, élaborés par A. HERZALLAH