Click here to load reader

Enquête d’auto-évaluation du PEC Objectif: améliorer l’évaluation (l’enquête sur le PEC est conçue dans un but formatif)

  • View
    103

  • Download
    0

Embed Size (px)

Text of Enquête d’auto-évaluation du PEC Objectif: améliorer...

  • Page 1
  • Enqute dauto-valuation du PEC Objectif: amliorer lvaluation (lenqute sur le PEC est conue dans un but formatif)
  • Page 2
  • Procdure de lauto-valuation Etape 1 - organiser une session dintroduction: pour expliquer les critres et les concepts du PEC et prciser quel type de preuves est ncessaire lenqute. Etape 2 remplir le questionnaire en ligne: le questionnaire dauto-valuation du PEC est remplir individuellement. Etape 3 - organiser un/des entretien(s) de groupe: en fonction de votre statut, vous pouvez organiser un entretien de groupe avec des tudiants et des enseignants slectionns (interviews en mme temps) ou deux interviews spars avec un groupe dtudiants et un groupe denseignants.
  • Page 3
  • En tant qu'organisateur du PEC, vous voulez vous assurer que les participants l'enqute: Comprennent le concept du PEC et dcrivent clairement les objectifs et les modalits de cette auto- valuation; Comprennent les critres de qualit et les indicateurs noncs dans lenqute; Recensent toutes les mthodes dvaluation; Comprennent le type de preuve recherch; Comprennent comment remplir le questionnaire. Pourquoi ai-je besoin dorganiser une session d'introduction?
  • Page 4
  • Qui dois-je inviter? Qui dois-je inviter? Invitez toutes les parties concernes par le programme valuer Profil des participants: Divers statuts (tudiants, enseignants, coordonnateurs, valuateurs externes, etc.) Ou Un groupe denseignants ayant des visions diffrentes sur le programme valuer Nombre de personnes: 8 - 12 (ou plus) par programme
  • Page 5
  • Comprendre le PEC Consultez la prsentation ppt Guide dappui pour la session d'introduction et le document Word Guide dorganisation dune enqute dauto-valuation pour prsenter le concept PEC et expliquer les 12 critres de qualit
  • Page 6
  • Etablir une liste dvaluation (PEC) Le questionnaire en ligne demandera chaque participant dtablir une liste de leur mthodes dvaluation. Lors de la session dintroduction, veuillez consulter le tableau (page suivante) pour vous assurer que tous les participants comprennent comment remplir lenqute
  • Page 7
  • Une dscription du PEC Mthode dvaluationLobjet de lvaluation? Qui value?Quand/nombre de fois une valuation est-elle effectue? Pour des fins sommatives et/ou formatives? P.e. test des connaissances (QCM, T/F, etc.), projet, observations pendant le stage, Quelles comptences/ tche principale / flux de travail P.e. enseignant / experts sur le terrain / collgues P.e. la fin de la squence de cours/ plusieurs fois par squence seuls les scores les ractions individuelles/du groupe ni commentaires/ni rsultats seuls les scores les ractions individuelles/du groupe ni commentaires/ni rsultats seuls les scores les ractions individuelles/du groupe ni commentaires/ni rsultats seuls les scores les ractions individuelles/du groupe ni commentaires/ni rsultats seuls les scores les ractions individuelles/du groupe ni commentaires/ni rsultats
  • Page 8
  • Quel type de preuve est ncessaire? Une srie de preuves & exemples: Les participants peuvent se servir des ressources suivantes pour indiquer la qualit de lvaluation: Lvaluation (crite & orale, par bloc thmatique et gnrale) des tudiants/des cours; Rapport des grades / rsultats des examinateurs externes; Evaluation de stage; Commentaires des experts du terrain.
  • Page 9
  • Donnez quelques exemples pour prciser les attentes : Exemple dune conclusion non valide: cest vident: Une preuve solide telle que au dbut du cours nous avons reu un document dcrivant les sections (dtaillant les critres qui permettront dvaluer les tudiants) (consultez une autre prsentation ppt pour plus dexemples)??? (titre??) Leur opinion/ exprience peut servir comme preuve : vos collgues partagent-ils la mme opinion ou la mme exprience? Quel genre de preuve est ncessaire?
  • Page 10
  • Etape 2: Remplir le questionnaire en ligne Remplir le questionnaire en ligne prendra environ 1 heure! Les participants auront besoin dau moins une semaine pour remplir le questionnaire. Demandez aux participants de crer un nom dutilisateur et un mot de passe. Envoyez un rappel.
  • Page 11
  • Etape 2: Remplir le questionnaire en ligne Demandez aux participants de visiter le site: http://fs10.formsite.com/formulierenITG/form 296/index.html http://fs10.formsite.com/formulierenITG/form 296/index.html se connecter avec leur nom dutilisateur et leur mot de passe; essayer de rpondre toutes les questions et de donner des preuves! cocher Ne sais pas' uniquement sils ne savent vraiment pas quoi rpondre; remplir le questionnaire dans les dlais prvus!
  • Page 12
  • Etape 3: Lentretien de groupe Les objectifs de lentretien de groupe : Comprendre les diffrentes opinions; Obtenir des preuves; Corriger les erreurs; Amliorer spontanment Lobjectif gnral: consensus sur la qualit: - quelles sont les forces et les faiblesses de notre valuation
  • Page 13
  • Prparer lentretien de groupe Impression des rsultats pour tous les participants (sauf si effectifs trop nombreux) Le cas chant, prparer une prsentation ppt Montrez pour chaque critre: - le score moyen des indicateurs; - la note la plus haute et la plus basse / lcart type; - le rsum des preuves. Note: vous pouvez transfrer lchelle Likert en score allant de 1 6!
  • Page 14
  • Le diapo suivant montre le genre de problmes quun sondage en ligne pourrait dtecter
  • Page 15
  • Clart Les critres dvaluation et les normes sont communiqus et comprhensibles Problmes: Si lvaluation se rapporte par exemple au module rdaction de rapports, les critres dvaluation utiliss pour attribuer un score un rapport dpendront uniquement de lenseignant et ne sont pas explicitement communiqus ltudiant. Les critres cls sont annots. La faon dont ils sont utiliss pour attribuer un score est floue et difficile interprter.
  • Page 16
  • Le diapo suivant donne un exemple de la faon dont on peut illustrer les problmes que lenqute en ligne pourrait dtecter lors dun entretien de groupe
  • Page 17
  • Les comptences exiges sont bien dcrites mais ne sont pas refltes en classe. Il nexiste pas de lien troit entre les comptences et lvaluation. Les tudiants ne comprennent pas ce qui est attendu deux dans leurs travaux. Les critres exigs pour les prsentations ne sont pas clairs. Les valuateurs externes ne comprennent pas toujours le contexte de lvaluation. Clart Score moyen Score le plus bas Score le plus haut e % de la preuve qualifie 1. Les tudiants connaissent et comprennent quelle comptence est value. 2. Les tudiants connaissent et comprennent les critres dvaluation (proprit ou caractristique par laquelle la qualit peut tre dtermine) et normes (niveau dtermin de ralisation/qualit/performance dsire ou atteindre) 3. Lenseignant connat ou comprend le contenu de la tche dvaluation et les procdures utilises par le PEC.
  • Page 18
  • Ce quil faut discuter? Suite limpression des rsultats de lenqute, les deux situations suivantes peuvent apparatre : Situation 1- Il y a un consensus: Score moyen relativement lev + pas de scores bas (variations) (Presque) tous les participants le trouvent suffisant OU Score moyen relativement bas + pas de score lev (variations) (Presque) tous les participants le trouvent insuffisant Questions ventuelles pour la discussion: 1. Est-ce vraiment la force / la faiblesse du PEC qui est en jeu? 2. Lensemble des preuves est-il valable? Les indicateurs avec un score lev sont-ils tays par des preuves solides? 3. Dans le cas o il y a peu de preuves: existe-t-il des preuves pour tayer le score? 4. Pour les points faibles: quelles sont les possibilits damlioration?
  • Page 19
  • Ce quil faut discuter? Situation 2- Il ny a pas de consensus: Des scores trs diffrents Grand cart entre les scores les plus hauts et les plus bas Quelques notes anormales Suggestions pour des questions de discussion: Le questionnement gnre des scores diffrents. Demandez plus dexplications. Sur quelle base arrivez-vous un jugement? Pour quelle partie du PEC? Les scores sont-ils tays par des preuves valides ou sagit-il plutt dun sentiment? Cherchez les preuves : existe-t-il une diffrence entre les meilleurs scores et les scores les plus bas pour la preuve fournie? Le rsultat est-il diffrent cause dune diffrence de perspective? Affrontez lopinion de lautre: ces ides sont-elles nouvelles? Rsumez les preuves: quels sont les lments positifs et ngatifs? Cherchez un consensus.
  • Page 20
  • Des conseils pour russir un entretien de groupe Expliquez bien que les diffrentes opinions sont les bienvenues. Les rpondants sont invits se corriger / reformuler certains aspects particuliers. Interrogez explicitement les personnes qui expriment clairement leur dsaccord. Gardez la discussion sur les rails (tenez-vous aux sujets cls). Les critres de qualit sont interdpendants. Il arrive ds lors que certains sujets reviennent dans les discussions. Assurez-vous de garder le contrle de la discussion et de passer les critres un par un. Evitez les alles et venues entre les critres. Les discussions naissent presque naturellement, parce que les gens sont en dsaccord.
  • Page 21
  • Quelques conseils pratiques concernant la collecte de donnes Dterminez lavance la fourchette de temps consacre la discussion de chaque critre de qualit Dans un but de recherche: Vrifiez lquipement denregistrement; Demandez la permission avant denregistrer une discussion de groupe; Envoyez