L’évaluation (des élèves)

Représentations , pratiques, définitions, limites…

Formation (transversale) des FSTG(Ph.Watrelot) Novembre 2013

Philippe Watrelot• 54 ans

• Professeur de Sciences économiques et sociales au lycée Corot de Savigny sur orge (Essonne, Ac. de Versailles)

• Professeur à l'ESPÉ de Paris en temps partagé

• Président du CRAP-Cahiers Pédagogiques

Le CRAP-Cahiers Pédagogiques

http://www.cahiers-pedagogiques.com

Chronique éducationDepuis mai

2003...

3 séances

•Séance 1 : réflexions générales de l’évaluation et docimologie (si on a le temps…)

•Séance 2 : pratiques de classes et pistes d’évolution (et docimologie)

•Séance 3 : travailler/évaluer par compétences, enjeux et débats…

•Faire un état des lieux et des débats actuels

•réfléchir sur les différentes dimensions de l'évaluation

•donner des éléments sur les limites de la note

1ere séance

L’évaluation(sommaire)

• Introduction : une commande institutionnelle et des débats

• L’évaluation vue par les parents, les élèves, les enseignants...

• Définitions et typologie de l’évaluation

• Un peu d'histoire (et de géographie) de l’évaluation...

• La notation et ses limites (docimologie)

Des débats actuels(et récurrents)

•Faut-il supprimer les notes ?

•Pour ou contre les compétences…

•les “usines à cases”

•l’“évaluationnite”, la “fièvre de l’évaluation”

•quelle est la valeur du bac ?

•Les notes sont elles fiables ?

9 octobre 2013

« Au collège, la classe sans note est beaucoup plus rare, et quand elle existe suscite, "l’incompréhension ou l’indifférence", de la part des professeurs et des élèves.

La conclusion de l’étude est sans appel : « On ne sait pas ce qu’on évalue, les niveaux de performance ne sont pas définis. Il est impossible de savoir ce que maîtrisent effectivement les élèves et de comparer les résultats d’une classe à l’autre, d’une école ou d’un établissement à l’autre »

14 octobre 2013

Une commande institutionnelle...

L’évaluation (et la réflexion sur l’évaluation) est aussi une des “10 compétences” définies dans le cahier des charges de la formation

BO n°1 du 4 janvier 2007

BO n°29 du 22 juillet 2010

Ces “10 compétences” sont remplacéespar un référentiel métier paru en 2013

10 compétences des enseignants

• Agir en fonctionnaire de l’État et de façon éthique et responsable

•Maîtriser la langue française pour enseigner et communiquer

•Maîtriser les disciplines et avoir une bonne culture générale

•Concevoir et mettre en oeuvre son enseignement

•Organiser le travail de la classe

• Prendre en compte la diversité des élèves

• Évaluer les élèvesÉvaluer les élèves

•Maîtriser les TIC

• Travailler en équipe et coopérer avec les parents et les partenaires de l’école

• Se former et innover

B.O. n°1 du 4 janvier 2007

Le professeur sait évaluer la progression des apprentissages et le degré d’acquisition des compétences atteint par les élèves. Il utilise le résultat des évaluations pour adapter son enseignement aux progrès des élèves. Il fait comprendre aux élèves les principes d’évaluation et développe leurs capacités à évaluer leurs propres productions. Il communique et explique aux parents les résultats attendus et les résultats obtenus.

Évaluer les élèves(compétence 7)

Connaissances

Le professeur connaît les différentes évaluations qu’il peut être amené à pratiquer (diagnostique, formative, sommative, certificative).

Évaluer les élèves(compétence 7)

Capacités Le professeur est capable : - de comprendre les fonctions de l’évaluation ; - de concevoir des évaluations aux différents moments de l’apprentissage, c’est-à-dire : - définir le niveau d’exigence de l’évaluation ; - adapter le support et le questionnement en référence aux objectifs et au type d’évaluation que l’on souhaite mener ; - expliciter les consignes, guider les élèves dans la préparation de l’évaluation ; - expliciter les critères de notation ; - analyser les résultats constatés et déterminer les causes des erreurs ;

Évaluer les élèves(compétence 7)

Capacités (suite)

- concevoir des activités de remédiation et de consolidation des acquis (exercices d’entraî nement, exercices de mémorisation oraux ou écrits, activités d’aide, de soutien et d’approfondissement, etc.) ; - de développer les compétences des élèves dans le domaine de l’autoévaluation ; - de pratiquer l’évaluation certificative (examens, contrôle en cours de formation, compétences linguistiques incluses dans le cadre européen commun de référence pour les langues...).

Évaluer les élèves(compétence 7)

Attitudes

Le professeur pratique l’évaluation dans le cadre d’une relation claire et de confiance et pour cela : - il mesure ses appréciations ; - il valorise l’exercice et le travail personnel des élèves ; - il veille à ce que chaque élève soit conscient de ses progrès, du travail et des efforts qu’il doit produire.

Évaluer les élèves(compétence 7)

Représentations

•Paroles de parents...

•Paroles d’élèves...

•ce que disent et font les profs...

Paroles de Parents

Un dossier de la Croix du 2 juin 2004 se faisait l’écho d’un sondage auprès de parents d’élèves

Paroles de ParentsPlus d'un tiers des parents (35%) reconnaît prononcer la phrase rituelle «Quelles notes as-tu eues ?»tous les jours

Paroles de Parents

L'Afev (Ass. Française des Étudiants pour la Ville) a fait réaliser en mars 2011 une étude par l'institut Audirep, par téléphone auprès d'un échantillon national de 1000 individus représentatifs de la population française âgés de 15 ans et plus.

Paroles d’élèves

Dans un livre paru en 2005 « L’élève humilié », Pierre Merle, sociologue, a demandé à de jeunes adultes de se remémorer un « exemple tiré de leur scolarité d’un droit non respecté » et où ils se sont sentis humiliés. Il est significatif de noter que ce qui arrive en tête ce sont les situations d’évaluation.

Pierre MerleL’élève Humilié,L’école un espace de non-droit ?PUF 2004

Phosphore

Avril 2006

pp. 10-19.

Paroles d'élèvesCamille 2nde : « C'est bizarre, pour un même devoir de maths réalisé avec une copine, on a eu des notes différentes...»

Grégoire, 1ere L : « La notation, c’est une échelle qui permet de se situer par rapport au reste de la classe. C’est un bon système. ».Charles, Tle S : « Pour entrer en prépa, ce sont les notes qui comptent alors qu’elles ne sont pas représentatives.»

Bertille et Mélissa, 1ere L : « Les profs nous cataloguent et ensuite, ils nous mettent toujours les mêmes notes ».François, 1ere S : « Certains profs distribuent les notes à la tête du client. »Karim, 1ere S : «Une note, c’est toujours un peu lié à la personnalité de l’élève. »

Jeanne, 1ere L : « Une note ne dit pas tout et surtout pas les progrès qu’on a faits ».

Phosphore Avril 2006 pp. 10-19.

« Très souvent, [j'ai eu des notes qui m'ont paru injustes]. Surtout en français, parce que les notes dans cette matière, c"est vraiment flou. Notre prof ne nous expliquait pas le barème et elle ne nous expliquait jamais notre note... donc, soit on avait le don d'écrire, soit non! Donc c"était un peu arbitraire les notes en français» (Claire, 16 ans, CPA maroquinerie)

« [Des notes injustes, j'en ai eues] plein! J'en ai eues beaucoup en SVT et en maths aussi. Une fois, j'avais mis toutes les réponses par cœur ... on savait sur quoi on allait être interrogé et j'avais appris les leçons du livre et j'ai eu 11. Alors qu'une autre élève, elle avait tout juste aussi et elle a eu 14 ! Juste parce que le prof l'aimait mieux, elle...» (Simon, 18 ans, Bac scientifique)

Des questions que les élèves peuvent

se poser...

L’évaluation est une pratique professionnelle qui demande beaucoup de temps (chronophage ?) et qui engage les valeurs et l’identité professionnelle de l’enseignant. Elle dépend aussi de la “culture” de chaque établissement

Ce que disent

et font les profs...

Ce que disent et font les profs...

Témoignages extraits de

Le monde de l’éducation Février 2006

“Que valent les notes”

“Je sais que je note un peu sec. Je vois bien en conseil de classe. Et pourtant j’ai l’impression de surnoter. Je mets des 13 et des 14 à des devoirs qui ne le valent pas, parce que je suis bien conscient que le jour du bac, si les élèves produisaient un devoir de ce niveau, ils auraient effectivement un 13 ou un 14. Et puis, je surnote aussi pour encourager les élèves qui travaillent. Tout en conservant une certain degré d’exigence en me refusant de tomber dans la complaisance. Mais je reste convaincu qu’au fond ces copies valent moins. En fait, je surnote parce que le système incite à cela.”Jacques Vassevière, professeur de lettres Le monde de l’éducation

Février 2006

Ce que disent

et font les profs...

“En EPS, l’évaluation sert principalement à faire comprendre aux élèves où ils en sont dans leurs apprentissages. Il ne s’agit pas forcément de noter un niveau. Par exemple, je peux leur demander de réussir cinq fois des tirs en course au basket sans les noter. L’évaluation est dictée par ce que je veux qu’ils acquièrent. S’il s’agit de l’esprit d’équipe dans un sport collectif, je mets plus l’accent sur les relations entre joueurs que sur les résultats techniques. Parfois, je les évalue différemment. par exemple, j’appends d’abord à ceux qui ne savent pas nager à être à l’aise dans l’eau. Ils sont alors notés sur 13 au lieu de 20”Samuel Wagner, professeur d’EPS

Le monde de l’éducation Février 2006

Ce que disent

et font les profs...

Ce que disent et font les profs...

“Cette année avec mes élèves de 2nde et 1ère S, j’ai décidé de tester la méthode d’évaluation dite du “contrat de confiance”. Trois jours avant un contrôle, je leur fournis une liste de 8 à 10 exercices à réviser, représentatifs des notions à acquérir pour cette échéance. Le jour de l’évaluation, il sont sûrs de tomber sur l’un ou l’autre de ces problèmes. Ce système les oblige à s’investir dans leurs révisions. Il permet aussi de relancer les élèves en perte de confiance...”Olivier Trappes, professeur de mathématiquesLe monde de l’éducation

Février 2006

On dispose de quelques enquêtes sur les pratiques d’évaluation des enseignants. On peut citer une enquête de la DEP « Les pratiques d’évaluation des enseignants au collège » et paru en 2004 qui offre l’avantage de s’appuyer sur un travail important d’enquête statistique auprès de 3561 enseignants dans 597 collèges. Des entretiens qualitatifs ont complété cette étude.

Ce que disent

et font les profs...

Les fonctions de l'évaluation

Evaluation et apprentissage

Le souci des enseignants, massivement partagé dans toutes les disciplines est ...... de veiller à la qualité des consignes qui accompagnent les évaluations (95 % d'entre eux), ...de diversifier leurs pratiques évaluatives en faisant varier les exercices (89 %) et en proposant des tâches de difficulté variable (82 %)

Le temps...La moitié des enseignants considère que le temps pris par l'évaluation est d'une façon générale acceptable. Le temps moyen estimé pour la préparation et la correction d'une évaluation - effectuée dans la semaine précédant la réponse au questionnaire - s'élèverait à 2h45 environ. 1/3 des enseignants y passent 2 heures au plus, 1/3 entre 2 heures et 3 heures et 1/3 plus de 3 heures.

Une activité chronophage : pour quelle efficacité?

Tout seul...

Les trois quarts des enseignants indiquent fixer eux-mêmes le calendrier des évaluations au rythme de leur progression

90 % des enseignants interrogés déclarent élaborer seuls leurs évaluations

Un travail solitaire

Vie et mort de l'interro surprise...

Dans presque toutes les disciplines (à l'exception des arts plastiques et de l'éducation musicale), la majorité des professeurs (entre 90 et 95 % d'entre eux) déclare annoncer à l'avance (toujours et souvent) les évaluations à leurs élèves

Plus de 80 % d'entre eux, déclarent faire connaître aux élèves leurs attentes en termes de connaissances à mobiliser et de compétences à mettre en oeuvre et à communiquer, dans les mêmes proportions, le barème de notation.

Les Dossiers Evaluations et Statistiques (MEN) d'octobre 2009 sont consacrés au thème : Enseigner en collège et lycée en 2008. On y trouvera les résultats d'une enquête réalisée en 2008 auprès de 1200 enseignants. 

Ce que disent

et font les profs...

Une activité un peu moins solitaire

Une activité chronophage

Une activité chronophage

Dernier rapport en date

Juillet 2013porte sur l’évaluation au primaire et au collège

Les principaux éléments du rapport

•Développement de l’évaluation en acquis/non acquis

•recul de la note chiffrée mais avec des résistances

•Grande variété des pratiques d’évaluation (le rapport parle de manque d’unité et de cohérence)

•Manque de lisibilité auprès des parents et des élèvesLes démarches sont peu cohérentes, les pratiques d’évaluation le plus souvent individuelles et donc très hétérogènes.

“Les démarches sont peu cohérentes, les pratiques d’évaluation le plus souvent individuelles et donc très hétérogènes”

L’absence de différenciation entre évaluation formative et sommative est récurrente. Le mélange des deux empêchent les enseignants de connaître le niveau des acquis des élèves et donnent aux élèves le sentiment d’être en contrôle permanent, ce qui engendre une forme de « stress » pour certains.Tout ceci est renforcé par la place très réduite des formes d’évaluation reçues positivement par l’élève (notamment l’auto-évaluation).

Recommandations…

•Repenser un véritable cadrage national de l’évaluation

•bien distinguer une évaluation pour apprendre et une évaluation de ce qui est acquis

•Différencier les attendus des exigibles

•Mettre en place un pilotage local efficient

•Faire évoluer les missions des professeursLes démarches sont peu cohérentes, les pratiques d’évaluation le plus souvent individuelles et donc très hétérogènes.

Des auteurs du rapport…

Variations autour de l'évaluation

(définitions)

Évaluer...(dans le dictionnaire)

Mesure à l'aide de critères déterminés des acquis d'un élève, de la valeur d'un enseignement, etc.

Le Petit Larousse illustré 1999

29

Définition de J-M. DE KETELE

•Évaluer signifie...

•recueillir un ensemble d’informations suffisamment pertinentes, valides et fiables

•et examiner le degré d’adéquation entre cet ensemble d’informations et un ensemble de critères adéquats aux objectifs fixés au départ ou ajustés en cours de route,

•en vue de prendre une décision.

Évaluer...ÉVALUER: aider à prendre des décisions processus (1) par lequel on définit (2), obtient (3)  et fournit (4)  des informations (5)  utiles (6)  permettant de juger les décisions possibles (7)(1) processus = activité continue

(2) on définit = identifier les informations pertinentes

(3) on obtient = collecte, analyse, mesure des données

(4) on fournit = communiquer ces données

(5) des informations = faits à interpréter

(6) informations utiles = qui satisfont aux critères de pertinence

(7) décisions possibles = actions d'enseignement, d'orientation etc....

Évaluation ≠ notation

Mesurer les progrès, repérer les difficultés d’apprentissage, l’acquisition de compétences,… peut se traduire autrement que par une note (chiffrée).

30

La note sur dix à l’école et sur vingt au lycée, qui nous est si familière, est en fait une spécialité bien française...

Évaluation ≠ contrôle

Contrôle : Référent stable, procédure finie

Évaluation : ajustement, processus continu

Le contrôle final n'est qu'un des aspects de l'évaluation.

Évaluation / jugement

L'évaluation comporte une dimension importante de jugement (référence à une norme et à des critères)

Mais on ne peut réduire l'évaluation à cette seule dimension. Évaluer est aussi une régulation.

Dominique OdryPour comprendre l'évaluationSceren-CRDP Amiens 2008

30 mots pour mieux définir l'évaluation sous ses différents aspects

3 formes d'évaluation

Evaluation formative

(ou formatrice)

Evaluation Sommative(quelquefois certificative)(B.Bloom

1971)

Evaluation diagnostique

(ou pronostique)

L’évaluation diagnostique

L’évaluation diagnostique (ou pronostique) : Envisagée en début d'apprentissage ou de formation, intervient lorsqu'on se pose la question de savoir si un sujet possède les capacités nécessaires pour entreprendre une formation ou pour suivre un apprentissage. Elle permet donc, en principe, le repérage des difficultés. On peut l'utiliser aussi pour repérer les représentations.

L’évaluation formative

l'évaluation formative intervient dans le cours d'un apprentissage et permet de situer la progression de l'élève par rapport à un objectif donné.

 

• sur l'élève pour lui indiquer les étapes qu'il a franchies et les difficultés qu'il rencontre• sur le maître pour lui indiquer comment se déroule son programme pédagogique et quels sont les obstacles auxquels il se heurte.

double rétroaction/régulation des apprentissages

L’évaluation sommative

L’évaluation sommative intervient lors des bilans, au terme d'un processus d'apprentissage ou de formation.Elle peut donner lieu aussi à une attestation sociale des acquis (évaluation certificative)

Quand évaluer ?Avant la

formationÉvaluatio

n diagnostique

orienter l’action

Pendant la formation

Évaluation formative

réguler les apprentissages

Après la formation

Evaluation sommative

Vérifiercertifier

Finalités de l'évaluation

Évaluation normative(Référence aux autres)

Évaluation critériée(Référence à des critères

de performance)

Petite histoire de l'évaluation et de

la notation

Questions pour un...

De quand date la création du baccalauréat ?

De quand date la note chiffrée ?

1808

1890

le Bac...décret du 17 mars 1808

21 bacheliers en 1808 (1ère femme en 1861)

Pas de système de notation

Des boules rouges blanches et noires pour exprimer l'avis des professeurs

De quand datent les notes?

Pendant la 1ère moitié du XIXe siècle, il n'y a donc pas de note au Baccalauréat...Bac = entretien oral (reçu ou non reçu...)basé sur le principe jésuite de l'émulation (individuelle et collective)

2ème moitié du XIXe : C'est la nécessité d'un classement liée au développement des concours qui aboutit au développement de la notation sur 20.

En 1890, il était établi par un arrêté du 5 juin que « dans les compositions, chaque copie aura sa note chiffrée de 0 à 20 »

Petite histoire de l'évaluation

•Le classement précède la note

•le système d'évaluation français est construit pour sélectionner et pour créer de l'émulation

•"La France est un pays de concours" (Claude Lelièvre)

Évaluation

Logique du classement

(Sélection, certification)(question de l'objectivité de la

mesure)

Texte

Logique de la régulation

ouvrir "la boîte noire"(comprendre le processus

d'apprentissage pour mieux aider à apprendre)

Au XXe siècleLe colloque d'Amiens en mars 1968 (donc avant mai !) propose de supprimer les notes chiffrées pour “lutter contre un système élitiste”. Cette réforme est appuyée par Alain Peyrefitte.

En 1969, la circulaire du 6 janvier évoque la relativité de la note et l'illusion de sa précision« les études docimologiques dont l'origine est antérieure à 1930 et qui se sont multipliés dans les 20 dernières années ne laissent aucun doute sur le caractère illusoire d'un tel raffinement dans la précision de la note et du classement obtenu »

Le ministre de l'Éducation nationale de l'époque Edgar Faure décrète dans cette circulaire que « la notation chiffrée peut être abandonnée sans regrets ».

Les années 70

"Une échelle convenue d'appréciation, libérée d'une minutie excessive, sera moins prétentieuse. En indiquant la zone dans laquelle l'élève se situe, on cerne déjà la réalité d'assez près, on évite de multiplier systématiquement des différences qui ne seraient pas confirmées par d'autres correcteurs, ni par le même correcteur à une autre époque."

C'est le 9 juillet 1971 (circulaire 71-228) que  les notes sur 20 sont à nouveau prônées dans les classes qui comportent un examen (3ème, terminale).  

Passage à une notation par lettres (A, B, C, D, E,...).C'est  en juillet 1971 dans un arrêté que  les notes sur 20 sont à nouveau prônées dans les classes qui comportent un examen (3ème, terminale).  

Mais disparition du classement...

Depuis...

Chez nos voisins...Suède : la notation définit quatre niveaux (insuffisant, passable, bien, très bien) = 4 points

Grande Bretagne : huit niveaux du meilleur au pire (A*, A, B, C D, E,F et G)

Italie : la notation va de 0 à 10, les résultats négatifs allant de 0 à 5 et les résultats positifs de 6 à 10

Allemagne : l’échelle est construite sur six niveaux (6 points) très bien, satisfaisant, moyen ou passable, insuffisant, très insuffisant

31

Claude Guillon “Les évaluations scolaires” CRDP Franche-Comté, Hachette, 2004

En Finlande

Jusqu’à 9 ans les élèves ne sont absolument pas notés. Ce n’est qu’à cet âge qu’ils sont évalués pour la première fois, de façon non chiffrée. Puis plus rien de nouveau jusqu’à 11 ans.Toutefois, des bulletins sont envoyés deux fois (à Noël et en mai). Les notes chiffrées n’apparaissent que la 6ème année quand les enfants atteignent l’âge de 13 ans. Les notes vont de 4 à 10

En FinlandeAu lycée la même échelle de 4 à 9 est conservée. Rythme des évaluations est beaucoup plus soutenu: chaque session de 6 semaines se conclut par une semaine pendant laquelle les élèves subissent des tests chaque jour de 9h à 12h. Les élèves doivent valider les deux tiers des cours dans chaque discipline suivie. Ils sont néanmoins encouragés à redoubler un cours non validé. Autre alternative : passer un examen de repêchage (« resist exam ») le deuxième mercredi suivant la fin d’une période

Source : Paul Robert La Finlande un modèle éducatif pour la France ? ESF 2008

Belgique, Suisse, Québec

Belgique : rédéfinition des programmes par compétences à partir de 1997. Socles de compétences avec des référentiels à 14 ans et à 18 ans.

Suisse : travail par cycles et par compétences mais en 2006 une “votation” a rétabli les notes dans le canton de Genève

Québec : travail par cycles et par compétences mais rétablissement des notes en 2006 pour le secondaire.

L’évaluation dans les textes officiels

L’ évaluation des élèves, souvent quotidienne, que fait l'enseignant, prend la forme d'interrogations orales ou écrites. Elle peut porter sur toutes les disciplines enseignées et donner lieu à une notation, traduction en nombres ou en lettres de la production ou du niveau des élèves. Cette notation relève de la liberté pédagogique de l'enseignant

Dossier documentaire : les parents à l’école(sur le site du ministère)

42

Dans les textes officiels

“La notation pratiquée par les enseignants contribue au bilan individuel de chaque élève, synthétisé en fin de trimestre ou d'année scolaire. L'évaluation « sommative » en classe peut ne pas prendre la forme de notes mais d'appréciations qualitatives.”

Sur le site du Ministère

http://www.education.gouv.fr/cid262/l-evaluation-des-connaissances-et-des-competences-des-eleves.html

Dans les textes officiels

Le bulletin trimestrielENCART  B.O. n°28  du 15-7-1999 

“Remplir un bulletin scolaire est une tâche exigeante et difficile pour les équipes enseignantes mais d'une importance capitale pour les élèves.  S'agissant des performances scolaires, les informations portées sur le bulletin doivent être suffisamment précises et complètes. Ainsi, pour les notes trimestrielles, il convient de distinguer les notes obtenues à l'oral et à l'écrit et, pour ces dernières, d'indiquer à combien de contrôles et de devoirs elles correspondent. L'évaluation de l'oral porte sur des compétences précises et pas seulement sur la participation de l'élève. Il y a lieu, également, de faire figurer, pour chaque discipline, la note moyenne de la classe ainsi que les notes minimale et maximale attribuées aux élèves de la classe. Il y a des efforts qui doivent être reconnus même s'ils ne débouchent pas sur de bonnes notes. Il faut donc expliquer pourquoi et comment progresser. ”

Dans les textes officiels“Il est utile également de prendre en compte, dans

l'évaluation du travail et des activités des élèves, des compétences qui ne portent pas directement sur les performances scolaires : sens de l'initiative, autonomie, prise de responsabilité, travail fourni. Les commentaires relatifs à chaque élève doivent comporter, d'une part, une appréciation sur ses performances scolaires, valorisant ses points forts et l'encourageant à progresser et, d'autre part, des conseils précis sur les moyens d'améliorer ses résultats. Il convient que les appréciations portées soient suffisamment détaillées et nuancées ainsi que respectueuses de la personne de l'élève. Il est demandé de bannir tout vocabulaire trop vague ("peut mieux faire", "moyen"), réducteur ("faible", "insuffisant") voire humiliant ("inexistant", "nul", "terne") qui n'aide aucunement l'élève. ”

45

Le bulletin trimestrielENCART  B.O. n°28  du 15-7-1999 

La note est-elle fiable ?

(éléments de docimologie)

La note est-elle fiable ?

La docimologie est la science des examens et de la notation et plus précisément l’étude statistique des notes attribuées lors de la correction de copies.

De nombreux travaux ont permis de mettre en évidence un ensemble d’effets contribuant à biaiser la volonté d’”objectivité” de la notation professorale...

54

La note est-elle fiable ?Premiers travaux de docimologie en 1936.

La commission française de l’enquête Carnegie (Laugier & Weinberg) dans une expérience de multicorrection pointe l’extrême difficulté d’une correction “objective” 

On y relève des écarts très importants dans la notation quelle que soit la discipline.

55

Les résultats montrèrent une forte dispersion des notes attribuées à chaque copie par les correcteurs. Aucune copie ne reçut deux fois la même note. L'écart maximum des notes dépassa les prévisions.

Une copie de français fut notée entre 3 et 16 ; En philosophie et en latin l'écart maximum était de 12 points.Les mathématiques et la physique, réputées pour des sciences exactes, ne furent pas épargnées : l'écart maximum était respectivement de 9 et 8 points.

Enquête Laugier-Weinberg 1936

La “note vraie”

Pour obtenir la “note vraie” (c’est-à-dire la moyenne des notes ne variant plus même avec des notes supplémentaires), il aurait fallu...

La multi-correction est-elle la solution ?

128 correcteurs en philosophie, 78 en Français, 16 en physique, 13 en mathématiques, etc.

La “Note vraie”…

J.-J. Bonniol en 1976 a repris l’expérience et montré qu’il faudrait 78 correcteurs en mathématiques et 762 en philosophie pour neutraliser les erreurs de calcul en augmentant le nombre de correcteurs pour améliorer l’objectivité de la notation.

D’autres expériences…•On est allé plus loin en faisant corriger

la même copie à la même personne mais avec un intervalle de temps plus ou moins important

•Par exemple : un professeur de physiologie de la Faculté des Sciences accepta 37 copies -dactylographiées et anonymes - qu'il avait corrigées trois ans et demi auparavant. Dans 7 cas seulement, il remit la même note au même devoir. Dans les 30 autres cas, il y eut des divergences comprises entre 1 et 10 points.

L’avis de Paulette"On demanda à une bachelière, Paulette, intelligente mais ignorant tout de la question traitée, de noter à son tour ces compositions de physiologie, après les avoir lues une fois pour se faire une idée du sujet. Ses notes eurent une corrélation de 0,51 avec celles attribuées par les professeurs compétents. La bachelière ne se trouvait pas plus en désaccord avec les spécialistes que ceux-ci entre eux". (in Science et Vie, 1968, n° 610).

Les évaluateurs sont influencés par plusieurs

facteursEffet de l'ordre de correction : Devant un nouveau travail ou un nouveau candidat à évaluer, on se laisser influencer par la qualité du candidat précédent. Un travail moyen paraîtra bon s'il suit un travail médiocre. 

Effet de fatigue ou d'ennui : peut engendrer laxisme ou sur-sévérité

58

Les évaluateurs sont influencés

par plusieurs facteurs...

Effet de stéréotypie : Le professeur maintient un jugement immuable sur la performance d'un élève, quelles que soient ses variations effectives.

Les évaluateurs sont influencés par plusieurs

facteurs...Effet de halo : Le professeur, influencé par des...

- caractéristiques de présentation (soin, écriture, orthographe) ou des

- caractéristiques liées à l'élève (origine sociale, sexe)...

...surestime ou sous-estime la note. 

56

• Dans 18 classes d'une école primaire américaine, 20 % des élèves choisis rigoureusement au hasard, furent signalés à leurs professeurs comme ayant eu des résultats particulièrement brillants à un test non verbal d'intelligence générale, permettant prétendument de prédire leur épanouissement intellectuel. Les enfants ne savaient rien, seuls les professeurs étaient au courant. Au bout d'une année, ces enfants avaient réellement un gain de quotient intellectuel franchement supérieur, en moyenne, à ceux du groupe de contrôle".

• (in Atome n° 242 article de H. Pequinot,).

Effet de halo

Un dernier biais...le plus important ?

La loi de Posthumus (1947)

Un enseignant tend à ajuster le niveau de son enseignement et ses appréciations des performances des élèves de façon à conserver d'année en année, approximativement la même distribution (gaussienne) de notes.

Ce concept a été repris dernièrement par André Antibi sous le nom de “constante macabre”.

62

5 correcteurs => 100 copies

4 autres correcteurs => redistribution de 15 copies « bonnes »

Un effet qui se reproduit...

La constante macabre

André ANTIBI“La constante macabre ou comment a t-on découragé des générations d’élèves ?”Editions Maths’adore2003

Sociologie de l’évaluation scolaire

Sous ce titre, Pierre Merle, professeur de sociologie à l’IUFM de Bretagne a produit en 1998 un “Que sais-je” (n°3278)C’est une lecture utile pour tous...

60

Pierre MerleLes NotesSecret de fabricationPUB 2007

Une réécriture de deux livres plus anciens et de travaux sur les bulletins scolaires et les conseils de classe.

L'évaluation, une menace ?

Fabrizio Butera, Céline Buchs, Céline Darnon

PUF 2011

Cahiers Pédagogiques n°476Travailler par compétences

Cahiers Pédagogiques

Hors série NumériqueLe socle commun, mais comment faire ?

Gérard ScallonL'évaluation des apprentissages dans une approche par compétencesDe Boeck 2ème édition 2007

"Évaluer à l'heure des compétences"

Cahiers Pédagogiquesn°491 Octobre 2011

En conclusion...(et en résumé)

Les dimensions de la note...

•Un moyen de communication...

•Une manifestation de l’autorité (du pouvoir ?)...

•L’expression d’un système de valeurs personnel

•un “arrangement”

•Une norme sociale propre à un groupe

L'évaluation a plusieurs sens et

plusieurs dimensions...

Évaluation

Logique du classement

(Sélection, certification)(question de l'objectivité de la mesure)

Logique de la régulation

ouvrir "la boîte noire"(comprendre le processus d'apprentissage pour mieux aider à apprendre)

L’évaluation est une pratique sociale et donc soumise à des normes (culture d'établissement, de la discipline, de la génération,...) et sous-tendue par des valeurs.

L’évaluation renvoie donc chacun à sa propre conception de la justice et à ses représentations du travail, du niveau, des apprentissages, du pouvoir, …

C’est aussi ce qui la rend si difficile à faire évoluer car elle s’appuie sur notre propre échelle de valeurs...

Une pratique chronophage et qui peut être vidée de son sens.

Évaluationnite ou taylorisme pédagogique

Le contrôle occupe une large part du temps d’enseignement : il en reste d’autant moins pour penser au changement. Les élèves travaillent pour la note, la moyenne ou la promotion, ce qui développe un "rapport utilitariste au savoir"

Pour quelle efficacité ?

Noter pour se dispenser d'évaluer

les acquis ?« Mais il est bon de rappeler que l’évaluation, qui est une évaluation de la partie, ne doit pas faire oublier le tout, le long chemin de culture où l’école a la responsabilité de conduire chaque personne à un moment de sa vie ; que l’évaluation, qui produit des signes sociaux nécessaires tels que les notes ou les diplômes, doit être au service des acquis, pour aider à les mesurer, pour leur donner visibilité, et pas le contraire. »r

Rapport de l’IGEN « Les acquis des élèves, pierre de touche de la valeur de l’école » (juillet 2005)

•Donner plus de sens à l'évaluation pour l'élève et l'enseignant pour mieux évaluer

•Aller vers une pédagogie plus explicite

•Aller vers une pédagogie plus cohérente et lisible en travaillant d'avantage avec ses collègues

•Mieux évaluer c'est mieux communiquer et adapter sa communication aux différents destinataires

Mieux évaluer...

Faire de l'évaluation un réel

outil pour l'apprentissage