Construction d'épreuves standardisées et d'épreuves - Jean-Luc Gilles (2005)

Etape « 6. Correction et discussion »

(Gilles et Leclercq, 1995)

Construction d'épreuves standardisées et d'épreuves - Jean-Luc Gilles (2005)

Indices classiques d’analyse de la qualité des épreuves

Indices de facilité/difficulté

Indices de fidélité

Indices de discrimination

Indices de validité

Approchethéorique

basée sur les« experts »

ApprocheIntrospective basée sur les« évalués »

ApprocheExpérimentalebasée sur les« résultats »

Coefficient de bipartition(avec correction de Spearman-Brown)

Coefficient de bipartitionde Guttman

Coefficient alpha de Cronbach (avec calcul du nombrede questions parallèles à retrancher ou ajouter)

Coefficient de corrélation question-total

d’une mesure critériée

Analyse du pouvoir discriminatif d’une

question dans le cadre :

d’une mesure de la cohérence

interne

Indices de discrimination « D »

Indices corrélationnelsde discrimination

Notamment, en validation

concomitante et en validation

prédictive

Construction d'épreuves standardisées et d'épreuves - Jean-Luc Gilles (2005)

Indices de facilité/difficulté

Approchethéorique

basée sur les« experts »

ApprocheIntrospective basée sur les« évalués »

Approche expérimentale basée sur les « résultats »

Le cas des testsde Compréhensionde Texte de VulgarisationScientifique (CTVS)

Les classements a priori desItems…

Par exemple à l’aide despourcentages de certitude…

Facteurs qui peuvent influencer la facilité/difficulté :- le temps imparti ;- la part des réponses dues au hasard ;- le niveau de compétence des répondants et la position de l’épreuve dans le contexte d’apprentissage.

Construction d'épreuves standardisées et d'épreuves - Jean-Luc Gilles (2005)

A propos des tests de Compréhension d’un Texte de Vulgarisation Scientifique (CTVS) :

(Gilles et Melon, 2000)

Construction d'épreuves standardisées et d'épreuves - Jean-Luc Gilles (2005)

Indices de fidélité

Trois sources d’erreurs qui affectent la fidélité des mesures :- l’instrument ;- le contexte ;- l’individu.

Procédures d’évaluation de la fidélité :

- « test-retest » coefficient de stabilité (r) … effet d’apprentissage…

- méthode des « formes parallèles » (r) … garanties quant au total parallélisme ? fluctuations dans les performances des évalués …

- utiliser les informations obtenues en une seule passation coef. de bipartition (r) multiples combinaisons pour définir les moitiés de test fidélité systématiquement sous-estimée …

- examiner toutes les combinaisons possibles : alpha de Cronbach à partir de l’entièreté des questions du test

Construction d'épreuves standardisées et d'épreuves - Jean-Luc Gilles (2005)

Construction d'épreuves standardisées et d'épreuves - Jean-Luc Gilles (2005)

Matrices « binaires » et « spectrales » des épreuves

Construction d'épreuves standardisées et d'épreuves - Jean-Luc Gilles (2005)

Indices de fidélité

Construction d'épreuves standardisées et d'épreuves - Jean-Luc Gilles (2005)

Construction d'épreuves standardisées et d'épreuves - Jean-Luc Gilles (2005)

Construction d'épreuves standardisées et d'épreuves - Jean-Luc Gilles (2005)

Construction d'épreuves standardisées et d'épreuves - Jean-Luc Gilles (2005)

Construction d'épreuves standardisées et d'épreuves - Jean-Luc Gilles (2005)

Construction d'épreuves standardisées et d'épreuves - Jean-Luc Gilles (2005)

Indices de discrimination

Indice de sensibilité à l’enseignement(Cox et Vargas, 1966)

Indice de sensibilité relative(Mac Guigan, 1967)

Lorsqu’une des deux variable est métrique et quel’autre est dichotomique : l’indice de corrélation point bisériale (rpbis)

CERT

Construction d'épreuves standardisées et d'épreuves - Jean-Luc Gilles (2005)

CERT