19
Formation CGQTS © – Système Méthodologique d’Aide à la Réalisation de Tests © – Université de Liège – pour l’IFA, Janvier 2005 Interprétation des rpbis à l’étape de correction d’un test …contrôle qualité a posteriori des QCM

Formation CGQTS © – Système Méthodologique dAide à la Réalisation de Tests © – Université de Liège – pour lIFA, Janvier 2005 Interprétation des rpbis à

Embed Size (px)

Citation preview

Page 1: Formation CGQTS © – Système Méthodologique dAide à la Réalisation de Tests © – Université de Liège – pour lIFA, Janvier 2005 Interprétation des rpbis à

Formation CGQTS © – Système Méthodologique d’Aide à la Réalisation de Tests © – Université de Liège – pour l’IFA, Janvier 2005

Interprétation des rpbisà l’étape de correction

d’un test

…contrôle qualité a posteriori des QCM

Page 2: Formation CGQTS © – Système Méthodologique dAide à la Réalisation de Tests © – Université de Liège – pour lIFA, Janvier 2005 Interprétation des rpbis à

Formation CGQTS © – Système Méthodologique d’Aide à la Réalisation de Tests © – Université de Liège – pour l’IFA, Janvier 2005

2. h

ad /

wai

ted

3. h

ad /

was

wai

ting

4. w

as h

avin

g /

wai

ted

1. w

as h

avin

g / w

as w

aitin

g

Les corrélations point bisériales (rpbis classiques)

Complétez avec les mots qui conviennent :

He ……….. a heart attack while he ……….. for the bus.

1. was having / was waiting 2. had / waited 3. had / was waiting4. was having / waited

Page 3: Formation CGQTS © – Système Méthodologique dAide à la Réalisation de Tests © – Université de Liège – pour lIFA, Janvier 2005 Interprétation des rpbis à

Formation CGQTS © – Système Méthodologique d’Aide à la Réalisation de Tests © – Université de Liège – pour l’IFA, Janvier 2005

Les corrélations point bisériales (rpbis classiques)

Page 4: Formation CGQTS © – Système Méthodologique dAide à la Réalisation de Tests © – Université de Liège – pour lIFA, Janvier 2005 Interprétation des rpbis à

Formation CGQTS © – Système Méthodologique d’Aide à la Réalisation de Tests © – Université de Liège – pour l’IFA, Janvier 2005

Les corrélations point bisériales (rpbis classiques)

Page 5: Formation CGQTS © – Système Méthodologique dAide à la Réalisation de Tests © – Université de Liège – pour lIFA, Janvier 2005 Interprétation des rpbis à

Formation CGQTS © – Système Méthodologique d’Aide à la Réalisation de Tests © – Université de Liège – pour l’IFA, Janvier 2005

Les corrélations point bisériales (rpbis classiques)

Page 6: Formation CGQTS © – Système Méthodologique dAide à la Réalisation de Tests © – Université de Liège – pour lIFA, Janvier 2005 Interprétation des rpbis à

Formation CGQTS © – Système Méthodologique d’Aide à la Réalisation de Tests © – Université de Liège – pour l’IFA, Janvier 2005

Les corrélations point bisériales (rpbis classiques)

Page 7: Formation CGQTS © – Système Méthodologique dAide à la Réalisation de Tests © – Université de Liège – pour lIFA, Janvier 2005 Interprétation des rpbis à

Formation CGQTS © – Système Méthodologique d’Aide à la Réalisation de Tests © – Université de Liège – pour l’IFA, Janvier 2005

Pour cette QCM au sein du test d’anglais …

… dans quelle mesure les étudiants qui choisissent la solution correcte sont-ils aussi ceux qui obtiennent un nombre de réponses correctes plus élevé au total du test ?

Page 8: Formation CGQTS © – Système Méthodologique dAide à la Réalisation de Tests © – Université de Liège – pour lIFA, Janvier 2005 Interprétation des rpbis à

Formation CGQTS © – Système Méthodologique d’Aide à la Réalisation de Tests © – Université de Liège – pour l’IFA, Janvier 2005

Les corrélations point bisériales (rpbis classiques)

Page 9: Formation CGQTS © – Système Méthodologique dAide à la Réalisation de Tests © – Université de Liège – pour lIFA, Janvier 2005 Interprétation des rpbis à

Formation CGQTS © – Système Méthodologique d’Aide à la Réalisation de Tests © – Université de Liège – pour l’IFA, Janvier 2005

Ceux qui ont choisi la réponse correcte (P3)

Page 10: Formation CGQTS © – Système Méthodologique dAide à la Réalisation de Tests © – Université de Liège – pour lIFA, Janvier 2005 Interprétation des rpbis à

Formation CGQTS © – Système Méthodologique d’Aide à la Réalisation de Tests © – Université de Liège – pour l’IFA, Janvier 2005

Pour cette QCM au sein du test d’anglais …

… dans quelle mesure les étudiants qui choisissent la solution correcte sont-ils aussi ceux qui obtiennent un nombre de réponses correctes plus élevé au total du test ?

… dans quelle mesure les étudiants qui ne choisissent pas la solution correcte sont-ils aussi ceux qui obtiennent un nombre de réponses correctes moins élevé au total du test ?

Page 11: Formation CGQTS © – Système Méthodologique dAide à la Réalisation de Tests © – Université de Liège – pour lIFA, Janvier 2005 Interprétation des rpbis à

Formation CGQTS © – Système Méthodologique d’Aide à la Réalisation de Tests © – Université de Liège – pour l’IFA, Janvier 2005

Ceux qui ont choisi la réponse correcte (P3)

Les autres ...

Page 12: Formation CGQTS © – Système Méthodologique dAide à la Réalisation de Tests © – Université de Liège – pour lIFA, Janvier 2005 Interprétation des rpbis à

Formation CGQTS © – Système Méthodologique d’Aide à la Réalisation de Tests © – Université de Liège – pour l’IFA, Janvier 2005

Ceux qui ont choisi la réponse correcte (P3)

Les autres ...

Ma = 6,6

Mx = 16,2pq

MaMxrpbis

pqMaMx

rpbis

pqrpbis 6,62,16

Page 13: Formation CGQTS © – Système Méthodologique dAide à la Réalisation de Tests © – Université de Liège – pour lIFA, Janvier 2005 Interprétation des rpbis à

Formation CGQTS © – Système Méthodologique d’Aide à la Réalisation de Tests © – Université de Liège – pour l’IFA, Janvier 2005

Les corrélations point bisériales (rpbis classiques)

pqMaMx

rpbis

pqMaMx

rpbis

7,0.3,08,5

6,62,16 rpbis

rpbis classiquede P3 = 0,76

Page 14: Formation CGQTS © – Système Méthodologique dAide à la Réalisation de Tests © – Université de Liège – pour lIFA, Janvier 2005 Interprétation des rpbis à

Formation CGQTS © – Système Méthodologique d’Aide à la Réalisation de Tests © – Université de Liège – pour l’IFA, Janvier 2005

Les corrélations point bisériales (rpbis classiques)

pqMaMx

rpbis

pqMaMx

rpbis

pqrpbis 6,62,16

OM P1 P2 P3 P4rpbis classique -0,43 -0,17 -0,39 0,76 0,02

Page 15: Formation CGQTS © – Système Méthodologique dAide à la Réalisation de Tests © – Université de Liège – pour lIFA, Janvier 2005 Interprétation des rpbis à

Formation CGQTS © – Système Méthodologique d’Aide à la Réalisation de Tests © – Université de Liège – pour l’IFA, Janvier 2005

2. h

ad /

wai

ted

3. h

ad /

was

wai

ting

4. w

as h

avin

g /

wai

ted

1. w

as h

avin

g / w

as w

aitin

g

Les corrélations point bisériales (rpbis classiques)

Complétez avec les mots qui conviennent :

He ……….. a heart attack while he ……….. for the bus.

1. was having / was waiting 2. had / waited 3. had / was waiting4. was having / waited

OM P1 P2 P3 P4rpbis classique -0,43 -0,17 -0,39 0,76 0,02

Page 16: Formation CGQTS © – Système Méthodologique dAide à la Réalisation de Tests © – Université de Liège – pour lIFA, Janvier 2005 Interprétation des rpbis à

Formation CGQTS © – Système Méthodologique d’Aide à la Réalisation de Tests © – Université de Liège – pour l’IFA, Janvier 2005

Questions 16, 17 et 18 de la partie  XXXXX

OK

OK

omissions VRAI FAUX

Le cas d’un test interdisciplinaire N = 69

précède la réponse correcteCorrélation

point bisériale

% de choix des étudiants

Page 17: Formation CGQTS © – Système Méthodologique dAide à la Réalisation de Tests © – Université de Liège – pour lIFA, Janvier 2005 Interprétation des rpbis à

Formation CGQTS © – Système Méthodologique d’Aide à la Réalisation de Tests © – Université de Liège – pour l’IFA, Janvier 2005

Page 18: Formation CGQTS © – Système Méthodologique dAide à la Réalisation de Tests © – Université de Liège – pour lIFA, Janvier 2005 Interprétation des rpbis à

Formation CGQTS © – Système Méthodologique d’Aide à la Réalisation de Tests © – Université de Liège – pour l’IFA, Janvier 2005

(Gilles, 2002)

Correction & discussion

Page 19: Formation CGQTS © – Système Méthodologique dAide à la Réalisation de Tests © – Université de Liège – pour lIFA, Janvier 2005 Interprétation des rpbis à

Formation CGQTS © – Système Méthodologique d’Aide à la Réalisation de Tests © – Université de Liège – pour l’IFA, Janvier 2005

Malgré l'étape de validation a priori (lorsqu'on rédige les questions), il est difficile de prévoir tous les problèmes qui peuvent apparaître dans les QCM.

Les rpbis permettent un contrôle de la qualité des QCM a posteriori (lorsqu'on analyse les résultats après le test).