Degrés de certitude dans l’évaluation des connaissances d’adolescents diabétiques
Perspectives édumétriques et cliniques
Dr Fatiha GUEMAZI-KHEFFI, Praticien Hospitalier GHRMSA et Directrice Médicale réseau ODEPr Remi Gagnayre, Université Paris 13, directeur du LEPSPr Dieudonné Leclercq, Université de Liège, collaborateur scientifique du LEPS
Guemazi-Kheffi, Gagnayre & Leclercq (2019) Degrés de certitude et évaluation des connaissances d'adolescents diabétiques . SETE Toulouse
SETE TOULOUSE, 9 mai 2019
Introduction
Guemazi-Kheffi, Gagnayre & Leclercq (2019) Degrés de certitude et évaluation des connaissances d'adolescents diabétiques . SETE Toulouse
Matériel et Méthodes13 adolescents de 15 à 18 ans atteints de diabète de type 1 durant un séjour été (4j)
3 mois
Jour 1 Mettons-nous au Diapason ! (60 min) Que la force soit avec toi !50 QVF de l’AJD + certitudes
Hypo-hyper
Aliments Insuline
Test
Spectral
Métacognitif
6 6 12 9 17
………......Feedback - Débat
……….Position en qualitéspectrale
…… Autodiagnostic
50 QVF de l’AJD+ certitudes
Réponses
INCORRECTES
Test Spectral Métacognitif (TSM). Questions de Martin et al.
(2016) par Dr F. Gemazi-Kheffi 2018R Cert
Réponses
CORRECTES
95 80 60 50 1 8. On devient diabétique parce que l'on manque
d'insuline
Vrai Faux 50 60 80 95
95 80 60 50 2 17. Si j'urine souvent je pense que je manque
d'insuline
Vrai Faux 50 60 80 95
95 80 60 50 3 30. La fièvre, les émotions fortes et le stress font le
plus souvent baisser la glycémie
Vrai Faux 50 60 80 95
95 80 60 50 4 35. Une glycémie de 1.50 g/l (8 mmol/l) avant un repas
est normale
Vrai Faux 50 60 80 95
95 80 60 50 5 40. Le diabète insulino-dépendant est dû à une
alimentation trop sucrée
Vrai Faux 50 60 80 95
95 80 60 50 6 50. Quand on a un diabète on ne peut pas être vacciné Vrai Faux 50 60 80 95
95 80 60 50 7 4. L'hémoglobine glyquée doit être mesurée au moins
3 fois par an
Vrai Faux 50 60 80 95
95 80 60 50 8 10. Une hémoglobine glyquée à 10% est un bon
résultat (la valeur normale étant inférieur à 6%)
Vrai Faux 50 60 80 95
95 80 60 50 9 18. L'examen du fond d'œil permet la recherche d'une
rétinopathie (maladie de la rétine)
Vrai Faux 50 60 80 95
95 80 60 50 10 41. La recherche d'albumine dans les urines
(microalbuminurie) permet de dépister une maladie du
rein (néphropathie)
Vrai Faux 50 60 80 95
95 80 60 50 11 42. Pour faire une glycémie je pique généralement le
milieu du doigt
Vrai Faux 50 60 80 95
95 80 60 50 12 45. Plus j'équilibre mon diabète plus je retarde les
complications
Vrai Faux 50 60 80 95
Qu'est-ce
que le
diabète ?
Surveil-
lance
95
80
60
60
95
95
95
95
95
95
95
95
Réponses
INCORRECTES
Test Spectral Métacognitif (TSM). Questions de Martin et al.
(2016) par Dr F. Gemazi-Kheffi 2018R Cert
Réponses
CORRECTES
95 80 60 50 1 8. On devient diabétique parce que l'on manque
d'insuline
Vrai Faux 50 60 80 95
95 80 60 50 2 17. Si j'urine souvent je pense que je manque
d'insuline
Vrai Faux 50 60 80 95
95 80 60 50 3 30. La fièvre, les émotions fortes et le stress font le
plus souvent baisser la glycémie
Vrai Faux 50 60 80 95
95 80 60 50 4 35. Une glycémie de 1.50 g/l (8 mmol/l) avant un repas
est normale
Vrai Faux 50 60 80 95
95 80 60 50 5 40. Le diabète insulino-dépendant est dû à une
alimentation trop sucrée
Vrai Faux 50 60 80 95
95 80 60 50 6 50. Quand on a un diabète on ne peut pas être vacciné Vrai Faux 50 60 80 95
95 80 60 50 7 4. L'hémoglobine glyquée doit être mesurée au moins
3 fois par an
Vrai Faux 50 60 80 95
95 80 60 50 8 10. Une hémoglobine glyquée à 10% est un bon
résultat (la valeur normale étant inférieur à 6%)
Vrai Faux 50 60 80 95
95 80 60 50 9 18. L'examen du fond d'œil permet la recherche d'une
rétinopathie (maladie de la rétine)
Vrai Faux 50 60 80 95
95 80 60 50 10 41. La recherche d'albumine dans les urines
(microalbuminurie) permet de dépister une maladie du
rein (néphropathie)
Vrai Faux 50 60 80 95
95 80 60 50 11 42. Pour faire une glycémie je pique généralement le
milieu du doigt
Vrai Faux 50 60 80 95
95 80 60 50 12 45. Plus j'équilibre mon diabète plus je retarde les
complications
Vrai Faux 50 60 80 95
Qu'est-ce
que le
diabète ?
Surveil-
lance
95
80
60
60
95
95
95
95
95
95
95
95
Pourquoi si peu sûr alors que RC ?
Diabète Surveillance
Pourquoi si sûr alors que RI ?
Jour 2 Jour 3 Jour 4
3
Guemazi-Kheffi, Gagnayre & Leclercq (2019) Degrés de certitude et évaluation des connaissances d'adolescents diabétiques . SETE Toulouse
Résultats
0
5
10
15
20
25
30
35
40
45
50
1r 2e 3e 4e 5e 6e 7e 8e 9e 10e 11e 12e 13e
Scores simples (0/1) au total des 50 questions
SCORES ordonnés au prétest
SCORES ordonnés au post-test
les 13 scores en ordres croissants (différent au PRE et au POST)
Scor
e su
r 50
Sans les Degrés de Certitude(DC)
4
Guemazi-Kheffi, Gagnayre & Leclercq (2019) Degrés de certitude et évaluation des connaissances d'adolescents diabétiques . SETE Toulouse
Guemazi-Kheffi, Gagnayre & Leclercq (2019) Degrés de certitude et évaluation des connaissances d'adolescents diabétiques . SETE Toulouse
RésultatsPRE Camp Dr GUEMAZI-KHEFFI 2017-2018
Cohérence
0,997 = r (Corrélation entre TE et DC)
Calibration ou réalisme
5762
74
85
0
10
20
30
40
50
60
70
80
90
100
0 2 4 6 8
Tau
x d
e r
éu
ssit
e (
%R
C)
Degrés de certitudeSPECTRAL-PROF D. Leclercq (2015.1)
50 60 80 95
Sont-ils réalistes dans l’utilisation des degrés de certitude ?
Oui : leurs taux d’exactitudesont proches des % de certitude annoncés(proches de la diagonale)
5762 74
85
0
10
20
30
40
50
60
70
80
90
100
0 2 4 6 8
Tau
x d
e r
éu
ssit
e (
%R
C)
Degrés de certitudeSPECTRAL-PROF D. Leclercq (2015.1)
50 60 80 95
Guemazi-Kheffi, Gagnayre & Leclercq (2019) Degrés de certitude et évaluation des connaissances d'adolescents diabétiques . SETE Toulouse
Résultats
66,7
89,7
78,2
96,2
50
55
60
65
70
75
80
85
90
95
100
Diabète (6 QVF) Surveillance (6 QVF)
% de réussites avant et après camp
dans 2 domaines (78 réponses chacun)%
de
ré
uss
ite
Avant
Avant
Après
Après
%RC % de Réponses Correctes
Pour les 2 domaines en mode TestSpectralMétacognitif
Gain Relatif = 35% Gain Relatif = 63%
Effet plafond
Guemazi-Kheffi, Gagnayre & Leclercq (2019) Degrés de certitude et évaluation des connaissances d'adolescents diabétiques . SETE Toulouse
8,65,9
3,14,2 5,4
5,1
16,9
50,8
10
4,82,9
1,2 2,9 5,1
13,1
60
0
10
20
30
40
50
60
70
-95 -80 -60 -50 50 60 80 95
Qualités spectrales des réponses par les 13 jeunes patients aux 50 QVF avant (PRE) et après (POST) le camp de 3 jours
PRE
POST
% d
e r
ép
on
ses
ace
rtin
ée
s
Qualités spectrales des réponses acertinées
Trop de connaissances nuisibles (même après)
Résultats
Guemazi-Kheffi, Gagnayre & Leclercq (2019) Degrés de certitude et évaluation des connaissances d'adolescents diabétiques . SETE Toulouse
Analyse
1. Après le camp, les gains dans les domaines-sans TSM (Test Spectral Métacognitif) sont nuls-avec TSM sont bons (Gain Relatif 35%) ou très bons (Gain Relatif 65%)
2. Au prétest, ces 13 patients, à ce test AJD de 50 QVF ont été, en tant que groupe, réalistes dans leurs degrés de certitude (les Taux d’Exactitude y correspondent : ils sont sur la diagonale)
3. Au post-test, ces patients ont donné des degrés de certitude plus élevés qu’au prétest et se sont plus surestimés (phénomène classique après une formation, mais invisible sans le recours aux degrés de certitude)
4. Le positionnement spectral des réponses acertinées permet de repérer les questions (connaissances nuisibles, méconceptions) à prioriser dans la remédiation
5. L’auto-diagnostic contribue à la révision des concepts erronés ou des doutes
Guemazi-Kheffi, Gagnayre & Leclercq (2019) Degrés de certitude et évaluation des connaissances d'adolescents diabétiques . SETE Toulouse
Conclusion
Les connaissances des patients, mesurées avec précisions (ici en tenant compte des degrés de certitude ou de doute) méritent d’entrer dans les dossiers médicaux,pour en suivre l’évolution et pour faciliter les dialogues cliniques.
Les concepts pédagogiques existent (degrés de certitude, TSM, réalisme, Tableaux de bord individuels et de groupe). Pour favoriser ces applications, la technologie de base existe aussi : réponses par Smartphone ou par télécommandes (clickers) , gestion informatisée des réponses (logiciel SPECTRAL), etc.)
Ainsi les étapes suivantes peuvent servir de modèles de stratégies de mises en place, sachant que les 2 derniers domaines peuvent être abordés selon les besoins
déterminés par le patient, et être le support de ce dialogue.
Figure 12 : modèle de proposition de stratégie.
Il importe de rendre tout cela convivial, au service du patient et du soignant-éducateur qui restent, plus que jamais, au cœur de l’ETP.
Guemazi-Kheffi, Gagnayre & Leclercq (2019) Degrés de certitude et évaluation des connaissances d'adolescents diabétiques . SETE Toulouse
Remerciements
• Remi Gagnayre et tous les collaborateurs du LEPS de Bobigny, Paris 13
• Dieudonné Leclercq
• Mes équipes hospitalières et du réseau
• Mes jeunes patients et leur famille…
10