degrés de certitude dans l’évaluation des …...degrés de certitude dans l’évaluation des...

10
Degrés de certitude dans l’évaluation des connaissances d’adolescents diabétiques Perspectives édumétriques et cliniques Dr Fatiha GUEMAZI-KHEFFI, Praticien Hospitalier GHRMSA et Directrice Médicale réseau ODE Pr Remi Gagnayre, Université Paris 13, directeur du LEPS Pr Dieudonné Leclercq, Université de Liège, collaborateur scientifique du LEPS Guemazi-Kheffi, Gagnayre & Leclercq (2019) Degrés de certitude et évaluation des connaissances d'adolescents diabétiques . SETE Toulouse SETE TOULOUSE, 9 mai 2019

Upload: others

Post on 24-Feb-2020

7 views

Category:

Documents


0 download

TRANSCRIPT

Page 1: Degrés de certitude dans l’évaluation des …...Degrés de certitude dans l’évaluation des connaissances d’adolescents diabétiques Perspectives édumétriques et cliniques

Degrés de certitude dans l’évaluation des connaissances d’adolescents diabétiques

Perspectives édumétriques et cliniques

Dr Fatiha GUEMAZI-KHEFFI, Praticien Hospitalier GHRMSA et Directrice Médicale réseau ODEPr Remi Gagnayre, Université Paris 13, directeur du LEPSPr Dieudonné Leclercq, Université de Liège, collaborateur scientifique du LEPS

Guemazi-Kheffi, Gagnayre & Leclercq (2019) Degrés de certitude et évaluation des connaissances d'adolescents diabétiques . SETE Toulouse

SETE TOULOUSE, 9 mai 2019

Page 2: Degrés de certitude dans l’évaluation des …...Degrés de certitude dans l’évaluation des connaissances d’adolescents diabétiques Perspectives édumétriques et cliniques

Introduction

Guemazi-Kheffi, Gagnayre & Leclercq (2019) Degrés de certitude et évaluation des connaissances d'adolescents diabétiques . SETE Toulouse

Page 3: Degrés de certitude dans l’évaluation des …...Degrés de certitude dans l’évaluation des connaissances d’adolescents diabétiques Perspectives édumétriques et cliniques

Matériel et Méthodes13 adolescents de 15 à 18 ans atteints de diabète de type 1 durant un séjour été (4j)

3 mois

Jour 1 Mettons-nous au Diapason ! (60 min) Que la force soit avec toi !50 QVF de l’AJD + certitudes

Hypo-hyper

Aliments Insuline

Test

Spectral

Métacognitif

6 6 12 9 17

………......Feedback - Débat

……….Position en qualitéspectrale

…… Autodiagnostic

50 QVF de l’AJD+ certitudes

Réponses

INCORRECTES

Test Spectral Métacognitif (TSM). Questions de Martin et al.

(2016) par Dr F. Gemazi-Kheffi 2018R Cert

Réponses

CORRECTES

95 80 60 50 1 8. On devient diabétique parce que l'on manque

d'insuline

Vrai Faux 50 60 80 95

95 80 60 50 2 17. Si j'urine souvent je pense que je manque

d'insuline

Vrai Faux 50 60 80 95

95 80 60 50 3 30. La fièvre, les émotions fortes et le stress font le

plus souvent baisser la glycémie

Vrai Faux 50 60 80 95

95 80 60 50 4 35. Une glycémie de 1.50 g/l (8 mmol/l) avant un repas

est normale

Vrai Faux 50 60 80 95

95 80 60 50 5 40. Le diabète insulino-dépendant est dû à une

alimentation trop sucrée

Vrai Faux 50 60 80 95

95 80 60 50 6 50. Quand on a un diabète on ne peut pas être vacciné Vrai Faux 50 60 80 95

95 80 60 50 7 4. L'hémoglobine glyquée doit être mesurée au moins

3 fois par an

Vrai Faux 50 60 80 95

95 80 60 50 8 10. Une hémoglobine glyquée à 10% est un bon

résultat (la valeur normale étant inférieur à 6%)

Vrai Faux 50 60 80 95

95 80 60 50 9 18. L'examen du fond d'œil permet la recherche d'une

rétinopathie (maladie de la rétine)

Vrai Faux 50 60 80 95

95 80 60 50 10 41. La recherche d'albumine dans les urines

(microalbuminurie) permet de dépister une maladie du

rein (néphropathie)

Vrai Faux 50 60 80 95

95 80 60 50 11 42. Pour faire une glycémie je pique généralement le

milieu du doigt

Vrai Faux 50 60 80 95

95 80 60 50 12 45. Plus j'équilibre mon diabète plus je retarde les

complications

Vrai Faux 50 60 80 95

Qu'est-ce

que le

diabète ?

Surveil-

lance

95

80

60

60

95

95

95

95

95

95

95

95

Réponses

INCORRECTES

Test Spectral Métacognitif (TSM). Questions de Martin et al.

(2016) par Dr F. Gemazi-Kheffi 2018R Cert

Réponses

CORRECTES

95 80 60 50 1 8. On devient diabétique parce que l'on manque

d'insuline

Vrai Faux 50 60 80 95

95 80 60 50 2 17. Si j'urine souvent je pense que je manque

d'insuline

Vrai Faux 50 60 80 95

95 80 60 50 3 30. La fièvre, les émotions fortes et le stress font le

plus souvent baisser la glycémie

Vrai Faux 50 60 80 95

95 80 60 50 4 35. Une glycémie de 1.50 g/l (8 mmol/l) avant un repas

est normale

Vrai Faux 50 60 80 95

95 80 60 50 5 40. Le diabète insulino-dépendant est dû à une

alimentation trop sucrée

Vrai Faux 50 60 80 95

95 80 60 50 6 50. Quand on a un diabète on ne peut pas être vacciné Vrai Faux 50 60 80 95

95 80 60 50 7 4. L'hémoglobine glyquée doit être mesurée au moins

3 fois par an

Vrai Faux 50 60 80 95

95 80 60 50 8 10. Une hémoglobine glyquée à 10% est un bon

résultat (la valeur normale étant inférieur à 6%)

Vrai Faux 50 60 80 95

95 80 60 50 9 18. L'examen du fond d'œil permet la recherche d'une

rétinopathie (maladie de la rétine)

Vrai Faux 50 60 80 95

95 80 60 50 10 41. La recherche d'albumine dans les urines

(microalbuminurie) permet de dépister une maladie du

rein (néphropathie)

Vrai Faux 50 60 80 95

95 80 60 50 11 42. Pour faire une glycémie je pique généralement le

milieu du doigt

Vrai Faux 50 60 80 95

95 80 60 50 12 45. Plus j'équilibre mon diabète plus je retarde les

complications

Vrai Faux 50 60 80 95

Qu'est-ce

que le

diabète ?

Surveil-

lance

95

80

60

60

95

95

95

95

95

95

95

95

Pourquoi si peu sûr alors que RC ?

Diabète Surveillance

Pourquoi si sûr alors que RI ?

Jour 2 Jour 3 Jour 4

3

Guemazi-Kheffi, Gagnayre & Leclercq (2019) Degrés de certitude et évaluation des connaissances d'adolescents diabétiques . SETE Toulouse

Page 4: Degrés de certitude dans l’évaluation des …...Degrés de certitude dans l’évaluation des connaissances d’adolescents diabétiques Perspectives édumétriques et cliniques

Résultats

0

5

10

15

20

25

30

35

40

45

50

1r 2e 3e 4e 5e 6e 7e 8e 9e 10e 11e 12e 13e

Scores simples (0/1) au total des 50 questions

SCORES ordonnés au prétest

SCORES ordonnés au post-test

les 13 scores en ordres croissants (différent au PRE et au POST)

Scor

e su

r 50

Sans les Degrés de Certitude(DC)

4

Guemazi-Kheffi, Gagnayre & Leclercq (2019) Degrés de certitude et évaluation des connaissances d'adolescents diabétiques . SETE Toulouse

Page 5: Degrés de certitude dans l’évaluation des …...Degrés de certitude dans l’évaluation des connaissances d’adolescents diabétiques Perspectives édumétriques et cliniques

Guemazi-Kheffi, Gagnayre & Leclercq (2019) Degrés de certitude et évaluation des connaissances d'adolescents diabétiques . SETE Toulouse

RésultatsPRE Camp Dr GUEMAZI-KHEFFI 2017-2018

Cohérence

0,997 = r (Corrélation entre TE et DC)

Calibration ou réalisme

5762

74

85

0

10

20

30

40

50

60

70

80

90

100

0 2 4 6 8

Tau

x d

e r

éu

ssit

e (

%R

C)

Degrés de certitudeSPECTRAL-PROF D. Leclercq (2015.1)

50 60 80 95

Sont-ils réalistes dans l’utilisation des degrés de certitude ?

Oui : leurs taux d’exactitudesont proches des % de certitude annoncés(proches de la diagonale)

5762 74

85

0

10

20

30

40

50

60

70

80

90

100

0 2 4 6 8

Tau

x d

e r

éu

ssit

e (

%R

C)

Degrés de certitudeSPECTRAL-PROF D. Leclercq (2015.1)

50 60 80 95

Page 6: Degrés de certitude dans l’évaluation des …...Degrés de certitude dans l’évaluation des connaissances d’adolescents diabétiques Perspectives édumétriques et cliniques

Guemazi-Kheffi, Gagnayre & Leclercq (2019) Degrés de certitude et évaluation des connaissances d'adolescents diabétiques . SETE Toulouse

Résultats

66,7

89,7

78,2

96,2

50

55

60

65

70

75

80

85

90

95

100

Diabète (6 QVF) Surveillance (6 QVF)

% de réussites avant et après camp

dans 2 domaines (78 réponses chacun)%

de

uss

ite

Avant

Avant

Après

Après

%RC % de Réponses Correctes

Pour les 2 domaines en mode TestSpectralMétacognitif

Gain Relatif = 35% Gain Relatif = 63%

Effet plafond

Page 7: Degrés de certitude dans l’évaluation des …...Degrés de certitude dans l’évaluation des connaissances d’adolescents diabétiques Perspectives édumétriques et cliniques

Guemazi-Kheffi, Gagnayre & Leclercq (2019) Degrés de certitude et évaluation des connaissances d'adolescents diabétiques . SETE Toulouse

8,65,9

3,14,2 5,4

5,1

16,9

50,8

10

4,82,9

1,2 2,9 5,1

13,1

60

0

10

20

30

40

50

60

70

-95 -80 -60 -50 50 60 80 95

Qualités spectrales des réponses par les 13 jeunes patients aux 50 QVF avant (PRE) et après (POST) le camp de 3 jours

PRE

POST

% d

e r

ép

on

ses

ace

rtin

ée

s

Qualités spectrales des réponses acertinées

Trop de connaissances nuisibles (même après)

Résultats

Page 8: Degrés de certitude dans l’évaluation des …...Degrés de certitude dans l’évaluation des connaissances d’adolescents diabétiques Perspectives édumétriques et cliniques

Guemazi-Kheffi, Gagnayre & Leclercq (2019) Degrés de certitude et évaluation des connaissances d'adolescents diabétiques . SETE Toulouse

Analyse

1. Après le camp, les gains dans les domaines-sans TSM (Test Spectral Métacognitif) sont nuls-avec TSM sont bons (Gain Relatif 35%) ou très bons (Gain Relatif 65%)

2. Au prétest, ces 13 patients, à ce test AJD de 50 QVF ont été, en tant que groupe, réalistes dans leurs degrés de certitude (les Taux d’Exactitude y correspondent : ils sont sur la diagonale)

3. Au post-test, ces patients ont donné des degrés de certitude plus élevés qu’au prétest et se sont plus surestimés (phénomène classique après une formation, mais invisible sans le recours aux degrés de certitude)

4. Le positionnement spectral des réponses acertinées permet de repérer les questions (connaissances nuisibles, méconceptions) à prioriser dans la remédiation

5. L’auto-diagnostic contribue à la révision des concepts erronés ou des doutes

Page 9: Degrés de certitude dans l’évaluation des …...Degrés de certitude dans l’évaluation des connaissances d’adolescents diabétiques Perspectives édumétriques et cliniques

Guemazi-Kheffi, Gagnayre & Leclercq (2019) Degrés de certitude et évaluation des connaissances d'adolescents diabétiques . SETE Toulouse

Conclusion

Les connaissances des patients, mesurées avec précisions (ici en tenant compte des degrés de certitude ou de doute) méritent d’entrer dans les dossiers médicaux,pour en suivre l’évolution et pour faciliter les dialogues cliniques.

Les concepts pédagogiques existent (degrés de certitude, TSM, réalisme, Tableaux de bord individuels et de groupe). Pour favoriser ces applications, la technologie de base existe aussi : réponses par Smartphone ou par télécommandes (clickers) , gestion informatisée des réponses (logiciel SPECTRAL), etc.)

Ainsi les étapes suivantes peuvent servir de modèles de stratégies de mises en place, sachant que les 2 derniers domaines peuvent être abordés selon les besoins

déterminés par le patient, et être le support de ce dialogue.

Figure 12 : modèle de proposition de stratégie.

Il importe de rendre tout cela convivial, au service du patient et du soignant-éducateur qui restent, plus que jamais, au cœur de l’ETP.

Page 10: Degrés de certitude dans l’évaluation des …...Degrés de certitude dans l’évaluation des connaissances d’adolescents diabétiques Perspectives édumétriques et cliniques

Guemazi-Kheffi, Gagnayre & Leclercq (2019) Degrés de certitude et évaluation des connaissances d'adolescents diabétiques . SETE Toulouse

Remerciements

• Remi Gagnayre et tous les collaborateurs du LEPS de Bobigny, Paris 13

• Dieudonné Leclercq

• Mes équipes hospitalières et du réseau

• Mes jeunes patients et leur famille…

10