![Page 1: DES : Médecine physique et de réadaptation CCA Rouen-Bois Guillaume : 18 octobre 2006 Cours avancé : Recherche clinique et handicap en MPR Titre : Validation](https://reader035.vdocuments.net/reader035/viewer/2022062512/551d9ddf497959293b8e9a1e/html5/thumbnails/1.jpg)
DES : Médecine physique et de réadaptationCCARouen-Bois Guillaume : 18 octobre 2006 Cours avancé : Recherche clinique et handicap en MPR
Titre : Validation d’une technique d’évaluation
Auteurs : C Benaim, J Pélissier
© Cofemer 2006 et les auteursTous droits réservés
QuickTime™ et undécompresseur TIFF (non compressé)
sont requis pour visionner cette image.
QuickTime™ et undécompresseur TIFF (non compressé)
sont requis pour visionner cette image.
![Page 2: DES : Médecine physique et de réadaptation CCA Rouen-Bois Guillaume : 18 octobre 2006 Cours avancé : Recherche clinique et handicap en MPR Titre : Validation](https://reader035.vdocuments.net/reader035/viewer/2022062512/551d9ddf497959293b8e9a1e/html5/thumbnails/2.jpg)
2
Validation d’une technique d’évaluationC Benaim, CHU Nice
J Pélissier, CHU Nîmes
![Page 3: DES : Médecine physique et de réadaptation CCA Rouen-Bois Guillaume : 18 octobre 2006 Cours avancé : Recherche clinique et handicap en MPR Titre : Validation](https://reader035.vdocuments.net/reader035/viewer/2022062512/551d9ddf497959293b8e9a1e/html5/thumbnails/3.jpg)
3
Évaluation clinique Objectifs
Métrologique (déficience, incapacité,…) Suivi clinique, recherche, pronostic, aide à la
décision…
Diagnostique Moyens
Échelles cliniques uni/multidimensionnelles 1 ou plusieurs items agrégés
Tests diagnostiques (réponse + ou -)
![Page 4: DES : Médecine physique et de réadaptation CCA Rouen-Bois Guillaume : 18 octobre 2006 Cours avancé : Recherche clinique et handicap en MPR Titre : Validation](https://reader035.vdocuments.net/reader035/viewer/2022062512/551d9ddf497959293b8e9a1e/html5/thumbnails/4.jpg)
4
Évaluation clinique Objectifs
Métrologique (déficience, incapacité,…) Suivi clinique, recherche, pronostic, aide à la
décision…Diagnostique
MoyensÉchelles cliniques uni/multidimensionnelles
1 ou plusieurs items agrégésTests diagnostiques (réponse + ou -)
IMPOSSIBLE DE D’EN PASSER
![Page 5: DES : Médecine physique et de réadaptation CCA Rouen-Bois Guillaume : 18 octobre 2006 Cours avancé : Recherche clinique et handicap en MPR Titre : Validation](https://reader035.vdocuments.net/reader035/viewer/2022062512/551d9ddf497959293b8e9a1e/html5/thumbnails/5.jpg)
5
Validation d’une échelle clinique
Définition du cahier des chargesQue doit mesurer l’échelle ?Quels patients ? (générique / spécifique)Conditions d’utilisation ?
Tour complet de la littérature +++ Groupe de travail
Experts + utilisateurs + méthodologiste
![Page 6: DES : Médecine physique et de réadaptation CCA Rouen-Bois Guillaume : 18 octobre 2006 Cours avancé : Recherche clinique et handicap en MPR Titre : Validation](https://reader035.vdocuments.net/reader035/viewer/2022062512/551d9ddf497959293b8e9a1e/html5/thumbnails/6.jpg)
6
Validation d’une échelle clinique
VALIDITE (validity)
+
FIDELITE (reliability)
+
…
![Page 7: DES : Médecine physique et de réadaptation CCA Rouen-Bois Guillaume : 18 octobre 2006 Cours avancé : Recherche clinique et handicap en MPR Titre : Validation](https://reader035.vdocuments.net/reader035/viewer/2022062512/551d9ddf497959293b8e9a1e/html5/thumbnails/7.jpg)
7
Validation d’une échelle clinique
ValiditéD’apparence >>> UtilisateurDe contenu >>> Experts
Pertinence et représentativité des itemsDu construit >>> Hypothèses
Convergente et divergente Groupes a priori différents Analyse factorielle confirmatoire ou exploratoire
Contre critère >>> Gold standard Concomitante ou prédictive
![Page 8: DES : Médecine physique et de réadaptation CCA Rouen-Bois Guillaume : 18 octobre 2006 Cours avancé : Recherche clinique et handicap en MPR Titre : Validation](https://reader035.vdocuments.net/reader035/viewer/2022062512/551d9ddf497959293b8e9a1e/html5/thumbnails/8.jpg)
8
Validation d’une échelle clinique
Fidélité = ReproductibilitéFidélité inter-jugesFidélité intra-juges
« Test-retest »: autoévaluation
AutresCohérence interneSensibilité aux changements
![Page 9: DES : Médecine physique et de réadaptation CCA Rouen-Bois Guillaume : 18 octobre 2006 Cours avancé : Recherche clinique et handicap en MPR Titre : Validation](https://reader035.vdocuments.net/reader035/viewer/2022062512/551d9ddf497959293b8e9a1e/html5/thumbnails/9.jpg)
9
Validation du test de dépistage
Confrontation à un test de référence:
Sensibilité = VP / Malades Spécificité = VN / Sains
Choix du seuil +++
Positifs Négatifs Malades VP FN
Sains FP VN
![Page 10: DES : Médecine physique et de réadaptation CCA Rouen-Bois Guillaume : 18 octobre 2006 Cours avancé : Recherche clinique et handicap en MPR Titre : Validation](https://reader035.vdocuments.net/reader035/viewer/2022062512/551d9ddf497959293b8e9a1e/html5/thumbnails/10.jpg)
10
APPLICATION
Validation d’une échelle d’évaluation de la dépression
chez l’aphasique : l’ADRS
![Page 11: DES : Médecine physique et de réadaptation CCA Rouen-Bois Guillaume : 18 octobre 2006 Cours avancé : Recherche clinique et handicap en MPR Titre : Validation](https://reader035.vdocuments.net/reader035/viewer/2022062512/551d9ddf497959293b8e9a1e/html5/thumbnails/11.jpg)
11
Validation de l’ADRS
Définition du cahier des chargesQue doit mesurer l’échelle ?Quels patients ? (générique / spécifique)Conditions d’utilisation ?
Tour complet de la littérature +++ Groupe de travail
Experts + utilisateurs + méthodologiste
![Page 12: DES : Médecine physique et de réadaptation CCA Rouen-Bois Guillaume : 18 octobre 2006 Cours avancé : Recherche clinique et handicap en MPR Titre : Validation](https://reader035.vdocuments.net/reader035/viewer/2022062512/551d9ddf497959293b8e9a1e/html5/thumbnails/12.jpg)
12
Validation de l’ADRS
Définition du cahier des chargesSévérité de la dépressionQuels patients ? (générique / spécifique)Conditions d’utilisation ?
Tour complet de la littérature +++ Groupe de travail
Experts + utilisateurs + méthodologiste
![Page 13: DES : Médecine physique et de réadaptation CCA Rouen-Bois Guillaume : 18 octobre 2006 Cours avancé : Recherche clinique et handicap en MPR Titre : Validation](https://reader035.vdocuments.net/reader035/viewer/2022062512/551d9ddf497959293b8e9a1e/html5/thumbnails/13.jpg)
13
Validation de l’ADRS
Définition du cahier des chargesSévérité de la dépressionAphasiques après AVCConditions d’utilisation ?
Tour complet de la littérature +++ Groupe de travail
Experts + utilisateurs + méthodologiste
![Page 14: DES : Médecine physique et de réadaptation CCA Rouen-Bois Guillaume : 18 octobre 2006 Cours avancé : Recherche clinique et handicap en MPR Titre : Validation](https://reader035.vdocuments.net/reader035/viewer/2022062512/551d9ddf497959293b8e9a1e/html5/thumbnails/14.jpg)
14
Validation de l’ADRS
Définition du cahier des chargesSévérité de la dépressionAphasiques après AVCHétéro-évaluation, en staff, < 5-10 mn
Tour complet de la littérature +++ Groupe de travail
Experts + utilisateurs + méthodologiste
![Page 15: DES : Médecine physique et de réadaptation CCA Rouen-Bois Guillaume : 18 octobre 2006 Cours avancé : Recherche clinique et handicap en MPR Titre : Validation](https://reader035.vdocuments.net/reader035/viewer/2022062512/551d9ddf497959293b8e9a1e/html5/thumbnails/15.jpg)
15
Validation de l’ADRS
Définition du cahier des chargesSévérité de la dépressionAphasiques après AVCHétéro-évaluation, en staff, < 5-10 mn
Scores classiques inutilisables (HDRS) Groupe de travail
Experts + utilisateurs + méthodologiste
![Page 16: DES : Médecine physique et de réadaptation CCA Rouen-Bois Guillaume : 18 octobre 2006 Cours avancé : Recherche clinique et handicap en MPR Titre : Validation](https://reader035.vdocuments.net/reader035/viewer/2022062512/551d9ddf497959293b8e9a1e/html5/thumbnails/16.jpg)
16
NEUTRE
TRISTE
Auto-évaluation
VAM S « tristesse »
![Page 17: DES : Médecine physique et de réadaptation CCA Rouen-Bois Guillaume : 18 octobre 2006 Cours avancé : Recherche clinique et handicap en MPR Titre : Validation](https://reader035.vdocuments.net/reader035/viewer/2022062512/551d9ddf497959293b8e9a1e/html5/thumbnails/17.jpg)
17
Validation de l’ADRS
Définition du cahier des chargesÉvaluation externe de la dépressionAphasiques après AVCEn staff, < 5-10 minutes
Scores classiques inutilisables (HDRS) Groupe de travail
Médecins (MPR, PSY), thérapeutes, soignants
![Page 18: DES : Médecine physique et de réadaptation CCA Rouen-Bois Guillaume : 18 octobre 2006 Cours avancé : Recherche clinique et handicap en MPR Titre : Validation](https://reader035.vdocuments.net/reader035/viewer/2022062512/551d9ddf497959293b8e9a1e/html5/thumbnails/18.jpg)
18
Validité d’apparence, de contenu
Listing des comportements dépressifs typiques (# 30)
1ère Sélection de 15 items strictement comportementaux pertinents et représentatifs (HDRS, MADRS, SRRS)
Adaptations mineures
![Page 19: DES : Médecine physique et de réadaptation CCA Rouen-Bois Guillaume : 18 octobre 2006 Cours avancé : Recherche clinique et handicap en MPR Titre : Validation](https://reader035.vdocuments.net/reader035/viewer/2022062512/551d9ddf497959293b8e9a1e/html5/thumbnails/19.jpg)
19
Items sélectionnés par experts
Items ordinaux 0-2 à 0-61,2,3 : Insomnie début, milieu, fin de nuit 4 : Anxiété somatique 5 : Symptômes somatiques gastro-intestinaux 6 : Symptômes somatiques généraux 7 : Perte de poids 8 : Tristesse apparente 9 : Lassitude 10 : Lenteur / rareté des mouvements tête / cou 11 : Agitation 12 : Anxiété psychique 13 : Hypochondrie 14 : Lenteur / rareté des mouvements
membres / tronc 15 : Fatigabilité
![Page 20: DES : Médecine physique et de réadaptation CCA Rouen-Bois Guillaume : 18 octobre 2006 Cours avancé : Recherche clinique et handicap en MPR Titre : Validation](https://reader035.vdocuments.net/reader035/viewer/2022062512/551d9ddf497959293b8e9a1e/html5/thumbnails/20.jpg)
20
Sélection des meilleurs items
Évaluation de 50 patientsAVC hémisphérique, aphasiques ou nonHétéro-évaluation / 15 items en staff
Passation 10-15 mn
Sélection des items les plus en accord avec l’évaluation Ψ / personnel (absence de Gold standard)
Procédures mathématiques spécifiques...
![Page 21: DES : Médecine physique et de réadaptation CCA Rouen-Bois Guillaume : 18 octobre 2006 Cours avancé : Recherche clinique et handicap en MPR Titre : Validation](https://reader035.vdocuments.net/reader035/viewer/2022062512/551d9ddf497959293b8e9a1e/html5/thumbnails/21.jpg)
21
7 items meilleurs prédicteurs
1,2,3 : Insomnie début, milieu, fin de nuit 4 : Anxiété somatique 5 : Symptômes somatiques gastro-intestinaux 6 : Symptômes somatiques généraux 7 : Perte de poids 8 : Tristesse apparente 9 : Lassitude 10 : Lenteur / rareté des mouvements tête /
cou 11 : Agitation 12 : Anxiété psychique 13 : Hypochondrie 14 : Lenteur / rareté des mouvements
membres / tronc 15 : Fatigabilité
![Page 22: DES : Médecine physique et de réadaptation CCA Rouen-Bois Guillaume : 18 octobre 2006 Cours avancé : Recherche clinique et handicap en MPR Titre : Validation](https://reader035.vdocuments.net/reader035/viewer/2022062512/551d9ddf497959293b8e9a1e/html5/thumbnails/22.jpg)
22
Validité de construit
Analyse factorielle (ACP)15 itemsEVA personnelÉvaluation de la dépression par le ΨÉvaluation de l’anxiété par le Ψ
![Page 23: DES : Médecine physique et de réadaptation CCA Rouen-Bois Guillaume : 18 octobre 2006 Cours avancé : Recherche clinique et handicap en MPR Titre : Validation](https://reader035.vdocuments.net/reader035/viewer/2022062512/551d9ddf497959293b8e9a1e/html5/thumbnails/23.jpg)
23
4 Axes = 69% 1 2 3 4 int-dép phys insom anx 35% 14% 13% 7%
EVA dépression personnel X . . .évaluation dépression Ψ X . . .évaluation anxiété Ψ . . . Xinsomnie début nuit . . x .insomnie milieu de nuit . . x .insomnie matin x . x .anxiété somatique x . . .symptômes intestinaux x . . xsymptômes généraux x . . xperte de poids x . . .tristesse apparente x . . .lassitude x . . .mouvement tête-cou x x . .agitation x . . .anxiété psychique x x . .hypochondrie x x . .mouvement membres-tronc x x . .fatigabilité x x . .
![Page 24: DES : Médecine physique et de réadaptation CCA Rouen-Bois Guillaume : 18 octobre 2006 Cours avancé : Recherche clinique et handicap en MPR Titre : Validation](https://reader035.vdocuments.net/reader035/viewer/2022062512/551d9ddf497959293b8e9a1e/html5/thumbnails/24.jpg)
24
4 Axes = 69% 1 2 3 4 int-dép phys insom anx 35% 14% 13% 7%
EVA dépression personnel X . . .évaluation dépression Ψ X . . .évaluation anxiété Ψ . . . Xinsomnie début nuit . . x .insomnie milieu de nuit . . x .insomnie matin x . x .anxiété somatique x . . .symptômes intestinaux x . . xsymptômes généraux x . . xperte de poids x . . .tristesse apparente x . . .lassitude x . . .mouvement tête-cou x x . .agitation x . . .anxiété psychique x x . .hypochondrie x x . .mouvement membres-tronc x x . .fatigabilité x x . .
![Page 25: DES : Médecine physique et de réadaptation CCA Rouen-Bois Guillaume : 18 octobre 2006 Cours avancé : Recherche clinique et handicap en MPR Titre : Validation](https://reader035.vdocuments.net/reader035/viewer/2022062512/551d9ddf497959293b8e9a1e/html5/thumbnails/25.jpg)
25
Validité de critère
Absence de Gold standard
Corrélation entre la version à 9
items et d’autres construitsÉvaluation / PSY r = 0.60 (p<10-
4)
EVA personnel r = 0.78 (p<10-6)
HDRS (24 non aphasiques) r = 0.77 (p<10-5)
![Page 26: DES : Médecine physique et de réadaptation CCA Rouen-Bois Guillaume : 18 octobre 2006 Cours avancé : Recherche clinique et handicap en MPR Titre : Validation](https://reader035.vdocuments.net/reader035/viewer/2022062512/551d9ddf497959293b8e9a1e/html5/thumbnails/26.jpg)
26
Fidélité = Reproductibilité
15 patients évalués 2 fois à 2 semaines d’intervalle en staffsreproductibilité inter-juges
1er staff / 3 juges r 0.89 (p<10-4)
reproductibilité dans le temps 1er et 2nd staff / 1 juge r = 0.89 (p<10-4)
![Page 27: DES : Médecine physique et de réadaptation CCA Rouen-Bois Guillaume : 18 octobre 2006 Cours avancé : Recherche clinique et handicap en MPR Titre : Validation](https://reader035.vdocuments.net/reader035/viewer/2022062512/551d9ddf497959293b8e9a1e/html5/thumbnails/27.jpg)
27
Sensibilité au changement
49 patients évalués 2 fois J0-J30ADRS, PSY
Classification par le PSY en 3 groupesAméliorés, stables, aggravés
Comparaison des scores ADRS des 3 groupes (ANOVA, SRM, ES)
Corrélation ADRS <> PSY (r)
![Page 28: DES : Médecine physique et de réadaptation CCA Rouen-Bois Guillaume : 18 octobre 2006 Cours avancé : Recherche clinique et handicap en MPR Titre : Validation](https://reader035.vdocuments.net/reader035/viewer/2022062512/551d9ddf497959293b8e9a1e/html5/thumbnails/28.jpg)
28
Conclusion
Validation = procédure complexe +++ Erreurs habituelles
Tour de la littérature incomplet Travail « en solo »Méthodologiste sollicité tardivementMauvaise évaluation de la faisabilité