POURQUOI ÉVALUER ?

Les différents types d’évaluation

POURQUOI ÉVALUER ?

• Quelle fonction ?• À quel moment ?• Comment ?• Y a-t-il une note ?

Évaluation diagnostiq

ue

Évaluation formative

Évaluation sommative

  Évaluation diagnostique

Évaluation formative

Évaluation sommative

Fonction

Permettre un état des lieux des compétences d’un apprenant  

Améliorer l’apprentissage en détectant les difficultés de l’apprenant.  

Évaluer les acquis, dresser un bilan des connaissances et compétences d’un apprenant. 

QuandAu début d’une session ou de séquence

Elle s’effectue pendant le déroulement de la session

Elle se déroule souvent à la fin de la formation

Comment

Grâce à un test dont les résultats servent à adapter l’enseignement

Exercice individuel ou collectif.

Grâce à un test et à l’attribution d’une note 

Note ? NonNon noté ou en tout cas, la note ne doit pas sanctionner ou servir à la certification

Oui 

QUELLES COMPÉTENCES ÉVALUER ?

Limites et potentiels des exercices fermés

Activité ouverte « Ce qui doit s’apprécier »

Réponses à imaginer, multiples, nuancéesProduction de l’apprenant

Notation subjective

QCM

Tableaux

Appariements

Activité fermée« Ce qui peut se mesurer »

Réponse fournie, unique, univoqueAucune productionNotation objective

Repérages

VerbalisationCommentair

eSynthèse

ProductionD’après Christine Tagliante, L’évaluation (CLE Int.)

DES LIMITES… Texte à trous

Classement

MAIS UN ÉVENTAIL ÉLEVÉ DE POSSIBILITÉS

Qui fixe la valeur des bitcoins ?

X L’offre et la demande • La fondation Bitcoin• La banque centrale du pays où a lieu la transaction• Satoshi Nakamoto, le créateur du Bitcoin

MÉMORISATION

Exercice d’appariement

Les os du corps : http://www.anatomia.learningtogether.net/squelette.html

MÉMORISATION

La désintermédiation c’est :X La réduction ou la suppression des intermédiaires dans un circuit de distribution • Le passage d’une relation virtuelle à une relation en face à face avec le client• La suppression des commissions prélevées par des tiers lors de transactions en ligne.

COMPRÉHENSION

Exemple de question posée après la lecture d’un document. La bonne réponse reformule l’information comprise dans le document.

Analyse d’une page Web http://www.lepointdufle.net/ressources_fle/analyser_une_page_web.htm

COMPRÉHENSIONExercice formatif : les questions guident l’apprenant dans la recherche d’informations pertinentes pour renforcer ses méthodes d’analyse

Exercices de biophysique : http://www.chups.jussieu.fr/qcms/biophysique/2.qcm

APPLICATION

La forme négative en français : http://www.mkm-haifa.co.il/francais/Site2004/negation1.htm

APPLICATION

Cochez les 4 sites pour lesquels on peut parler de désintermédiation :

• Lulu.com https://www.lulu.com/ [oui]• Lufthansa http://www.lufthansa.com/fr/ [non]• Kisskissbankbank http://www.kisskissbankbank.com/

[oui] • Italki http://www.italki.com/ [oui]• Vélib http://www.velib.paris [non]• Rue du tee-shirt.com http://www.rueduteeshirt.com/

[oui]

ANALYSE

Voyage à St Émilion :http://voyagesenfrancais.fr/spip.php?article1216#.VqofGCrhDIU

SIMULATION, MISE EN SITUATION

Source : Marcel Lebrun, Université de Louvain

AVANTAGES ET INCONVÉNIENTS DES QCM Avantages Inconvénients

• Brièveté des réponses

• Simplicité des corrections (automatisation)

• Objectivité, équité

• Sentiment de sécurité des apprenants

• Couverture d’un large éventail de matière

• Usage formatif et sommatif

• Temps de préparation

• Limites des objectifs cognitifs mesurables

• Quelle part de hasard ?

• Pas de production, d’expression, de formulation

• Difficulté de mise en œuvre (formulation, fraude…)

RADIOGRAPHIE D’UNE « QCM »

…et de ses variantes

Source : Marcel Lebrun, Université de Louvain

UNE QCM C’EST :

  Une question à laquelle l’étudiant répond en opérant (au moins) une sélection parmi plusieurs solutions proposées, chacune étant jugée correcte ou incorrecte indépendamment de l’étudiant qui doit y répondre. »«

Une QCM est formée de 3 composantes :

1.les consignes

2.l’énoncé

3.les solutions proposées incluant les leurres (ou distracteurs)

À la question suivante, choisissez la proposition correcte

Dans quel domaine de l’art, Pablo Picasso s’est-il particulièrement illustré ?

EXEMPLE DE QUESTION

• La musique• La peinture• La poésie• Le théâtre

Consigne

Énoncé

Solutions proposée

s

Et éventuellement une rétroaction

Picasso a bien écrit des poèmes mais l’essentiel de sa production artistique est picturale !

• Les « Vrai ou Faux »• Les « QCM Simple »• Les « QCM à réponses multiples »• Questions de type chronologique

QUELQUES TYPES DE QUESTION

Cocher la bonne réponse

Paris est la capitale de la France□ Vrai□ Faux

L’énoncé ne comporte qu’une seule proposition et l’apprenant ne doit sélectionner qu’une seule réponse, vrai ou faux

LE VRAI-FAUX

Question simple mais peu

intéressante (favorise le hasard)

LE  QCM « SIMPLE »

Cocher la bonne réponseLa capitale de la France est

□ Moscou□ Bruxelles□ Paris□ Madrid□ Amsterdam

La question comporte plusieurs réponses, mais une seule solution correcte

5 propositions (4 leurres et 1 bonne réponse) sont

généralement données pour réduire les réponses au hasard

Cocher les (2) bonnes réponses

Quels sont les films réalisés par Stanley Kubrick □ Orange mécanique □ Le Titanic □ Le bon la brute et le truand □ 2001, l’odyssée de l’espace □ Avatar

L’apprenant peut choisir plusieurs solutions comme étant correctes.

LE  QCM À RÉPONSES MULTIPLES

Il est possible d’indiquer ou non le bon nombre de

réponse

Classer dans l’ordre les éléments suivants de la méthodologie de projet :

1 2 3 4 5Programmation □ □ □ □ □Diagnostic □ □ □ □ □Évaluation finale □ □ □ □ □Planification stratégique □ □ □ □ □Suivi et pilotage □ □ □ □ □

LES QUESTIONS « CHRONOLOGIQUES »

• Des exercices d’appariement, de placement sur des images

• La possibilité d’intégrer des contenus multimédias

• La possibilité de paramétrer le fonctionnement du quiz (durée, affichage des rétroactions…)

ET ÉGALEMENT, SELON LES OUTILS…

MÉTHODOLOGIE ET CONSEILS DE

CONCEPTIONPour des quiz réussis

• Quelles sont les modalités d’évaluation ?• Quels types d’activités mettre en œuvre ?

Pour évaluer quelles compétences ?• Sur quels contenus pédagogiques portent

ces activités ?• Sur quels documents s’appuient-elles ?

1) DÉFINIR SES OBJECTIFS

2) CHOISIR SON OUTIL DE PRODUCTION

3) PRODUIRE ET DIFFUSER SON QUIZ

Au boulot !

4) ÉVALUER ET AFFINER SON QUESTIONNAIRE

• Accompagner son QCM d’instructions générales claires : durée, relecture, phases avant validation, nombre d’essais…

• Commencer l’épreuve par des questions simples, pour la « mise en jambe »

• Augmenter le nombre de distracteurs et/ou enlever des points pour les réponses fausses afin d’éviter les réponses au hasard

ÉVALUATION SOMMATIVE

• Ajouter des rétroactions (feedback) à chaque question (voire à chaque réponse)

• Préférer les explications pédagogiques aux messages d’encouragements

• Rédiger les rétroactions de façon personnelle (effet « voix du prof »)

ÉVALUATION FORMATIVE ET RÉTROACTIONS

Bien formuler ses QCM :les questions

Les énoncés doivent :• être simples, clairs et précis,• comporter toutes les informations

nécessaires pour répondre,• aborder un seul problème par

question,• formuler des questions

indépendantes les unes des autres.Source : CIP de Lorraine

Bien formuler ses QCM :les questions

Les énoncés ne doivent pas :• être ambigus,• comporter un jugement de valeur,• porter sur des points de détails,• comporter des pièges.

Source : CIP de Lorraine

Bien formuler ses QCM :les réponses

Les réponses doivent :• être absolument vraies ou fausses,• être homogènes (contenu, forme),• être disposées de façon aléatoire.

Les leurres doivent être plausibles (et si possible correspondre à des erreurs fréquentes)

Source : CIP de Lorraine

Bien formuler ses QCM :les réponses

Les réponses ne doivent pas :• être synonymes,• contenir des indices,• se chevaucher ou s’inclure les unes les

autres.

Source : CIP de Lorraine

Qu’est-ce que le « logement par craie » ?

- Un logement attribué de manière temporaire qui tire son nom de l’inscription à la craie de l’hôte attendu que l’on écrivait sur la porte d’entrée

- Une exemption du devoir d’accueillir les membres de la cour pour les courtisans ayant construit une maison à Versailles X

- Le terme qui désignait la location d’un logement à Versailles pour les courtisans désireux d’approcher le roi

Énoncé peu clair (et fautif)

Quelques mauvais exemples

Quels artisans ont été mobilisés pour la construction du château de Versailles sous Louis XIV ? a. Louis Le Vau Xb. Jacques Lemercierc. Jean Baptiste Colbertd. Charles le Brun Xe. André Le Nôtre X

Question imprécise

Quelques mauvais exemples

André Le Nôtre à créé les jardins et pas le château

proprement dit…

Un œil presbytea. voit mal de loinb. voit mal de prèsc. doit toujours être corrigéd. ne doit être corrigé que pour la vision proche

La question porte sur deux éléments

Quelques mauvais exemples

Source : Revue Réseau n°69

Qu’est-ce qu’un patriclan ?a. un système politique isolationnisteb. une réunion annuelle des hommes dans une société primitivec. un clan fondé sur la filiation patrilinéaire

La bonne réponse comporte un indice

Quelques mauvais exemples

Source : Revue Réseau n°69

Qu’est-ce qu’un ostéopathe ?a. un insecteb. un coquillagec. un vêtement anciend. une personne qui soigne par manipulation des os

La bonne réponse est formellement différente des distracteurs

Quelques mauvais exemples

Source : Revue Réseau n°69

Qui est le meilleur footballeur ?

□ Pelé□ Ronaldo□ Zidane□ Messi□ Platini

La question est subjective

Quelques mauvais exemples

À vous !

CRÉDITS ILLUSTRATIONSSemeuse : https://pl.wikipedia.org/wiki/Mniszek_pospolity#/media/File:Logotype_de_Larousse_par_E._Grasset.jpg Taxonomie de Bloom : http://www.biotechno.fr/IMG/scenari/codifadmob/co/01_Fiche_projet_Analyser_1.htmlMarcel Lebrun : http://numericable-sfr.com/les-mondes-numeriques/sfr-player/09252013-1503-players-marcel-lebrun-professeur-en-sciences-de-leducation Marin, writing : https://www.flickr.com/photos/marind/1059067259 David Trotman-Wilkins, Found Liberia, Together Liberia : https://flic.kr/p/aADbm6 Tools, OZinOH https://flic.kr/p/bRHngB