Cours

Questions d’évaluation

Éric Bruillard / EDA / Paris Descartes

Quoi évaluer ?

• Apprenant, compétences / performances, réalisation, formation, texte, etc.

• Évaluation dans le M1• Double regard : apprentissage / document conçu pour l’enseignement

• Triple regard : évaluation cette activité (M1),

• et évaluation du cours…

• BUT : aide à l’apprentissage ou bien servira-t-elle à porter un jugement définitif afin d’attester des apprentissages réalisés

Processus de l’évaluation

de Cardinet (1975)

4 étapes, l’intention (I), la mesure (M), le jugement (J)la décision (D)

http://evaluationfad.cegepadistance.ca/wp-content/uploads/outil-questionnement.pdf

Apprendre et évaluer des gestes

• Gestes en pâtisserie• http://www.hotellerie-restauration.ac-versailles.fr/spip.php?article2494

• Pliage en maternelle• http://ecolereferences.blogspot.com/2011/11/le-pliage-en-maternelle-par-

pauline.html

• Pliage de serviettes• http://tangerinezest.com/pliage-de-serviette-en-flocon-de-neige-pour-noel-en-

video/• http://tangerinezest.com/pliage-de-serviette-en-lapin-pour-paques/

• 5 minutes pour sauver une vie• https://www.futura-sciences.com/sante/dossiers/medecine-secourisme-gestes-

sauvent-396/

Quelques définitions

• Évaluation• Démarche permettant de porter un jugement à partir de normes ou de critères

établis, sur la valeur d’une situation, d’un processus, d’un élément donné, en vue de décisions pédagogiques ou administratives (MEQ, 2004, dans Legendre, 2005)

• Rétroaction • Communication d’information qu’une personne reçoit à la suite de ses actions,

ses attitudes, ses comportements (Legendre, 2005)

• Évaluation formative • Processus d’évaluation continue ayant pour objet d’assurer la progression de chaque

individu avec une démarche d’apprentissage dans l’intention de modifier la situation d’apprentissage ou le rythme de cette progression pour apporter, s’il y a lieu, des correctifs appropriés (Scallon, 1999, dans Legendre, 2005)

Formes d’évaluation

• Tests • Questionnaire à choix multiples

• « Test automatisé », logiciel proposant un questionnement et fournissant une rétroaction suite à l’analyse automatique de la réponse

• Participation à un forum

• Réalisation d’un pliage, d’une recette, d’une image, d’un film, d’un texte, d’une musique, d’une carte conceptuelle, d’un portfolio…

• Faire une activité finalisée dans un jeu, une simulation…

• Performance à réaliser (saut, tir, etc.), enregistrement audio et vidéo

• …

Trois modèles d’évaluation (Vial)

• L’évaluation des produits, des états : une évaluation-bilan pour mesurer les effets, les impacts• Mesurer : situer sur une échelle de mesure (toujours arbitraire) pour hiérarchiser,

trier et instaurer un rapport de causalité.

• L’évaluation des procédures, des moyens : l’évaluation pour gérer et rationaliser les pratiques• Maîtriser les situations : évaluation par les objectifs, pour la prise de décision, pour la

gestion des compétences, pour l’amélioration continue des pratiques, pour le management

• L’évaluation des processus, des dynamiques : une évaluation pour rendre intelligibles les situations• développer les mobiles de la dynamique : questionnement des projets, appropriation

des attitudes professionnelles pour l’émancipation des sujets au travail

Modèles de l’évaluation (selon Vial)

• L’évaluation - mesure• La notation (docimologie)

• La mesure correspond au résultat, l’évaluation : interprétation de ce résultat pour lui attribuer une signification sociale

Du contrôle de connaissances aux pratiques, non limité aux produits, incluant les processus cognitifs

• L'évaluation-gestion • modèles contemporains : rationalisation par les objectifs –

évaluation comme aide à la prise de décision

• L'évaluation-problématisation du sens• modèles en élaboration : systémique - dialectique - herméneutique.

Évaluation par objectifs

• D’une centration contenus à une centration apprenant • Des objectifs et une finalité des apprentissages

• Grandes taxonomies (Bloom…)

• Fonctions d’évaluation• Normative ((par rapport à ses pairs ou à une norme extérieure) ;

• Formative (par rapport à l’apprenant lui-même et les objectifs qui lui ont été proposés)

• Sommative comme évaluation finale.

Évaluation située

• Nature « située » et socio-historique des pratiques d’évaluation• « pratique ou activité sociale située et non plus essentiellement comme un

geste technique et statistique ».

• Évaluation des personnes et de l’action collective

• Nouveau rôle : accompagner les apprentissages pour les dynamiser.• Réflexion des personnes sur ses pratiques, la métacognition (réflexivité),

• le savoir qu’un personne développe sur les processus mêmes de son savoir (acquisition, perpétuation, modification).

• Croiser tout résultat quantitatif avec d’autres sources d’informations plus contextualisées.

Enjeux des évaluations – Grands types

• Rendre compte, expliquer, comprendre : une pratique, un apprentissage

• Évaluation diagnostique• Avant la formation. Fonctions préventive, prédictive ou pronostique

(compatibilité avec un programme d’étude)

• Évaluation formative • Pendant la formation. Fonction régulatrice de l’apprentissage (Rétroactions

pour adapter l’action pédagogique, réajuster-remédier, juger de la conformité à un programme)

• Évaluation sommative• En fin de séquence, en fin d’année ou en fin de cycle. Fonction certificative

https://www4.ac-nancy-metz.fr/svt/evaluation/divers/index.php?idp=177

Variations autour du QCM

• Différentes fonctionnalités• rétroactions (immédiateté ; personnalisation avec les tests adaptatifs) ;

• présentations multimédias (illustrations, animations, audio, vidéo) ;

• barèmes et systèmes de notation (avec possibilité d’indiquer le degré de certitude de la réponse à la question) ;

• différenciation des temporalités (varier les durées de passation)…

• Dans différents dispositifs d’évaluation• tests diagnostiques / enquêtes, sondages

• exerciseurs formatifs / auto-évaluations

• examens sommatifs…

Qu’est-ce qu’une grille d’évaluation ?

• Pour des tâches complexes

• Porter un jugement sur la qualité d’une production ou d’un produit, l’accomplissement d’une prestation ou d’un processus qui ne peuvent être jugés tout simplement bons ou mauvais comme dans le cas d’une question à correction objective.

• La grille d’évaluation document subdivisé en critères et en éléments observables, chacun étant accompagné d’une échelle. L’échelle consiste en une succession d’éléments gradués qui correspondent à divers degrés de possession de la qualité visée par le critère.

Exemple d’un résumé (Campanale, 1999)

Grandes catégories des critères de réussite

Indicateurs

Évaluer une démarche

Tâche soumise à l’étudiant

• Activité observable et mesurable qui, à l’intérieur d’une séquence temporelle, constitue une démarche logique et nécessaire pour la réalisation d’un travail ou l’atteinte d’un but (Legendre, 2005).

• Présentation de la tâche : • Une mise en situation qui présente ou situe le contexte ;

• Un énoncé qui présente le ou les problèmes à résoudre ;

• Les consignes (durée, matériel autorisé, etc.) ;

• Les critères d’évaluation et autres indications au sujet de la façon dont sera porté le jugement global,

Élaboration d’une grille d’évaluation

• Étape 1 : Choisir les critères d’évaluation et préciser les éléments observables

• Étape 2 : Choisir l’échelle d’appréciation• Nombre d’échelons et types d’échelles d’appréciation : uniformes

quantitatives, uniformes qualitatives, descriptives

• Étape 3 : Définir la façon de porter le jugement global• Pondérer les critères

• Étape 4 : Assembler la grille d’évaluation

• Étape 5: Expérimenter la grille d’évaluation• Facteurs ou erreurs qui peuvent influencer le jugement

http://pedagogie.uquebec.ca/portail/sites/ptc.uquebec.ca.pedagogie/files/R%C3%A9pertoire%20de%20ressources/grilles_eval_cahier_participant.pdf

Un exemple de grille critériée

Évaluation d’une recherche bibliographique en histoire

Critères Insuffisant (niveau 1) Bon (niveau 2) Excellent (niveau 3) % des

points

Nombre de

sources citées 1-4 5-10 + de 10 20%

Précision des

faits

historiques

Beaucoup

d’imprécisions Peu d’imprécision

Pas d’imprécision

apparente 40%

Organisation

de la recherche

Difficulté pour

déterminer de quelle

source proviennent

les faits exposés

Peu de difficulté

pour déterminer de

quelle source

proviennent les faits

exposés

Pas de difficulté pour

déterminer la

correspondance entre

les sources et les faits

exposés

20%

Bibliographie Ne respecte pas les

normes

Quelques erreurs

dans le respect des

normes

Pas ou peu d’erreurs

dans le respect des

normes

20%

https://pedagogieuniversitaire.wordpress.com/2010/03/22/les-grilles-devaluation-criteriees/

Evaluation par compétences (exemple)

• Outil de suivi et de validation des compétences sous la forme d'une feuille de calcul au format Libre/OpenOffice.• Voir https://www.ac-paris.fr/portail/jcms/p2_1532556/evaluer-par-

competences

• Évaluation globale de l'élève sur les 8 composantes du socle commun

• Feuille de calcul pour les 4 niveaux du collège• Télécharger la feuille de calcul au format Libre/Open Office

• https://www.ac-paris.fr/portail/jcms/p1_1532788/outil-competences

• Consulter le tutoriel de prise en main de la feuille de calcul

• https://www.ac-paris.fr/portail/jcms/p1_1532789/outil-competence-tutoriel-de-prise-en-main-de-la-feuille-de-calcul

Grille de lecturede l’auto évaluation

F. Campanale

Nouvelles questions

• Évaluation à grande échelle ?

• Évaluation de la compréhension et des apprentissages des participants ?

• Qui corrige ? L’ordinateur ? Les pairs ? Quels modèles de l’évaluation ?

• Nouvelles dimensions : la participation à l’évaluation dont on est l’objet ou la collaboration dans l’évaluation des pairs ?

• Comment assurer la rencontre de l’individuel et du collectif ?

• Comment penser et faire émerger engagement mutuel, échanges, confrontations de points de vue et d’expertises entre pairs ?