Séminaire de recherche TECHNOLOGIES DE L'INFORMATION ET DE LA COMMUNICATION

ET ÉDUCATION : instruments, dispositifs et usages.

Feedback, exerciseurs etstratégies d'apprenants

Fabien Fenouillet, Laboratoire Théodile, Université Lille IIIMoïse Déro, Laboratoire Théodile, IUFM Nord Pas-de-Calais

INRP, Paris, 22/05/2002

Le feedback enquelques définitions

Skinner (1958) définit le feedback comme n’importe quelle information

qui suit une réponse et qui permet à l’apprenant d’évaluer l’adéquation

de la réponse elle-même.

Plus généralement, un feedback est défini comme une information quifournit à l’apprenant après sa réponse pour l’aider à localiser ses erreurset corriger ses fautes (Schimmel, 1988).

Dans le cadre de l’enseignement assisté par ordinateur, le feedback peutégalement être défini comme l’ensemble des écrans ou des messages quel’ordinateur présente à l’apprenant suite à une action de sa part.

Feedback et EAO :Différentes déclinaisons

Connaissance de bonne réponse, CBRKnowledge of Correct Response, KCRL’apprenant voit s’afficher uniquement la bonne réponse.

Connaissance de la réponse correcte, CRCKnowledge of Response, KORL’apprenant a connaissance uniquement de la justesse de saréponse.

Répondre jusqu'à la réponse correcte, RRCAnswer Until Correct, AUCCette procédure permet à l’apprenant de répondre autant defois que le nombre d’essais est autorisé.

Présentation des études

Fenouillet, F., Lahanier�Reuter, D., Caron, P. A., Kostrezwa, B., Ostenne,E., (2001)

Études des stratégies d'élèves lors d’une tâche de résolution deproblèmes dans un environnement informatiqueCommunication 4ème colloque international AECSE.

Fenouillet, F., Déro, M., Debarge, C., (soumis)Étude du feedback, du but et de la relecture d’un didacticiel au CM2Sciences et Techniques Éducatives.

Fenouillet, F., Déro, M., (2001)Apprentissages en ligne en formation diplômante à distance : un bilandu dispositif d'étude EIAO / LogiprofCommunication 4ème colloque international AECSE.

Études des stratégies d'élèves….Présentation

- 154 élèves de 7 classes de 5ème- Un exerciseur (problème) issu de la suite Lilimath-Série de 10 petits problèmes de proportionnalité. L’élève dispose d'unefeuille de calcul qui effectue les opérations indiquées.- L’élève a pour objectif d’atteindre le score de 75 points- Chaque exercice résolu apporte 10 points, chaque mauvaise« vérification » enlève 2 points- 1er feedback de type RRC, uniquement de vérification, immédiat, à lademande de l’élève, qui donne des informations de validité et surl’activité- 2ème « feedback » en terme de score, de type « note », différé ouimmédiat, à la demande de l’élève, sur un groupe de questions quidonne des informations sur l’activité, objective et normative.- l’activité se déroule en classe- Les enseignants des différentes classes n’ont pas donné les mêmesconsignes et n’ont pas laissé le même temps aux élèves

Exemple 1Feedback

Exemple 2Score en cours d’exercice

Exemple 3Écran de sortie

Impacts des différentes consignesSur le temps

0

5

10

15

20

25

30

35

40

45

Faible Moyen 1 Moyen 2 Moyen 3 Bon 1 Bon - sansfeedback

Bon 2

Tem

ps e

n m

inut

es

Temps moyen par exercice

0

0,5

1

1,5

2

2,5

Faible Moyen 1 Moyen 2 Moyen 3 Bon 1 Bon - sansfeedback

Bon 2

Tps

moy

en e

n m

inut

es p

ar e

xerc

ices

0

5

10

15

20

25

30

Faible Moyen 1 Moyen 2 Moyen 3 Bon 1 Bon - sansfeedback

Bon 2

Nom

bre

moy

en d

'exe

rcic

es p

ar c

lass

e

Impacts des différentes consignesNombre d’exercices

0

10

20

30

40

50

60

70

80

90

Faible Moyen 1 Moyen 2 Moyen 3 Bon 1 Bon - sansfeedback

Bon 2

% m

oyen

d'e

xerc

ices

réso

lus

Pourcentages d’exercices résolus

( 6 / 18 )

( 5 / 10 )( 4 / 8 )

( 19 / 24 )

( 11 / 21 )( 6 / 11 )

( 9 / 14 )

0,00%

10,00%

20,00%

30,00%

40,00%

50,00%

60,00%

70,00%

80,00%

Faible Moyen 1 Moyen 2 Moyen 3 Bon 1 Bon -sans

feedback

Bon 2

% m

oyen

Pourcentage de séries de 10 supérieures à 75 points enfonction du nombre total de série de 10 effectuées

0

0,5

1

1,5

2

2,5

3

3,5

4

4,5

Faible Moyen 1 Moyen 2 Moyen 3 Bon 1 Bon - sansfeedback

Bon 2

nb m

oyen

de

feed

back

Nombre moyen de réponses fausses par élève surl’ensemble des exercices résolus.

0

2

4

6

8

10

12

14

16

18

20

Faible Moyen 1 Moyen 2 Moyen 3 Bon 1 Bon - sansfeedback

Bon 2

nb m

oyen

de

feed

back

Nombre moyen de réponses fausses totales par élève

2ème étude : Étude du feedback, du but …

Phases de l’étudeHabituation Expérimentation Post test1 didacticiel •didacticiel but

•didacticiel sans but10 questions sur chaquedidacticiel

Exerciseur de 16 questions

78 élèves de CM2 de trois classes différentes78 élèves de CM2 de trois classes différentes

Variables étudiées

• Feedback : avec (RRC) et sans• Relecture : avec et sans• But : avec et sans

But et feedback : 10% du groupe sans but et sansfeedback contre sans but

But et sans feedback : « faîtes de votre mieux »contre sans but

• Niveau : faible, moyen et fort

Plan hypertexte Contenu

Menu PrécédentLiens hypertextes

Accès au plan hypertexte

Accès à l’exerciseur

Revenir aupremier nœud

feedback

relecture

Indicateurs de relectures etde vérifications effectuées

Question suivanteQuestion précédente

0

2

4

6

8

10

12

Sans A vec

FEEDBA CK

RELECTURE

Nombre moyen de questions (Nombre moyen de questions (maxmax=16) auxquelles ont=16) auxquelles ontrépondu les élèves dans les conditions feedback etrépondu les élèves dans les conditions feedback et

relecture lors de l’utilisation de l’exerciseurrelecture lors de l’utilisation de l’exerciseur

Exerciseur

Post-test

4.8

5

5.2

5.4

5.6

5.8

6

6.2

Pas de relecture Relecture

Score moyen au post-test dans les conditions avec et sansScore moyen au post-test dans les conditions avec et sansrelecture (relecture (maxmax=10)=10)

Post-test

0

1

2

3

4

5

6

7

Niveau élevé Niveau moyen Niveau Faible

Score moyen au post-test en fonction du niveau desScore moyen au post-test en fonction du niveau desélèves (MAX=10).élèves (MAX=10).

Temps de lecture

0

5

10

15

20

25

Niveau élevé Niveau moyen Niveau Faible

Temps (en minutes) de lecture moyen total des textes enTemps (en minutes) de lecture moyen total des textes enfonction du niveau des élèvesfonction du niveau des élèves

Temps de lecture

FEEDBACK

feedbackPas de feedback

Tem

ps to

tal m

oyen

de

lect

ure

24

22

20

18

16

14

12

NIVEAU

Niveau élevé

Niveau moyen

Niveau Faible

Temps (en minutes) de lecture moyen total des textes enTemps (en minutes) de lecture moyen total des textes enfonction du niveau des élèves et de la présence ou non dufonction du niveau des élèves et de la présence ou non du

feedbackfeedback

Temps de lecture

RETOUR

RelecturePas de relecture

Tem

ps to

tal m

oyen

24

22

20

18

16

14

12

10

NIVEAU

Niveau élevé

Niveau moyen

Niveau Faible

Temps (en minutes) de lecture moyen total des textes enTemps (en minutes) de lecture moyen total des textes enfonction du niveau des élèves et de la possibilité de relirefonction du niveau des élèves et de la possibilité de relire

ou non le texte.ou non le texte.

Environnement d’apprentissage

• Dispositif de formation à distance pour 33 étudiants de licence desciences de l ’éducation• Cours de statistiques• Consultation WEB des cours• 6 étudiants ont répondu au questionnaire

Environnement d’apprentissage

• Environnement plein écran• Accès rapide aux fonctions

navigation« guidance » des pagesmodule d’évaluationimpressionpersonnalisation de l’interfaceaide en ligne

• Enregistrements d’indicateurs intéressant la cognition

Liaisons plate-forme /environnement d’apprentissage

Consultation

Données de sessions

Base de données

Consultation

Étudiants Dispositif distant

Analyses

Environnement Logiprof

Fenêtre centrale

Interface de navigation

Fenêtres périphériques

Liens fenêtrés

Liens externes

Boutons

Exerciseurs (22 questions disponibles)

Nombres de questions traitées

1 2 3 Total

[1 ; 5] très faibles connectants 1 - 1 2

[11 ; 20] grands connectants 1 1 - 2

Nombre de connexions

en catégories

plus de 20 très grands connectants - 2 - 2

Total 2 3 1 6

Questionnaire

Moyenne Ecart-type

L’accès aux exercices de statistiques en ligne vous semble : (1) simple ... complexe (9)

3.50 2.51

L’intérêt des exercices de statistiques en ligne vous semble : (1)faible ... important (9)

6.50 2.88

Le fait que les exercices en ligne soit à résoudre en étant connecté vous semble : (1) inadéquate... adéquate (9)

3.80 2.59

Les exercices en ligne sont en mesure de vous faire comprendre des éléments du cours que vous n’auriez pas compris autrement : (1) jamais ... toujours (9)

5.60 1.82

FIN

Exemple 1FeedbackTemps moyen par exerciceVariables étudiéesEnvironnement d’apprentissageExerciseurs (22 questions disponibles)QuestionnaireFIN