Web-‐based feedback after summative assessment: how do

Résumé Keylime
Responsable : Jonathan Sherbino
Date de diffusion :
Web-­‐based feedback after summative assessment: how do students engage? Référence :
Harrison CJ1, Könings KD2, Molyneux A1, Schuwirth LW3, Wass V1, van der Vleuten CP2. Web-based
feedback after summative assessment: how do students engage? Medical Education, Jul 2013, 47(7):
734-44
Établissements Auteurs :
1
School of Medicine, Keele University, Keele, R.-U.
2
Department of Educational Development and Research, Faculty of Health, Medicine and Life Sciences,
Maastricht University, Maastricht, Pays-Bas
3
School of Medicine, Flinders University, Adelaïde, Australie-Méridionale, Australie
Marqueurs
Domaine clinique
Général
Domaine éducatif
Évaluation
Formation prédoctorale
(école de médecine)
Contexte
La déclaration de consensus sur l'évaluation de la Conférence d’Ottawa de 2010
(PMID: 21345060) soutenait que l’évaluation sert plusieurs objectifs; elle assume
notamment un rôle catalyseur (« L’évaluation offre des résultats et une rétroaction
tout en créant, en améliorant et en soutenant l'éducation; elle joue un rôle de
moteur de la progression de l’apprentissage. »)
Le défi de l’évaluation sommative est d’offrir aux apprenants une rétroaction utile
qui :
• ne compromet pas la sécurité ou le déroulement d’un examen sommatif
récurrent;
• est assez précise pour aider l’apprenant dans son apprentissage futur;
• est fournie en temps opportun au moment où les apprenants s’apprêtent à
entamer un nouveau programme d’études.
Ainsi, la rétroaction des évaluations sommatives est rarement étudiée ou mentionnée
dans la littérature.
Objectifs
L’article tente de déterminer les conséquences de :
• l’orientation vers un but (apprentissage vs rendement);
• la motivation (intrinsèque : désir interne de réussir vs extrinsèque :
marqueurs extérieurs de la réussite)
• le contrôle de l’apprentissage (personnel vs externe);
• l'auto-efficacité (confiance personnelle élevée vs basse en la capacité à
réussir) relative à l'utilisation de la rétroaction après l'évaluation sommative.
Type de document
Recherche
Principales caractéristiques de la méthodologie
•
•
•
•
•
Troisième année (sur 5; transition vers les stages) des étudiants en médecine
o n=138
Les participants ont rempli un questionnaire de 51 questions évaluant les
caractéristiques et attitudes d’apprentissage
o Échelle de Likert
o Terminé deux semaines avant l’ECOS
12 stations d’ECOS
Un site Web a été conçu pour fournir de la rétroaction sur le rendement :
o Station par station avec des notes de passage ou d’échec
o Les résultats globaux en comparaison avec la cohorte
o Analyse détaillée de la performance dans la compétence au sein d’une
station
o Pages de « prochaines étapes » offrant des plans d’apprentissage pour
répondre aux faiblesses
o Données disponibles jusqu’à deux mois après l’ECOS
Analyse par :
o Statistiques descriptives
o Analyse de structure latente (p. ex., analyse typologique)
Principaux résultats
•
•
•
•
•
•
82 % (n=113) de questionnaires remplis
o Fiabilité interne des échelles satisfaisante
La moyenne des résultats suggère que les participants :
o veulent maîtriser le programme d’études;
o évitent la perception d’avoir de la difficulté avec le programme
d'études
o n'accordent pas d’importance à la perception des pairs d'une maîtrise
excellente du programme d'études
o ne veulent pas dissimuler leurs réalisations de leurs pairs;
o sont intrinsèquement motivés à apprendre;
o sont en mesure de contrôler leur apprentissage;
o présentent une auto-efficacité élevée;
o accordent de l’importance à la rétroaction, en particulier la rétroaction
régulière;
o sont disposés à exposer leurs lacunes lorsqu’ils cherchent à obtenir de
la rétroaction
96 % (n=132) ont visité le site Web
o 87 % (n=115) le premier jour où il a été accessible
Moyenne du nombre de visites = 1,9 (écart de valeurs de 1 à 5)
Moyenne du nombre de pages vues = 123 (écart de valeurs de 2 à 377)
o 130 pages uniques disponibles
o Les utilisateurs exhaustifs accordaient davantage d’importance à la
rétroaction
o Les utilisateurs les moins impliqués présentaient une motivation plus
extrinsèque
Étudiants excellents (pas d'échec aux ECOS)
o Consultaient le site Web plus souvent
o Consultaient plus de pages
o Utilisaient les pages « prochaine étape » moins fréquemment
Principales conclusions
Les auteurs concluent que « Les meilleurs étudiants semblaient utiliser la rétroaction
davantage pour une confirmation positive qu'à des fins diagnostiques. Ceux qui en
avaient probablement le plus besoin étaient les moins impliqués. Nous devons
préparer une rétroaction après une évaluation sommative qui permette d'impliquer
davantage les étudiants qui ont le plus besoin d'aide ».
Commentaires supplémentaires à l'intention des
éducateurs cliniciens
Il s’agit d’un excellent exemple d'une « multiplicité d’effets positifs ». L’auteur
principal est originaire du Royaume-Uni. Deux auteurs seniors sont associés à la
Maastrich School of Health Professions Education. Je suppose qu'il s'agit de travaux
d'études supérieures qui ont été approfondis et qui ont mené à ce précieux article de
recherche en éducation.
Remerciements
Je remercie le Dr Kevin Eva d’avoir recommandé cet article.