questions à correction objective

Transcription

questions à correction objective
LA RÉDACTION DE
QUESTIONS À CORRECTION OBJECTIVE
• à choix de réponse • à réponse brève
© Gérard Scallon, professeur
Département d'orientation, d'administration et d'évaluation en éducation,
FSÉ, Université Laval
Introduction
La question à choix de réponse est le type de question le plus utilisé pour rédiger des examens à correction objective. Essentiellement, ce modèle se présente
comme suit:
énoncé principal
(stem)
Qui a composé la symphonie pastorale ?
a) Mozart
b) Berlioz
c) Beethoven
d) Haydn
leurre1
leurre
bonne réponse
leurre
choix de réponse
disposés en colonne
Dans le domaine des questions à correction objective on trouve habituellement deux
autres modèles : la question de type «vrai-faux» et la question à réponse
brève. En voici des exemples avec le même contenu que celui du modèle illustré
ci-dessus:
Question
«vrai-faux»
Beethoven a composé la symphonie pastorale.
V
F
V
F
ou encore
Haydn a composé la symphonie pastorale.
c'est un mode de choix de réponse mais, dans un examen «vrai-faux»
les choix proposés (V et F) ne varient pas d'une question à l'autre
question
à réponse
brève
Qui a composé la symphonie pastorale: _ _ _ _ _ _ _ _ _ _ _ _ _ _ _ _
ici, on demande d'évoquer le
nom du compositeur et non de
le reconnaître parmi...
1.-
Les mauvaises réponses sont appelées «leurres» ( distractors , dans les ouvrages anglo-saxons).
page 2
Dans les pages qui suivent, nous traiterons (dans l'ordre) de
la question «vrai-faux»,
de la question à réponse brève
et de la question à choix de réponse.
1.- La question de type «vrai-faux»
Essentiellement, ce genre de question est caractérisé par une déclaration (affirmation
ou négation) susceptible d'être vraie ou erronée d'après un corpus de connaissances
établies dans un domaine d'étude.
Niveau d'objectifs visés.- En visant la rectitude (ou la non rectitude)
d'énoncés divers tels un fait, une définition, la formulation d'un principe, etc., la
question «vrai-faux» pourrait couvrir en apparence un large spectre d'objectifs d'apprentissage. Elle est, cependant, généralement associée au domaine des connaissances (reconnaissance comme vrai ou faux d'un élément déjà appris comme tel)
et à celui de la compréhension (lorsque l'énoncé principal se présente sous la
forme d'une expression équivalente à celle déjà apprise). Le caractère laconique de
la réponse demandée (p. ex. encerclement de la lettre V ou de la lettre F) exclut
d'emblée les niveaux d'application, d'analyse ou de synthèse --- au sens où Bloom
et collaborateurs les entendaient dans leur Taxonomie du domaine cognitif.
Dans certains examens, les questions «vrai-faux» se succèdent d'une manière assez
décousue et correspondent à divers éléments d'information à mémoriser de manière
tout aussi décousue. Il devient alors difficile d'associer les questions de ce genre
d'examen à des objectifs opérationnels à moins de faire correspondre un énoncé
d'objectif à chacun des énoncés «vrai-faux», une entreprise assez fastidieuse et de
mauvais goût, cela va de soi !
En revanche, on peut concevoir un ensemble d'énoncés constituant une tâche
d'identification. On présente des objets ou des événements qui peuvent être
classés en deux catégories. Au regard de chaque énoncé, le choix de réponse est
binaire. Les variantes sont nombreuses et un exemple aidera à illustrer l'essentiel de
ce genre de situation. Supposons que l'on demande à des individus d'encercler le
«oui» ou le «non» pour chaque plante donnée au regard de la question posée:
«Cette plante est-elle un fruit (oui ou non) ?» 2
1. tomate (oui non)
2. poire (oui non)
3. céleri (oui non)
4. radis (oui non)
5. banane (oui non)
Cet ensemble d'éléments «vrai-faux» (La tomate est un fruit, la poire est un fruit, le céleri est
un fruit, etc.) se rapporte à un même objectif opérationnel qui pourrait s'énoncer
comme suit:
Parmi plusieurs plantes indiquer (identifier) celles qui sont des fruits
et celles qui sont des légumes.
ou encore
Plusieurs plantes étant données, distinguer celles qui sont des fruits
de celles qui sont des légumes.
2.-
En principe on doit soigner davantage la présentation visuelle et il faudrait énumérer les énoncés verticalement plutôt que de les énumérer horizontalement comme on l'a fait ici.
page 3
L'ensemble d'éléments serait de beaucoup amélioré si on demandait tout simplement
aux individus d'encercler F (pour fruit) ou L (pour légume) au regard de chaque
plante présentée. On est toujours dans la structure de question à choix binaire mais
dans l'ordre des extensions de la question «vrai-faux».
1. tomate ( F L )
2. poire ( F L )
3. céleri ( F L )
4. radis ( F L )
5. banane ( F L )
REMARQUE IMPORTANTE:
Habituellement, le questionnaire de type « VRAI-FAUX » forme un
ensemble hétéroclite d’éléments ne se rattachant à aucune habileté
bien identifiée. Les énoncés peuvent porter sur un même thème (p.
ex., le système digestif ou l’impressionnisme), mais c’est tout. En
revanche, la tâche d’identification qui vient d’être décrite présente un
tout cohérent visant une même habileté.
Le domaine privilégié
d’application est celui des concepts concrets. La méthodologie qui
s’y rapporte est présentée dans la troixième partie du chapitre 5 du
manuel intitulé:
Évaluer pour faire apprendre: une approche centrée sur le feed-back
(G. Scallon, 1999).
Principes de rédaction des questions «vrai-faux»
Il n'est pas inutile d'affirmer que ce genre de question est le plus difficile à rédiger. L'enjeu est de s'assurer que l'individu «incompétent» ne puisse encercler la
bonne réponse par intuition pure ou par sens commun. Il faut également s'assurer
que l'individu «compétent» ne sera pas désemparé par toutes sortes de nuances et de
subtilités le conduisant à choisir la mauvaise réponse. Voici quelques principes que
l'on trouve dans la plupart des manuels de docimologie et qu'il est bon de se rappeler.
1
2
Éviter d'utiliser des indices qui rendent l'énoncé acceptable au
«commun des mortels» (ex.: habituellement, généralement, souvent)
ex. d'énoncé fautif : Les feuilles des plantes sont généralement vertes. V F
Éviter d'utiliser des indices qui rendent l'énoncé inacceptable au
«commun des mortels» (ex.: jamais, toujours, aucun, tous)
ex. d'énoncé fautif : Les feuilles de toutes les plantes sont vertes. V F
Ces deux principes ne se reconnaissent pas facilement pour identifier un énoncé fautif. Dans
certaines matières c'est la position absolue qui est vraie et on ne peut l’éviter (p. ex. Tous les
êtres vivants sont mortels ! ).
3
4
Éviter le plus possible les énoncés négatifs et éviter tout simplement les énoncés à double négation.
ex. : Les hommes ne sont pas mortels. V F
Aucune étape de la procédure à suivre n'est importante. V F
Chaque énoncé doit être fondé sur une seule idée.
ex. d'én. fautif : un ver de terre ne peut voir parce qu'il possède des yeux simples. V F
(qu'est-ce qui est affirmé : que le ver ne peut voir ? ou que le ver possède des yeux simples ?)
Ce principe ne s'applique pas à des relations de cause à effet.
page 4
5
6
Dans le cas d'une opinion, «relativiser» l'énoncé par rapport à une
source (volume, organisme ou auteur).
ex. : D'après J.-C Lévys, la retraite anticipée entraîne des coûts additionnels. V F
(et non pas: La retraite anticipée entraîne des coûts additionnels. V F)
Pour l'assemblage des questions «vrai-faux» dans un examen:
Le nombre d'énoncés «vrais» devrait être approximativement égal
au nombre d'énoncés «faux». C'est un sujet délicat à traiter et l'enjeu est
d'éviter que des élèves «astucieux» ajustent leurs réponses d'après une égalité
mathématique souvent attendue entre le nombre d'énoncés vrais et le nombre
d'énoncés faux. En variant l'équilibre «vrai-faux» autour d'une certaine approximation, il faut éviter à tout prix une pratique «perverse» qui consisterait à ne présenter que des énoncés «vrais» (ou des énoncés «faux»). L'individu compétent
mais qui doute raisonnablement de ses connaissances serait piégé par une telle
mesure.
Pour conclure
Dans les examens préparés par les personnes spécialisées en mesure et évaluation
(organismes privés comme aux États-Unis ou Ministère de l'éducation, par exemple), l'usage du «vrai-faux» est peu répandu. On peut avancer deux raisons pour
expliquer cette situation:
[1] Du point de vue des qualités recherchées d'un examen (fiabilité,
validité, équité, entre autres) l'énoncé «vrai-faux» est extrêmement
difficile à rédiger.
[2] Pour un ou une élève non compétent-e, la chance d'obtenir un bon
résultat, au pur hasard, est élevée. La probabilité de choisir la
bonne réponse («vrai» ou «faux») au pur hasard est de 1/2 ou
0,5). Des mesures draconiennes ont alors été envisagées dont celles d'enlever des points pour les mauvaises réponses. Il s'agit
d'une formule de correction pour le hasard, bien connue des psychométriciens et des docimologues et qui doit faire l'objet d'un
traitement à part.3
• Il existe d'autres stratégies comme celle de de faire attribuer, par l'élève, un pourcentage de certitude au regard de chaque réponse donnée (la lettre V ou la lettre F encerclée). On peut également demander aux élèves de reformuler tous les énoncés
FAUX pour que ceux-ci deviennent VRAIS. On comprendra alors qu'avec de grands
groupes ces procédés sont onéreux sur le plan de la seule correction de copies.
3.-
C'est un sujet qui a fait couler beaucoup d'encre. Dans le cas des questions à k choix de réponse, le
nombre k étant constant pour toutes les questions de l'examen, il s'agit de corriger le score brut X en
lui soustrayant une fraction du nombre m de mauvaises réponses. Ainsi, X c = X - M / ( k - 1 ) .
X c est le symbole pour désigner un score corrigé pour le hasard. Avec des questions «vrai-faux» la correction est draconienne; dans ce cas, k = 2 et le procédé devient X c = X - M .
page 5
2.- La question à réponse brève
Ce genre de question est caractérisé par une question directe exigeant une réponse
courte et précise (p. ex. un nom, une date). Une réponse précise peut être obtenue
également au moyen d'une phrase à compléter. Voici quelques exemples:
questions directes :
1. Quel est le nom scientifique du pissenlit ?
________________
2. Quel est le nom du compositeur de la Symphonie Pastorale ?
________________
phrases à compléter :
1. Le premier président des États-Unis s'appelait _______________.
2. Il y a ______________ jours dans une année.
Niveau d'objectifs visés.- Le domaine des connaissances est particulièrement visé par ce type de question. La question à réponse brève exige alors le
simple rappel ou l'évocation pure de faits particuliers, de noms, d'éléments
de terminologie. Nommer, énumérer sont les verbes d'action des objectifs opérationnels qui s'y rapportent. Le niveau «compréhension» peut être également
visé par la question à réponse brève lorsque la réponse donnée par l'élève n'en est
pas une apprise par cœur. Beaucoup de problèmes mathématiques, par exemple, se
terminent par une réponse brève qui n'a jamais été mémorisée comme telle. La capacité d'appliquer peut se mesurer par le même type de question. On comprendra
toutefois que la performance complexe sous-jacente est sous estimée sur le plan de
la mesure lorsqu'une longue démarche empruntée par un individu pour résoudre un
problème complexe se termine par une réponse brève, voire laconique, qui est codée
tout simplement bonne ou mauvaise !
Principes de rédaction des questions à réponse brève
01
Seuls le ou les mots très importants devraient être omis dans les
phrases à compléter.
fautive Une infusion végétale fournit une ____________ de •illustration• ? (un mot qui serait
très variable d'un auteur à l'autre)
la relation entre les plantes et les animaux.
améliorée Une ______________ végétale fournit une illustrale terme •infusion• est plus technique
et probablement plus consistant.
tion de la relation entre les plantes et les animaux.
02
Dans une phrase à compléter, on doit laisser assez de bons indices pour que «l'élève qui sait» puisse répondre adéquatement.
fautive Le ____________ est obtenu en divisant le
phrase mutilée abusivement
____________ par le _____________.
améliorée Le quotient est obtenu en divisant le ___________
On demande moins de réponses mais
c'est plus sûr !
par le diviseur.
page 6
03
fautive
améliorée
fautive
améliorée
On doit éviter les indices lexicaux ou grammaticaux pouvant suggérer la réponse ou augmenter les chances de la deviner.
(explosion = moteur à •explosion•)
Un moteur qui fonctionne au moyen de l'explosion
d'un gaz est appelé moteur à ____________.
Un moteur qui fonctionne avec la combustion instan- substitution du mot demandé par un
synonyme dans la phrase.
tanée d'un gaz est appelé moteur à ____________.
- - - l' exclut le sud et le nord, forcéEn se dirigeant du Canada vers l'Europe nous allons
ment!
vers l'____________.
En se dirigeant du Canada vers l'Europe, nous allons
vers quel point cardinal ? ____________
04
Il faut éviter des indices visuels (p. ex.
tion avec la réponse demandée)
fautive Dans la phrase suivante: « Jean habite la ville»,
Jean occupe la fonction _______ et ville occupe la
fonction ________________.
améliorée Même phrase à compléter mais en prenant soin de
présenter des espaces de même longueur.
longueur d'espace en relaavec •sujet• et •complément• comme
projet de réponse, il reste à les placer
dans leurs espaces respectifs.
05
Poser une question précise qui ne comporte aucune ambiguïté et
aucune contestation quant à la bonne réponse.
fautive Qui était George Washington ?
président des U.S.A., premier prés.,
_________________............ général, natif de Virginie ? Ce sont
améliorée Quel a été le plus haut grade militaire de George Wa-
shington ? ________________
toutes des bonnes réponses valides.
Pas de doute au sujet de ce qui est demandé (rép. •général•)
Conseils additionnels
La distinction entre le nombre de phrases à compléter et le nombre d'espaces-réponses à coder n'est pas toujours bien comprise. Une phrase peut contenir un,
deux ou peut-être trois espaces à compléter, ce qui fait un, deux ou trois réponses à
coder bonnes ou mauvaises. Et les phrases peuvent être numérotées 1, 2, 3, 4, etc.
ou ordonnées a, b, c, etc. Pour simplifier le corrigé et permettre de s'y retrouver on
peut imiter la présentation visuelle suivante:
a) Les questions qui proposent un choix binaire sont généralement de type (____________). Elles ap1
partiennent à la catégorie des questions à correction (____________).
2
b) Leur principale limite tient à la (____________) d'obtenir une bonne réponse au pur hasard.
3
c) Pour atténuer ce problème on a recours à une formule dite de (____________) pour le hasard. Il s'agit
4
d'enlever, du nombre de bonnes réponses, le nombre de (____________) réponses.
5
REMARQUE: a, b et c sont des symboles pour identifier les phrases; 1, 2, 3, 4 et 5 sont des numéros
de questions - - - ici cinq espaces à répondre - - - ; on a donc un exercice sur 5 points si on accorde un
point par bonne réponse.
page 7
3.- La question à choix de réponse
Niveau d'objectifs visés.- Bien que la question à choix de réponse soit
grandement utilisée pour mesurer des objectifs du domaine de la connaissance
(reproduction de réponses apprises par coeur mais en situation de reconnaissance et
non d'évocation pure), elle peut servir à mesurer des objectifs de niveau plus élevé:
--- maîtrise de concepts --- compréhension
--- application de lois, de principes
Pour atteindre de tels niveaux, la question à choix de réponse doit posséder deux caractéristiques:
(1)présenter une situation nouvelle pour l'élève, c'est-à-dire
n'ayant pas été posée comme telle en apprentissage et
(2)contenir, autant que p o s s i b l e , des choix de réponse que
l'élève doit examiner attentivement avant de répondre.
D a n s c e r t a i n s c a s , l e s c h o i x p r o p o s é s s o n t factices et la
question posée peut être considérée comme une question à
réponse brève. Voici quelques exemples pour illustrer ce
point.
EXEMPLE 1
Quelle est la capitale de la
France ?
(1) Londres
(2) Paris
(3) Genève
(4) Bruxelles
(5) Madrid
________________________
Rem: connaissant la bonne réponse et l'ayant repérée (Paris)
on n'a pas besoin de lire les autres choix de réponse.
EXEMPLE 2
Quel est le périmètre d'un carré dont l'aire est 36 cm carrés.
(a) 6 cm
(b) 24 cm
(c) 36 cm
(d) 144 cm
_______________________
EXEMPLE 3
Lequel des énoncés suivants
convient à un carré dont l'aire
mesure 36 cm carrés ?
(1) la diagonale = 18 cm
(2) le périmètre = 24 cm
(3) chaque côté = 9 cm
(4) la hauteur = 12 cm
Le calcul du périmètre se fait ________________________
sans les choix de réponse;
l'ayant trouvé (choix b), on
n'a guère besoin d'en lire
davantage.
Dans cette question, les premiers
choix doivent être «évalués» par
l'élève avant de s'arrêter à celui
qui est la bonne réponse.
AUTRES MODÈLES POUR FORCER LA LECTURE DE TOUS LES CHOIX PROPOSÉS
Questions à meilleure réponse
Questions à plusieurs
bonnes réponses.
Tous les choix de réponse sont des bonnes réponses, mais il y
en a une qui est la meilleure sans être parfaite; certains contenus se prêtent à ce genre de question.
Le nombre de bonne réponses peut varier d'une question à l'autre
dans un examen. Il est cependant important de prévenir les élèves avec des directives bien en évidence.
(suite AUTRES MODÈLES à la page suivante)
page 8
POUR FORCER LA LECTURE DE TOUS LES CHOIX PROPOSÉS:
Questions à choix complexes
(complex alternatives)
Exemple:
Parmi les propriétés suivantes:
A = deux côtés égaux, B = deux angles égaux C = figure symétrique
Laquelle ou
angle isocèle
1.2.3.4.5.6.7.-
lesquelles est/sont caractéristique(s) d'un triA seulement
B seulement
C seulement
A et B seulement
A et C seulement
B et C seulement
A, B et C
❑
❑
❑
❑
❑
❑
❑
rem: c'est une forme «déguisée» de la question à plusieurs
bonnes réponses; l'élève pourrait cocher A, B ou C ou toute
combinaison; ici, ce sont les combinaisons qui ont été explicitées et l'élève ne fait qu'un choix, ce qui facilite le codage de sa réponse.
C'est un modèle qui peut comporter des subtilités; peu d'auteurs le recommandent.
Le choix: «aucune de ces
répon ses»
Cette particularité ne définit pas un type particulier de question;
elle consiste à ajouter (systématiquement) ce genre de choix à
chaque question où il n'y a qu'une seule bonne réponse (p. ex.,
ça ne convient pas au type «meilleure réponse»). Là où
«aucune de ces réponses» est une mauvaise réponse, il faut s'assurer que le choix de la «bonne réponse» correspond à une bonne
réponse universellement reconnue car toute personne peut contester la clé de codage utilisée.
Avantages et inconvénients du modèle «choix de rép.»
Les inconvénients de la question à choix de réponse résident principalement du côté
des abus dans son utilisation. Là où les objectifs pédagogiques visent des
habiletés de l'ordre de l'expression, de la créativité ou encore de
l'organisation des idées, ce type de question ne convient particulièrement pas.
Les avantages de la question à choix de réponse sont mieux saisis lorsque ce type de
question est comparé à d'autres types de tâches que l'on peut introduire dans des
examens.
• Par rapport aux examens à réponse(s) élaborée(s) (productions complexes
comme la dissertation, le résumé, la fabrication d'un produit, etc.) les
examens composés de questions à correction objective (dont le choix de
réponse) constituent un échantillon plus représentatif, en quantité de
questions, des connaissances et/ou des habiletés visées.
page 9
• Par rapport aux questions à réponse brève, le codage des réponses est
beaucoup plus facile et rapide à réaliser (la «correction des copies»,
comme certains disent encore aujourd'hui); on peut même soumettre les
réponses obtenues à un codage automatisé.
• Par rapport aux questions de type «vrai-faux», également à choix de réponse, les questions à quatre ou cinq choix de réponse offrent moins de
chances de réussir pour les élèves qui répondraient au hasard.
Et d'un point de vue plus pragmatique ,
• dans un contexte où les résultats d'examens peuvent être sujets à une
demande de révision, les examens à correction objective, dont la modalité «choix de réponse» fait partie, offrent plus d'assurance (en apparence
du moins) que ne le font les examens à réponses élaborées entachés de
subjectivité.
• De plus, et ce n'est pas un point d'intérêt mineur, les examens à réponses élaborées souvent composés de quelques questions seulement (cela
va de soi) peuvent difficilement être répétées d'une session à une autre à
cause des dangers de contamination qu'ils présentent. Au contraire,
pour autant que les copies ne circulent pas 4 , le contenu d'un examen à
correction objective est plus difficile à mémoriser de la part d'un élève
qui voudrait systématiquement informer s e s collègues (problème des
cours divisés en sections). On peut ajouter que les examens à choix de
réponse sont relativement faciles à reproduire sous des formes équivalentes.
Principes de rédaction des questions à choix de réponse
L'énoncé principal doit exprimer une idée précise sous forme de
question directe ou de phrase à compléter e t ê t r e s u i v i d e c h o i x
relativement homogènes.
fautive L'Amérique est
...phrase incomplète
a) le plus ancien continent
b) le continent le plus peuplé
choix/idées disparates
c) située dans l'hémisphère sud
5
d) ainsi nommée en l'honneur de Vespucci *
améliorée L'Amérique doit son nom à
... idée précise (phrase à compléter)
a) Colomb
choix homogènes:
b) Magellan
ce sont tous des noms de
c) Ponce de Léon
découvreurs
d) Vespucci *
01
4.-
5.-
Cette mesure ne doit pas s'opposer au droit de tout étudiant de recevoir des justifications au regard des résultats obtenus; la consultation de sa copie peut toujours se faire tout en évitant que les copies d'exeamens soient en circulation.
Pour faciliter la compréhension de chaque exemple, la bonne réponse est marquée d'une astérisque.
page 10
02
Dans le cas d'opinions controversées entre experts, «relativiser»
la bonne réponse demandée dans l'énoncé principal.
fautive Lequel des événements suivants a eu l'impact le plus
grand sur l'histoire du Québec ?
Les auteurs seraient-ils tous d'accord
a) la défaite de 1760
avec la clé de correction pour cette
b) la révolte de 1837
question ?
c) l'Acte de l'Amérique Britannique du Nord
d) la création d'un Ministère de l'Immigration *
améliorée Il s'agit de débuter l'énoncé principal en citant une
source connue ou une autorité:
D'après l'historien «untel»....
La plupart des historiens s'entendent pour...
03
S'assurer qu'il y a un lien grammatical
chacun des choix suggérés.
fautive Pourquoi les organismes vivants ont-ils besoin
d'oxygène ?
a) purification du sang
b) la nourriture doit être assimilée
c) pour oxyder les déchets
d) libération d'énergie *
améliorée La fonction principale de l'oxygène dans les organismes vivants consiste à...
a) purifier le sang
b) assimiler la nourriture
c) oxyder les déchets
d) libérer de l'énergie *
entre l'énoncé principal et
on a une certaine homogénéité
des leurres ici mais il n'y a que le
choix c qui est en lien avec
l'énoncé principal
tous les choix sont «grammaticalement homogènes et en lien
avec l'énoncé principal
Éviter tout indice superficiel pouvant révéler la bonne réponse
a) mots clés dans l'énoncé principal (CARACTÈRE APPARENT)
04
b) choix « bonne réponse » plus élaboré
(ou moins élaboré que les autres choix) (APPARENT)
c) indices grammaticaux ou sémantiques dans l'énoncé principal
e) la bonne réponse est fournie par l'énoncé d'une autre question
dans l'examen (problème posé par l'utilisation de banques de questions).
[04-a] le cas des mots clés dans l'énoncé principal
fautive
Le type de test standardisé utilisé pour mesurer le
rendement scolaire s'appelle
a) test de rendement *
b) étude de cas
c) test d'aptitude spécifique
d) analyse de besoins
améliorée Le type d'instrument standardisé utilisé pour mesurer
l'apprentissage scolaire s'appelle
a) test de rendement *
b) étude de cas
c) test d'aptitude spécifique
d) analyse de besoins
la bonne rép. contient tous les mots
clés de l'énoncé principal
page 11
fautive
[04-b] l'un des choix est plus élaboré que les autres
Ici, le choix de la bonne réponse se
distingue par sa longueur des quatre
autres choix; une personne ignorant
la réponse pourrait indiquer ce choix
et réussir.
Les choix ne sont pas homogènes
non plus.
Un embargo est une
a) sorte de bateau
b) interdiction provisoire s'appliquant à la circulation
des navires dans un port ou à l'échange de marchandises entre pays différents *
c) folle aventure
d) sorte de tarif douanier
améliorée L'interdiction provisoire s'appliquant à la circulation
des navires dans un port ou l'interdiction d'échanger
des marchandises entre pays différents s'appelle:
a) tarif douanier
c) taxe d'assise
d) embargo *
e) monopole
La bonne réponse est devenue
l'énoncé principal.
Un spécialiste de matière pourrait
faire encore mieux !
REMARQUE: le choix le plus élaboré peut aussi être une mauvaise réponse; il est difficile de recommander un tel procédé qui
peut s'avérer une astuce pour induire en erreur.
[04-c] indices grammaticaux ou sémantiques révélant la bonne réponse
fautive Un mot qui sert à joindre deux mots de même nature
est une
a) verbe
b) adverbe
c) article
d) conjonction *
e) adjectif
fautive On aurait un indice sémantique si l'énoncé était:
Un mot qui sert à la jonction de deux mots...
Il s'agirait ici de corriger l'énoncé
principal en demandant:
Comment appelle-t-on un mot qui
sert à joindre deux mots de même nature ?
[04-d] liens entre questions différentes d'un même examen
(difficile à illustrer ici)
Les mauvaises réponses doivent être autant que possible vraisemblables pour être attrayantes à la personne qui ignore la bonne
réponse.
fautive Parmi les éléments suivants, lequel a le plus contriC'est une question à «meilleure rébué à augmenter la durée de la vie humaine ?
ponse» et d'opinion probablement
a) la vitesse sur les routes
controversée; mais les choix «a» et
b) la pollution de l'air
«b» devraient être remplacés par des
c) les procédés d'immunisation *
énoncés plus attrayants pour ce qui
d) l'emploi de vitamines
est du principe 05.
05
REMARQUE: En permettant à une personne de faible compétence d'éliminer des
leurres ridicules, on augmente ses chances de réussir la question au hasard.
page 12
Les choix de réponses doivent être «visuellement» distincts d e
l'énoncé principal: pour s'en assurer, disposer les choix verticalement.
fautive D'après l'auteur de votre livre de médecine nucléaire, laquelle des mesures
suivantes serait la plus appropriée pour stimuler l'application des découvertes atomiques à la médecine ?
un cas exagéré
a) développer des techniques standardisées pour traiter les patients; b) entraîner les médecins à l'usage d'appareil radioactifs; c) réduire la thérapie
radioactive à une simple routine; d) engager dans les hôpitaux des spécialistes qualifiés en radiothérapie *
améliorée D'après l'auteur de votre livre de médecine nucléaire, laquelle des mesures
suivantes serait la plus appropriée pour stimuler l'application des découvertes atomiques à la médecine ?
a) développer des techniques standardisées pour traiter les patients
b) entraîner les médecins à l'usage d'appareil radioactifs
c) réduire la thérapie radioactive à une simple routine
d) engager dans les hôpitaux des spécialistes qualifiés en radiothérapie *
ON PEUT FAIRE EXCEPTION POUR LES CHOIX DE
RÉPONSE RELATIVEMENT BREFS:
Les concertos brandebourgeois ont été composés par...
1) Beethoven 2) Bach * 3) Brahms 4) Chopin 5) Mozart
06
Assemblage des questions et directives aux élèves
Les éléments listés au regard de la mise en forme de l'examen tiennent beaucoup
plus du sens commun que d'un haut savoir inaccessible. Par exemple, il est recommandé de disposer les questions en les groupant par thème mais
dans un ordre croissant de difficulté et ce, dans toute la mesure du possible.
Ce principe tient au fait que des élèves anxieux seraient vite désemparés et démotivés si les premières questions posées étaient les plus difficiles. C'est déjà une
question de gros bon sens. On peut transgresser ce principe lorsqu'il faut grouper
les questions devant se prêter à une directive commune (p. ex., les questions offrant plus d'une bonne réponse).
L' identification des choix de réponse se fait habituellement à l'aide des premières lettres de l'alphabet (p. ex., a) -------- b) ------- c) --------, etc.). Cette mesure convient bien à la majorité des situations. La suite des nombres naturels peut
aussi servir aux mêmes fins (p. ex., 1) ------- 2) ------- 3) -------, etc.) sauf si les
choix de réponse comportent des chiffres ou des nombres.
Pour ce qui est des directives, il est important de préciser la manière avec laquelle les élèves doivent répondre: encercler la lettre correspondant à leur
choix de réponse ou encore cocher entre parenthèses [ ] ou cocher la case ❑
correspondant à la réponse à choisir. Il est tout aussi important d'avertir les
élèves au moyen d'un signal qui attire bien l'attention que le mode de
réponse vient de changer (p. ex. passage d'une section à plusieurs bonnes réponses à une section ne comportant que des questions à une seule bonne réponse).
page 13
Enfin, et ce n'est pas la moindre des choses, il est important d'informer les élèves que l'on appliquera ou non un procédé de correction pour les réponses faites au hasard6 (quelle que soit la décision, il faut préciser). C'est une question de simple honnêteté intellectuelle et le procédé utilisé ne peut être décidé après
coup, car son application «inattendue» peut modifier les règles du jeu.
Le procédé de correction pour le hasard n'est pas particulièrement indispensable. Certes, sa fonction (lorsque connue à l'avance) est de
dissuader les élèves d'adopter une attitude non réflexive au regard de
certaines questions. Le problème se pose d'une manière plus aiguë
lorsqu’un nombre très élevé de questions ne permet pas à la majorité de compléter l'examen (c’est-à-dire de répondre à toutes les questions) à l'intérieur du temps limite qui était prévu. On comprendra
que les questions non lues, quelques instants avant la collecte des
copies peuvent être rapidement cochées au hasard et c'est une stratégie efficace avec une probabilité de 1/k de choisir la bonne au hasard
à chacune des questions ainsi expédiées.
EXERCICES
Les pages suivantes offrent la possibilité d'exercer votre sens critique à l'égard de
questions à réponse brève (phrases à compléter) et de questions à choix de réponse.
Il s'agit de suivre les directives pour compléter chacun des deux exercices. Un corrigé pour la critique des phrases à compléter et pour celle des questions à choix de
réponse termine ce fascicule.
6.-
Voir une note précédente au sujet de cet aspect.
page 14
EXERCICE 1
CRITIQUE DE QUESTIONS
À RÉPONSES BRÈVES
Dans cet exercice, il y a 18 questions à réponse brève (la plupart du type «phrase à compléter»). Chacune d'elle souffre d'un ou de plusieurs défauts mais il y a un défaut
dominant que vous devez déceler au meilleur de votre connaissance. Votre tâche
consiste à écrire, dans la case de droite, la lettre correspondant à ce défaut que vous avez
décelé en utilisant les codes suivants:
O = le ou les mots omis ne sont pas les plus importants.
M= la phrase est trop mutilée
L= la phrase contient un ou des indices lexicaux ou grammaticaux
V = la phrase contient des indices visuels
A= il y a ambiguïté (ou contestation) quant à la réponse attendue
C= si la phrase vous apparaît correcte (aucune erreur apparente)
01
02
03
04
05
06
07
08
09
10
11
12
13
14
15
16
17
18
Victor Hugo est l'auteur de (______________).
La partie d'un insecte composée de onze segments s'appelle l' (_____________).
Quelle est la racine carrée positive de 144 ? (____________).
Le centimètre est la centième (____________) d'un mètre.
On indique le poids en (________________) dans le système international et en
(________) dans le système anglais.
La Révolution française a débuté en (____________).
Le point du ciel ou de la sphère céleste situé au dessus de notre tête s'appelle
(__________).
La capitale de l'Italie est (____________).
On donne le nom de (_________) à la disposition des (__________) dans le
(_________) de la (_________).
Les deux points cardinaux d'où proviennent la plupart des vents de tempête de
notre région sont l' (________) et le (________).
On donne le nom de (_____) au segment joignant le centre d'un cercle à tout
point de sa circonférence et le nom de (______________) à une droite passant
par le centre de ce cercle.
Une (__________) qui joint deux sommets non (_________) d'un (__________)
s'appelle (__________).
Quel est le nom de celui ou de celle qui a écrit
l'Esprit des lois ? (________________).
Londres est la capitale de l' (______________).
La pantomime est une représentation théâtrale où la parole est (____________)
par des gestes et des attitudes.
Le diverticule abouché au caecum s'appelle (________) et son ablation s'appelle
(________________________).
D'après J. Lebrun, a fin du XIXe (______________) a été caractérisée par des
changements technologiques importants.
Le (____________) 3 est la (____________) cubique (____________) du nombre (____________).
(Consultez le corrigé de cet exercice pour recevoir un feed-back)
01
02
03
04
05
06
07
08
09
10
11
12
13
14
15
16
17
18
page 15
EXERCICE 2
CRITIQUE DE QUESTIONS
À CHOIX DE RÉPONSE
Dans cet exercice, il y a 18 questions à choix de réponse. Chacune d'elle souffre d'un ou
de plusieurs défauts mais il y a un défaut dominant que vous devez déceler au
meilleur de votre connaissance. Votre tâche consiste à écrire, dans la case de droite, la
lettre correspondant à ce défaut que vous avez décelé en utilisant les codes suivants:
H= énoncé vague et leurres hétérogènes
C= bonne réponse est objet de controverse entre experts
S = indice sémantique dans l'énoncé principal
G= indice grammatical
D = l'un des choix se distingue des autres d'une manière apparente
F = leurres peu vraisemblables ou de faible attraction
01
02
03
04
05
06
Si un aimant était sectionné en deux parties égales, qu'arriverait-il à l'aimantation de chacune des parties ?
a) la polarité serait absente de chaque partie
b) les parties auraient chacune un pôle nord et un pôle sud et seraient donc dotées d'un champ magnétique tout comme l'aimant initial *
c) chaque partie n'aurait qu'une seule polarité
Le signe de ponctuation employé à la fin d'une phrase dans laquelle on
interroge quelqu'un ou quelque chose s'appelle
a) point d'exclamation
b) point d'interrogation *
c) point virgule
d) point de suspension
Quel est le nom donné au groupe de composés organiques que l'on
trouve en petites quantités dans les aliments naturels et qui sont essentiels à une bonne nutrition ?
a) poisons
b) antidotes
c) alcools
d) minéraux
e) vitamines *
L'action de comparer un résultat observé à un résultat attendu est du
domaine de l'
a) mesure b) décision c) évaluation * d) correction
D'après les conceptions les plus courantes de l'évolution, on attribue à
l'hérédité
a) le patrimoine culturel
b) les maladies contagieuses
c) le changement social
d) les tares héréditaires *
Parmi les matériaux suivants, lequel est le plus dur ?
a) carton
b) fer
c) diamant *
d) ouate
e) cire
suite à la page suivante
01
02
03
04
05
06
page 16
H= énoncé vague et leurres hétérogènes
C= bonne réponse est objet de controverse entre experts
S = indice sémantique dans l'énoncé principal
G= indice grammatical
D = l'un des choix se distingue des autres d'une manière apparente
F = leurres peu vraisemblables ou de faible attraction
07
08
09
10
11
12
13
14
15
Quelle est la fonction principale du coeur ?
a) palpiter quelquefois
b) s'arrêter à la mort
c) tomber en amour
d) pomper le sang *
D'après ce que vous avez appris dans le cours, il faut savoir que
a) le développement des organes dépend de l'activité musculaire *
b) les loisirs sont très importants pour garder une bonne santé
c) le surmenage accélère le vieillissement des fonctions vitales
d) le travail quotidien ne remplace pas les exercices aérobiques
La monogamie est
1) le refus de se marier
2) l'union d'une femme avec plusieurs hommes
3) l'union d'un homme avec plusieurs femmes
4) l'union d'un seul homme avec une seule femme *
Parmi les raisons suivantes, quelle est celle qui explique le mieux la difficulté d'échanger des informations scientifiques entre différents pays ?
a) les rapports de recherche sont publiés dans des langues différentes
b) beaucoup de savants gardent secrètes leurs découvertes tant
que leurs recherches sont en cours *
c) les chercheurs hésitent à utiliser des sources secondaires provenant de divers pays
d) certains pays ne diffusent pas d'informations scientifiques dans
la perspective d'une guerre éventuelle
La plus grande part de responsabilité de la première guerre mondiale
a été assumée par
a) L'Allemagne et l'Autriche
b) L'Allemagne et la Serbie *
c) La Russie et la France
d) La Russie et la Serbie
e) L'Allemagne et l'Italie
Une figure de mot dans laquelle un trait ou un caractère est exagéré
s'appelle:
a) synonyme
b) antonyme
c) allégorie
d) exagération *
Laquelle des personnes suivantes est le plus grand compositeur de la
période classique ?
1) Mozart *
2) Haydn 3) Berlioz
4) Rachmaninov
Dans notre région, un coup de vent violent accompagné de fortes pluies
s'appelle une
a) tornade * b) ouragan c) cyclone d) raz de marée
Deux individus issus d'un même oeuf fécondé sont des
a) duo
b) double c) paire
d) jumeaux *
suite et fin à la page suivante
07
08
09
10
11
12
13
14
15
page 17
H= énoncé vague et leurres hétérogènes
C= bonne réponse est objet de controverse entre experts
S = indice sémantique dans l'énoncé principal
G= indice grammatical
D = l'un des choix se distingue des autres d'une manière apparente
F = leurres peu vraisemblables ou de faible attraction
16
17
18
La polyandrie est:
a) permise dans la plupart des pays orientaux
b) une doctrine religieuse qui a été répandue au XIIe siècle
c) une branche de la biologie génétique
d) l'union d'une femme avec plusieurs hommes *
Un triangle équilatéral est un triangle
1) qui a deux côtés égaux
2) qui possède un angle droit
3) qui a trois côtés égaux, trois angles égaux et aussi trois axes
de symétrie *
La Russie
a) est un pays membre de l'OTAN
b) possède un climat tropical
c) est composée de plusieurs républiques *
d) est traversée par le fleuve le plus long
fin de l'exercice 2
16
17
18
page 18
CORRIGÉ DE L'EXERCICE 1
CRITIQUE DE QUESTIONS
À RÉPONSE BRÈVE
AUTOCORRECTION: vous pouvez connaître votre degré maîtrise en
cochant vos bonnes réponses et en les dénombrant pour chaque catégorie. Inscrivez vos résultats dans la colonne «sous-score».
clé de correction des bonnes réponses
par groupe de tâches*
Les mots omis ne sont pas les plus importants.
Réponse O à 04
La phrase est trop mutilée.
❑
15 ❑
Réponse M à 09 ❑
12
Indices lexicaux et/ou grammaticaux.
❑
Réponse L à 02 ❑
10
Indices visuels (longueurs d'espace).
❑
et
et
et
17 ❑
18 ❑
14 ❑
Réponse V à 05 ❑
11 ❑ et 16 ❑
Ambiguïté - contestation possible d'une seule réponse.
Réponse
A à 01 ❑
06 ❑
et
08 ❑
07 ❑
et
13 ❑
La phrase est trop mutilée.
Réponse
C à 03 ❑
sousscore
commentaires explicatifs à lire
si le sous-score < 3
(La centième) partie, (la parole est)
supportée et (du XIXe) siècle ne sont
pas des mots importants.
On ne peut compléter ces phrases à
moins de les avoir apprises par cœur
et encore...!
L'indice « l' » ne suggère pas la réponse comme telle mais permet à
l'élève d'en éliminer quelques unes.
S'il ne reste que deux mots à placer, la
capacité de l'élève de discriminer sur
le contenu n'est pas sollicitée.
Victor Hugo est l'auteur de plusieurs
oeuvres, de poèmes, d'ouvrages répétés (tout est bon). La capitale de
l'Italie est une grande ville !
La perfection n'est pas de ce monde
mais rien d'apparent, parmi les fautes
suggérées, dans ces phrases à compléter.
page 19
CORRIGÉ DE L'EXERCICE 2
CRITIQUE DE QUESTIONS
À CHOIX DE RÉPONSE
clé de correction des bonnes réponses
par groupe de tâches*
Énoncé vague et leurres hétérogènes
Réponse
H à 08 ❑
16 ❑
et
18 ❑
La bonne rép. est objet de controverse entre experts.
Réponse
C à 10 ❑
11 ❑
et
13 ❑
et
12 ❑
Indice sémantique dans l'énoncé principal
Réponse
S à 02 ❑
05 ❑
Indice grammatical (dans l'énoncé principal)
Réponse
G à 04 ❑
14 ❑
et
15 ❑
Un choix se distingue des autres choix de réponse.
Réponse
D à 01 ❑
09 ❑
et
17 ❑
06 ❑
et
07 ❑
Leurres de faible attraction.
Réponse
F à 03 ❑
sousscore
commentaires explicatifs à lire
si le sous-score < 3
Le défaut signalé ici se décèle à l'absence d'idée de l'énoncé principal
comme:
08: il faut savoir que
16: la polyandrie est
18: la Russie
ce qui entraîne forcément des leurres
hétérogènes en contenu.
Le défaut signalé ici se perçoit mieux
chez des spécialistes de la matière;
les questions 10, 11 et 13 correspondent à la modalité «meilleure réponse» et non «bonne réponse» ce
qui est peut-être une indication de la
relativité des énoncés précédent les
choix de réponse.
Un défaut assez facile à repérer (et à
éviter surtout !).
02: i n t e r r o g e - interrogation
05: h é r é d i t é - tares héréditaires
12: e x a g é r é - exagération
Un défaut encore plus facile à repérer
les seules bonnes réponses possibles
pour quelqu'un qui ignore la bonne
rép. «coulent de source» :
04: l ' évaluation
14: une tornade
15: d e s
jumeaux
La distinction peut exister sur le plan
visuel (p. ex., 01 et 17) mais aussi
sur le plan sémantique (la question 09
présente trois choix commençant par
«l'union» et un seul par «le refus»; le
choix qui se distingue des autres n'est
pas la bonne réponse mais la question n'en est pas moins perverse.
Un seul ou deux leurres suffisent à
rendre la question plus facile à réussir
au hasard pour une personne qui
ignore...
Difficile à repérer pour les non spécialistes mais...
(par ex.: à 03, bonne nutrition =
poisons !!!)
FIN DU FASCICULE SUR LA RÉDACTION
DE QUESTIONS À CORRECTION OBJECTIVE.

Documents pareils