questions à correction objective
Transcription
questions à correction objective
LA RÉDACTION DE QUESTIONS À CORRECTION OBJECTIVE • à choix de réponse • à réponse brève © Gérard Scallon, professeur Département d'orientation, d'administration et d'évaluation en éducation, FSÉ, Université Laval Introduction La question à choix de réponse est le type de question le plus utilisé pour rédiger des examens à correction objective. Essentiellement, ce modèle se présente comme suit: énoncé principal (stem) Qui a composé la symphonie pastorale ? a) Mozart b) Berlioz c) Beethoven d) Haydn leurre1 leurre bonne réponse leurre choix de réponse disposés en colonne Dans le domaine des questions à correction objective on trouve habituellement deux autres modèles : la question de type «vrai-faux» et la question à réponse brève. En voici des exemples avec le même contenu que celui du modèle illustré ci-dessus: Question «vrai-faux» Beethoven a composé la symphonie pastorale. V F V F ou encore Haydn a composé la symphonie pastorale. c'est un mode de choix de réponse mais, dans un examen «vrai-faux» les choix proposés (V et F) ne varient pas d'une question à l'autre question à réponse brève Qui a composé la symphonie pastorale: _ _ _ _ _ _ _ _ _ _ _ _ _ _ _ _ ici, on demande d'évoquer le nom du compositeur et non de le reconnaître parmi... 1.- Les mauvaises réponses sont appelées «leurres» ( distractors , dans les ouvrages anglo-saxons). page 2 Dans les pages qui suivent, nous traiterons (dans l'ordre) de la question «vrai-faux», de la question à réponse brève et de la question à choix de réponse. 1.- La question de type «vrai-faux» Essentiellement, ce genre de question est caractérisé par une déclaration (affirmation ou négation) susceptible d'être vraie ou erronée d'après un corpus de connaissances établies dans un domaine d'étude. Niveau d'objectifs visés.- En visant la rectitude (ou la non rectitude) d'énoncés divers tels un fait, une définition, la formulation d'un principe, etc., la question «vrai-faux» pourrait couvrir en apparence un large spectre d'objectifs d'apprentissage. Elle est, cependant, généralement associée au domaine des connaissances (reconnaissance comme vrai ou faux d'un élément déjà appris comme tel) et à celui de la compréhension (lorsque l'énoncé principal se présente sous la forme d'une expression équivalente à celle déjà apprise). Le caractère laconique de la réponse demandée (p. ex. encerclement de la lettre V ou de la lettre F) exclut d'emblée les niveaux d'application, d'analyse ou de synthèse --- au sens où Bloom et collaborateurs les entendaient dans leur Taxonomie du domaine cognitif. Dans certains examens, les questions «vrai-faux» se succèdent d'une manière assez décousue et correspondent à divers éléments d'information à mémoriser de manière tout aussi décousue. Il devient alors difficile d'associer les questions de ce genre d'examen à des objectifs opérationnels à moins de faire correspondre un énoncé d'objectif à chacun des énoncés «vrai-faux», une entreprise assez fastidieuse et de mauvais goût, cela va de soi ! En revanche, on peut concevoir un ensemble d'énoncés constituant une tâche d'identification. On présente des objets ou des événements qui peuvent être classés en deux catégories. Au regard de chaque énoncé, le choix de réponse est binaire. Les variantes sont nombreuses et un exemple aidera à illustrer l'essentiel de ce genre de situation. Supposons que l'on demande à des individus d'encercler le «oui» ou le «non» pour chaque plante donnée au regard de la question posée: «Cette plante est-elle un fruit (oui ou non) ?» 2 1. tomate (oui non) 2. poire (oui non) 3. céleri (oui non) 4. radis (oui non) 5. banane (oui non) Cet ensemble d'éléments «vrai-faux» (La tomate est un fruit, la poire est un fruit, le céleri est un fruit, etc.) se rapporte à un même objectif opérationnel qui pourrait s'énoncer comme suit: Parmi plusieurs plantes indiquer (identifier) celles qui sont des fruits et celles qui sont des légumes. ou encore Plusieurs plantes étant données, distinguer celles qui sont des fruits de celles qui sont des légumes. 2.- En principe on doit soigner davantage la présentation visuelle et il faudrait énumérer les énoncés verticalement plutôt que de les énumérer horizontalement comme on l'a fait ici. page 3 L'ensemble d'éléments serait de beaucoup amélioré si on demandait tout simplement aux individus d'encercler F (pour fruit) ou L (pour légume) au regard de chaque plante présentée. On est toujours dans la structure de question à choix binaire mais dans l'ordre des extensions de la question «vrai-faux». 1. tomate ( F L ) 2. poire ( F L ) 3. céleri ( F L ) 4. radis ( F L ) 5. banane ( F L ) REMARQUE IMPORTANTE: Habituellement, le questionnaire de type « VRAI-FAUX » forme un ensemble hétéroclite d’éléments ne se rattachant à aucune habileté bien identifiée. Les énoncés peuvent porter sur un même thème (p. ex., le système digestif ou l’impressionnisme), mais c’est tout. En revanche, la tâche d’identification qui vient d’être décrite présente un tout cohérent visant une même habileté. Le domaine privilégié d’application est celui des concepts concrets. La méthodologie qui s’y rapporte est présentée dans la troixième partie du chapitre 5 du manuel intitulé: Évaluer pour faire apprendre: une approche centrée sur le feed-back (G. Scallon, 1999). Principes de rédaction des questions «vrai-faux» Il n'est pas inutile d'affirmer que ce genre de question est le plus difficile à rédiger. L'enjeu est de s'assurer que l'individu «incompétent» ne puisse encercler la bonne réponse par intuition pure ou par sens commun. Il faut également s'assurer que l'individu «compétent» ne sera pas désemparé par toutes sortes de nuances et de subtilités le conduisant à choisir la mauvaise réponse. Voici quelques principes que l'on trouve dans la plupart des manuels de docimologie et qu'il est bon de se rappeler. 1 2 Éviter d'utiliser des indices qui rendent l'énoncé acceptable au «commun des mortels» (ex.: habituellement, généralement, souvent) ex. d'énoncé fautif : Les feuilles des plantes sont généralement vertes. V F Éviter d'utiliser des indices qui rendent l'énoncé inacceptable au «commun des mortels» (ex.: jamais, toujours, aucun, tous) ex. d'énoncé fautif : Les feuilles de toutes les plantes sont vertes. V F Ces deux principes ne se reconnaissent pas facilement pour identifier un énoncé fautif. Dans certaines matières c'est la position absolue qui est vraie et on ne peut l’éviter (p. ex. Tous les êtres vivants sont mortels ! ). 3 4 Éviter le plus possible les énoncés négatifs et éviter tout simplement les énoncés à double négation. ex. : Les hommes ne sont pas mortels. V F Aucune étape de la procédure à suivre n'est importante. V F Chaque énoncé doit être fondé sur une seule idée. ex. d'én. fautif : un ver de terre ne peut voir parce qu'il possède des yeux simples. V F (qu'est-ce qui est affirmé : que le ver ne peut voir ? ou que le ver possède des yeux simples ?) Ce principe ne s'applique pas à des relations de cause à effet. page 4 5 6 Dans le cas d'une opinion, «relativiser» l'énoncé par rapport à une source (volume, organisme ou auteur). ex. : D'après J.-C Lévys, la retraite anticipée entraîne des coûts additionnels. V F (et non pas: La retraite anticipée entraîne des coûts additionnels. V F) Pour l'assemblage des questions «vrai-faux» dans un examen: Le nombre d'énoncés «vrais» devrait être approximativement égal au nombre d'énoncés «faux». C'est un sujet délicat à traiter et l'enjeu est d'éviter que des élèves «astucieux» ajustent leurs réponses d'après une égalité mathématique souvent attendue entre le nombre d'énoncés vrais et le nombre d'énoncés faux. En variant l'équilibre «vrai-faux» autour d'une certaine approximation, il faut éviter à tout prix une pratique «perverse» qui consisterait à ne présenter que des énoncés «vrais» (ou des énoncés «faux»). L'individu compétent mais qui doute raisonnablement de ses connaissances serait piégé par une telle mesure. Pour conclure Dans les examens préparés par les personnes spécialisées en mesure et évaluation (organismes privés comme aux États-Unis ou Ministère de l'éducation, par exemple), l'usage du «vrai-faux» est peu répandu. On peut avancer deux raisons pour expliquer cette situation: [1] Du point de vue des qualités recherchées d'un examen (fiabilité, validité, équité, entre autres) l'énoncé «vrai-faux» est extrêmement difficile à rédiger. [2] Pour un ou une élève non compétent-e, la chance d'obtenir un bon résultat, au pur hasard, est élevée. La probabilité de choisir la bonne réponse («vrai» ou «faux») au pur hasard est de 1/2 ou 0,5). Des mesures draconiennes ont alors été envisagées dont celles d'enlever des points pour les mauvaises réponses. Il s'agit d'une formule de correction pour le hasard, bien connue des psychométriciens et des docimologues et qui doit faire l'objet d'un traitement à part.3 • Il existe d'autres stratégies comme celle de de faire attribuer, par l'élève, un pourcentage de certitude au regard de chaque réponse donnée (la lettre V ou la lettre F encerclée). On peut également demander aux élèves de reformuler tous les énoncés FAUX pour que ceux-ci deviennent VRAIS. On comprendra alors qu'avec de grands groupes ces procédés sont onéreux sur le plan de la seule correction de copies. 3.- C'est un sujet qui a fait couler beaucoup d'encre. Dans le cas des questions à k choix de réponse, le nombre k étant constant pour toutes les questions de l'examen, il s'agit de corriger le score brut X en lui soustrayant une fraction du nombre m de mauvaises réponses. Ainsi, X c = X - M / ( k - 1 ) . X c est le symbole pour désigner un score corrigé pour le hasard. Avec des questions «vrai-faux» la correction est draconienne; dans ce cas, k = 2 et le procédé devient X c = X - M . page 5 2.- La question à réponse brève Ce genre de question est caractérisé par une question directe exigeant une réponse courte et précise (p. ex. un nom, une date). Une réponse précise peut être obtenue également au moyen d'une phrase à compléter. Voici quelques exemples: questions directes : 1. Quel est le nom scientifique du pissenlit ? ________________ 2. Quel est le nom du compositeur de la Symphonie Pastorale ? ________________ phrases à compléter : 1. Le premier président des États-Unis s'appelait _______________. 2. Il y a ______________ jours dans une année. Niveau d'objectifs visés.- Le domaine des connaissances est particulièrement visé par ce type de question. La question à réponse brève exige alors le simple rappel ou l'évocation pure de faits particuliers, de noms, d'éléments de terminologie. Nommer, énumérer sont les verbes d'action des objectifs opérationnels qui s'y rapportent. Le niveau «compréhension» peut être également visé par la question à réponse brève lorsque la réponse donnée par l'élève n'en est pas une apprise par cœur. Beaucoup de problèmes mathématiques, par exemple, se terminent par une réponse brève qui n'a jamais été mémorisée comme telle. La capacité d'appliquer peut se mesurer par le même type de question. On comprendra toutefois que la performance complexe sous-jacente est sous estimée sur le plan de la mesure lorsqu'une longue démarche empruntée par un individu pour résoudre un problème complexe se termine par une réponse brève, voire laconique, qui est codée tout simplement bonne ou mauvaise ! Principes de rédaction des questions à réponse brève 01 Seuls le ou les mots très importants devraient être omis dans les phrases à compléter. fautive Une infusion végétale fournit une ____________ de •illustration• ? (un mot qui serait très variable d'un auteur à l'autre) la relation entre les plantes et les animaux. améliorée Une ______________ végétale fournit une illustrale terme •infusion• est plus technique et probablement plus consistant. tion de la relation entre les plantes et les animaux. 02 Dans une phrase à compléter, on doit laisser assez de bons indices pour que «l'élève qui sait» puisse répondre adéquatement. fautive Le ____________ est obtenu en divisant le phrase mutilée abusivement ____________ par le _____________. améliorée Le quotient est obtenu en divisant le ___________ On demande moins de réponses mais c'est plus sûr ! par le diviseur. page 6 03 fautive améliorée fautive améliorée On doit éviter les indices lexicaux ou grammaticaux pouvant suggérer la réponse ou augmenter les chances de la deviner. (explosion = moteur à •explosion•) Un moteur qui fonctionne au moyen de l'explosion d'un gaz est appelé moteur à ____________. Un moteur qui fonctionne avec la combustion instan- substitution du mot demandé par un synonyme dans la phrase. tanée d'un gaz est appelé moteur à ____________. - - - l' exclut le sud et le nord, forcéEn se dirigeant du Canada vers l'Europe nous allons ment! vers l'____________. En se dirigeant du Canada vers l'Europe, nous allons vers quel point cardinal ? ____________ 04 Il faut éviter des indices visuels (p. ex. tion avec la réponse demandée) fautive Dans la phrase suivante: « Jean habite la ville», Jean occupe la fonction _______ et ville occupe la fonction ________________. améliorée Même phrase à compléter mais en prenant soin de présenter des espaces de même longueur. longueur d'espace en relaavec •sujet• et •complément• comme projet de réponse, il reste à les placer dans leurs espaces respectifs. 05 Poser une question précise qui ne comporte aucune ambiguïté et aucune contestation quant à la bonne réponse. fautive Qui était George Washington ? président des U.S.A., premier prés., _________________............ général, natif de Virginie ? Ce sont améliorée Quel a été le plus haut grade militaire de George Wa- shington ? ________________ toutes des bonnes réponses valides. Pas de doute au sujet de ce qui est demandé (rép. •général•) Conseils additionnels La distinction entre le nombre de phrases à compléter et le nombre d'espaces-réponses à coder n'est pas toujours bien comprise. Une phrase peut contenir un, deux ou peut-être trois espaces à compléter, ce qui fait un, deux ou trois réponses à coder bonnes ou mauvaises. Et les phrases peuvent être numérotées 1, 2, 3, 4, etc. ou ordonnées a, b, c, etc. Pour simplifier le corrigé et permettre de s'y retrouver on peut imiter la présentation visuelle suivante: a) Les questions qui proposent un choix binaire sont généralement de type (____________). Elles ap1 partiennent à la catégorie des questions à correction (____________). 2 b) Leur principale limite tient à la (____________) d'obtenir une bonne réponse au pur hasard. 3 c) Pour atténuer ce problème on a recours à une formule dite de (____________) pour le hasard. Il s'agit 4 d'enlever, du nombre de bonnes réponses, le nombre de (____________) réponses. 5 REMARQUE: a, b et c sont des symboles pour identifier les phrases; 1, 2, 3, 4 et 5 sont des numéros de questions - - - ici cinq espaces à répondre - - - ; on a donc un exercice sur 5 points si on accorde un point par bonne réponse. page 7 3.- La question à choix de réponse Niveau d'objectifs visés.- Bien que la question à choix de réponse soit grandement utilisée pour mesurer des objectifs du domaine de la connaissance (reproduction de réponses apprises par coeur mais en situation de reconnaissance et non d'évocation pure), elle peut servir à mesurer des objectifs de niveau plus élevé: --- maîtrise de concepts --- compréhension --- application de lois, de principes Pour atteindre de tels niveaux, la question à choix de réponse doit posséder deux caractéristiques: (1)présenter une situation nouvelle pour l'élève, c'est-à-dire n'ayant pas été posée comme telle en apprentissage et (2)contenir, autant que p o s s i b l e , des choix de réponse que l'élève doit examiner attentivement avant de répondre. D a n s c e r t a i n s c a s , l e s c h o i x p r o p o s é s s o n t factices et la question posée peut être considérée comme une question à réponse brève. Voici quelques exemples pour illustrer ce point. EXEMPLE 1 Quelle est la capitale de la France ? (1) Londres (2) Paris (3) Genève (4) Bruxelles (5) Madrid ________________________ Rem: connaissant la bonne réponse et l'ayant repérée (Paris) on n'a pas besoin de lire les autres choix de réponse. EXEMPLE 2 Quel est le périmètre d'un carré dont l'aire est 36 cm carrés. (a) 6 cm (b) 24 cm (c) 36 cm (d) 144 cm _______________________ EXEMPLE 3 Lequel des énoncés suivants convient à un carré dont l'aire mesure 36 cm carrés ? (1) la diagonale = 18 cm (2) le périmètre = 24 cm (3) chaque côté = 9 cm (4) la hauteur = 12 cm Le calcul du périmètre se fait ________________________ sans les choix de réponse; l'ayant trouvé (choix b), on n'a guère besoin d'en lire davantage. Dans cette question, les premiers choix doivent être «évalués» par l'élève avant de s'arrêter à celui qui est la bonne réponse. AUTRES MODÈLES POUR FORCER LA LECTURE DE TOUS LES CHOIX PROPOSÉS Questions à meilleure réponse Questions à plusieurs bonnes réponses. Tous les choix de réponse sont des bonnes réponses, mais il y en a une qui est la meilleure sans être parfaite; certains contenus se prêtent à ce genre de question. Le nombre de bonne réponses peut varier d'une question à l'autre dans un examen. Il est cependant important de prévenir les élèves avec des directives bien en évidence. (suite AUTRES MODÈLES à la page suivante) page 8 POUR FORCER LA LECTURE DE TOUS LES CHOIX PROPOSÉS: Questions à choix complexes (complex alternatives) Exemple: Parmi les propriétés suivantes: A = deux côtés égaux, B = deux angles égaux C = figure symétrique Laquelle ou angle isocèle 1.2.3.4.5.6.7.- lesquelles est/sont caractéristique(s) d'un triA seulement B seulement C seulement A et B seulement A et C seulement B et C seulement A, B et C ❑ ❑ ❑ ❑ ❑ ❑ ❑ rem: c'est une forme «déguisée» de la question à plusieurs bonnes réponses; l'élève pourrait cocher A, B ou C ou toute combinaison; ici, ce sont les combinaisons qui ont été explicitées et l'élève ne fait qu'un choix, ce qui facilite le codage de sa réponse. C'est un modèle qui peut comporter des subtilités; peu d'auteurs le recommandent. Le choix: «aucune de ces répon ses» Cette particularité ne définit pas un type particulier de question; elle consiste à ajouter (systématiquement) ce genre de choix à chaque question où il n'y a qu'une seule bonne réponse (p. ex., ça ne convient pas au type «meilleure réponse»). Là où «aucune de ces réponses» est une mauvaise réponse, il faut s'assurer que le choix de la «bonne réponse» correspond à une bonne réponse universellement reconnue car toute personne peut contester la clé de codage utilisée. Avantages et inconvénients du modèle «choix de rép.» Les inconvénients de la question à choix de réponse résident principalement du côté des abus dans son utilisation. Là où les objectifs pédagogiques visent des habiletés de l'ordre de l'expression, de la créativité ou encore de l'organisation des idées, ce type de question ne convient particulièrement pas. Les avantages de la question à choix de réponse sont mieux saisis lorsque ce type de question est comparé à d'autres types de tâches que l'on peut introduire dans des examens. • Par rapport aux examens à réponse(s) élaborée(s) (productions complexes comme la dissertation, le résumé, la fabrication d'un produit, etc.) les examens composés de questions à correction objective (dont le choix de réponse) constituent un échantillon plus représentatif, en quantité de questions, des connaissances et/ou des habiletés visées. page 9 • Par rapport aux questions à réponse brève, le codage des réponses est beaucoup plus facile et rapide à réaliser (la «correction des copies», comme certains disent encore aujourd'hui); on peut même soumettre les réponses obtenues à un codage automatisé. • Par rapport aux questions de type «vrai-faux», également à choix de réponse, les questions à quatre ou cinq choix de réponse offrent moins de chances de réussir pour les élèves qui répondraient au hasard. Et d'un point de vue plus pragmatique , • dans un contexte où les résultats d'examens peuvent être sujets à une demande de révision, les examens à correction objective, dont la modalité «choix de réponse» fait partie, offrent plus d'assurance (en apparence du moins) que ne le font les examens à réponses élaborées entachés de subjectivité. • De plus, et ce n'est pas un point d'intérêt mineur, les examens à réponses élaborées souvent composés de quelques questions seulement (cela va de soi) peuvent difficilement être répétées d'une session à une autre à cause des dangers de contamination qu'ils présentent. Au contraire, pour autant que les copies ne circulent pas 4 , le contenu d'un examen à correction objective est plus difficile à mémoriser de la part d'un élève qui voudrait systématiquement informer s e s collègues (problème des cours divisés en sections). On peut ajouter que les examens à choix de réponse sont relativement faciles à reproduire sous des formes équivalentes. Principes de rédaction des questions à choix de réponse L'énoncé principal doit exprimer une idée précise sous forme de question directe ou de phrase à compléter e t ê t r e s u i v i d e c h o i x relativement homogènes. fautive L'Amérique est ...phrase incomplète a) le plus ancien continent b) le continent le plus peuplé choix/idées disparates c) située dans l'hémisphère sud 5 d) ainsi nommée en l'honneur de Vespucci * améliorée L'Amérique doit son nom à ... idée précise (phrase à compléter) a) Colomb choix homogènes: b) Magellan ce sont tous des noms de c) Ponce de Léon découvreurs d) Vespucci * 01 4.- 5.- Cette mesure ne doit pas s'opposer au droit de tout étudiant de recevoir des justifications au regard des résultats obtenus; la consultation de sa copie peut toujours se faire tout en évitant que les copies d'exeamens soient en circulation. Pour faciliter la compréhension de chaque exemple, la bonne réponse est marquée d'une astérisque. page 10 02 Dans le cas d'opinions controversées entre experts, «relativiser» la bonne réponse demandée dans l'énoncé principal. fautive Lequel des événements suivants a eu l'impact le plus grand sur l'histoire du Québec ? Les auteurs seraient-ils tous d'accord a) la défaite de 1760 avec la clé de correction pour cette b) la révolte de 1837 question ? c) l'Acte de l'Amérique Britannique du Nord d) la création d'un Ministère de l'Immigration * améliorée Il s'agit de débuter l'énoncé principal en citant une source connue ou une autorité: D'après l'historien «untel».... La plupart des historiens s'entendent pour... 03 S'assurer qu'il y a un lien grammatical chacun des choix suggérés. fautive Pourquoi les organismes vivants ont-ils besoin d'oxygène ? a) purification du sang b) la nourriture doit être assimilée c) pour oxyder les déchets d) libération d'énergie * améliorée La fonction principale de l'oxygène dans les organismes vivants consiste à... a) purifier le sang b) assimiler la nourriture c) oxyder les déchets d) libérer de l'énergie * entre l'énoncé principal et on a une certaine homogénéité des leurres ici mais il n'y a que le choix c qui est en lien avec l'énoncé principal tous les choix sont «grammaticalement homogènes et en lien avec l'énoncé principal Éviter tout indice superficiel pouvant révéler la bonne réponse a) mots clés dans l'énoncé principal (CARACTÈRE APPARENT) 04 b) choix « bonne réponse » plus élaboré (ou moins élaboré que les autres choix) (APPARENT) c) indices grammaticaux ou sémantiques dans l'énoncé principal e) la bonne réponse est fournie par l'énoncé d'une autre question dans l'examen (problème posé par l'utilisation de banques de questions). [04-a] le cas des mots clés dans l'énoncé principal fautive Le type de test standardisé utilisé pour mesurer le rendement scolaire s'appelle a) test de rendement * b) étude de cas c) test d'aptitude spécifique d) analyse de besoins améliorée Le type d'instrument standardisé utilisé pour mesurer l'apprentissage scolaire s'appelle a) test de rendement * b) étude de cas c) test d'aptitude spécifique d) analyse de besoins la bonne rép. contient tous les mots clés de l'énoncé principal page 11 fautive [04-b] l'un des choix est plus élaboré que les autres Ici, le choix de la bonne réponse se distingue par sa longueur des quatre autres choix; une personne ignorant la réponse pourrait indiquer ce choix et réussir. Les choix ne sont pas homogènes non plus. Un embargo est une a) sorte de bateau b) interdiction provisoire s'appliquant à la circulation des navires dans un port ou à l'échange de marchandises entre pays différents * c) folle aventure d) sorte de tarif douanier améliorée L'interdiction provisoire s'appliquant à la circulation des navires dans un port ou l'interdiction d'échanger des marchandises entre pays différents s'appelle: a) tarif douanier c) taxe d'assise d) embargo * e) monopole La bonne réponse est devenue l'énoncé principal. Un spécialiste de matière pourrait faire encore mieux ! REMARQUE: le choix le plus élaboré peut aussi être une mauvaise réponse; il est difficile de recommander un tel procédé qui peut s'avérer une astuce pour induire en erreur. [04-c] indices grammaticaux ou sémantiques révélant la bonne réponse fautive Un mot qui sert à joindre deux mots de même nature est une a) verbe b) adverbe c) article d) conjonction * e) adjectif fautive On aurait un indice sémantique si l'énoncé était: Un mot qui sert à la jonction de deux mots... Il s'agirait ici de corriger l'énoncé principal en demandant: Comment appelle-t-on un mot qui sert à joindre deux mots de même nature ? [04-d] liens entre questions différentes d'un même examen (difficile à illustrer ici) Les mauvaises réponses doivent être autant que possible vraisemblables pour être attrayantes à la personne qui ignore la bonne réponse. fautive Parmi les éléments suivants, lequel a le plus contriC'est une question à «meilleure rébué à augmenter la durée de la vie humaine ? ponse» et d'opinion probablement a) la vitesse sur les routes controversée; mais les choix «a» et b) la pollution de l'air «b» devraient être remplacés par des c) les procédés d'immunisation * énoncés plus attrayants pour ce qui d) l'emploi de vitamines est du principe 05. 05 REMARQUE: En permettant à une personne de faible compétence d'éliminer des leurres ridicules, on augmente ses chances de réussir la question au hasard. page 12 Les choix de réponses doivent être «visuellement» distincts d e l'énoncé principal: pour s'en assurer, disposer les choix verticalement. fautive D'après l'auteur de votre livre de médecine nucléaire, laquelle des mesures suivantes serait la plus appropriée pour stimuler l'application des découvertes atomiques à la médecine ? un cas exagéré a) développer des techniques standardisées pour traiter les patients; b) entraîner les médecins à l'usage d'appareil radioactifs; c) réduire la thérapie radioactive à une simple routine; d) engager dans les hôpitaux des spécialistes qualifiés en radiothérapie * améliorée D'après l'auteur de votre livre de médecine nucléaire, laquelle des mesures suivantes serait la plus appropriée pour stimuler l'application des découvertes atomiques à la médecine ? a) développer des techniques standardisées pour traiter les patients b) entraîner les médecins à l'usage d'appareil radioactifs c) réduire la thérapie radioactive à une simple routine d) engager dans les hôpitaux des spécialistes qualifiés en radiothérapie * ON PEUT FAIRE EXCEPTION POUR LES CHOIX DE RÉPONSE RELATIVEMENT BREFS: Les concertos brandebourgeois ont été composés par... 1) Beethoven 2) Bach * 3) Brahms 4) Chopin 5) Mozart 06 Assemblage des questions et directives aux élèves Les éléments listés au regard de la mise en forme de l'examen tiennent beaucoup plus du sens commun que d'un haut savoir inaccessible. Par exemple, il est recommandé de disposer les questions en les groupant par thème mais dans un ordre croissant de difficulté et ce, dans toute la mesure du possible. Ce principe tient au fait que des élèves anxieux seraient vite désemparés et démotivés si les premières questions posées étaient les plus difficiles. C'est déjà une question de gros bon sens. On peut transgresser ce principe lorsqu'il faut grouper les questions devant se prêter à une directive commune (p. ex., les questions offrant plus d'une bonne réponse). L' identification des choix de réponse se fait habituellement à l'aide des premières lettres de l'alphabet (p. ex., a) -------- b) ------- c) --------, etc.). Cette mesure convient bien à la majorité des situations. La suite des nombres naturels peut aussi servir aux mêmes fins (p. ex., 1) ------- 2) ------- 3) -------, etc.) sauf si les choix de réponse comportent des chiffres ou des nombres. Pour ce qui est des directives, il est important de préciser la manière avec laquelle les élèves doivent répondre: encercler la lettre correspondant à leur choix de réponse ou encore cocher entre parenthèses [ ] ou cocher la case ❑ correspondant à la réponse à choisir. Il est tout aussi important d'avertir les élèves au moyen d'un signal qui attire bien l'attention que le mode de réponse vient de changer (p. ex. passage d'une section à plusieurs bonnes réponses à une section ne comportant que des questions à une seule bonne réponse). page 13 Enfin, et ce n'est pas la moindre des choses, il est important d'informer les élèves que l'on appliquera ou non un procédé de correction pour les réponses faites au hasard6 (quelle que soit la décision, il faut préciser). C'est une question de simple honnêteté intellectuelle et le procédé utilisé ne peut être décidé après coup, car son application «inattendue» peut modifier les règles du jeu. Le procédé de correction pour le hasard n'est pas particulièrement indispensable. Certes, sa fonction (lorsque connue à l'avance) est de dissuader les élèves d'adopter une attitude non réflexive au regard de certaines questions. Le problème se pose d'une manière plus aiguë lorsqu’un nombre très élevé de questions ne permet pas à la majorité de compléter l'examen (c’est-à-dire de répondre à toutes les questions) à l'intérieur du temps limite qui était prévu. On comprendra que les questions non lues, quelques instants avant la collecte des copies peuvent être rapidement cochées au hasard et c'est une stratégie efficace avec une probabilité de 1/k de choisir la bonne au hasard à chacune des questions ainsi expédiées. EXERCICES Les pages suivantes offrent la possibilité d'exercer votre sens critique à l'égard de questions à réponse brève (phrases à compléter) et de questions à choix de réponse. Il s'agit de suivre les directives pour compléter chacun des deux exercices. Un corrigé pour la critique des phrases à compléter et pour celle des questions à choix de réponse termine ce fascicule. 6.- Voir une note précédente au sujet de cet aspect. page 14 EXERCICE 1 CRITIQUE DE QUESTIONS À RÉPONSES BRÈVES Dans cet exercice, il y a 18 questions à réponse brève (la plupart du type «phrase à compléter»). Chacune d'elle souffre d'un ou de plusieurs défauts mais il y a un défaut dominant que vous devez déceler au meilleur de votre connaissance. Votre tâche consiste à écrire, dans la case de droite, la lettre correspondant à ce défaut que vous avez décelé en utilisant les codes suivants: O = le ou les mots omis ne sont pas les plus importants. M= la phrase est trop mutilée L= la phrase contient un ou des indices lexicaux ou grammaticaux V = la phrase contient des indices visuels A= il y a ambiguïté (ou contestation) quant à la réponse attendue C= si la phrase vous apparaît correcte (aucune erreur apparente) 01 02 03 04 05 06 07 08 09 10 11 12 13 14 15 16 17 18 Victor Hugo est l'auteur de (______________). La partie d'un insecte composée de onze segments s'appelle l' (_____________). Quelle est la racine carrée positive de 144 ? (____________). Le centimètre est la centième (____________) d'un mètre. On indique le poids en (________________) dans le système international et en (________) dans le système anglais. La Révolution française a débuté en (____________). Le point du ciel ou de la sphère céleste situé au dessus de notre tête s'appelle (__________). La capitale de l'Italie est (____________). On donne le nom de (_________) à la disposition des (__________) dans le (_________) de la (_________). Les deux points cardinaux d'où proviennent la plupart des vents de tempête de notre région sont l' (________) et le (________). On donne le nom de (_____) au segment joignant le centre d'un cercle à tout point de sa circonférence et le nom de (______________) à une droite passant par le centre de ce cercle. Une (__________) qui joint deux sommets non (_________) d'un (__________) s'appelle (__________). Quel est le nom de celui ou de celle qui a écrit l'Esprit des lois ? (________________). Londres est la capitale de l' (______________). La pantomime est une représentation théâtrale où la parole est (____________) par des gestes et des attitudes. Le diverticule abouché au caecum s'appelle (________) et son ablation s'appelle (________________________). D'après J. Lebrun, a fin du XIXe (______________) a été caractérisée par des changements technologiques importants. Le (____________) 3 est la (____________) cubique (____________) du nombre (____________). (Consultez le corrigé de cet exercice pour recevoir un feed-back) 01 02 03 04 05 06 07 08 09 10 11 12 13 14 15 16 17 18 page 15 EXERCICE 2 CRITIQUE DE QUESTIONS À CHOIX DE RÉPONSE Dans cet exercice, il y a 18 questions à choix de réponse. Chacune d'elle souffre d'un ou de plusieurs défauts mais il y a un défaut dominant que vous devez déceler au meilleur de votre connaissance. Votre tâche consiste à écrire, dans la case de droite, la lettre correspondant à ce défaut que vous avez décelé en utilisant les codes suivants: H= énoncé vague et leurres hétérogènes C= bonne réponse est objet de controverse entre experts S = indice sémantique dans l'énoncé principal G= indice grammatical D = l'un des choix se distingue des autres d'une manière apparente F = leurres peu vraisemblables ou de faible attraction 01 02 03 04 05 06 Si un aimant était sectionné en deux parties égales, qu'arriverait-il à l'aimantation de chacune des parties ? a) la polarité serait absente de chaque partie b) les parties auraient chacune un pôle nord et un pôle sud et seraient donc dotées d'un champ magnétique tout comme l'aimant initial * c) chaque partie n'aurait qu'une seule polarité Le signe de ponctuation employé à la fin d'une phrase dans laquelle on interroge quelqu'un ou quelque chose s'appelle a) point d'exclamation b) point d'interrogation * c) point virgule d) point de suspension Quel est le nom donné au groupe de composés organiques que l'on trouve en petites quantités dans les aliments naturels et qui sont essentiels à une bonne nutrition ? a) poisons b) antidotes c) alcools d) minéraux e) vitamines * L'action de comparer un résultat observé à un résultat attendu est du domaine de l' a) mesure b) décision c) évaluation * d) correction D'après les conceptions les plus courantes de l'évolution, on attribue à l'hérédité a) le patrimoine culturel b) les maladies contagieuses c) le changement social d) les tares héréditaires * Parmi les matériaux suivants, lequel est le plus dur ? a) carton b) fer c) diamant * d) ouate e) cire suite à la page suivante 01 02 03 04 05 06 page 16 H= énoncé vague et leurres hétérogènes C= bonne réponse est objet de controverse entre experts S = indice sémantique dans l'énoncé principal G= indice grammatical D = l'un des choix se distingue des autres d'une manière apparente F = leurres peu vraisemblables ou de faible attraction 07 08 09 10 11 12 13 14 15 Quelle est la fonction principale du coeur ? a) palpiter quelquefois b) s'arrêter à la mort c) tomber en amour d) pomper le sang * D'après ce que vous avez appris dans le cours, il faut savoir que a) le développement des organes dépend de l'activité musculaire * b) les loisirs sont très importants pour garder une bonne santé c) le surmenage accélère le vieillissement des fonctions vitales d) le travail quotidien ne remplace pas les exercices aérobiques La monogamie est 1) le refus de se marier 2) l'union d'une femme avec plusieurs hommes 3) l'union d'un homme avec plusieurs femmes 4) l'union d'un seul homme avec une seule femme * Parmi les raisons suivantes, quelle est celle qui explique le mieux la difficulté d'échanger des informations scientifiques entre différents pays ? a) les rapports de recherche sont publiés dans des langues différentes b) beaucoup de savants gardent secrètes leurs découvertes tant que leurs recherches sont en cours * c) les chercheurs hésitent à utiliser des sources secondaires provenant de divers pays d) certains pays ne diffusent pas d'informations scientifiques dans la perspective d'une guerre éventuelle La plus grande part de responsabilité de la première guerre mondiale a été assumée par a) L'Allemagne et l'Autriche b) L'Allemagne et la Serbie * c) La Russie et la France d) La Russie et la Serbie e) L'Allemagne et l'Italie Une figure de mot dans laquelle un trait ou un caractère est exagéré s'appelle: a) synonyme b) antonyme c) allégorie d) exagération * Laquelle des personnes suivantes est le plus grand compositeur de la période classique ? 1) Mozart * 2) Haydn 3) Berlioz 4) Rachmaninov Dans notre région, un coup de vent violent accompagné de fortes pluies s'appelle une a) tornade * b) ouragan c) cyclone d) raz de marée Deux individus issus d'un même oeuf fécondé sont des a) duo b) double c) paire d) jumeaux * suite et fin à la page suivante 07 08 09 10 11 12 13 14 15 page 17 H= énoncé vague et leurres hétérogènes C= bonne réponse est objet de controverse entre experts S = indice sémantique dans l'énoncé principal G= indice grammatical D = l'un des choix se distingue des autres d'une manière apparente F = leurres peu vraisemblables ou de faible attraction 16 17 18 La polyandrie est: a) permise dans la plupart des pays orientaux b) une doctrine religieuse qui a été répandue au XIIe siècle c) une branche de la biologie génétique d) l'union d'une femme avec plusieurs hommes * Un triangle équilatéral est un triangle 1) qui a deux côtés égaux 2) qui possède un angle droit 3) qui a trois côtés égaux, trois angles égaux et aussi trois axes de symétrie * La Russie a) est un pays membre de l'OTAN b) possède un climat tropical c) est composée de plusieurs républiques * d) est traversée par le fleuve le plus long fin de l'exercice 2 16 17 18 page 18 CORRIGÉ DE L'EXERCICE 1 CRITIQUE DE QUESTIONS À RÉPONSE BRÈVE AUTOCORRECTION: vous pouvez connaître votre degré maîtrise en cochant vos bonnes réponses et en les dénombrant pour chaque catégorie. Inscrivez vos résultats dans la colonne «sous-score». clé de correction des bonnes réponses par groupe de tâches* Les mots omis ne sont pas les plus importants. Réponse O à 04 La phrase est trop mutilée. ❑ 15 ❑ Réponse M à 09 ❑ 12 Indices lexicaux et/ou grammaticaux. ❑ Réponse L à 02 ❑ 10 Indices visuels (longueurs d'espace). ❑ et et et 17 ❑ 18 ❑ 14 ❑ Réponse V à 05 ❑ 11 ❑ et 16 ❑ Ambiguïté - contestation possible d'une seule réponse. Réponse A à 01 ❑ 06 ❑ et 08 ❑ 07 ❑ et 13 ❑ La phrase est trop mutilée. Réponse C à 03 ❑ sousscore commentaires explicatifs à lire si le sous-score < 3 (La centième) partie, (la parole est) supportée et (du XIXe) siècle ne sont pas des mots importants. On ne peut compléter ces phrases à moins de les avoir apprises par cœur et encore...! L'indice « l' » ne suggère pas la réponse comme telle mais permet à l'élève d'en éliminer quelques unes. S'il ne reste que deux mots à placer, la capacité de l'élève de discriminer sur le contenu n'est pas sollicitée. Victor Hugo est l'auteur de plusieurs oeuvres, de poèmes, d'ouvrages répétés (tout est bon). La capitale de l'Italie est une grande ville ! La perfection n'est pas de ce monde mais rien d'apparent, parmi les fautes suggérées, dans ces phrases à compléter. page 19 CORRIGÉ DE L'EXERCICE 2 CRITIQUE DE QUESTIONS À CHOIX DE RÉPONSE clé de correction des bonnes réponses par groupe de tâches* Énoncé vague et leurres hétérogènes Réponse H à 08 ❑ 16 ❑ et 18 ❑ La bonne rép. est objet de controverse entre experts. Réponse C à 10 ❑ 11 ❑ et 13 ❑ et 12 ❑ Indice sémantique dans l'énoncé principal Réponse S à 02 ❑ 05 ❑ Indice grammatical (dans l'énoncé principal) Réponse G à 04 ❑ 14 ❑ et 15 ❑ Un choix se distingue des autres choix de réponse. Réponse D à 01 ❑ 09 ❑ et 17 ❑ 06 ❑ et 07 ❑ Leurres de faible attraction. Réponse F à 03 ❑ sousscore commentaires explicatifs à lire si le sous-score < 3 Le défaut signalé ici se décèle à l'absence d'idée de l'énoncé principal comme: 08: il faut savoir que 16: la polyandrie est 18: la Russie ce qui entraîne forcément des leurres hétérogènes en contenu. Le défaut signalé ici se perçoit mieux chez des spécialistes de la matière; les questions 10, 11 et 13 correspondent à la modalité «meilleure réponse» et non «bonne réponse» ce qui est peut-être une indication de la relativité des énoncés précédent les choix de réponse. Un défaut assez facile à repérer (et à éviter surtout !). 02: i n t e r r o g e - interrogation 05: h é r é d i t é - tares héréditaires 12: e x a g é r é - exagération Un défaut encore plus facile à repérer les seules bonnes réponses possibles pour quelqu'un qui ignore la bonne rép. «coulent de source» : 04: l ' évaluation 14: une tornade 15: d e s jumeaux La distinction peut exister sur le plan visuel (p. ex., 01 et 17) mais aussi sur le plan sémantique (la question 09 présente trois choix commençant par «l'union» et un seul par «le refus»; le choix qui se distingue des autres n'est pas la bonne réponse mais la question n'en est pas moins perverse. Un seul ou deux leurres suffisent à rendre la question plus facile à réussir au hasard pour une personne qui ignore... Difficile à repérer pour les non spécialistes mais... (par ex.: à 03, bonne nutrition = poisons !!!) FIN DU FASCICULE SUR LA RÉDACTION DE QUESTIONS À CORRECTION OBJECTIVE.