110 caracterisation de l`apprentissage des etudiants d
Transcription
110 caracterisation de l`apprentissage des etudiants d
110 CARACTERISATION DE L'APPRENTISSAGE DES ETUDIANTS D'INFIRMERIE ET PHYSIOTHERAPIE A PARTIR DE L'ANALYSE DE L'INSTRUMENT D'EVALUATION. L. Costa1,3, L.Garcia1,3, M. Godall1,3, L. Halbaut2,3 (1) Professeurs de l'Ecole Universitaire d'Infirmerie et de Physiothérapie Blanquerna. Université Ramon Llull. C/Valldonzella, 21. 08001 Barcelone (Espagne) Tel: (0034)932533088 [email protected] (2) Professeur de Faculté de Pharmacie de l'Université de Barcelone. Av. Joan XXIII, s/n. 08028 Barcelone (Espagne) Tel: (0034)934024551 Fax: (0034)934035936 [email protected] (3) Membres de l'ADMES-Barcelone Résumé Dans ce travail, nous présentons les résultats d'une analyse menée par les enseignants chargés de matières relatives aux sciences fondamentales, dans le cadre des études d'Infirmerie et de Physiothérapie à l'EUIF Blanquerna. Nous avons analysé la qualité des instruments d'évaluation par rapport aux objectifs des matières et vérifié la correcte acquisition des différents niveaux de connaissance requis par les étudiants, afin de détecter les niveaux les plus problématiques. Mots-clef: Evaluation, rendement académique, apprentissage, niveaux cognitifs, instruments d'évaluation. Summary In this paper the results of the analyse carried out by teachers in charge of subjects related to fundamentals sciences in EUIF Blanquerna Nurse and Physiotherapy studies are presented. The quality of the evaluation tools in regard with the subjects objectives has been studied and the correct acquisition of the different levels required by the students have been checked, with the purpose to detect the most problematic levels. Key-words: Evaluation, academic performance, learning, knowledge levels, evaluation tools. Resumen En este trabajo se presentan los resultados de un análisis llevado a cabo por docentes encargados de impartir materias en el ámbito de las ciencias fundamentales, dentro de los estudios de Infermería y de Fisioterapia de la EUIF Blanquerna. Se ha analizado la calidad de los instrumentos de evaluación frente à los objetivos de las materias y se ha verificado la correcta adquisición de los diferentes niveles cognitivos requiridos por los estudiantes, con el fin de detectar los niveles más problemáticos. Palabras-clave: Evaluación, rendimiento académico, aprendizaje, niveles cognitivos, instrumentos de evaluación. Introduction Le manque de performance des étudiants d'Infirmerie et de Physiothérapie dans les matières éminemment scientifiques, telles que la Biochimie, a incité les enseignants concernés à se pencher sur le problème. Une analyse des instruments d'évaluation utilisés a donc été menée dans le but de dégager les causes du fracas des étudiants. Apprécier la pertinence des instruments d'évaluation, c'est en fait vérifier que ceux-ci sont en accord avec les objectifs de l'apprentissage établis par les enseignants et recueillis dans le programme de la matière. Evidemment, le choix de ces instruments a été fait en fonction du type d'apprentissage et ce que l'on sanctionne, par le biais des examens et des épreuves, c'est ce qui a été enseigné par les professeurs et, en principe, appris par les étudiants. Sur cette base, notre soucis a été d'analyser la qualité des instruments d'évaluation utilisés, pour: - 111 Apprécier leur pertinence par rapport aux objectifs d'apprentissage fixés. - Vérifier si les étudiants ont atteint les différents niveaux de complexité du savoir exigé. - Connaître quels sont les niveaux qui offrent le plus de difficultés. Pour pouvoir atteindre le premier de ces objectifs, nous avons classé les items et les questions des épreuves d'évaluation en fonction du niveau de complexité du savoir requis et des objectifs d'apprentissage. Pour atteindre le deuxième et troisième objectif de l'étude nous avons analysé en détail les réponses des étudiants aux énoncés des examens. Méthode Les matières concernées par cette analyse sont: Biochimie humaine (Etudes de Physiothérapie), et Fondement de Biologie (Etudes d'Infirmerie). Ces deux matières sont dispensées durant le premier semestre de la première année d'étude à l'EUIF Blanquerna de l'URL1. Les objectifs formulés dans les programmes correspondants sont les suivants: Biochimie humaine: • • Comprendre et relier les contenus de la matière en évitant la simple mémorisation mécanique. Capter la logique du fonctionnement des aspects de la biochimie les plus fréquemment appliqués dans le domaine sanitaire. Fondement de Biologie: • • Connaître et comprendre les bases chimiques et structurales des principales molécules du corps humain et les fondements de l'organisation et du fonctionnement cellulaire. Relier et appliquer ces connaissances à des situations et des exposés nouveaux. Pour mener à terme notre étude, nous avons adopter le système de catégorisation proposé par Kempa (1986) qui lui même s'est inspiré de celle de Bloom (1956; 1976). La Taxonomy of educational objectives de Bloom, considère sis niveaux cognitifs: connaissance, compréhension, application, analyse, synthèse et évaluation (De Landsheere, 1990). Cependant, des travaux postérieurs groupent les trois derniers objectifs en un seul et, par conséquent, uniquement quatre niveaux sont considérés (Kempa, 1886; Rodríguez et al., 1992). Niveau 1: Connaître et se souvenir des faits, hypothèses, théories, concepts, terminologie et conventions scientifiques. Niveau 2: Comprendre les connaissances scientifiques et ses relations: habileté des étudiants pour expliquer et interpréter l'information présentée et pour l'exprimer sous différentes formes. Evidemment, la compréhension d'un concept suppose sa connaissance. Niveau 3: Appliquer le savoir scientifique acquis à des situations nouvelles2: l'étudiant ayant acquis cette habileté est capable de sélectionner parmi l'ensemble de ses connaissances, aussi bien conceptuelles que méthodologiques, celles qui lui sont utiles pour la résolution de chaque cas nouveau. Niveau 4: Analyser, synthétiser et évaluer l'information scientifique: La capacité de séparer les diverses parties de l'ensemble (analyse) et de réorganiser d'une nouvelle structure (synthèse). De plus, l'information peut être évaluée à ce niveau. Après avoir établi les critères, nous avons classé les items et les questions des examens du mois de février de l'année académique 1999-2000, soit 179 copies pour Fondement de Biologie (Etudes d'Infirmerie) et 201 copies pour Biochimie 1 Escola Universitària d'Infermeria i Fisioteràpia Blanquerna, Universitat Ramon Llull de Catalunya, Barcelona (Espanya) 2 Le verbe appliquer, nous l'employons également lorsque nous faisons référence aux habiletés correspondant au niveau 2 (par exemple appliquer une théorie scientifique pour comprendre un fait observable), ce qui pourrait provoquer des confusions au moment d'établir le classement. Une autre chose à tenir en compte: une situation peut être nouvelle pour un étudiant et non pas pour un autre. 112 humaine (Etudes de Physiothérapie). Nous avons analysé séparément les épreuves de type test (QCM) des autres exercices écrits puis nous avons calculé le pourcentage d'étudiants qui ont répondu correctement aux différents types de questions (QCM ou autres) classés par ordre de difficulté. Finalement, à partir de la grille obtenue nous avons représenté graphiquement les résultats pour faciliter l'analyse et établir les conclusions. Nous avons tout d'abord vérifié l'existence d'items et de questions qui exigent des connaissances acquises du niveau 1, 2 et 3 (respectivement connaître, comprendre et appliquer) afin d'apprécier la pertinence des instruments d'évaluation utilisés. Nous indiquons ci-dessous, à titre d'exemple, quelques items et questions représentatifs de chacun des trois niveaux. Niveau 1: Indique si l'affirmation suivante est vraie ou fausse: L'ATP est une coenzyme du groupe des kynases. Niveau 2: Indique si l'affirmation suivante est vraie ou fausse: Un accroissement de la concentration de dioxyde de carbone au niveau pulmonaire peut produire une acidose respiratoire. Niveau 3: Répond à une des deux questions suivantes: a) Tu es un des favoris pour gagner le marathon de Bolivie qui a lieu à La Paz et pour cela tu dois t'entraîner pendant plusieurs semaines pour pouvoir réaliser la course à 3700 m d'altitude. Un fabricant d'équipement sportif t'invite à passer le week-end de la semaine avant la course, chez lui, à la plage où il organise une fête. Peux-tu accepter son invitation? Justifie ta réponse d'un point de vue biochimique. . b) Ingérer une grande quantité de glucose avant de courir un marathon semble un bon moyen pour augmenter les réserves de combustible. Cependant, les coureurs experts ne prennent pas de glucose avant l'épreuve; quelle en est la raison biochimique? Raisonne ta réponse d'un point de vue biochimique. Résultats • Classification des items et questions de l'examen En ce qui concerne les énoncés de QCM, le résultat de la classification est indiqué dans le tableau 1. Tableau 1: Nombre et pourcentage d'énoncés de QCM dans l'examen, en fonction du niveau de connaissance requis. NIVEAU 1 2 3 Fondement de Biologie (70 questions) Nombre Pourcentage 38 54,30% 20 28,60% 12 17,10% Biochimie humaine (60 questions) Nombre Pourcentage 42 70% 15 25% 3 5% TOTAL (130 questions) Nombre % 80 61,5 35 27,0 15 11,5 Ainsi, pour le cours Fondement de Biochimie, l'examen contient 70 énoncés de QCM dont 38 (54.3%) sont du niveau 1, 20 (28.6%) du niveau 2 et 12 (17.15) de niveau 3. Pour le cours Biochimie humaine il y a 60 énoncés de QCM dont 42 (70%)sont du niveau 1, 15 (25%) du niveau 2 et 3 (5%) de niveau 3. En ce qui concerne les autres épreuves écrites de l'examen, le résultat de la classification est indiqué dans le tableau 2. Tableau 2: Nombre et pourcentage de questions à réponse ouverte dans l'examen, en fonction du niveau de connaissance requis. NIVEAU 1 2 3 Fondement de Biologie (5 questions) Nombre Pourcentage 4 80% 0 0% 1 20% Biochimie humaine (4 questions) Nombre Pourcentage 0 0% 3 75% 1 25% TOTAL (9 questions) Nombre % 4 44,5 3 33,3 2 22,2 113 Ainsi, pour le cours Fondement de Biochimie, l'examen contient 5 questions à réponses ouvertes dont 4 (80%) sont du niveau 1 et 1 (20%) du niveau 3. Pour le cours Biochimie humaine il y a 4 énoncés de ce type dont 3 (75%) sont du niveau 2, et 1 (25%) de niveau 3. • Performances des étudiants Les performances des étudiants aux QCM et aux autres questions de l'examen sont indiquées dans les tableaux 3 et 4, respectivement. Tabla 3: Pourcentage de réponses correctes aux QCM, selon le niveau cognitif. NIVEAU % DE RÉPONSES CORRECTES Fondement de Biologie Biochimie humaine 65,85% 61,39% 57,87% 52,76% 44,98% 44,71% 1 2 3 MOYENNE 63,51% 55,68% 44,93% Tabla 4: Pourcentage de réponses correctes aux questions ouvertes, selon le niveau cognitif. NIVEAU % DE RÉPONSES CORRECTES Fondement de Biologie Biochimie humaine 41,60% 47,08 16% 31% 1 2 3 MOYENNE 41,60% 47,08% 23,50% Dans chaque cas, les valeurs moyennes ont été calculées en tenant compte du nombre de questions appartenant à chaque niveau. Le résultat de l'analyse est résumé dans la figure 1. Figure 1: Performances des étudiants à l'examen – Pourcentage de réponses correctes en fonction du niveau cognitif exigé. QCM: PERFORMANCE DES ETUDIANTS QUESTIONS A REPONSE OUVERTE: PERFORMANCE DES ETUDIANTS 70% 50% POURCENTAGE POURCENTGE 60% 50% 40% 30% 20% 10% 40% 30% 20% 10% 0% 0% 1 2 NIVEAU COGNITIF 3 1 2 3 NIVEAU COGNITIF Discussion et conclusion Cette étude nous a permis de vérifier la pertinence des instruments utilisés pour tester le niveau des connaissances (connaissance, compréhension et application des matières) des 179 et 201 étudiants qui ont suivi, respectivement, les cours Fondement de Biochimie et Biochimie Humaine à l'EUIF Blanquerna de l'URL. Ainsi, les tableaux 1 et 2 indiquent que plus de la moitié des questions d'examen sont du niveau 1, donc fondamentales. Ceci répond au besoin de satisfaire un niveau de connaissance élémentaire et commun pour tous les étudiants; n'oublions pas que le bagage de chaque étudiant est très différent puisque il existe de nombreuses voies d'accès à l'université. De plus, les tableaux 1 et 2 montrent que le pourcentage de questions "difficiles", c'est à dire du niveau 3, est relativement bas(< 20%). 114 D'autre part, les tableaux 3 et 4 montrent d'une forme générale que plus le degré de complexité de la question est élevé et moins d'étudiants y répondent correctement. Cependant, sur les 179 et 201 étudiants qui se sont examinés seul approximativement la moitié répond correctement aux questions de bas niveau (niveau 1) et puisque ces questions sont comparativement les plus nombreuses, on en déduit aisément que ce ne sont pas uniquement les questions "difficiles" (niveau 3) qui font échouer les étudiants aux examens. L’échec académique semble plutôt relié à un problème de consolidation des connaissances fondamentales. Il est intéressant de remarquer que les résultats sont pratiquement identiques pour les deux cours objet d'étude qui sont dispensés par des enseignants différents et pour des carrières différentes. A notre avis, les étudiants réalisent une étude superficielle, centrée sur la mémorisation des concepts. Cette procédure d'étude est tout à fait insuffisante pour ce type de discipline qui requiert un processus d'abstraction et de raisonnement complexe. De plus, nous pensons qu'il est indispensable que ces étudiants atteignent des niveaux supérieurs de compréhension et d'application, puisque ces matières sont considérées comme des instruments dans ces carrières. Nous avons pu également observé que l'étudiant a plus de difficulté à répondre aux questions qui exigent une réponse sous forme de rédaction, et ceci quel que soit le degré de difficulté de l'énoncé. Le problème vient non seulement du manque d'appropriation du savoir mais aussi d'un manque d'habilité pour l'expression écrite. Les enseignants qui comme nous se sont confrontés à cette problématique ont dû se poser ces questions: Pourquoi les étudiants n'atteignent-ils pas les premiers niveaux de connaissance? Quelles stratégies, sans renoncer aux objectifs, fautil mettre en œuvre pour y remédier? Où chercher la meilleure solution aux difficultés présentées par les étudiants? Voilà des interrogations auxquelles les enseignants universitaires ont parfois du mal à y répondre, étant donné que le contexte éducatif dans lequel ils se trouvent les oblige à ne surtout pas apporter de solutions inadéquates. Toutefois, selon nos dernières enquêtes une des solutions qui semblerait améliorer notablement les performances cognitives des étudiants serait de leur fournir la série d'examens posés antérieurement (ou des cas similaires) et que ceux-ci les résolvent si possible en petits groupes. Cet "entraînement" sans nul doute facilite l'acquisition des connaissances et donc permet une meilleure préparation à l'examen des étudiants qui ont étudié au préalable le sujet. Bibliographie Bloom, B.S. (1956). Taxonomy of Educational Objectives. The Classification of Educational Goals. New York: Mc Kay. Bloom, B.S. (1976). Taxonomía de los objetivos de la educación. Clasificación de las Metas Educativas. 3rd edition. Alcoy: Marfil. De Landsheere, V. (1990). Taxonomies of Educational Objectives. The International Encyclopaedia of Educational Evaluation. Walberg, H.J & Haertel, G.D. editors. Oxford: Pergamon Press, 179-189. Espín, J.V. & Rodríguez, M. (1993). L’avaluació dels aprenentatges a la universitat. Barcelona: Publicacions Universitat de Barcelona. Kempa, R. (1986). Assessment in Science. Cambridge: Cambridge University Press. Rodríguez, L.M. et al. (1992).Una propuesta integral de evaluación en ciencias. Enseñanza de las Ciencias, 10 (3), 254267.