Labo des logiciels Evaluation des logiciels éducatifs

05/12/2014 08:48
Introduction
Présentation
Les enseignants espéraient un bouleversement de la
pédagogie grâce à ce nouvel outil.
Labo des logiciels
L'ordinateur
devait
apporter
une
individualisation des rythmes de travail.
Evaluation des logiciels éducatifs
La pauvreté des apports de l'informatique résulte
d'une méconnaissance de l'acte didactique de l'EAO en
général et des logiciels existants en particulier.
Par Ahram
Mars 2012
05/12/2014 08:48
Introduction
Evaluation des logiciels éducatifs
2
Introduction
L’évaluation des logiciels éducatifs est un domaine vaste et
complexe.
 nombreuses approches méthodologiques
 plusieurs acteurs.
L'EAO tente de faciliter les apprentissages.
Mais l'ordinateur est trop souvent considéré comme
une méthode pédagogique à lui seul, alors qu'il ne
peut être qu'un auxiliaire.
05/12/2014 08:48
réelle
Evaluation des logiciels éducatifs
 Donc nécessité d’un cadre de référence.
3
Acteurs
05/12/2014 08:48
Evaluation des logiciels éducatifs
4
Acteurs
• Qui doit choisir le logiciel approprié pour réaliser une
activité d'apprentissage en classe ?
• constituer un répertoire des logiciels éducatifs
disponibles, (gratuits, commerciaux ou libres, accessibles
en ligne, téléchargeables ou sur cédérom ou DVD);
L'évaluateur peut être l'enseignant lui-même.
Cependant, une telle évaluation ne s'improvise pas.
C'est pourquoi il est utile de l'instrumenter, par
exemple en recourant à une grille d'évaluation.
05/12/2014 08:48
Evaluation des logiciels éducatifs
Les logiciels: Notion et classification
5
05/12/2014 08:48
Evaluation des logiciels éducatifs
6
1
05/12/2014 08:48
Acteurs de l’évaluation
Un début d’évaluation
Trois types :
• Renseignements pertinents :
A1) Les évaluateurs
– nom du producteur et du distributeur, site de téléchargement,
coût, licences, paramètres techniques, etc.
enseignants, chercheurs, développeurs, des éditeurs etc..
A2) Les évalués
apprenants connus, apprenants stéréotypés caractérisés
par un nombre d’indicateurs ou grandes catégories
(exemple: les enfants de 12 à 14 ans).
– Classement selon le niveau scolaire, le domaine d'apprentissage,
les compétences transversales, etc.,
– en lien avec le Programme de formation de l'école du pays.
A3) Le public de l’évaluation
enseignants, apprenants, parents, développeurs, éditeurs,
institutions,..
05/12/2014 08:48
Evaluation des logiciels éducatifs
7
Des questions intéressantes
On peut distinguer trois buts principaux pour l’évaluation de logiciels
éducatifs :
Un des premiers buts d’un logiciel éducatif est d’améliorer
l’apprentissage.
Donc toute méthode d’évaluation se fonde sur une théorie de
l’apprentissage (explicite ou non).
Un modèle à trois dimensions prenant en compte
•les buts de l’évaluation,
•les contextes (y compris les acteurs concernés)
•et les méthodologies utilisées caractéristiques.
Evaluation des logiciels éducatifs
8
Evaluation des logiciels éducatifs
Des questions intéressantes
Quel critère de référence ?
Pas d’évaluation sans critère de référence.
05/12/2014 08:48
05/12/2014 08:48
9
• Améliorer l’enseignement et l’apprentissage ;
• Proposer des critères
 pour l’élaboration des cahiers des charges ou
 pour la sélection des logiciels utilisés
• Fournir aux développeurs les informations nécessaires à la qualité
du développement.
05/12/2014 08:48
Evaluation des logiciels éducatifs
10
Méthodes
Méthodes
M1) Méthodes catégorielles (Classification)
Il y a plusieurs exemples de typologies de ce type. Par exemple,
celle proposée par l’OCDE en 1989 :
• drill,
• tutoriel,
• tutoriel intelligent,
• simulation et modélisation,
• résolution de problèmes,
• jeux, bases de données,
• traitement de texte,
• gestion de l’apprentissage,
• aide à l’expérimentation de laboratoire,
• exploration et découverte.
M2) Check-list (ou méthode par jugement)
Il s’agit de fournir un large ensemble de questions sur
différents critères :
 l’ergonomie,
 les qualités pédagogiques,
 ...
L’évaluateur répond positivement ou négativement pour
chacun des critères. Le profil constitué fournit le jugement
de l’évaluateur sur la qualité du logiciel. Un bon exemple
est la méthode MEDA
05/12/2014 08:48
Evaluation des logiciels éducatifs
Les logiciels: Notion et classification
11
05/12/2014 08:48
Evaluation des logiciels éducatifs
12
2
05/12/2014 08:48
Méthodes
Méthodes
M3) Evaluation qualitative: Il s’agit de rassembler et
d’analyser un ensemble de données qualitatives issues
d’interviews, d’observations, de questionnaires. Un bon
exemple est la démarche d’ « évaluation en contexte »
du logiciel MEDA
M4) Evaluation quantitative: Ce type d’évaluation est
basée sur des traitements statistiques appliqués à des
pré-tests et post-tests.
M5) Evaluation éclectique: Application cohérente de plusieurs
méthodes intégrant à la fois des méthodes d’évaluation
qualitative et quantitative.
M6) Evaluation critique: basée sur l’avis subjectif d’experts en
Commissions donné sans explicitation de critères particuliers.
 La Commission Européenne organise ses évaluations par
commissions d’experts.
M7) Evaluation synthétique: tentative d’élaborer un cadre théorique
synthétique pour réaliser l’évaluation.
 Un bon exemple est la grille proposée par Reeves (1994) .
05/12/2014 08:48
Evaluation des logiciels éducatifs
13
Méthode
: Evaluation en contexte
0.
05/12/2014 08:48
Evaluation des logiciels éducatifs
14
Méthode
: Evaluation en contexte
0.
il s’agit d’observer l’interaction entre l’enseignant, l’apprenant et le
logiciel.
L’évaluation locale
(Marqués, 1995) propose de s’intéresser aux:
- caractéristiques préalables : objectifs pédagogiques, étudiants,
ressources ;
1. Evaluation qualitative en contexte local.
2. le plus souvent études de cas qualitatives.
- stratégies de l’enseignant : ses explications préalables, les
activités prévues ;
Les développeurs utilisent ce que l’on appelle la technique du focusgroup. On propose un prototype à un petit groupe d’apprenants. On
observe l’usage en situation et ensuite on propose une discussion de
type brain –storming pour rechercher les améliorations possibles.
- organisation de la session de travail avec le logiciel et les
méthodes d’utilisation du logiciel (navigation par exemple) ;
- l’évaluation des résultats obtenus.
05/12/2014 08:48
Evaluation des logiciels éducatifs
15
Méthode
: Evaluation en contexte
0.
05/12/2014 08:48
Evaluation des logiciels éducatifs
16
Méthode : Evaluation en contexte
2. Approche éclectique
Un bon exemple est la méthode TILT. Elle inclut :
- échange préalable avec les enseignants pour définir les objectifs,
l’usage, le choix des méthodes
- une évaluation par un évaluateur hors contexte
- épreuve d’évaluation des apprentissages (quizz ou autre)
- une observation en classe
- la rédaction d’un rapport provisoire
- la discussion avec les enseignants et éventuellement les pprenants
- la rédaction du rapport final.
05/12/2014 08:48
Evaluation des logiciels éducatifs
Les logiciels: Notion et classification
17
05/12/2014 08:48
Evaluation des logiciels éducatifs
18
3
05/12/2014 08:48
Dans certains pays, il existe
une procédure d’agrément
Dans certains pays, il existe
une procédure d’agrément
Des règlements ont été établis; exemple:
La procédure d'agrément concerne 3 types de ressources :
les manuels scolaires
les logiciels scolaires les outils pédagogiques
« L'agrément indicatif de conformité a une validité
de huit ans. l'outil pédagogique agréé peut se voir
apposer le label "Conforme aux référentiels
pédagogiques et agréé par la Commission de
pilotage (pour autant que le l’outil agréé ne soit pas
modifié dans sa forme ou son contenu). »
Ces ressources, peuvent être proposées pour agrément via un
formulaire spécifique, auprès de la Commission de Pilotage.
par :
•Un auteur ou un éditeur public ou privé;
•Une équipe pédagogique ou un ou plusieurs enseignants;
•Un service pédagogique du réseau d'enseignement de la
Communauté française ;
•Une autre organisation ou association publique ou privée.
05/12/2014 08:48
19
Evaluation des logiciels éducatifs
05/12/2014 08:48
Evaluation des logiciels éducatifs
20
Dans certains pays, il existe
une procédure d’agrément
Et dans les autres pays ?
On est au stade primitif…
Le sujet est: comment introduire
informatique dans l’enseignement ?
l’outil
L’évaluation des logiciels se fait par:
- Quelques pionniers
- dans quelques discussions de salon
05/12/2014 08:48
Evaluation des logiciels éducatifs
Les logiciels: Notion et classification
21
4