Adaptation automatique du contenu et de l`interaction avec

DES STIC ET DES HOMMES
OpenViBE2 : Interfaces CerveauOrdinateur et Jeux Vidéo
AAP CONTINT 2009
OBJECTIFS DU PROJET
OpenViBE2 est un projet de recherche collaborative qui a étudié
l’intérêt et le potentiel des technologies dites d’ « interface
cerveau-ordinateur » (ou ICO) dans le domaine des jeux vidéo.
Un consortium pluridisciplinaire de 9 partenaires a été formé
réunissant des laboratoires académiques pionniers dans le
domaine (Inria, Inserm, CEA, GIPSA-Lab), des industriels du jeu
vidéo reconnus (UBISOFT, BLACKSHEEP STUDIO, KYLOTONN
GAMES), et des spécialistes des usages et du transfert (LUTIN,
CLARTE). Le but du projet OpenViBE2 était alors d’identifier et
d’utiliser l’ « état mental » et les réponses cérébrales de
l’utilisateur captés avec une ICO, afin d’adapter la manière avec
laquelle l’utilisateur peut interagir avec le jeu vidéo et le contenu
du jeu lui-même. Après plus de 3 ans de travaux, et l’obtention
d’avancées scientifiques nombreuses, associées à la mise au
point de prototypes industriels avancés, ce projet permet de
mieux maîtriser l’avenir de ces technologies sur le marché
français et international..
spécifiques aux signaux électriques EEG et au contexte du jeu
vidéo, et (3) au niveau technologique, concernant l’interaction
homme-machine et la mise au point de nouvelles techniques pour
l’interaction avec des environnements virtuels et jeux vidéo basée
sur l’activité cérébrale. Au cours du projet, des avancées
scientifiques importantes ont été obtenues dans ces trois
domaines: neuroscience, traitement des signaux électriques
cérébraux, et interfaces homme-machine et réalité virtuelle.
Sur le plan scientifique nous avons identifié de nouvelles activités
mentales dans les signaux électriques cérébraux. Nous avons
trouvé de nouvelles techniques pour filtrer et interpréter ces
signaux. Enfin, nous avons proposé de nouveaux concepts
d’interaction basés sur l’activité cérébrale. Nous avons aussi
réalisé trois prototypes de jeu pilotés par ICO: un jeu classique,
un jeu d’entraînement cérébral, et un jeu sérieux pour la
réhabilitation des enfants souffrant de troubles attentionnels.
Nous avons enfin mené une campagne de tests à la Cité des
Sciences sur plus de 400 personnes !
Nous avons publié près de 30 articles scientifiques dans des
conférences ou des revues internationales de référence dans les
différents domaines concernés (neurosciences, traitement du
signal, Interfaces Homme-Machine, etc). Nos prototypes ont
permis d’illustrer les avancées scientifiques du projet dans des
cadres industriels concrets. Et de nombreux résultats du projet
sont disponibles pour tous, à travers le logiciel libre et gratuit
« OpenViBE » (http://openvibe.inria.fr).
CONCLUSION ET PERSPECTIVES
Jeu de tir piloté par l’activité cérébrale : le joueur doit détruire les vaisseaux
ennemis situés en haut de l’écran. Il dispose de trois commandes : aller à droite,
aller à gauche, et tirer. Pour les activer il doit se concentrer sur la zone du vaisseau
correspondant à l’action qu’il souhaite déclencher.
MÉTHODOLOGIE ET RESULTATS
Les Interfaces cerveau-ordinateur permettent de capter l’activité
électrique avec des systèmes électroencéphalographiques
(EEG : électrodes disposées à la surface du crâne) et de la
traduire en commande pour un ordinateur. Mais interagir avec un
jeu vidéo en utilisant une ICO soulève plusieurs défis
scientifiques : (1) au niveau neurophysiologique, à travers
l’expérimentation
et
la
validation
de
marqueurs
électrophysiologiques (EEG) dans le contexte des jeux vidéo, (2)
au niveau technologique, concernant la conception et le
développement de nouvelles techniques de traitement du signal
COORDINATEUR
& PARTENAIRE
Anatole Lécuyer (Inria)
[email protected]
Inria Rennes, Campus de Beaulieu
35042 Rennes Cedex
En conclusion, le projet OpenViBE2 a permis d’acquérir une
expertise scientifique et un savoir-faire technologique unique au
monde sur l’utilisation de cette technologie très prometteuse dans
un marché porteur.
Des avancées scientifiques importantes ont été obtenues dans de
multiples domaines tels que les neurosciences, le traitement des
signaux électriques cérébraux, ou les interfaces homme-machine
et la réalité virtuelle.
Des prototypes ont permis d’illustrer les nombreux résultats
scientifiques du projet dans des cadres industriels concrets.
Les résultats du projet sont capitalisés sous la forme de savoirfaire, de méthodes et de logiciels tels que le logiciel libre
OpenViBE, qui doivent permettre de mieux maîtriser à l’avenir
l’arrivée sur le marché du grand public de ces technologies ICO.
Le projet OpenViBE2 est un projet de recherche industrielle
coordonné par Inria (Anatole Lécuyer). Il a associé Inria, Inserm,
CEA List, GIPSA-Lab, CHART, CLARTE, UBISOFT, KYLOTONN
GAMES, BLACKSHEEP STUDIO. Le projet a démarré en
Octobre 2009 et a duré 39 mois. Il a bénéficié d’une aide ANR de
1, 10 M€ pour un coût global de l’ordre de 3,26 M€.