Christian GRAFF et al. , Grenoble

Mission CNRS pour l’Interdisciplinarité
Défi Auton, décembre 2015
AdViS
(Adaptive Visual Substitution)
Christian GRAFF et al. , Grenoble
1
Substitution visuo-auditive
Caractéristiques
spatiales
(global/focal)
Carte de profondeur
Capture
vidéo
Scène visuelle
Paramétrage
utilisateur
Codage
audio
Collaboration GIPSA-Lab/LPNC
D. Pellerin, S. Huet, C. Graff
Fristot V., Boucheteil J., Granjon L., Pellerin D., Alleysson D. (2012). European Signal Processing Conference (EUSIPCO).
Stoll, C., Palluel-Germain, R., Fristot, V., Pellerin, D., Alleysson, D. & Graff, C. (2015). Applied Bionics and Biomechanics.
2
CONSTAT
• La plupart des dispositifs de substitution sensorielle
- ne quittent pas les labos de robotique
- imposent le flux de données à l’utilisateur
• La plupart des non-voyants
- n’utilisent pas de dispositif électronique
- ont besoin de formation à leur usage
3
Solutions AdViS
Architecture générique/modulaire
- Importer les innovations
- Tester en milieux virtuel et réel
Sensing
idem retina
Encoding
Tuning
Idem cerebellum, colliculi
idem thalamus & V1
Transcoding
and mixing
idem associative areas
Synthesizing
idem premotor areas
Actuating,
emitting
idem motor areas
4
Projet Blind gaze
Boucles perception/action, rétroactive et proactive
- Gérer des relations focale / scène globale
- Employer l’oculomotricité résiduelle pour restituer les boucles primaires
Visual
field
Retina
Visual areas
Camera
Eye muscles
Colliculi
SSD
Eye-tracker
Soundscape
Ear
Spatial areas
Audio areas
Substitution visuo-auditive avec oculomètre
5
Nouvelles
technologies
Acceptabilité
Ciblage
de solutions
SSD
Recherche
Associations
REMÉDIATION
Evaluation
Formation à
l’usage
DÉFICIT
Ciblage
des problèmes
Oculomotricité
Soin et
rééducation
6
Partenaires actuels
Christian Graff (MC HDR), psychophysique bio-inspirée
Laboratoire de Psychologie & Neuro-Cognition (LPNC)
Denis Pellerin (PR), traitement du signal et des images
Sylvain Huet (MC), adéquation algorithme architecture
Lab. Grenoble Images Parole Signal Automatique (GIPSA-Lab)
Aurélie Landry (MC), analyse des usages dans la conception de
dispositifs Laboratoire Interuniversitaire de Psychologie (LIP)
Etudiants, Traitement du signal et des images, Architectures
logicielles, Psychologie/ergonomie, Sciences Cognitives
Université Grenoble Alpes, Grenoble - Institut National Polytechnique
7