Multisensorische Wahrnehmung

Sinne (Wahrnehmung)
Sehen
(Vision)
Riechen
(Smell)
Hören
(Hearing)
Sinne
Schmeck
en
(Taste)
Tasten
(Touch)
Weitere Sinne
•Körperempfindung
•Temperatursinn
•Schmerzempfindung
•Vestibulärer Sinn
Multisensorische Wahrnehmung
 Objekte oder Ereignisse regen oft
mehrere Sinne an
Sehen
(Vision)
Riechen
(Smell)
Hören
(Hearing)
Sinne
Schmecken
(Taste)
Tasten
(Touch)
Weitere
Sinne
 Multisensorische Verarbeitung
bringt Informationen zu der
einheitlichen Wahrnehmung eines
Gegenstands zusammen
 Eine sensorische Verarbeitung
kann durch eine andere,
gleichzeitig ablaufende
sensorische Verarbeitung
beeinflusst werden
 Die Erregung von einem Sinn kann
auf einem anderen Sinn
übertragen werden
(Querverbindungen, Synästhesien)
Multisensorische Illusionen
Beweise für Multisensorische Wahrnemung
 Bauchredner-Effekt (Ventriloquism effect)
 Prism Adaptation
 Rubber Hand Illusion
 McGurk Effekt
 Doppelblitz Illusion (Double flash illusion)
 Prellball Effekt (Bouncing-ball illusion)
 Crisp-Sound-Effekt (Sounds verändern Geschmack)
 Synästhesie
Bauchrednereffekt (Video)
Bauchredner-Effekt
 Welche Faktoren machen den Bauchredner-Effekt
wirksam?
McGurk Effekt
Bitte sehen Sie sich folgenden Film
an und berichten Sie anschließend,
welche Worte der Mann sagt.
A. Ba
B. Da
C. Ga
Schließen Sie nun Ihre Augen;
Hören Sie sich den Film erneut an,
und berichten Sie, welche Worte sie
jetzt hören?
Nochmal, beobachten Sie nun die
Lippenbewegungen, und berichten
Sie, welche Worte gesagt werden?
Die relative dominanz des Sehens
 Bauchredner-Effekt
 Die gesehene Position
einer Schallquelle
dominiert über die
gehörte Position –
Konzentration auf den
sich bewegenden Mund
 McGurk Effekt
 Mundbewegungen
verändern dis
Sparchwahrnehmung
Sehen:
- Hohes räumliches
Auflösungsvermögen
Angemessenheits-Hzpothese:
Der besser geeignete Sinn setzt sich jeweils durch
Prellball Effekt
Test 1: Bewegen sich die
Bälle übereinander hinweg?
Test 2: Prallen die Bälle
voneinander, auf Höhe des
Fixationskreuzes ab ?
Temporaler Bauchredner-Effekt
1. Ohne Geräusche
2. Mit Geräusche
Zeitliche Dominanz des Hörens
 Prellball Effekt
 Die Zeit des Zusammenstoßes ist kritisch
 Ein Kurzes Geräusch steigert die Wahrnehmung eines
„Zusammenstoßes“
 Bistabile scheinbare Bewegung
 Auditive Reize haben ungleiche inter-Stimuli Intervalle
 Der Zeitpunkt eines auditiven Ereignisses beeinflusst den
wahrgenommenen Zeitpunkt des visuellen Ereignisses
Angemessenheits-Hypothese:
Der besser geeignete Sinn setzt sich jeweils durch
Bestimmung des Weichheitsgrades
durch Tasten und Sehen
Live demo
1. Bitte vergleichen Sie den Weichheitsgrad dieser
Objekte...
2. Bitte fassen Sie die Objekte an und vergleichen Sie sie
wieder ...
Rubber hand illusion
Demo 1:
http://www.youtube.com/watch?v=nzF_DfOafKw
Demo 2:
http://www.youtube.com/watch?v=sxwn1w7MJvk
Transmodaler Effekt
Bitte wählen Sie in wärmste
Farben auf der linken Seite.
A
B
Sehen
C
D
Temperatursinn
Maluma & Takete
Welch Form passt zu dem
Wort “Maluma”? Und
welche Form zu “Takete”?
Transmodale Qualitäten 
Synästhesie
Synäthesie
Das farige Hören: Das klassische Beispiel für Synästhesie
Composition X (Kandinsky 1939)
Programm
4. May
Einführung zum Thema
11. May
Einführung: Literaturrecherche und Präsentation
18. May
G1: Sehen und Hören: Bauchredner-Effekt
25. May
G2. Sehen und Hören: McGurk Effekt
1. Juni
G3. Sehen und Hören: Temporale Bauchredner-Effekt
(Doppelblitz Illusion & Prellball Effekt)
8. Juni
G4: Sehen und Körperempfindung:
Rubber Hand Illusion
15. Juni
G5: Sehen und Körperempfindung:
Prism Adaptation und ihre Anwendung
22. Juni
G6. Hören und Schmeken: Crisp Sound Effekt
29. Juni
G7. Transmodaler Effekt: Synästhesie
6. Juli
G8. Multisensorische Aufmerksamkeit
13. Juli
G9. Multisensorische Warnung und ihre Anwendung
20. Juli
G10. Modelle der Multisensorischen Integration
27. Juli
Prüfung und Rückmeldung
Key papers
BauchrednerEffekt
•Slutsky, D. A., & Recanzone, G. H., (2001) Temporal and spatial dependency of the
ventriloquism effect, NeuroReport, 22, 7-10.
Prism Adaptation
•Held, R., (1965) Plasticity in sensory-motor systems, Scientific American, 213 (5), 84-94
Rubber Hand
Illusion
•Botvinick, M., Cohen, J., (1998), Rubber hands ‘feel’ touch that eyes see, Nature, 391, 756
•Ehrsson, H., Spence, C., Passingham, R., (2004), That’s my hand! Activity in premotor cortex
reflects feeling of ownership of a limb, Science, 305, 875-877
McGurk Effect
•McGurk, H., MacDonald, J. (1976), Hearing lips and seeing voices, Nature, 264, 746 – 748
Doppelblitz Illusion
& Prellball Effekt
•Sekuler, R., Sekuler, A., Lau, R., (1997), Sound alters visual motion perception, Nature, 385,
308
•Shams, L., Kamitani, Y., Shimojo, S., (2000), what you see is what you hear, Nature, 408, 788
Key papers
Crisp Sound Effekt
• Zampini, M., Spence, C., (2004), The role of auditory cues in
modulating the perceived crispness and staleness of potato
chips, Journal of Sensory Studies, 19, 347-363.
Synästhesie
• Palmeri, T. J., et al. (2002), The perceptual reality of synesthetic
colors, PNAS, 99, 4127-4131.
Multisensorische
Aufmerksamkeit
• McDonald, J. J., et al., (2000), Involuntary orienting to sound
improves visual perception, Nature, 407, 906-908.
Multisensorische Warnung
• Ho, C., Reed, N., Spence, C., (2007), Multisensory In-Car
Warning Signals for Collision Avoidance, Human Factors, 49,
1107-1114
Modelle der
Multisensorischen
Integration
• Welch, R.B. & Warren D. H., (1980), Immediate perceptual
response to intersensory discrepancy, Psychological bulletin,
638-667
Referat
 3 Personen pro Gruppe
 Jede Woche ein Thema (klassische Artikel)
 Präsentation
 Was ist die wichtigsten Ergebnisse des Themas
 Präsentation auf ein wichtiges Paper
 Forschungsfragen
 Forschungsmethode
 Ergebnisse
 Zusammenfassung
 Handout
 Kopien für alle
Prüfungsform
1. Referat
Dauer: 20-30 Minuten / Person
2. Schriftliche Ausarbeitung
Referat
50%
Benotung
Handout
Multiple-Choice-Prüfung
Schrifl.
Ausarbeitung
50%
Benotung
 Referat (50%)
 Ihre Bemerkung
 Meine Bemerkung
Kriterien: Klarheit, Gestalt, Beispiele, eigene Gedanken
 Schriftliche Ausarbeitung
 Handout (25%)
Kriterien: Klarheit, Gestalt
 Multiple-Choice-Prüfung (25%)
Literatur
 Einführung in die Wahrnehmungspsychologie, Rainer
Schönhammer
 Verschiedene Artikel zum download
http://www.psy.lmu.de/exp/teaching/courses/
Gruppen und Thema der nächsten
Woche
 Gruppen
 1, 2, ..., 10
 Thema der nächsten Woche:
 Einführung: Literaturrecherche und Präsentation