Was ist der maximale Zeitunterschied, um ein akustisches und visuelles Ereignis noch zuzuordnen?

Ich entwickle ein Spiel, bei dem die Musik mit der eigentlichen Spiellogik synchronisiert werden muss. Das bedeutet, dass einige Objekte im Spiel auf Ereignisse in der Musik reagieren. Natürlich wird die Musik nie vollständig mit der Ausgabe auf dem Bildschirm synchronisiert, daher brauche ich eine Angabe der Zeitdifferenz, damit ich die Musik manuell mit der Spiellogik synchronisieren kann.

Was ist die durchschnittliche/maximale Zeit für einen Menschen, um ein visuelles Ereignis auf dem Bildschirm noch mit einem akustischen Musikereignis zu assoziieren?

Ich würde empfehlen, eine Google Scholar-Suche nach Dingen wie "audiovisuelles Bindungsfenster" durchzuführen. Scholar.google.com/…

Antworten (1)

Kurze Antwort
Bei einfachen Reizen können visuelle und auditive Reize zwischen 25 und 50 ms versetzt sein und dennoch als von ein und demselben Ereignis stammend empfunden werden.

Hintergrund
Die Frage kann wie folgt umformuliert werden: Was ist das Integrationsfenster der intersensorischen Asynchronie im Fall von visuellen und auditiven Reizen ?

Ein bekanntes Beispiel, bei dem diese beiden Reizmodalitäten als getrennt wahrgenommen werden, obwohl sie tatsächlich von demselben Ereignis stammen, ist ein Donner, der nach einem Blitz zu hören ist. Dies wird durch die Tatsache verursacht, dass sich Schall viel langsamer als Licht ausbreitet und daher ein Donner dem Blitz um Sekunden nacheilen kann.

Donner Blitz
Quelle: Nasa

In vielen Fällen wird jedoch eine multimodale Wahrnehmung tatsächlich als synchron empfunden, während sie aufgrund unterschiedlicher physikalischer Eigenschaften der Reize tatsächlich zeitlich versetzt sind. Nehmen Sie den Sturm als Beispiel – wenn er weit entfernt ist, ist der Donner wahrnehmbar vom Blitz getrennt, weil der Ton dem Licht um Sekunden nacheilt. Aber wenn das Gewitter nah genug ist, werden das akustische Knacken und die visuellen Blitze als synchron wahrgenommen, obwohl sie tatsächlich immer noch versetzt sind, weil sich der Schall so viel langsamer als das Licht ausbreitet.

Daher stellt sich die Frage, wie Sie zu Recht fragen, in welchen Bereichen Stimuli über Modalitäten hinweg asynchron sein können, während sie als ein Ereignis wahrgenommen werden? Mit anderen Worten, was ist das Integrationsfenster ?

Vroomen und Keetels (2010) kommen in ihrem Review zu diesem Thema zu dem Schluss, dass eine Reizasynchronität bei akustischen Signaltönen und visuellen Blitzen zwischen 25 und 50 ms liegen kann und dennoch als vom selben Ereignis stammend wahrgenommen wird.

Das Integrationsfenster zwischen komplexeren Stimuli kann viel größer sein. Beispielsweise kann das Fenster für Sprache und visuelle Informationen bis zu 203 ms lang sein . Solche großen Integrationsfenster weisen auf höhere Prozesse hin, die im Gehirn eine Rolle spielen. Es wird erwartet, dass nur zeitliche Verzögerungen unter 20 ms aufgrund fest verdrahteter Beschränkungen des Auflösungsvermögens der einzelnen Sinne unbemerkt bleiben.

Daher argumentieren Vroomen und Keetels (2010) , dass im Gehirn höhere Prozesse am Werk sein müssen, die zeitlich versetzte, aber scheinbar zu ein und demselben Ereignis gehörende Wahrnehmungen aktiv synchronisieren. Ein solcher Mechanismus wird als temporaler Bauchredner bezeichnet, was bedeutet, dass eine Wahrnehmungsmodalität aktiv zeitlich verschoben wird , um sie an eine andere Modalität anzupassen . Dieser Effekt ist bei visuellen Stimuli am ausgeprägtesten, da eine visuelle Wahrnehmung aktiv zeitlich angepasst wird, um mit einem akustischen oder taktilen Stimulus übereinzustimmen. Wahrscheinliche visuelle Wahrnehmungen werden vorzugsweise vom Gehirn verschoben, da das visuelle System der langsamste aller Sinne ist.

Referenz
Vroomen & Keetels, Att Percept Psychophys 2010; 72 (4): 871-84