McGurk-effekten: hvorfor øynene dine kan påvirke hva du hører?

Når du ser dårlig dubbet utenlandske film, er det veldig lett å se at lydene som slippes ut fra munnen på skuespillerne ikke sammenfaller med sine leppebevegelsene.

Med andre ord, selv når våre øyne og ører blir stimulert samtidig i løpet av filmen, må vår hjerne utføre en god jobb, betaler oppmerksomhet til matchende leppebevegelser og lyder.

Hva er McGurk-effekten

Men hjernen kan også bli villedet. I en spennende illusjon kjent som McGurk effekten, kan observasjon av den menneskelige leppebevegelsene lure hjernen til å høre feil lyd.

McGurk effekten oppstår når det er en konflikt mellom visuell tale, det vil si bevegelse av noens munn og lepper, og høre tale representert lyder som en person hører. Og det kan føre til at oppfatningen av en helt annen melding.

En studie ved hjelp av en datamodell

I den nye studien har nevrologer fra "Baylor" College of Medicine i Houston prøvde å tilby en kvantitativ forklaring av grunnene McGurk effekten. De har utviklet en datamodell som var i stand til å forutsi når McGurk effekten bør eller ikke bør forekomme hos mennesker, ifølge resultatene publisert 16. februar i tidsskriftet PLoS Computational Biology.

Demonstrasjonen McGurk effekten brukt i studien, ble deltakerne bedt om å forlate øynene lukket mens du lytter til en video som viser en person, noe som gjør ham lyden "ba-ba-ba". Deretter ble deltakerne bedt om å åpne øynene og se nøye på munnen på en person i videoen, men ingen lyd. Deltaker visuelle effekter så ut som om mannen sa "ha-ha-ha." På den siste fasen av forsøket ble gjengitt den samme videoen, men denne gangen lyden ble slått på og partiet tilbød ham en titt. Følsomme for McGurk effekten mennesker har rapportert at den tredje gangen de hadde hørt lyden "da-da-da", som ikke svarer til noen auditive eller visuelle signaler, sett tidligere.

Dette skjer fordi hjernen prøver å bestemme hva, etter hans mening, lyden nærmere hva han ser visuelt. Når deltakeren lukker øynene igjen, og forskere har gjengitt lyden av videoen, han igjen hørte den originale lyden "ba-ba-ba".

Effekten ble først beskrevet i et eksperiment utført i 1976 av psykolog Harry Mc Gurk og John MacDonald. Han viste at visuell informasjon gitt av bevegelser i munn, kan påvirke og omdefinere måten en person tenker at han hører.

Tippe illusjon

"McGurk effekten - er et kraftig, multi-sensorisk illusjon - sa medforfatter av studien John Magnotti, en doktorgradsstudent ved Institutt for nevrokirurgi i" Baylor ". - Hjernen oppfatter det auditive og visuelle tale og kombinerer dem til å skape noe nytt ".

Når mennesker kommuniserer ansikt til ansikt, er hjernen engasjert i komplekse aktiviteter, som han prøver å bestemme hvordan du kan kombinere leppe bevegelse med talelyder som blir hørt, sa Magnotti.

I studien har forskerne forsøkt å forstå hvorfor hjernen er bedre i stand til å sette noen stavelser å tolke lyd som høres riktig, men andre ikke.

årsaks konklusjon

For å forstå dette, stolte de på ideen om modellen, kjent som den kausale konklusjonen, eller prosessen som den menneskelige hjernen avgjør om lyd og visuelle talelyder produsert av samme kilde. Andre forskere har utviklet en modell for å bidra til å forutsi når kan oppstå McGurk-effekten, men denne nye studien er den første til å omfatte en årsak-virkning-forhold i sin beregning, sa Magnotti. Factoring i årsaks slutning kan forbedre nøyaktigheten av den nye modellen i forhold til de forrige, som også var å forutsi en illusjon.

For å kontrollere riktigheten av sine modellprediksjoner forskerne rekruttert 60 deltakere, og ba dem om å lytte til et par av auditiv og visuell tale fra en enkelt høyttaler. Deretter ble deltakerne bedt om å bestemme hva slags lyd de hadde hørt :. "Ba", "da" og "ga"

Deres resultater viste at den utviklede modellen kan sikkert forutsi når de fleste deltakerne i eksperimentet vil teste McGurk effekten. Men, som forventet i sin beregning, ble det identifisert personer som ikke var utsatt for denne delte Magnotti.

Interessant, når den samme testen ble gjennomført med studenter i Kina, ikke USA, det har blitt bevist at McGurk effekten virker på andre språk.

Praktisk anvendelse av de benyttede datamodeller

Magnotti sa at etter hans mening, kan datamaskinen modellen som er utviklet for denne studien også være av praktisk bruk. For eksempel kan denne modellen være nyttig for selskaper som skaper datamaskiner som bidrar til å identifisere den, for eksempel Googles hjemmeside eller Amazon Echo.

Hvis disse teknologiene var kameraer, kan de integrere folk i bevegelsen av leppene, sier de, for å forbedre nøyaktigheten av sine talegjenkjenningssystemer.

Modellen kan også hjelpe barn med cochleaimplantat, bedre forståelse av mekanismen av forskere som visuell det påvirker det man hører, sa Magnotti.