Hva er McGurk -effekten?

McGurk -effekten er et prinsipp involvert i forståelsen av menneskelig tale. Essensen av effekten er at visuelle signaler spiller en viktig rolle for lytterens forståelse av det talte ordet. Folk er avhengige av munn og ansiktsform samt hørsel for å forstå en høyttalers mening; i mangel av denne informasjonen, feilkommunikasjon er mer sannsynlig. Effekten ble først dokumentert av forskerne Harry McGurk og John MacDonald i 1976. Det kalles noen ganger McGurk-MacDonald-effekten.

McGurk -effekten var tydelig for noen mennesker lenge før den faktisk ble navngitt. Døve og hørselshemmede har kommunisert med leppelesning i århundrer. En erfaren leppeleser får mesteparten av en høyttalers mening ved å se på munn og ansiktsbevegelser. Logopeder og forskere som studerte dette fenomenet skjønte snart at det også gjaldt personer med normal hørsel. Det er, alle mennesker praktiserer ubevisst en form for lesing av lepper i løpet av hverdagslig samtale.

McGurk -effekten er lett å observere. I en vanlig samtale, lytteren ser på høyttalerens ansikt. Hvis lytteren ser bort, det krever større konsentrasjon å følge talerens ord, og noen setninger må kanskje gjentas. Når høyttalerens ansikt er synlig, lytteren vil være avhengig av ansikts- og munnbevegelser, samt talerens kontekst og hensikt, å forstå talen fullt ut. Dette konseptet, universell for alle talte språk, er godt kjent for verdens døvesamfunn og spiller også en rolle i tegnspråk.

Forskere kan demonstrere McGurk -effekten mer grundig med datasamtaler. Disse programmene projiserer et bilde av et menneskelig ansikt som er koordinert med forhåndsprogrammerte talte fraser. De kan også programmeres, i motsetning til menneskelige høyttalere, å ta den visuelle formen til en annen lyd enn den som blir talt. Når dette skjer, lyttere vil sannsynligvis oppdage en tredje lyd helt. Dette har blitt observert selv når lytterne vet hva simulatoren gjør, noe som tyder på at McGurk -effekten er forankret dypt i den menneskelige bevisstheten.

McGurk-effekten har vært gjenstand for studier av dataspesialister som jobber med programvare for stemmegjenkjenning. Det virker sannsynlig at for å fullt ut forstå de enorme nyansene i menneskelig tale, slike programmer må ta McGurk -effekten i betraktning. Programmer under utvikling vil bruke et lite kamera til å observere en persons ansiktsbevegelser når han eller hun uttaler en kommando. Datamaskinen vil deretter integrere denne informasjonen med den innspilte lyden for en mer nøyaktig forståelse av kommandoen som blir talt.