Wanneer ons van aangesig tot aangesig praat, ruil ons baie meer seine as net woorde. Ons kommunikeer deur ons liggaamshouding, gesigsuitdrukkings en kop- en oogbewegings te gebruik; maar ook deur die ritmes wat geproduseer word wanneer iemand praat. 'N Goeie voorbeeld is die tempo waarteen ons lettergrepe in deurlopende spraak lewer drie tot sewe keer per sekonde. In 'n gesprek, 'n luisteraar liedjies in na hierdie ritme en gebruik dit om die tydsberekening van die lettergrepe te voorspel wat die spreker volgende sal gebruik. Dit maak dit makliker vir hulle om te volg wat gesê word.
Daar is ook baie ander dinge aan die gang. Die gebruik van breinbeeldvormingstegnieke Ons weet byvoorbeeld dat selfs wanneer niemand praat nie, die deel van ons brein verantwoordelik is vir gehoor produseer ritmiese aktiwiteit teen 'n soortgelyke tempo na die lettergrepe in spraak. Wanneer ons luister na iemand wat praat, hierdie breinritmes belyn na die lettergreepstruktuur. As gevolg daarvan stem die breinritmes ooreen en volg die frekwensie en tyd van die inkomende akoestiese spraaksein.
Wanneer iemand praat, weet ons hul lipbewegings help die luisteraar ook. Dikwels gaan hierdie bewegings voor die toespraak - byvoorbeeld, maak jou mond oop - en gee belangrike aanwysings oor wat die persoon sal sê. Maar selfs op hul eie bevat lipbewegings genoeg inligting om opgeleide waarnemers spraak te verstaan sonder om enige woorde te hoor - dus kan sommige natuurlik liplees lees.
Wat tot nou toe onduidelik is, is hoe hierdie bewegings in die brein se brein verwerk word.
Lip-synchronisatie
Dit was die onderwerp van ons nuutste studie. Ons het reeds het dit geweet Dit is nie net 'n spreker se vokale akkoorde wat 'n lettergreep lewer nie, maar ook hul lipbewegings. Ons wou sien of luisteraars se breingolwe ooreenstem met sprekers se lipbewegings tydens aaneenlopende spraak op 'n vergelykbare manier hoe hulle in lyn is met die akoestiese spraak self - en of dit belangrik was om spraak te verstaan.
Ons studie het vir die eerste keer aan die lig gebring dat dit wel die geval is. Ons het die breinaktiwiteit van 44 gesonde vrywilligers aangeteken terwyl hulle films gekyk het van iemand wat 'n storie vertel. Net soos die ouditiewe deel van die brein, het ons gevind dat die visuele deel ook ritmes lewer. Dit stem ooreen met die lettergreep wat deur die spreker se lippe tydens voortdurende spraak geproduseer word. En toe ons die luisteromstandighede moeiliker gemaak het deur afleidende spraak by te voeg, wat beteken dat die verteller se lipbewegings belangriker word om te verstaan wat hulle gesê het, het die belyning tussen die twee ritmes meer akkuraat geword.
Daarbenewens het ons gevind dat die dele van die luisteraar se brein wat lipbewegings beheer, ook breingolwe produseer wat in lyn is met die lipbewegings van die spreker. En wanneer hierdie golwe beter in lyn is met die golwe van die motor se deel van die spreker se brein, verstaan die luisteraar die toespraak beter.
Dit ondersteun die idee dat breinareas wat gebruik word om spraak te lewer, is ook belangrik vir die verstaan van spraak, en kan implikasies hê vir die lees van liplees tussen mense met gehoorprobleme. Nadat dit in verhouding tot 'n spreker en luisteraar getoon is, sal die volgende stap wees om te kyk of dieselfde ding met breinritmes gebeur tydens 'n tweerigting-gesprek.
Hoekom is hierdie insigte interessant? As dit korrek is, gebruik spraak gewoonlik 'n kanaal vir kommunikasie deur die aanpassing van breinritmes na spraakritmes - soortgelyk aan 'n radio na 'n sekere frekwensie om na 'n sekere stasie te luister. Ons resultate dui daarop dat daar ander komplementêre kanale is wat kan neem oor wanneer nodig. Nie net kan ons onsself afstem op die ritmes van iemand se vokale akkoorde nie, ons kan die ekwivalente ritmes van hul lipbeweging afpas. In plaas daarvan om dit met die ouditiewe deel van ons brein te doen, doen ons dit deur die dele wat verband hou met sien en beweging.
En ook nie, jy moet 'n opgeleide liplezer wees om voordeel te trek - dit is hoekom selfs die meeste mense in 'n luukse omgewing soos 'n kroeg of 'n partytjie met mekaar kan kommunikeer.
Oor die skrywers
Joachim Gross, Professor in Sielkunde, Universiteit van Glasgow. Sy groep ondersoek die funksionele rol van brein ossillasies deur middel van Neuroimaging en berekeningsmetodes. Sy hoofdoel is om te verstaan hoe brein ossillasies persepsie en aksie ondersteun.
Hyojin Park, Navorsingsassosiasie, Universiteit van Glasgow. Haar huidige navorsing is om kodering en dekodering van neurale ossillasies in die konteks van spraakverwerking te verstaan deur gebruik te maak van breinbeeldtegnieke wat optimaal ontwerp is vir die vaslegging van temporale dinamika in die menslike brein.
Hierdie artikel is oorspronklik gepubliseer op Die gesprek. Lees die oorspronklike artikel.
verwante Boeke
at InnerSelf Market en Amazon
