為什么人類能實現(xiàn)從行動到意義的無縫轉(zhuǎn)換？

還記得上次有人翻過你的推特嗎？無論這樣的舉動是否伴有語言上的表達(dá)，你都知道它究竟是什么意思。

從行動到意義的轉(zhuǎn)換能夠無縫而直接，是因為我們被賦予了不用交談和傾聽就能表達(dá)和理解的能力。我們可以通過指向、模仿來增強敘事，通過有節(jié)奏的比劃強調(diào)并通過簡單的手指組合來傳達(dá)整個反應(yīng)，從而引導(dǎo)對方的注意力。

雖然實際呈現(xiàn)的細(xì)微差別略有不同，但是通過肢體動作來輔助溝通的趨勢是普遍的。例如，在巴布亞新幾內(nèi)亞，人們會指著他們的鼻子和頭，而在老撾，人們有時會用嘴唇。在加納，左手指向可能是禁忌，而在希臘或土耳其，用食指和拇指形成一個環(huán)以表示一切都OK可能會讓你陷入困境。

盡管手勢（gestures）多種多樣，但我們可以將其粗略地定義為用于重復(fù)或強調(diào)消息的動作（無論該消息是否被明確說出）。手勢是“代表行動”的動作，但它也可以傳達(dá)抽象或隱喻信息。它是我們從很小的時候就開始使用的工具，即使先天性失明的孩子在演講期間也會在某種程度上用肢體語言來進(jìn)行表達(dá)。每個人都會這樣做。然而，我們很少有人停下來考慮將手勢視為一種研究現(xiàn)象——去思考它的神經(jīng)生物學(xué)原理，它的發(fā)展，以及它在幫助我們理解他人行為方面的作用。隨著研究人員對神經(jīng)網(wǎng)絡(luò)的探索逐步深入，人們發(fā)現(xiàn)手勢會引導(dǎo)我們的感知，就像感知會指導(dǎo)我們的行為。

01

手勢：先天傾向

Susan Goldin-Meadow在人類肢體語言領(lǐng)域做出了突出的貢獻(xiàn)，雖然，正如她所說，在20世紀(jì)70年代她首次對手勢產(chǎn)生興趣時，“手勢還沒有成為人們關(guān)注的領(lǐng)域?！鄙贁?shù)人曾做過手勢方面的研究，但是幾乎完全是非言語行為研究的一個分支。此后，她開始研究手勢在學(xué)習(xí)和語言創(chuàng)造中的作用，包括聾兒在不接觸手語時創(chuàng)建的手勢系統(tǒng)。（手語不同于手勢，因為它構(gòu)成了一個完全發(fā)展的語言系統(tǒng)。）目前，她是芝加哥大學(xué)的一名教授，管理著一個最著名的實驗室，研究手勢的產(chǎn)生和感知。

“這是一個關(guān)于未說出口的想法的美妙窗口，而且未說出口的想法往往是最有趣的?！彼@樣說道，同時用了很多手勢來輔助表達(dá)。

（圖：芝加哥大學(xué)心理學(xué)教授Susan Goldin-Meadow協(xié)助創(chuàng)建了現(xiàn)代手勢研究領(lǐng)域。她的職業(yè)生涯始于探索手勢在學(xué)習(xí)和語言創(chuàng)造中的作用。）

許多接受過Goldin-Meadow培訓(xùn)的研究人員現(xiàn)在正在芝加哥大學(xué)以外探索類似的問題。Miriam Novack在2016年攻讀了Goldin-Meadow的博士學(xué)位，作為西北大學(xué)的博士后，她研究的問題是手勢在人的一生中如何發(fā)展和演變。

根據(jù)大多數(shù)報道，Novack解釋說，沒有其他物種可以用“指向（point）”來傳達(dá)意義，甚至黑猩猩或猿類也不可以，除非它們是由人類飼養(yǎng)的。相比之下，人類嬰兒在說話之前經(jīng)常這樣做，我們產(chǎn)生和理解符號行為的能力與語言同步發(fā)展。手勢也是課堂上的一個有價值的工具，它可以幫助幼兒將動詞延展到新的語境或解決數(shù)學(xué)方程式?！暗?，當(dāng)孩子們開始明白我們的手部動作是用于交際時，并不一定清楚它們是信息的一部分?！?/p>

當(dāng)孩子們找不到表達(dá)自己的詞語時，他們會通過雙手來“交談”。Novack發(fā)現(xiàn)，嬰兒從肢體行動中獲得意義的能力隨著年齡的增長而增加。成年人如此自然地做到這一點，因而很容易忽略——將比劃的形狀和軌跡的映射意義放在一起并不是一件容易的事。

手勢可能是簡單的動作，但它們不是孤立地運作。研究表明，手勢不僅可以增強語言，還有助于語言的習(xí)得。事實上，兩者可能共享一些相同的神經(jīng)系統(tǒng)。人們在一生中接觸到的手勢體驗也可以幫助我們從別人的動作中汲取意義。但是，單個細(xì)胞或整個神經(jīng)網(wǎng)絡(luò)是否能夠調(diào)解我們破譯他人行為的能力，這一點仍有爭議。

02

大腦：體驗認(rèn)知

Noam Chomsky是語言學(xué)和認(rèn)知科學(xué)領(lǐng)域的著名學(xué)者，長期以來一直認(rèn)為語言和感知行為系統(tǒng)是不同的實體—— 其不需要在手勢交流中協(xié)同工作，即使它們都是傳達(dá)和解釋象征思想的手段。研究人員尚未完全理解大腦中語言的組織方式，因而這個問題尚未得到解決。但許多科學(xué)家，如Anthony Dick認(rèn)為這兩個功能依賴于一些相同的大腦結(jié)構(gòu)。

（圖：佛羅里達(dá)國際大學(xué)的神經(jīng)科學(xué)家Anthony Dick發(fā)現(xiàn)手勢和語言依賴于某些相同的大腦結(jié)構(gòu)。）

Dick及其同事使用功能磁共振成像（fMRI）掃描大腦活動，證明了手勢與語言處理能夠協(xié)同工作。所涉及的具體領(lǐng)域和激活程度隨年齡而變化，這表明年輕的大腦仍在磨練其手勢 - 語言整合技能并改善區(qū)域之間的聯(lián)系。用Dick的話說，“手勢本質(zhì)上是更廣泛的語言系統(tǒng)中的一個尖頂”，它集成了語義處理區(qū)域和感知行為區(qū)域。但是，語言本身在多大程度上是一種感知行為經(jīng)驗，一種了解依賴于感官印象和動作的世界的方式？

Manuela Macedonia最近剛?cè)〉昧苏Z言學(xué)碩士學(xué)位，她注意到一個學(xué)習(xí)意大利語學(xué)生群體中反復(fù)出現(xiàn)的模式：無論他們重復(fù)多少次同樣的話，他們?nèi)匀粺o法結(jié)結(jié)巴巴地說出一個連貫的句子。在教學(xué)過程中，她讓學(xué)生聽，寫，練習(xí)和重復(fù)，正如Chomsky所倡導(dǎo)的那樣，但這還不夠。有些東西缺失了。Macedonia正在接近一個聽起來很像Dick的假設(shè)：這種語言不過是模塊化。

（圖：Manuela Macedonia表示，通過將手勢與運動和感官體驗聯(lián)系起來，手勢體驗可以豐富人們對言語知識的理解。）

Macedonia認(rèn)為，當(dāng)孩子們學(xué)習(xí)第一語言時，他們會用整個身體吸收信息。例如，“洋蔥”這個詞與所有五種感官緊密相連：洋蔥具有球根狀，紙質(zhì)皮層沙沙作響，苦味以及切片時產(chǎn)生催淚的氣味。甚至像“喜悅”這樣的抽象概念也有多重感官成分，比如微笑，歡笑和歡樂。在某種程度上，認(rèn)知是“呈現(xiàn)（embodied）”——大腦的活動可以通過身體的行為和經(jīng)驗來改變，反之亦然。因此，如果學(xué)生只是傾聽、寫作、練習(xí)和重復(fù)，那么學(xué)習(xí)外國詞語就不會成功，因為這些口頭經(jīng)驗被剝奪了他們的感官聯(lián)想。

Macedonia發(fā)現(xiàn)，通過執(zhí)行語義相關(guān)手勢來強化新單詞的學(xué)習(xí)者能夠改善記憶。不要簡單地重復(fù)“橋”這個詞：在你背誦時用雙手做一個拱門，這樣做可以使大腦保留更深的記憶，因為單詞是一生中獲得的經(jīng)驗集群的標(biāo)簽。

多感官學(xué)習(xí)允許像“洋蔥”這樣的詞語生活在大腦中的多個位置 - 它們分布在整個網(wǎng)絡(luò)中。如果一個節(jié)點由于忽略而衰減，則另一個活動節(jié)點可以恢復(fù)它，因為它們都已連接。“每個節(jié)點都知道其他節(jié)點知道什么。”Macedonia說。

03

神經(jīng)：體驗連接

用手勢來豐富語言的力量僅代表手勢與感官體驗相結(jié)合的一種方式，行為產(chǎn)生和感知也是如此。Elizabeth Wakefield認(rèn)為，手勢和理解背后的神經(jīng)系統(tǒng)受到我們過去產(chǎn)生相同動作的經(jīng)驗的影響。

（圖：芝加哥Loyola大學(xué)的神經(jīng)科學(xué)家Elizabeth Wakefield是最早使用腦部掃描研究兒童和成人手勢感知發(fā)展的人之一。）

Wakefield研究日常行動如何幫助學(xué)習(xí)和影響認(rèn)知。在深入研究這些問題之前，她需要了解手勢處理是如何發(fā)展的。為此，她進(jìn)行了一項fMRI研究，該研究是首批檢查兒童和成人手勢感知的研究之一。

參與者觀看一則視頻，視頻中一位女演員在說話的同時做手勢，研究發(fā)現(xiàn)，參與者的視覺和語言處理區(qū)域并不是唯一的活躍區(qū)域，與動作相關(guān)的腦區(qū)域也是活躍的。區(qū)別在于，成年人在這些地區(qū)表現(xiàn)出比兒童更多的活動，Wakefield認(rèn)為這是因為成年人在做出類似動作方面有更多經(jīng)驗（兒童在說話時傾向于減少姿勢）。

Wakefield的研究并不是唯一證據(jù)。無數(shù)實驗證明，芭蕾、籃球、彈吉他等動作都有類似的動作“鏡像”現(xiàn)象。在這種情況下，當(dāng)技術(shù)人員觀察他們的工藝由他人執(zhí)行時，其感覺運動區(qū)域較普通人而言更活躍。（矛盾的是，一些實驗觀察到完全相反的效果：專家的大腦反應(yīng)比非專家少。但研究人員認(rèn)為，在這些情況下，經(jīng)驗使得他們的大腦在處理動作方面更有效率。 ）

Gallaudet大學(xué)的助理教授Lorna Quandt研究了聾人和聽力障礙者中的這些現(xiàn)象。她使用腦電圖（EEG）將手勢分解為感覺運動組件，以顯示某些行為的記憶會改變我們預(yù)測和感知他人手勢的方式。