當我們面對面交談時，我們交換的信號不僅僅是言語。 我們通過身體姿勢、面部表情以及頭部和眼睛的運動進行交流； 還可以通過某人說話時產生的節奏來實現。 一個很好的例子是我們在連續語音中產生音節的速率 – 大約 每秒三到七次。 在談話中，聽者 調入 節奏，並用它來預測說話者接下來將使用的音節的時間。 這使他們更容易理解所說的內容。
許多其他事情也在發生。 使用 腦成像技術 例如，我們知道，即使沒有人說話，我們大腦中負責聽力的部分也會 產生 節奏活動的速率與語音中音節的速率相似。 當我們聽別人講話時，這些 大腦節律對齊 到音節結構。 結果，大腦節律在頻率和時間上匹配並跟踪傳入的聲學語音信號。
當有人說話時，我們知道他們的嘴唇動作也會幫助聽者。 通常，這些動作先於演講（例如張開嘴），並提供有關此人將要說什麼的重要提示。 然而，即使嘴唇動作本身也包含足夠的信息，可以讓訓練有素的觀察者在不聽任何單詞的情況下理解語音——當然，有些人可以讀唇語。
到目前為止，尚不清楚這些動作是如何在聽者的大腦中進行處理的。
對口型
這是我們這次的主題 最新研究。 我們已經 知道 產生音節節奏的不僅僅是說話者的聲帶，還有他們的嘴唇動作。 我們想了解在連續演講期間，聽眾的腦電波是否與說話者的嘴唇運動保持一致，其方式與它們與聲學語音本身的對齊方式相當，以及這對於理解語音是否重要。
我們的研究首次表明情況確實如此。 我們記錄了 44 名健康志願者在觀看某人講故事的電影時的大腦活動。 就像大腦的聽覺部分一樣，我們發現視覺部分也會產生節奏。 這些音節與說話者的嘴唇在連續講話過程中產生的音節節奏保持一致。 當我們通過添加分散注意力的語音來使聽力條件變得更加困難時，這意味著講故事的人的嘴唇動作對於理解他們所說的內容變得更加重要，兩種節奏之間的對齊變得更加精確。
此外，我們發現聽者大腦中控制嘴唇運動的部分也會產生與說話者嘴唇運動一致的腦電波。 當這些波與說話者大腦運動部分的波更好地對齊時，聽者就能更好地理解演講。
這支持 這個想法 用於產生言語的大腦區域對於理解言語也很重要，並且可能對研究有聽力困難的人之間的唇讀具有影響。 在與說話者和聽者的關係中展示了這一點之後，下一步將是看看在雙向對話期間大腦節律是否會發生同樣的情況。
為什麼這些見解很有趣？ 如果正確的是，語音通常是通過將大腦節律與語音節律對齊來建立溝通渠道（類似於將收音機調到特定頻率來收聽某個電台），那麼我們的結果表明，在必要時還有其他補充渠道可以接管。 我們不僅可以根據某人的聲帶調整自己的節奏，還可以根據他們的嘴唇運動調整相應的節奏。 我們不是通過大腦的聽覺部分來做到這一點，而是通過與視覺和運動相關的部分來做到這一點。
而且你也不需要成為一名訓練有素的唇語閱讀者才能受益——這就是為什麼即使在酒吧或聚會等嘈雜的環境中，大多數人仍然可以相互交流。
關於作者
約阿希姆·格羅斯 (Joachim Gross)，格拉斯哥大學心理學教授。 他的小組使用神經成像和計算方法研究大腦振蕩的功能作用。 他的主要目標是了解大腦振盪如何支持感知和行動。
Hyojin Park，格拉斯哥大學研究員。 她目前的研究是使用腦成像技術來了解語音處理背景下神經振蕩的編碼和解碼，該技術經過優化設計，用於捕獲人腦中的時間動態。
相關書籍
at InnerSelf 市場和亞馬遜
