| 语言加工过程中的视听跨通道整合 |
| |
| 引用本文： | 韩海宾,许萍萍,屈青青,程茜,李兴珊. 语言加工过程中的视听跨通道整合[J]. 心理科学进展, 2019, 27(3): 475-489. DOI: 10.3724/SP.J.1042.2019.00475 |
| |
| 作者姓名： | 韩海宾 许萍萍 屈青青 程茜 李兴珊 |
| |
| 作者单位： | 中国科学院心理研究所, 北京 100101;中国科学院大学心理学系, 北京 100049 |
| |
| 基金项目： | 国家自然科学基金委与德国科研基金委联合资助项目(NSFC 61621136008/DFC TRR-169);国国家自然科学基金委项目资助(31571125);国家自然科学基金委项目资助(31771212) |
| |
| 摘 要： | 日常生活中, 语言的使用往往出现在某个视觉情境里。大量认知科学研究表明, 视觉信息与语言信息加工模块并不是独立工作, 而是存在复杂的交互作用。本文以视觉信息对语言加工的影响为主线, 首先对视觉信息影响言语理解, 言语产生以及言语交流的相关研究进展进行了综述。其次, 重点对视觉信息影响语言加工的机制进行了探讨。最后介绍了关于视觉信息影响语言加工的计算模型, 并对未来的研究方向提出了展望。
|
| 关 键 词： | 视觉信息 语言加工 言语理解 言语产生 言语交流 |
| 收稿时间： | 2018-02-28 |
Cross-modal integration of audiovisual information in language processing |
| |
| HAN Haibin,XU Pingping,QU Qingqing,CHENG Xi,LI Xingshan. Cross-modal integration of audiovisual information in language processing[J]. Advances In Psychological Science, 2019, 27(3): 475-489. DOI: 10.3724/SP.J.1042.2019.00475 |
| |
| Authors: | HAN Haibin XU Pingping QU Qingqing CHENG Xi LI Xingshan |
| |
| Affiliation: | Institute of Psychology, Chinese Academy of Sciences, Beijing 100101, China;University of Chinese Academy of Sciences, Beijing 100049, China |
| |
| Abstract: | In daily life, the use of language often occurs in a visual context. A large number of cognitive science studies have shown that visual and linguistic information processing modules do not work independently, but have complex interactions. The present paper centers on the impact of visual information on language processing, and first reviews research progress on the impact of visual information on speech comprehension, speech production and verbal communication. Secondly, the mechanism of visual information affecting language processing is discussed. Finally, computational models of visually situated language processing are reviewed, and the future research directions are prospected. |
| |
| Keywords: | visual information processing language processing speech comprehension speech production verbal communication |
| 本文献已被 CNKI 等数据库收录！ |
| 点击此处可从《心理科学进展》浏览原始摘要信息 |
|
点击此处可从《心理科学进展》下载全文 |
|
