音乐经验对第二语言加工的影响

音乐和语言的关系研究近年来得到了广泛关注。来自行为和认知神经科学的研究证据进一步表明,音乐经验能够跨领域迁移至第二语言的习得,表现为音乐经验在理解、产生及学习三个方面促进第二语言加工,并且这种迁移效应的内在机制是通过促进音乐和语言的共同声学线索加工以及个体一般认知加工能力两种途径来实现的。在此基础之上,未来研究可以从多个角度展开深入细致的探索,澄清音乐经验和音乐天赋对二语加工的影响,比较音乐经验影响母语加工和二语加工的联系与区别。     

韵律特征研究

介绍从知觉、认知和语料库分析角度对汉语韵律特征进行的一系列研究。（1）韵律特征知觉：用实验心理学和知觉标注的语料库分析方法,研究汉语语调和音高下倾与降阶问题,语句和语篇中知觉可以区分的韵律层级及相关的声学线索。研究结果支持汉语语调的双线模型理论和语句音高下倾的存在;证明语篇中知觉可以区分的韵律边界是小句、句子和段落,及其知觉相关的声学线索。（2）韵律特征与其他语言学结构的关系：在标注的语料库的基础上,用常规统计方法研究语句常规重音分布规律、语篇信息结构与重音的关系、并用决策树方法研究根据文本信息确定韵律短语边界和焦点的规则。（3）韵律特征在语篇理解中的作用：用实验心理学方法和脑电指标研究韵律对语篇信息整合和指代理解的影响,揭示其作用的认知和神经机制。讨论了这些研究结果对语音工程、语音学理论和心理语言学研究的实践和理论意义     

口语加工中的词语切分线索

词是语言的基本结构单位, 对词语进行切分是语言加工的重要步骤。口语语流中的切分线索来自于语音、语义和语法三个方面。语音线索包括概率信息、音位配列规则和韵律信息, 韵律信息中还包括词重音、时长和音高等内容, 这些线索的使用在接触语言的早期阶段就逐渐被个体所掌握, 而且在不同的语言背景下有一定的特异性。语法和语义线索属于较高级的线索机制, 主要作用于词语切分过程的后期。后续研究应从语言的毕生发展和语言的特异性两个方面考察口语语言加工中的词语切分线索。     

口吃者加工汉语歧义短语的神经过程

韵律边界是口语韵律特征的有机组成部分, 在语言理解中发挥着重要作用。口吃作为一种言语节律性障碍, 主要表现为音节经常性的重复、拖长或停顿等。本研究采用ERP, 考察口吃者完成词汇判断和结构判断两种任务时, 加工歧义短语(动宾/偏正歧义结构)内部韵律边界的认知过程。结果发现口吃者和言语流畅者在加工汉语歧义短语过程中, 所诱发的反映韵律切分的脑电成分CPS (closure positive shift)不存在显著差异。在0~300 ms, 不论中线还是两侧, 口吃者和言语流畅者加工两类短语时, 动宾短语韵律边界诱发正效应的头皮分布范围小于偏正短语。在300~600 ms, 中线上, 口吃和言语流畅者在完成两种任务时, 两类短语的韵律边界均稳定诱发了正效应; 在两侧, 结构判断任务中两类短语的韵律边界都诱发了正效应, 但词汇判断任务中只有偏正短语稳定诱发该效应。综上, 口吃者和言语流畅者一样对口语韵律边界敏感, 并且他们加工歧义短语内部韵律边界时, 诱发的脑电效应受到实验任务和短语结构类型的影响。     

3～5岁儿童基于声音线索的情绪知觉

研究从言语的韵律和语义两条线索出发,试图探讨学前儿童基于声音线索情绪知觉的发展特点.实验一中,124名3～5岁儿童对男、女性用5种不同情绪(高兴、生气、害怕、难过和中性)的声音表达的中性语义句子进行了情绪类型上的判断.3～5岁儿童基于声音韵律线索情绪知觉能力随着年龄的增长不断提高,主要表现在生气、害怕和中性情绪上.不同情绪类型识别的发展轨迹不完全相同,总体来说,高兴的声音韵律最容易识别,而害怕是最难识别的.当韵律和语义线索冲突时,学前儿童更多地依赖韵律线索来判断说话者的情绪状态.被试对女性用声音表达的情绪更敏感.     

韵律在语言加工中的作用及其神经机制

综述了近年来使用即时加工方法进行的韵律理解和作用机制方面的一些研究。首先, 介绍了韵律特征在句法加工中的作用, 从重音、韵律边界和韵律单元三个研究角度分析了韵律在句子理解中所起的作用及作用的时间点; 然后, 探讨了韵律加工的脑机制问题。论文最后提出未来的研究应在更广阔的视野中对韵律的加工阶段以及韵律与其他心理过程之间的关系进行探讨。     

书面韵律信息与词汇偏向在歧义句歧义消解中的作用

本研究采用眼动法,探讨了被试在理解层次分隔歧义句时,逗号作为书面韵律边界所起到的作用,以及书面韵律边界与词汇信息如何共同影响句子加工。研究选取了裸视视力或矫正视力均正常的母语为汉语的成人,完成一个在自然情境下阅读层次分隔歧义句的句子理解实验,同时记录他们句子阅读时的眼动数据。结果发现：有逗号解歧的句子的阅读时间明显少于没有逗号解歧句子的阅读时间;逗号偏向类型和词汇偏向类型之间存在交互作用,即两者在三种眼动指标上都达到了显著性水平,研究所选的三种眼动指标为首次注视时间、第一遍阅读时间和总注视时间;此外,当逗号偏向将句子结构确定为形容词修饰整个短语结构时,词汇偏向会对语义理解进行调整,表现在三种眼动指标的显著性上。实验结果支持内隐韵律假设,书面韵律信息对歧义句歧义消解的作用从句子加工早期开始,书面韵律信息与词汇偏向的交互作用也发生于句子加工早期。     

颜色交替的词边界对一年级儿童朗读和默读影响的眼动研究

为了探讨词边界线索对不同阅读方式的作用,采用眼动追踪技术,以颜色交替的形式标记词边界,比较了词边界线索对一年级儿童朗读和默读语篇的影响。结果发现,词边界线索显著提高了一年级儿童朗读的阅读效率,且这种促进主要表现在词汇加工的晚期和信息整合阶段,但对默读没有显著影响。结果表明,与默读相比,颜色交替的词边界线索对朗读的促进作用更大。     

社会性发展迟滞大学生的情绪韵律识别特点

情绪韵律识别指个体通过对他人话语中除语义以外的声学线索进行分析,推断他人情绪状态的过程。本研究通过2个实验对社会性发展迟滞大学生的情绪韵律识别特点进行探索。结果发现：（1）社会性发展迟滞组厌恶和恐惧韵律的识别正确率显著低于对照组,两组在其他情绪韵律识别正确率上无显著差异;且两组被试情绪韵律识别趋势一致：高兴、愤怒、悲伤、恐惧和厌恶韵律识别正确率依次递减;（2）当语义与韵律矛盾时,迟滞组比对照组更易受语义干扰。     

书面韵律边界与语境对歧义句歧义消解的影响

本研究采用眼动记录的方法,考察了被试理解层次分隔歧义句时,作为书面韵律边界的逗号起到的作用,以及逗号与语境信息间的交互作用。实验通过操纵逗号的位置,变化歧义句的句义;通过操纵语境内容,变化语境偏向与逗号解歧方向的一致性。结果发现,逗号做为书面的韵律边界促进了句子的加工。当有书面韵律边界为句子解歧时,被试更依赖于韵律边界。语境信息与书面韵律边界的交互作用发生于句子加工晚期。     

语言和音乐中短语边界的认知加工

综述了近年来语言和音乐中有关短语边界加工的一些研究成果。首先,语言中使用事件相关电位技术（ERP）进行的众多研究表明,口语中的语调短语边界和阅读中的逗号都能诱发中止正漂移（CPS）这种反映语调短语中止的ERP成分。然后介绍了近期关于音乐短语结构的一系列ERP和事件相关磁场（ERF）研究,结果发现在各种实验条件下音乐CPS都能够稳定产生。最后,对今后汉语韵律层级结构边界的认知加工研究做出展望     

Effects of backward speech and speaker variability in language discrimination by rats

Human infants use prosodic cues present in speech to extract language regularities, and it has been suggested that this capacity is anchored in more general mechanisms that are shared across mammals. This study explores the extent to which rats can generalize prosodic cues that have been extracted from a training corpus to new sentences and how this discrimination process is affected by the normalization of the sentences when multiple speakers are introduced. Conditions 1 and 2 show rats' abilities to use prosodic cues present in speech, allowing them to discriminate between sentences not previously heard. But this discrimination is not possible when sentences are played backward. Conditions 3 and 4 show that language discrimination by rats is also taxed by the process of speaker normalization. These findings have remarkable parallels with data from human adults, human newborns, and cotton-top tamarins. Implications for speech perception by humans are discussed.     

Deficits in acquiring language structure: The importance of using prosodic cues

The study investigates and supports the hypothesis that (1) specifically language-impaired (SLI) children have deficits in processing and using the rhythmic-prosodic structure of speech; and that (2) these deficits impede the implicit learning of formal regularities of input language. The ability of SLI children to exploit prosodic cues in rule learning was tested in an experimental design using a miniature language. Twenty-four SLI children (mean age 6;5) learned a small set of sentences generated by a content-free rule system. The sample sentences were presented either with or without prosodic cues to the underlying formal regularities. The experimental groups were matched by various cognitive and language indicators. To assess whether they had acquired some regularities of the miniature language, a grammaticality judgement task was presented. In addition, their ability to reproduce rule-structured and rule-violating strings was tested. The experimental as well as some additional correlational data support the basic theoretical assumptions. The children had deficits in processing and exploiting prosodic cues in rule learning, and these deficits covaried with their rhythmic ability as indicated by a rhythm discrimination task.     

老年人群的韵律感知

老龄化导致听觉系统、认知功能有所衰退。老年人群的言语理解能力减弱, 韵律信息解析存在困难。老年人对重音、语调、语速等语言韵律感知能力退化, 对情感韵律的加工也出现问题, 特别是消极情绪韵律加工减退较快。老年疾病进一步加深韵律加工难度, 韵律感知呈现出与特定疾病的相关性。未来研究需考察不同语言背景老年人群的韵律感知表现与机制、复杂交流环境的影响、韵律感知障碍对老年疾病的预测、韵律感知的早期干预与复健等问题。     

Phonotactic knowledge of word boundaries and its use in infant speech perception

The development of a lexicon critically depends on the infant’s ability to identify wordlike units in the auditory speech input. The present study investigated at what age infants become sensitive to language-specific phonotactic features that signal word boundaries and to what extent they are able to use this knowledgeto segment speech input. Experiment 1 showed that infants at the age of 9 months were sensitive to the phonotactic structure of word boundaries when wordlike units were presented in isolation. Experiments 2 to 5 demonstrated that this sensitivity was present even when critical items were presented in context, although only under certain conditions. Preferences for legal over illegal word boundary clusters were found when critical items were embedded in two identical syllables, keeping language processing requirements and attentional requirements low. Experiment 6 replicated the findings of Experiment 1. Experiment 7 was a low-pass-filtered version of Experiment 6 that left the prosody of the stimulus items intact while removing most of the distinctive phonotactic cues. As expected, no listening preference for legal over illegal word boundary clusters was found in this experiment. This clearly suggests that the preferential patterns observed can be attributed to the infants’ sensitivity to phonotactic constraints on word boundaries in a given language and not to suprasegmental cues.     

边界促进空间导航的认知神经机制

边界是指在人的视野中占据较大比例,且具有立体拓展平面的障碍物,对于人类和动物的空间导航行为具有极大的促进作用。相比于路标等其他环境线索,边界对于空间导航的促进具有优势效应,那么边界感知的发展动态过程有着怎样的异质性,以及潜在的神经基础是什么呢?本文首次对近十年的相关研究进行了系统性地回顾和梳理,并提出了该领域未来发展的研究方向。首先,我们总结出边界感知的发展过程,具体表现为儿童早期(1岁半~2岁)可以通过加工边界的空间几何结构实现物体定位,并且随着年龄的发展逐渐学会利用边界的高度信息(3.1岁~4.7岁)、长度信息(4~5岁)、视觉阻碍性信息(5岁)等完成空间导航。其次,基于这些认知过程,神经影像学研究主要以成人为研究被试,发现大脑中的内侧颞叶和顶叶脑区在边界加工中有着不同的功能作用。具体而言,边界的空间几何结构及构成要素(高度、长度和角度)由大脑中的旁海马位置区(parahippocampal place area, PPA)和压后皮层联合区(retrosplenial complex, RSC)负责表征,其中PPA和RSC均可以表征边界的空间几何及其高度,但边界的长度及边界间的构成角度仅由PPA表征;与边界绑定的物体位置的学习和提取则由海马负责,当海马的结构损害时,基于边界的学习也伴随着一定的受损。除此之外,本研究首次将边界所具有的导航可供性(affordance)这一研究热点区分为物理可供性和视觉可供性。边界的物理可供性由枕叶位置区负责表征(occipital parietal area, OPA,也被叫做 transverse occipital sulcus, TOS),并且OPA很可能主要负责表征以自我为参照的空间导航信息。而现有研究并未探讨边界视觉可供性的神经基础,但它为视觉引导的空间导航研究提供新的视角。总之,以往研究对基于边界的导航进行了初步的探索,丰富了我们对该领域的认识和理解。但是仍存在一些研究问题值得未来深入探讨。第一,拓展探索边界促进空间导航的认知过程中潜在的影响因素及其发展规律。未来应考虑构建一个综合的认知网络或者计算模型,以探明各个认知过程在基于边界导航中所发挥的作用。第二,深入挖掘边界促进空间导航中广泛涉及的脑功能基础(尤其是脑区间的功能协作),及关注儿童的大脑发育变化。第三,密切关注大脑对场地边界与场地中心编码的心理或神经表征的区别和联系。第四,全面而深入地探究携带易感基因以及临床前期的阿尔兹海默症群体中基于边界导航能力的特定受损情况。最后,将边界的概念延伸长时记忆、时间知觉、视觉空间、社交网络等领域,明晰边界在时间和空间中影响机制的异同。     

Newborns are sensitive to multiple cues for word segmentation in continuous speech

Before infants can learn words, they must identify those words in continuous speech. Yet, the speech signal lacks obvious boundary markers, which poses a potential problem for language acquisition (Swingley, Philos Trans R Soc Lond. Series B, Biol Sci 364 (1536), 3617–3632, 2009). By the middle of the first year, infants seem to have solved this problem (Bergelson & Swingley, Proc Natl Acad Sci 109 (9), 3253–3258, 2012; Jusczyk & Aslin, Cogn Psychol 29 , 1–23, 1995), but it is unknown if segmentation abilities are present from birth, or if they only emerge after sufficient language exposure and/or brain maturation. Here, in two independent experiments, we looked at two cues known to be crucial for the segmentation of human speech: the computation of statistical co‐occurrences between syllables and the use of the language's prosody. After a brief familiarization of about 3 min with continuous speech, using functional near‐infrared spectroscopy, neonates showed differential brain responses on a recognition test to words that violated either the statistical (Experiment 1) or prosodic (Experiment 2) boundaries of the familiarization, compared to words that conformed to those boundaries. Importantly, word recognition in Experiment 2 occurred even in the absence of prosodic information at test, meaning that newborns encoded the phonological content independently of its prosody. These data indicate that humans are born with operational language processing and memory capacities and can use at least two types of cues to segment otherwise continuous speech, a key first step in language acquisition.     

绝句韵律边界的认知加工及其脑电效应

语言理解过程中, 句子内部的韵律短语边界会诱发反映韵律短语终止的特异性脑电成分终止正漂移 (CPS, closure positive shift), 而句末语调短语边界则会诱发反映句法终止和完整语言单元结束的脑电效应P3。研究采用汉语特有的语篇绝句, 考察了听者加工绝句中各句末语调短语边界的认知过程及其诱发的脑电效应。结果发现五言绝句内部各语调短语边界分别诱发了时间进程、头皮分布和波幅均相同的CPS, 表明语篇内部韵律边界加工不受其所处语篇位置的影响; 五言和七言绝句末的韵律边界则分别诱发了一个P3, 并且前者诱发的P3波幅小于后者, 而二者在时间进程和头皮分布上不存在差异。本研究表明, 句末语调短语边界诱发何种脑电效应与其承担的功能有关, 既表示前面信息终止又预期后面信息出现的句末边界会诱发CPS, 而只表示信息终止的句末边界则会诱发P3。