|
1.3 言语感知与认知机理研究 2017年度，韵律信息的加工机制由于实验技术的革新再次令人瞩目。前人大量研究显示，双侧额区和颞区、尤其是外侧颞横回和颞上回，是加工言语音高信息的核心区域。然而表达不同内容的音高特征在皮层表征上是否得以区分、如何区分，以往采用的技术手段由于受制于有限的空间和时间分辨率难以给出准确的答案。Tang等人的文章 Intonational Speech Prosody Encoding in the Human Auditory Cortex （ Science 第357期 ） 使用高密度脑皮层电图描记法，在10个病人的皮层置入高密度的电极网格，通过考察每个电极记录到的局部区域神经元电活动强弱与病人听到的语音刺激的音高特征的关系，描绘出了负责语气韵律（一般陈述／疑问／焦点重读）、语音音段信息、说话者信息加工的电极分布图。 语言加工机制的理论构建也在这一年有了新的发展。Friederici等来自多个顶级研究单位的研究者对Friederici本人2012年提出的语言加工模型从解剖、影像、功能、发展、比较神经学等多方面进行了更详细的论证 （ Language, Mind and Brain，Nature Human Behavior 第1期 ）。有别于其他双通路模型，该模型认为背侧和腹侧通路各有两条，背侧通路包括由上纵束和弓形束连接的“颞皮层 （主要指颞上回后部）——前运动皮层”以及“颞皮层——布洛卡区的BA44”两个路径，而腹侧通路包括额枕下束连接的“BA45——颞、顶、枕皮层”，以及钩状束连接的“额岛盖——颞上回前部”两个路径。除了“颞皮层——BA44”外，其余通路在发育早期已经成熟，足以支持婴儿早年的词汇和语音学习。然而“颞皮层——BA44”则要到儿童时期才真正成熟，结合影像和行为证据，作者认为这一通路很可能负责的是层级结构复杂的、递归式的句法加工，是人类语言能力有别于动物的关键所在。 2017年心理语言学界还就实验数据和统计分析的可靠性展开了一场辩论。Ito等的文章How Robust Are Prediction Effects in Language Comprehension? Failure to Replicate Article-Elicited N400 Effects （ Language, Cognition and Neuroscience 第32期） 在重复DeLong等于2005年发表的关于预期机制的经典实验Probabilistic Word Pre-Activation during Language Comprehension Inferred from Electrical Brain Activity （ Nature Neuroscience 第8期） 时发现，无论被试是母语者还是二语者都无法重复出2005年的经典结果。此后，围绕经典能否复制、乃至预期机制在语言加工的作用，学界出现了多篇文章。首先，DeLong等对质疑进行了全面反驳 （ Is There A Replication Crisis? Perhaps. Is This An Example? No: A Commentary on Ito, Martin, and Nieuwland (2017)，Language, Cognition and Neuroscience 第32期 ），认为不可复制的原因是效应量太小而在单个实验中被掩盖，在跨实验中实质上有着稳定的表现。Ito等随后对此予以了反击 （ Why the A/AN Prediction Effect May Be Hard to Replicate: A Rebuttal to Delong, Urbach, and Kutas (2017)，Language， Cognition and Neuroscience 第32期 ）， 更对统计方法进行了更新，采用了探索性贝叶斯分析对效应大小以及零效应进行了判断。而到了3月底，在第30届CUNY大会上，Nieuwland等基于9个不同实验室总共334个被试的数据发表了文章Limits on Prediction in Language Comprehension: A Multi-Lab Failure to Replicate Evidence for Probabilistic Pre-Activation of Phonology （ bioRxiv111807 ），发现经典实验中不定冠词上的预期效应无法复制，不定冠词上观察到的脑电反应大小也和离线填空概率没有显著相关。而Yan等 （ Prediction (or Not) during Language Processing. A Commentary on Nieuwland et al. (2017) and DeLong et al. (2005)，bioRxiv143750 ） 细致梳理了两方的实验操作和数据分析细节，对两方的差异给出了解释。不仅如此，他们进一步提出，比起离线填空概率，Bayesian Surprise作为可预期性的指标与观测到的脑电效应有着更紧密的线性相关，因此更贴合理论，也能更好地解释数据。 国内方面，《中国语音学报》第7辑刊出了4篇语音感知方面的文章。李卫君和杨玉芳的《绝句中的韵律层级边界及其知觉研究》，将绝句划分为四个不同的韵律层级：音步、句内、句末和联间。用脑电成分CPS（Closure Positive Shift）为指标，通过ERP实验，对不同层级韵律边界进行了考察。王韫佳等的《从范畴感知看重庆话阴平和阳平的调型——兼论重庆话阳平和上声演变的动因》结合声学测量和感知实验的结果，对重庆话阴平和阳平的调值和调型进行了讨论。张昊等的《普通话元音感知影响因素探》，采用范畴感知实验研究方法，通过辨认和区分实验任务，探讨了影响普通话元音感知的重要因素。李艳萍等的《基于连续统的汉语普通话前后鼻音关键声学线索初探》发现鼻音前元音的F2和F3是前后鼻音感知的声学线索，其中F2对前后鼻音的感知起关键性作用。 1.4语篇-韵律接口研究 语篇的韵律特征一直是言语工程等领域重点关注的对象。2017年度，韵律与语篇的接口研究呈多样化发展趋势，涉及语言的范围更广，研究视野及思路更宽。研究主题除传统的语篇结构与关系之外，还涵盖了语篇中的韵律感知、交际中的韵律特征、临床评估以及言语工程等。 语篇结构关系 Sahkai和Mihkla在文章 Intonation of Contrastive Topic in Estonian （ Proceedings of Interspeech 2017 ）中研究了对比话题的音高重音类型、音高重音的加重实现以及其后的韵律边界，发现上述韵律特征可以区分对比话题句与宽焦点句或相关性话题句。Riou在The Prosody of Topic Transition in Interaction: Pitch Register Variatio （ Language and Speech 第60期 ）中发现，美式英语中三种韵律参数可标记话题转换：更高的基频最大值、更高的基调以及扩展的调域跨度。Yanko 在Word Order and Accent Placement in Topics, Foci, and Markers of Discourse （ Language and Speech 第60期 ）中对比俄语、德语和英语在同一小句中标记话题、焦点与语篇连续性的特定模式，发现俄语中焦点重音词之后的句尾升调被用来标记语篇连续性。Kleinhans等在Using Prosody to Classify Discourse Relations （ Proceedings of Interspeech 2017 ）中通过用韵律属性预测语篇关系的方式，研究独白语篇结构与韵律的相关性，结果显示，可通过语段间和语段内的韵律特征预测归因、解释与使能这几种语篇关系。White 等在 Prosodic Effects on Pronoun Interpretation in Italian （ Proceedings of BUCLD 2017 ）中研究了韵律对意大利语代词解析的影响，结果表明韵律因素会影响语篇中的代词解析，因此代词类型与先行词位置交互作用的研究中不一致的结果可能由默读时加入的停顿或代词重音所致。Hou等在 Disambiguate or Not?–The Role of Prosody in Unambiguous and Potentially Ambiguous Anaphora Production in Strictly Mandarin Parallel Structures （ Proceedings of Interspeech 2017 ）中研究了韵律对潜在歧义与非歧义回指词产出的作用，发现虽然重读回指词和歧义性具有一定程度的相关性，但重读仅表示指称上的变化（回指词与先行词的句法位置不同），歧义性并不影响回指词的韵律模式。 韵律感知 Turnbull等在Prominence Perception Is Dependent on Phonology, Semantics, and Awareness of Discourse（Language, Cognition and Neuroscience 第32期） 中通过三个实验研究了音系突显（是否承载音高重音）、语篇语境（是否形成对比）以及被试对语篇的了解程度对韵律突显度判断的作用，发现对比语境仅能提高音高曲线为L+H*0的短语突显度的感知。此外，对比效应的大小与听话者是否了解语篇语境有关。 交际中的韵律特征 夏志华的Prosodic Entrainment in Mandarin Chinese Conversations: An Experimental Study （《中国语音学报》第7辑）发现随着交互的进行，交际双方的韵律趋同在话轮上有明显的表现，局部趋同比全局明显，不同的韵律特征体现不同级别的趋同，而且男性与女性之间交互的趋同性最高。Ouyang等在Speakers’ Rapidly-Updated Expectations Influence Prosodic Realization of Information Structure （Proceedings of LSA 2017 ）中通过言语产出实验研究了视角选择是否对信息结构的韵律标记有所影响，发现说话者对听话者知识状态的预期会影响新旧信息的韵律实现，且说话者会根据听话者的表现快速更新预期。Michelas等在How Does the Absence of Shared Knowledge between Interlocutors Affect the Production of French Prosodic Forms （ Proceedings of Interspeech 2017 ）中研究了听话者对法语韵律产出的影响，发现会话双方缺乏共享信息可在全局、语音层面影响说话人的韵律产出，但在音系层面（如韵律短语切分）并无影响。加州大学洛杉矶分校的两篇博士论文：Wang的Prosody and Functions of Discourse Markers in Mandarin Chinese Conversation: The Cases of “ Ranhou ”, “ Wo Juede ”, and “ Meiyou ” 和Cha的Interplay of Prosodic Features and Discourse Functions in Korean Conversation 在互动语言学的框架下，分别考察了汉语和韩语对话中话语标记词实现不同功能时的韵律特征差异。Ha和Grice在Tone and Intonation in Discourse Management – How Do Speakers of Standard Vietnamese Initiate a Repair （Journal of Pragmatics 第107期）中研究了标准越南语使用者如何在会话中利用语调发起他发修正，以及语调与词汇声调的相互作用。 临床评估 语言产出方面，Holt等在Discourse Strategies and the Production of Prosody by Prelingually Deaf Adolescent Cochlear Implant （Ear and Hearing 第38期）中发现，相对于正常听力者，耳蜗植入者更倾向于利用重复指令而不是信息请求去理解对方，通过韵律手段指示语篇功能的模式也与正常听力者相反。语言理解方面，Huang等在Using Prosody to Infer Discourse Prominence in Cochlear-Implant Users and Normal-Hearing Listeners （Cognition 第166期）中，通过眼动实验研究了耳蜗植入者如何利用音高变化的强度、时长变化等额外信息来推断篇章突显度，发现上述额外信息能否促进理解与语言处理需求以及对劣化信号的先前经验有关。 言语工程 语音合成方面的代表性文章为Fukuoka等的Prosody Control of Utterance Sequence for Information Delivering （Computer Speech & Language 第50期），该研究观测新闻播报语料中，韵律特征如何随语句在语篇中的作用及位置特征而改变，然后将这两项特征引入深度神经网络的输入层，作为韵律生成的控制参数，从而实现通过特定韵律方式突出语篇中的显著信息。语音识别方面的代表性文章为Ward等的Inferring Stance from Prosody （Proceedings of Interspeech 2017），该文将英语、汉语和土耳其语新闻广播语篇切分为6秒长的交叠片段，并以此为基础对立场与韵律特征进行建模，结果表明这一技术可通过韵律信息在新闻广播语篇中自动检测出多种立场。 (责任编辑：admin) |