联结再认的心理与神经机制：熟悉性与回想的作用

The present research will implement classical associative recognition paradigm to identify the contribution of familiarity and recollection in associative recognition. On the basis of one-character words, two-character words, pictures, and sounds, the researchers manufacture three different types of stimulants to form high or low unitization: synthetic words, words from the same category, and synonymous words. This research will use ERP experimental technique and ERP+fMRI technique in the well designed behavioral experiment to systematically investigate following issues: 1) the objective definition of unitization, and the stability and difference of effect about unitization methods; 2) the effect of domain on the contribution of familiarity and recollection in associative recognition; and 3) the characteristic of the integration concerning audio-visual cross modality, and the effect of modality on the contribution of familiarity and recollection in associative recognition. This research will explore “the condition” in which familiarity and recollection can support associative recognition and develop the neural mechanism of unitization. From the perspective of the relations among unitization, domain, and modality, the researchers are expecting to identify and manipulate “the condition” in which familiarity and recollection can facilitate associative recognition, and future reveal the relation between familiarity and recollection in associative recognition.

本项目以独体汉字、双字词语、图片和声音等为基本材料，制作不同类型的视觉刺激和听觉刺激，即以合成字、同类词、同义词等方式形成高、低整合条件，采用经典联结再认范式（或改进联结再认范式），从整合性、领域和通道三个层面综合探讨“熟悉性和回想在联结再认中的作用机制”。项目将采用行为实验、ERP技术、ERP+fMRI技术方法，以及适合上述刺激材料的实验设计，系统探讨：1）整合性的客观定义，以及整合途径的效果稳定性和效果差异性；2）领域对熟悉性和回想在联结再认中作用的影响；3）视、听跨通道信息整合的特点与机制，通道对熟悉性和回想在联结再认中作用的影响。本项目旨在探讨熟悉性和回想在联结再认中起作用的“条件”，以及整合性发生的神经机制。我们期待，通过对整合性、领域以及通道三者之间相互关系的研究，能够确定并实现控制熟悉性和回想在联结再认中起作用的“条件”，进而揭示熟悉性和回想在联结再认中的相互关系。

联结再认指对两个或两个以上项目间关系是否出现过的判断。不仅包含对关系的记忆，还包含对构成联结的单个项目的记忆。双加工理论认为，再认记忆可以由两个相互独立的加工过程来支持：熟悉性和回想。本研究使用行为、ERP和fMRI等不同的实验技术，系统地探讨了整合性与联结再认的加工过程和神经机制。在本研究项目中，项目组开展了如下研究：（1）与国际前沿研究同步，我们开展了整合性对构成联结的项目再认表现的相关研究（在国际上现有的11篇相关文献中，我们以单课题组贡献最多发表了4篇此类研究，其中包括国际权威期刊<Neurobiology of Learning and Memory>和<Psychological Research>）。研究结果发现，不论对于言语还是图片刺激，整合性都能够促进项目再认的表现。另外，我们在国际上首次将新刺激区分为语义相关诱饵刺激和语义无关新刺激，这一方法上的改进有效地解释了“收支平衡”和“只有收益”观点的分歧。（2）课题组不仅探讨了自下而上整合性对联结再认的促进作用，还在国际上首次探讨了自上而下整合性对言语和图片联结再认的影响，比较了两种自上而下整合性（交互表象、概念定义）的优先级。研究结果显示，不论对于言语还是图片刺激，交互表象都比概念定义有更好的联结再认表现，且两种整合性操作之间诱发相类似的FN400效应和LPC效应。这一结果表明，交互表象比概念定义对联结再认的促进效应更大，交互表象可能比概念定义有更优的整合性。（3）基于以上两项研究，我们还探讨了整合性在语言学习和情绪损害补偿中的作用。结果发现：通过整合性编码，被试可以更好地进行双语学习；整合性也可以补偿情绪对联结记忆的损害作用，且这一补偿得益于整合性对熟悉性和回想加工的修复。.简而言之，本项目不仅完善了整合性与联结记忆关系的研究，还补充了整合性与构成联结的项目再认关系的研究，最后还探讨了整合性在双语学习和补偿情绪损害作用上的应用。