多模态信息认知加工的研究进展.pdf

心理科学 2001 年第 24 卷第 4 期 4 6 5
多模态信息认知加工的研究进展
、
,
.臼
幽点
在护杨丽发傅小兰
(中国科学院心理研究所,北京 100[01)
霖、现实世界中,信息是以各种各样的模态存在的。音是图命名实验任务中决定反应的关键因素。
随着科学技术的发展,结合视、听、图不同形式而呈
2 多模态信息加工中的干扰效应
现的多模态(M ultim od)信息逐渐成为信息加工的
一种重要形式。多模态信息的认知加工也已成为认词一图干扰实验是 Stroop 效应实验范式的一
知心理学与工程心理学研究中的一个热点向题。本种变式。词一图干扰实验范式中所用的刺激一般由
文概述了有关多模态信息加工过程中的促进效应、两部分组成:目标是要求反应的部分,分心则是要求
干扰效应及抑制机制的主要研究,并加以评论。忽视的部分。在实验条件下,目标与分心在功能、语
义、时空等方面有一定的关系;而在控制条件下,分
1 多模态信息加工中的促进效应
心是与目标没有关系的中性刺激。这两个条件下对
一些研究者发现,在词一图配对呈现的图命名目标反应时的差值即为 Stroop 效应的因变量。常
任务中,配对刺激间的语义关系在不同条件下会产用的词一图干扰实验范式是视觉呈现词与图,另一
生两个独立的效应:促进效应与干扰效应,哪个效应种范式是听觉呈现词与视觉呈现图片相结合,这两
占主导地位取决于刺激对中两个刺激呈现之间的时种条件下发现的效应基本类似。词一图干扰实验可
间间隔(即SOA )。词比图先呈现400m s(SOA + 采用不同的任务,不同任务产生的干扰效应也不同。
400m s);在 SOA 为十如分心词对目标图的命名有干扰,而对目标图的分
loom s到一loom s 之间时,发生语义干扰效应。这类没有影响;分心图对目标词的分类有干扰而对目
可能是由于400m s 的 SOA 使得先呈现的词刺激有标词的命名没有影响。这便是词一图干扰效应的任
足够的时间在语义水平上被激活,激活的扩散易化务不对称性[5l
了对语义有关的图的反应。V itkovitch 与 Tyrrel 对词一图干扰效应的解释由两方面的工作组
(1999)发现,正确的基本水平的名字词可以促进对成,一方面是试图解释词一图干扰效应的来源,另一
次级水平的图片命名,如词“狗”的呈现促进了对图方面是试图进行词一图干扰效应的阶段定位。关于
片“哈巴狗”的命名,他们认为这是抑制机制选择性词一图干扰效应的来源目标已提出了三种理论,即
地抑制了跨水平千扰作用,而促进作用未被抑制的知觉编码假设、反应竟争假说和语义评价或决定观。
结果[[ 21。另一个决定发生促进还是千扰效应的重知觉编码假设(Perceptual-encodinhypothesis)认
要因素是配对刺激间的关系,如在决定反应的关键为,分心刺激的呈现吸引了一定的注意,消耗了一定
水平上,分心刺激与目标刺激相同,则分心刺激会促资源,降低了对目标进行编码可得到的资源,使得编
进对目标刺激的反应。Sm ith 等人(2000)发现在没码的效率与质量降低,所以对目标的反应成绩降低。
有语义中介的惰况下,语言