情绪冲突研究大部分是单独针对视觉刺激或听觉刺激进行的,少部分研究对跨视听通道情绪冲突进行了考察,但没有对视觉通道和跨视听通道冲突同时存在时人们如何反应的研究。本研究中的实验一是一个行为实验,选取39名在校大学生作为被试,图片材料来自标准化的国际情绪图片库IAPS (2008),让7名未参加正式实验的同学进行初步筛选,选出积极图片24张,消极图片24张,音乐材料来自Mitterschiffthaler (2007)等人对西方古典音乐引起的情绪的FMRI研究,选取其中引起被试快乐情绪的音乐,Mozart的《Allegro—A little night music》作为积极音乐；引起被试悲伤情绪的音乐,Bruch的《Kol Nidrei》作为消极音乐。实验采用2x2x2x3被试内设计。其中一个自变量为图片属性,分为积极和消极两个水平；另一个自变量为视觉间隔,分为长和短两个水平;第三个自变量为视觉条件,分为积极和消极两个水平；第四个自变量为听觉条件,分别有积极、消极和无3个水平。被试的任务是在看到每一张图片的时候,对图片带给自己的情绪是积极的还是消极的进行判断,要求被试在保证正确地前提下尽可能快的反应。实验记录被试对图片属性进行反应的反应时和正确率。37名同学的正确率在90%以上,对他们反应正确的数据进行分析,结果发现,本实验中存在显著的视觉通道之间的效应,也存在听觉通道与视觉通道之间的跨通道效应,但是视觉通道之间的效应似乎要大于跨视听通道之间的效应。而视觉条件和听觉条件之间的交互作用不显著,两者在对被试反应产生影响时,似乎是各自起作用的。由于视觉间隔、视觉条件、听觉条件三者交作用不显著,图片属性、视觉间隔、视觉条件、听觉条件四者交互作用也不显著,因此,视觉间隔时间对视觉条件和听觉条件之间的相互作用似乎并未产生影响。对视觉通道进行进一步分析,当视觉条件对被试产生影响时,视觉刺激之间的情绪冲突效应与视觉刺激间的时间间隔有关,我们可以推测,积极图片对消极图片产生的影响随着时间增加迅速减弱,而消极图片对积极图片产生的影响随时间增加减弱程度比较小。本实验的跨视听通道情况,当视听通道一致时,并没有发现促进效应。但是当视听通道不一致时,消极音乐对积极图片的反应产生了明显的抑制作用,积极音乐对消极图片的反应没有产生显著的抑制作用。这可能是由于当视听通道存在冲突时,出现了两种效应,一种是跨视听通道的情绪冲突效应,另一种是跨视听通道的消极效应。所谓跨视听通道的情绪冲突效应,是指当听觉通道与视觉通道的情绪信息不一致时,被试对视觉通道情绪信息的反应变慢。所谓跨视听通道的消极效应,是当视听通道存在不一致的积极和消极信息时,对消极信息所在的感觉通道给以更多的注意资源,导致对该通道的消极信息反应变快,而对另一个通道的积极信息反应变慢。实验二是一个探索性的脑电实验,初步对复杂的跨视听通道情绪冲突效应进行研究。选取20名在校大学生为被试,采用词面孔图片和实验一中使用的两首音乐,进行实验。实验采用2x2x2被试内设计,自变量为面孔的属性、干扰词的属性、音乐的属性,均分为积极和消极两个水平。被试的任务是,判断每张词-面孔图片中,面孔是积极的还是消极的。实验记录被试对面孔属性进行反应的反应时、正确率和脑电数据。其中有效行为数据20份,有效脑电数据16份。对行为数据进行分析,结果发现实验二出现了显著的由干扰词引起的情绪冲突效应,即视觉通道内的情绪冲突效应,而音乐没有引起跨视听通道的情绪冲突效应。对脑电数据进行分析,以270-520ms为时间窗口,分析出的结果与行为数据结果类似,即干扰词与面孔不一致时,比与面孔一致时引起了一个差异负波,即同通道之间产生了明显的情绪冲突效应,这表现为一个270-520ms内的一个差异负波；而音乐却没有引起跨视听通道的情绪冲突效应。这似乎表明,当同时存在同通道的视觉情绪冲突和跨视听通道的视听情绪冲突时,被试的反应服从了同通道的冲突,而跨通道的冲突被忽略了。而这种结果的产生,这种效应到底是一种通道效应,还是由于词和音乐这两种属性本身对人的影响。由于实验二中使用的词和I音乐,两者在熟悉度上可能存在差异,对两者的认识方式也不同,因此两种材料的干扰强度存在差异,而且两种通道的刺激所呈现的方式也存在差别,所以也体现了干扰强度上的差异,这些干扰强度的差异,可能会对实验结果产生影响。但到底是由于通道效应还是实验材料带来干扰强度的差异的影响,还需进一步的研究才能确定。结合实验一和实验二的结果,当同时存在同通道的视觉冲突和跨通道的视听冲突时,被试的反应是与通道效应有关或是干扰刺激的干扰强度有关,还不能下定论,需要进一步分析,但由实验一和实验二结果之间的差异可以推测.它至少不止来源于通道之间的效应；而这两者是独立起作用还是会互相产生影响,也不能一概而论,被试的反应似乎更多与两种通道引起干扰的强度有关,这种强度可能跟干扰刺激与要反应的刺激出现时间的间隔有关,也可能跟实验选用的干扰材料类型有关,或者跟这两者皆有关系。