
(第一作者——唐晓雨教授)
辽宁师范大学心理学院唐晓雨教授课题组在《Cognitive Psychology》(SSCI Q1)上发表了题为“Forest before trees? It depends on not only what you see, but also what you hear”的论文,该研究探讨了听觉刺激如何影响视觉整体-局部字母的处理,并利用分层漂移扩散模型(HDDM)分离其在不同认知阶段的作用机制。
该论文第一及通讯作者为我院唐晓雨教授,我院博士生刘昊明为共同第一作者,我院孙岩教授,孙佳影讲师和硕士毕业生傅京同为通讯作者。研究受到辽宁省兴辽英才计划、国家社会科学基金、中国博士后科学基金等多项基金支持。
本研究采用Navon层级字母任务,结合四种听觉条件(无声音、纯音、反应一致/不一致语音),考察听觉输入对视觉层级加工的影响。实验发现,反应不一致语音显著削弱整体优势效应和整体干扰效应;即使消除整体优势效应(实验2),该语音对干扰的影响依然稳定。通过分层漂移扩散模型(HDDM)分析表明,不一致语音在感知编码阶段延长非决策时间,并在决策阶段降低信息积累速率;纯音和一致语音仅影响感知编码阶段。
结果表明,语义冲突性听觉输入可特异性干扰视觉决策过程,提示在实际多任务场景(如驾驶、人机界面)中应避免在关键视觉任务期间呈现语义丰富的听觉信号,以减少跨模态冲突、提升决策安全与效率。
文献:
Tang, X., Liu, H., Zhang, H., He, Y., Cui, X., Liu, W., Sun, Y., Sun, J., & Fu, J. (2025). Forest before trees? It depends on not only what you see, but also what you hear. Cognitive psychology, 161, 101764. Advance online publication. https://doi.org/10.1016/j.cogpsych.2025.101764