读我的唇语:在演讲中使用多个感官知觉

当有人对你说话时,你看到他们在说什么吗?我们倾向于认为演讲是我们听到的东西,但最近的研究表明,我们使用的各种感官言论认为大脑将演讲视为我们听到的,看到的,甚至感觉。在一份新的报告电流方向在《心理科学》,心理科学协会的期刊,心理学家劳伦斯Rosenblum描述研究考察不同的感觉混合在一起,帮助我们如何看待演讲。

我们收到很多语音信息通过视觉线索,如唇读,这种类型的视觉演讲发生在所有的文化。不仅仅是信息从嘴唇——当有人对我们说,我们也会注意运动的牙齿,舌头和其他non-mouth面部特征。人类语言的许多感官知觉已经集成在一起。换句话说,语言并不意味着只是听说,还需拭目以待。

麦格尔效应是一个良好的例子我们看到之间的集成,我们听到有人在说话。这种现象发生在一个声音(如一个字或词)被称为视频显示着不同的声音。例如,音频可能玩“ba”,虽然脸好像是说“我们”。面对这个问题,我们通常会听到“我们”或两者的结合的声音,比如“da”。有趣的是,当研究参与者意识到配音或告知只专注于音频,麦格尔效应仍然发生。Rosenblum表明这是证据,一旦感觉整合在一起,分开是不可能的。

最近的研究表明,这种集成很早就出现在演讲过程中,甚至在音素(演讲的基本单位)成立。Rosenblum言论表明,体育运动(也就是说,我们的嘴巴和嘴唇移动)创建声学和视觉信号具有类似的形式。他认为,演讲的大脑而言,听觉和视觉信息是从来没有真正独立。这可以解释为什么我们将轻而易举地演讲,这样音频和视觉语音信号难以区别。

Rosenblum认为视觉语言研究的临床意义,特别是在自闭症、脑损伤和精神分裂症和“康复项目在这些领域整合视觉言语刺激。”