为什么很多人看电视剧只要没字幕就觉得听不清楚?

标签: 多人 看电视 字幕 | 发表时间:2016-08-02 01:00 | 作者:暗涌
出处:http://www.zhihu.com
我来提供一种可能的解释吧。

当我们听不到或听不清楚别人在说什么时,会怎样解读信息呢?我们有时候会从语境中理解,有时候会猜测别人的动机,而有时候会看口型。

一个经典的例子是林丹的「卖避孕套」动图表情。

(知乎无法上传动图,请自行百度或点击链接 林丹表情

不看字幕光看口型,能分辨出林丹是骂了一句脏话;而配上字幕后,相当于给出一个附加信息,告诉你林丹说了什么,接下来只要口型差不多对得上,你就会觉得林丹真的在说「卖避孕套」。

如果把字幕换成配音,就是我们要探讨的问题了;当然,事情要复杂得多——我们看到的口型与听到的声音之间存在相互作用。

欢迎收看本期《走近科学》。

---

英国心理学家哈利 · 麦格克有一次在准备一段影片时,主人公发出ba的音,而做出ga的口型。令人惊讶的是,大家都认为自己听到的不是ba,也不是ga,而是da;如果只听声音或者播放无关的画面,da就神奇地消失了。

麦格克意识到这不是偶然。和其他典型的心理学家一样,他迅速设计了一个实验:

他准备了一段影片,内容是一个女人一边修电视机,一边念念有词。经过后期处理,使得她的口型和声音并不对应。这样的安排一共有四组:
  1. ba的口型——ga的声音
  2. ga的口型——ba的声音
  3. ka的口型——pa的声音
  4. pa的口型——ka的声音
而被试则被分成两组,分别以看影片+听声音和只听声音两种方式接受测试。他们的任务是报告自己听到了什么。

实验结果泾渭分明:只听声音时,90%以上的被试回答都是正确的;而看影片的被试错误率非常高,孩子们的错误率在50%以上,而成人的错误率更是高达92%——实验雄辩地证明了, 口型作为一种视觉信息,影响了人对听觉信息的认知。麦格克把他的发现刊登在《自然》杂志上,而这一效应也以他的名字命名,被称为「麦格克效应」(McGurk effect)。

进一步的研究表明,麦格克效应比我们想象的还要广泛:
  • 你即使知道效应的存在,知道别人要来研究你,并且已经被研究了二十年,你仍然能体验到它;
  • 最早的研究中只用到了音节,后来的研究证实了单词也会产生麦格克效应;
  • 目前为止,「麦格克效应」存在于所有语言中,但语言不同,效应的强度也不同,西方国家的效应强度,比中国和日本不知高到哪里去了;
  • 只有5个月大的婴儿已经能表现出「麦格克效应」。事实上,麦格克本人的初衷正是研究婴儿的语言发展。

相信通过这些前情提要,你已经对「麦格克效应」有了大致的了解,而它就是对我们问题的一种可能的解释:之所以很多人看电视剧只要没字幕就觉得听不清楚,正是「麦格克效应」在作怪。

在看电视剧时,有字幕的情况下一切好说,剧中人物的发言,字幕有最终解释权;而在没有字幕的情况下,「麦格克效应」显现,电视剧中口型与声音的微小差异会让我们的大脑在试图理解其含义时感到迷惑,不一致的视觉信息和听觉信息被整合成了第三种全新的声音——这很显然不利于我们理解其含义,反而会让我们觉得听不清楚。

至于为什么口型和声音会有差异,一方面可能是电视剧制作中不可避免的问题,另一方面,你听说过「数字小姐」吗?



参考文献:
  1. Mcgurk, H., & Macdonald, J. (1976). Hearing lips and seeing voices. Nature, 264(5588).
  2. Colin, C., Radeau, M., & Deltenre, P. (2005). Top-down and bottom-up modulation of audiovisual integration in speech. European Journal of Cognitive Psychology, 17(4), 541-560.
  3. Wright, D. B., & Wareham, G. (2005). Mixing sound and vision: The interaction of auditory and visual information for earwitnesses of a crime scene. Legal and Criminological Psychology, 10(1), 103-108.
  4. Sekiyama, K. (1997). Cultural and linguistic factors in audiovisual speech processing: the McGurk effect in Chinese subjects.. Attention Perception & Psychophysics,, 73-80.
  5. Rosenblum, L. D., Schmuckler, M. A., & Johnson, J. A. (1997). The McGurk effect in infants. Attention Perception & Psychophysics, 59(3).


来源:知乎 www.zhihu.com
作者: 暗涌

【知乎日报】千万用户的选择,做朋友圈里的新鲜事分享大牛。 点击下载

此问题还有 61 个回答,查看全部。
延伸阅读:
为什么汉字顺序有时候不影响阅读?
同时学习两种语言的儿童在语言学习过程中效率是否有影响?

相关 [多人 看电视 字幕] 推荐:

为什么很多人看电视剧只要没字幕就觉得听不清楚?

- - 知乎每日精选
当我们听不到或听不清楚别人在说什么时,会怎样解读信息呢. 我们有时候会从语境中理解,有时候会猜测别人的动机,而有时候会看口型. 一个经典的例子是林丹的「卖避孕套」动图表情. (知乎无法上传动图,请自行百度或点击链接 林丹表情 ). 不看字幕光看口型,能分辨出林丹是骂了一句脏话;而配上字幕后,相当于给出一个附加信息,告诉你林丹说了什么,接下来只要口型差不多对得上,你就会觉得林丹真的在说「卖避孕套」.

为啥说小孩看电视不好?

- - 译言-生活点滴
跟听父母读书讲故事相比,看电视对小孩不好的真正原因,其实是减少了母子沟通. 同样,我们都知道,应该多吃一些水果和蔬菜,少吃甜食,大家都知道,小孩应该多花时间读书,较少看电视的时间. 为什么从电视里,小孩就不能学会,跟从书本里学得一样多的东西呢. 毫无疑问,电视里的内容,可以是很有教育意义的. 但小孩看电视节目的一个不可预见的后果,就是极大地减少了,父母与孩子交谈的时间.

看电视会让人变笨,还是笨的人更爱看电视?

- - 改变从这里开始 - 壹心理
译者:徐丽| 本来来自环球科学授权转载(微信主号: huanqiukexue). 当我们还是小孩子的时候,就经常听到大人们的警告:“看电视会让你的脑子生锈的. ”时至今日,我们在看到小孩子们假期整天坐在电视机前,而对探索真实世界毫无兴趣的时候,这些警告话语也会脱口而出. 父母的这类责骂可以追溯到黑白电视的时代,而如今,在手机、平板电脑等手持设备也能提供大量视频内容的情况下,人们的担忧与日俱增.

令人惊异的字幕

- chris - 写一点
对于喜欢看各种外文影视节目的人,最离不开的可能就是字幕了,而现在我们所能接触到的绝大部分字幕都是一群“字幕组”成员无私奉献而来的. 其实看多了字幕就会发现,字幕组确实是一个藏龙卧虎的地方,有很多翻译技巧强大无比,搞笑能力无人能敌的翻译人员,当然还有各种追求技术卓越的技术人员. 前一种的话,你肯定已经感受过了.

小时候我妈不让我看电视。。。。。。。。。

- 虫虫 - 我们爱讲冷笑话
那时候她的策略是把插头拔下来然后上班走人. 然后各种教育我说那个东西有电 不能碰 碰一下就死. 然后等她上班走了我总是一声冷笑插上插头各种欢乐. 后来我妈把遥控器藏起来了 在装袜子的抽屉里. 切 果断掏出来等她回来的时候赶紧塞回去. 后来我妈发现遥控器的位置不对 又换了地方 依然阻止不了我找遥控器的心.

边看电视,边玩社交,【TVCheck】挖掘你的LifeLog

- skymare - 36氪
编者按:记得前段时间,老婆很痴迷电视剧《步步惊心》. 不过,每每看到狗血处,就发短信向其他也在看的死党各种吐槽. 直到获得对方认同后,才长舒一口气. 社交互动,需要话题;话题是什么,是那些你我他都能感同身受的东西. 而电视剧,不管是好是坏都能紧紧得把观众联系到一起,这是天然的社交资源. 今天向大家介绍一款看电视的手机应用,也许会有所启发.

看电视绝对需要听懂的潜台词

- Ma Xiaomeng - 河蟹娱乐
你以前的男朋友对你好么 — 你还是处女么. 孩子,你喜欢这个阿姨么 — 我娶她做你后妈好不好. 我怎么能咽得下这口气 — 我老婆让别人干了. 请你看在孩子得分上 — 我有了婚外情,又不想离婚. 把你们老板娘找来 — 问问老板娘这里有没有三陪. 工作上的压力很大 — 我对老婆不来电了. 我不指望你报答我 — 上床的事先不急.

Google将如何改变你观看电视的习惯

- cheng - 月光博客
  在与苹果的竞争中,Google在手机上已经先输一局,这就是Google为何如此看重电视的原因. 在上一周的爱丁堡国际电视节上,Google董事会主席Eric Schmidt的演讲不仅向用户讲解了未来电视的变化趋势,同时也暴露了Google未来的电视策略.   “忽略了互联网是十分危险的. “互联网是未来电视的一个基础,原因很简单:因为人们需要.