We're sunsetting PodQuest on 2025-07-28. Thank you for your support!
Export Podcast Subscriptions
cover of episode Making Sense: How sound becomes hearing

Making Sense: How sound becomes hearing

2022/3/2
logo of podcast Unexplainable

Unexplainable

AI Deep Dive AI Chapters Transcript
People
D
Diana Deutsch
M
Matthew Wynn
M
Mike Chorost
N
Noam Hassenfeld
Topics
Diana Deutsch:从音乐家到音乐心理学家的转变,以及她对听觉错觉的研究,揭示了大脑在声音感知中的主观性和加工机制。她设计了双耳分听实验和音阶错觉实验,证明了大脑会根据经验和预期对声音进行重组和编辑,即使这些声音在物理上是相同的。她还研究了成长环境对声音感知的影响,例如不同地区的人对音调的感知可能不同。 Noam Hassenfeld:作为节目的主持人,他串联了整个节目的内容,并对听觉错觉和人工耳蜗等话题进行了深入浅出的讲解。他介绍了声音从声波到大脑感知的过程,以及大脑如何过滤掉一些声音信息,例如回声,以帮助我们更好地理解声音来源。他还讨论了大脑的“自上而下”加工过程,即大脑的预期和经验会影响声音的感知。 Matthew Wynn:作为一位听力学家,他解释了声音的物理特性以及声音在耳朵中的传递过程,包括外耳、中耳、内耳以及神经信号的传递。他还介绍了人工耳蜗的工作原理以及其对声音感知的影响,并指出人工耳蜗的成功很大程度上依赖于大脑的适应能力。 Mike Chorost:作为一位人工耳蜗使用者,他分享了自己逐渐失聪以及使用人工耳蜗后的听觉体验。他描述了人工耳蜗初期的声音感知体验以及大脑的适应性,并通过自己的经历说明了通过训练,人工耳蜗使用者可以重新学习将声音与意义联系起来。他还讨论了人工耳蜗对音乐的还原度较低的问题,以及他如何通过不断的调整和训练来改善自己的音乐欣赏能力。 Diana Deutsch: Her research on auditory illusions reveals the subjective nature of sound perception and the brain's role in processing auditory information. She designed experiments demonstrating how the brain reorganizes and edits sounds based on experience and expectations, even when the physical sounds are identical. Her work also highlights the influence of cultural background on sound perception. Noam Hassenfeld: As the host, he connects the different aspects of the episode, providing a clear and engaging explanation of auditory illusions and cochlear implants. He explains the process of sound from sound waves to brain perception and how the brain filters out information like echoes to help us better understand sound sources. He also discusses the brain's 'top-down' processing, where expectations and experiences influence sound perception. Matthew Wynn: As an audiologist, he explains the physical properties of sound and how sound is transmitted through the ear, including the outer, middle, and inner ear, and neural signal transmission. He also explains the working principles of cochlear implants and their impact on sound perception, noting that the success of cochlear implants largely depends on the brain's adaptive capacity. Mike Chorost: As a cochlear implant user, he shares his experience of gradually losing his hearing and his auditory experiences after using a cochlear implant. He describes the initial sound perception experience with a cochlear implant and the brain's adaptability, and illustrates through his own experience how cochlear implant users can relearn to associate sounds with meaning through training. He also discusses the lower fidelity of music reproduction with cochlear implants and how he improved his music appreciation through continuous adjustments and training.

Deep Dive

Chapters
Diana Deutsch's journey from a failed page turner to a renowned researcher in the psychology of music, focusing on auditory illusions and how our brains perceive sounds.

Shownotes Transcript

9月28日,全球公民节将聚集数千名采取行动终结极端贫困的人们。Post Malone、Doja Cat、Lisa、Jelly Roll和Raul Alejandro将与世界领导人和活动家一起登上舞台,战胜贫困,捍卫地球,争取公平。立即下载Global Citizen应用程序,赢取您的节日门票。更多信息请访问globalcitizen.org.com。

自二战以来,古巴等国家一直使用短波无线电与间谍进行联络。如果你有密码,那些数字显然都是文字,它们是给安娜的指示,告诉她本周去哪里以及做什么。本周的《犯罪》节目讲述了一位为美国政府从事间谍活动17年,以及她如何被捕的故事。

在您收听播客的任何地方收听我们最新的剧集《安娜》。对许多人来说,弄清楚你的人生目标是一个漫长而曲折的过程。

但对一些幸运的人来说,职业道路会在一瞬间变得清晰起来。“我一直对音乐很感兴趣。我花所有的时间弹钢琴和作曲等等。”对戴安娜·德意志来说,那一刻发生在50年代。但这并没有完全按照她想象的那样进行。

我的音乐老师在BBC第三频道上午演出。她在三重奏中弹钢琴。我被要求当翻页员。基本上,她负责翻阅乐谱,这样她的老师就不必停下来演奏了。所以我去了BBC大楼……

戴安娜一直梦想成为一名音乐家,所以即使只是在BBC翻页也感觉像是大事。

不幸的是,我的手抽了一下,所有的页面都掉到了地上。这位可怜的女士不得不一边弹钢琴,一边用另一只手捡起散落的纸张。那是一次糟糕的经历。

戴安娜与她的梦想面对面,她清楚地知道这并不适合她。这确实让我意识到,成为一名表演型音乐家可能不是一个好主意。

戴安娜没有追求表演事业,而是开始研究音乐心理学,特别是不同的人如何感知声音。她是第一批使用大型主机计算机生成合成音来研究这个问题的人之一。

1973年的一天,她正在尝试同时播放两个音序。“我不知道会发生什么,但我认为尝试一下会很有趣。”你实际上可以听到戴安娜当时听到的声音,但前提是你戴着耳机。所以,如果你身边有耳机,现在是戴上的好时机。“我从一只耳朵的高音和低音交替开始,同时,另一只耳朵是低音和高音交替。”

一边是高低音,另一边是低高音。我听到的声音似乎令人难以置信。我听到我的右耳有一个单一的高音,与左耳的单一低音交替出现。两只耳朵都听到高低音序列,但她并没有在两只耳朵里都听到它们。她只在右耳听到高音,在左耳听到低音。出于一种本能反应,我把耳机换了个方向。

这对我感知到的声音没有任何影响。高音仍然在我的右耳,低音仍然在我的左耳。如果你戴着耳机,把它们翻过来。可能没有什么区别。“我走到走廊里,尽可能多地找人来测试。到下午结束时,我一定测试过很多人,可能几十个人吧。”

他们中的大多数人都听到了我听到的声音。戴安娜简直不敢相信。“我简直不敢相信。在我看来,你知道的,我进入了另一个宇宙,或者我疯了,或者其他什么。这似乎是世界颠倒了。”我是诺姆·哈森菲尔德,这是《理解意义》,这是《难以解释》的一个新系列,关于我们感官的奇怪、令人困惑、巨大的未知。

我们首先尝试理解声音。当我们听到声音时,我们实际上听到的是什么?有多少是真实世界?有多少是在我们的大脑中构建的?所有知识都必须通过感官获得。所有我们感知到的,以及我们日常生活中所有的意识。光。双彩虹。哦,我的上帝。声音。听我说。听我说。触摸。挤压。气味。恶心。和味道。嗯嗯。

你对人类感官有什么看法?正如肉和酒是身体的营养一样,感官为灵魂提供营养。所有我们感知到的,看到的,所有的意识,听到的,所有知识都必须通过感官获得。我有不可思议的触觉。所有我们感知到的,品尝到的,所有的意识,闻到的,所有知识都必须通过感官获得。没有意义。所以现在我们都有了

在我们了解所有未知数之前,让我们先从我们所知道的关于声音的东西开始。声音是当某物振动时发生的空气压力快速变化。明尼苏达大学听觉学家马修·温恩。“所以你可以把它想象成池塘里的波浪。没有一个水分子移动得很远。它们只是上下浮动,但它们引发了整个波浪的运动。这就像多米诺骨牌效应一样,在空间中移动。”

这个压力波穿过空气。然后,你知道的,一系列事件会在你的耳朵里启动。

波浪穿过耳道。耳膜来回振动。几块小骨头会放大这种振动,将其发送到更深处的耳蜗,这是内耳中螺旋形的器官,上面覆盖着数千个毛细胞。耳蜗是感觉细胞所在的地方,这些细胞拾取声音并将其转化为大脑可以使用的信号。压力波变成电脉冲,最终被解释为声音。

所以这听起来像是一个漫长而复杂的过程,但它非常快。“我的意思是,没有比听觉更快的感官了。你的耳朵每秒可以完成这个整个过程数千次。”所有这些——压力波、耳朵振动、转化为电脉冲——都是简单的部分。我们知道的部分。复杂的部分几乎会占据本剧集的其余部分。

因为进入我们耳朵的压力波与我们最终听到的声音之间存在差异。如果我们真的感知到每一个不同的声音,我们会完全迷惑不解。以马修的声音为例。即使在我现在所在的房间里,我只是在我家里的一个房间里,我的周围都有回声。因为任何时候你都有一个平坦的表面,比如桌子、墙壁、电脑屏幕,任何东西……

声音实际上会反射出来。所有这些四处反弹的回声理论上应该使声音很难在空间中定位。“所以如果我听到这个声音,然后听到另一个回声从我右边的墙上传来,然后我听到一个回声从天花板上传来,然后是我的桌子,我怎么知道声音是从哪个方向传来的?它来自四面八方。但我们的大脑有答案。谢天谢地,我们的大脑知道。”

声音只来自一个方向,而这正是世界有意义的唯一方式。为了在现实世界中发挥作用,我们的大脑会做出猜测。它感知到进入的第一波声音,然后是随后每一波声音的反射,这就像说,“好吧,我可以压制你”,这就是为什么很多人甚至没有意识到有回声,因为我们的大脑非常擅长压制它们。

我们的大脑基本上编辑了我们的听觉体验。“我喜欢这样表达,大脑是被引导到某个方向,而不是直接读取世界。”这正是戴安娜在70年代前后翻转耳机时偶然发现的。“这似乎是世界颠倒了。”

如今,听觉错觉不像过去那样罕见了。但戴安娜是其中的一个重要原因。她现在是加州大学圣地亚哥分校的心理学教授,几十年来她一直在使用计算机生成的声音来研究大脑的编辑器。通过她发现的第一个错觉,戴安娜认为大脑的两个部分存在分歧:决定音高和位置的部分。

这就是为什么你在一侧听到高音,在另一侧听到低音,即使它们实际上都在两侧。在发现第一个错觉之后,戴安娜无法停止思考它。“当然,那天晚上我没有睡多少觉。”

这不可能是唯一一个产生这种现象的错觉。戴安娜开始想知道她是否可以设计其他错觉来了解更多关于大脑内部机制的信息。“就像,如果一台设备,比如一辆汽车,坏了,你只需要修理出什么问题,就可以了解很多关于汽车工作方式的信息。”所以她开始集思广益。“我当时有点困,我正在想象音符在空间中跳跃……”

第二天早上,它们已经变成了我命名为音阶错觉的东西。音阶错觉。就像之前一样,这个错觉由两个音调序列组成,每个耳朵一个。所以只有一个声道。一些高音,一些低音。然后是另一个声道。更多的高音,更多低音。然后你再次听到它们一起演奏。

如果你戴着耳机,你可能会在一侧听到所有高音,在另一侧听到所有低音,即使这些音符实际上是从左到右跳跃的。那是你大脑正在编辑声音。它将它们分开以反映世界通常的样子。在现实世界中……

人们会认为,较高音域的声音来自一个声源,而较低音域的声音来自另一个声源。所以这就是大脑在这里假设正在发生的事情。大脑根据这种解释重新组织空间中的声音。

就像去除回声一样,这种大脑编辑通常会帮助你理解世界。但戴安娜的错觉是明确设计用来欺骗大脑做出错误猜测的。并非每个人的大脑都会做出相同的猜测。“左撇子作为一个群体,很可能听到与右撇子不同的声音。”右撇子倾向于在右侧听到高音,但对于左撇子来说,情况更复杂。

他们比其他人更有可能在左侧或以更奇怪的方式听到高音。

所有这些重组,大脑编辑我们的听觉以帮助我们驾驭现实世界的方式,有时被称为自上而下的处理。“自上而下的处理发生在大脑使用预期、经验以及各种感知组织原则来影响感知内容时。”

而不是自下而上的处理,即感知世界,然后将其传递到大脑,自上而下的处理意味着我们的大脑正在影响我们的听觉。在某种程度上,我们的大脑听到的是我们期望听到的声音。从某种意义上说,我们感知到的许多东西实际上并不是我们听到声波撞击我们的耳膜。这是对这些波应该是什么的预测。

为了说明这一点,戴安娜使用了所谓的“神秘旋律”。这是一首著名的曲子。

但是音符是在不同的八度音程中呈现的。对于所有非音乐爱好者来说,八度音程基本上是标准的音乐音符范围。在这个错觉中,音符保持不变,但它们演奏的范围发生了变化。因此,你可以用音符跳到不同的范围来演奏Do、Re、Mi,而不是在相同的范围内演奏Do、Re、Mi,所有音符彼此相邻。

所以戴安娜选取一首著名的曲子,不改变旋律,只改变音域。问题是,人们能否识别出这首旋律?事实上,人们无法识别这首旋律。现在听一下相同序列的简化版本。在这种情况下,所有音符都在同一个八度音程中。相同的范围。

你知道它是什么。是的,确实是《扬基歌》。很多时候,当人们回头再听那段混乱的版本时,他们可以听到《扬基歌》。当你对听到的内容有一个参照系时,当你有一个预期时,它实际上会改变你听到的内容。像这样的错觉有时会在互联网上流传。就像这个,取决于你想到哪个词,你可能会听到劳雷尔或扬尼。劳雷尔。劳雷尔。

还记得去年劳雷尔与扬尼的事情吗?每个人都为此疯狂?好吧,现在有一个儿童版本正在流传。这是来自吉米·金梅尔的节目,他首先播放了一段来自《芝麻街》的片段。我感动了!

- 移动它来跟随你。- 移动摄像机?是的,是的,这听起来是个好主意。好的。- 注意这一点,因为告诉我你是否听到格罗弗说了两件事中的一件,这听起来是个好主意,或者这是一个该死的绝妙主意。准备好了吗?- 移动摄像机。- 是的,是的,这听起来是个好主意。

- 吉尔摩,你听到了什么?- 这是一个该死的握手主意。- 你听到了吗?- 是的,我听到了,是的。- 我第一次听到它。我根本没有听到脏话。然后接下来的12次我看它,我听到的全是F字。但是……- 以防万一你想再试一次,这是格罗弗可能会让很多家长生气。- 是的!是的,这听起来是个好主意!- 这种误解在一定程度上适用于我们所有的感官。我们都见过视觉错觉,或者你可能还记得关于那件裙子的争论。

但戴安娜最终发现,我们大脑编辑世界的方式不仅仅是由于硬编码的差异,比如你是右撇子还是左撇子。大脑编辑因人而异,取决于生活经验。为了证明这一点,她要求听众确定一个模式是上升还是下降。

对于那些了解一些音乐理论的人来说,这个音程是一个三全音,正好是八度音程的一半。因此,无论你向上还是向下移动,你都要走相同的距离才能从一个音符移动到另一个音符。如果你不太了解音乐,你只需要知道这是一个特别模棱两可的模式。但戴安娜在这里的实验中做了一些非常有趣的事情。

她同时在许多音域中演奏旋律。所以你可能很难弄清楚它是上升还是下降。当然,你从一个人到另一个人会得到巨大的差异。而这确实让很多人感到惊讶。

我听到它在上升,戴安娜发现其他人也听到它在上升,但有些人听到它在下降。真正令人难以置信的是,戴安娜发现两个人感知这个模式的差异,可能取决于你成长的地方。信不信由你,当戴安娜比较两组人,来自英格兰南部的人和来自加利福尼亚的人时,她发现英国人倾向于将这个模式听到是上升的,而加利福尼亚人则听到这个模式是下降的。

戴安娜的假设是,根据你成长的地方,你倾向于听到不同的音高是低音还是高音。这与你最常接触的语音音高范围有关,尤其是在童年时期。因此,如果你听到第一个模式,它从音符D到G#是下降的,你可能会听到第二个模式,它从音符A到D#的距离相同,是上升的,反之亦然。

但最终,所有这一切的机制仍然是一个谜。科学家们并不真正知道所有这些大脑编辑是如何发生的。“我的意思是,我们知道大脑会这样做,但我们并不真正知道它是如何做到的。”从某种意义上说,这几乎就像我们都在听在我们脑海中为我们自己演奏的戏剧。有一个剧本,整个世界都在四处反弹的压力波。但我们实际听到的一切都取决于表演者。

在许多方面,我们的大脑决定了我们如何听到世界。但即使我们不知道我们的大脑是如何做到这一点的,有时利用这种大脑魔法开始变得越来越重要。“我的听力就像水从破裂的罐子里流出来一样,从我的脑袋里流出来。”休息后,我们将讲述一个男人为了再次听到他最喜欢的音乐而进行的探索。接下来就是这个。对《难以解释》的支持来自Greenlight。

有孩子的父母告诉我,时间过得很快。在你意识到之前,你的孩子已经长大了,他们有了自己的信用卡,

他们不知道如何使用它。但你可以帮忙。如果你想让你的孩子尽早获得一些金融知识,你可能想尝试Greenlight。Greenlight是一款为家庭设计的借记卡和货币应用程序。父母可以向孩子汇款。他们可以密切关注孩子的支出和储蓄。孩子们和青少年可以建立金钱信心和终生的金融素养技能。

Oda Sham是我的Vox同事,她有机会尝试Greenline。“你可以观看关于如何投资的视频。所以我们拿出一部分他的储蓄来投资,我告诉他,观看视频,这样他也可以开始学习如何投资。”

数百万父母和孩子正在Greenlight上学习关于金钱的知识。您今天就可以注册Greenlight,并在访问greenlight.com/unexplainable时获得您第一个月的免费试用。这是greenlight.com/unexplainable,免费试用Greenlight。greenlight.com/unexplainable。

嘿,《难以解释》的听众们。我是苏·伯德。我是梅根·拉皮诺埃。如今,女子体育正在达到新的高度,有很多事情需要讨论,有很多事情需要解释。你的意思是,为什么女运动员的平均收入低于男运动员?

好问题。所以,苏和我正在推出一个播客,我们将深入探讨体育运动的方方面面,以及其他一些事情。我们称之为《多一点触感》。因为女子体育就是一切。流行文化、经济学、政治,你随便说。没有比我们更适合谈论球场内外发生的事情的人了。

以及其他地方。我们还将分享一些我们一起生活的点点滴滴。不仅仅是像Met Galas和全明星赛这样的酷事,还有我们日常的生活。你这么说,好像我们的日常生活并不光彩。真的。无论是分析最大的比赛还是讨论最新的头条新闻,我们都将为体育世界及其他领域带来更多见解。在您收听播客的任何地方关注《多一点触感》。每周三都会发布新的剧集。

《难以解释》,我们回来了。我们一直在讨论我们大脑过滤、编辑甚至重建我们听到的世界的神秘方式。对某些人来说,这种大脑魔法可以作为一种聚会技巧来突出。但对其他人来说,它可能更为重要。

好的,测试一、二、三,测试。这是迈克·科里斯特。“所以这就像你取单词chorus,然后在后面加一个T。”迈克是一位科学作家,他天生严重听力损失,但他可以使用助听器。从15岁开始,他就迷上了拉威尔的著名作品《波莱罗舞曲》。这是一首喧闹的混合体,下面有着如此迷人的鼓点。

它真的让我兴奋和着迷。他特别喜欢这首曲子中的旋律是如何随着时间的推移逐渐演变的。每次重复都在更高的层次上。它更响亮。共鸣更深。它只达到了高潮。所以这是一首非常令人震惊的音乐。他会一遍又一遍地听《波莱罗舞曲》。这有点像我的音乐。

我会一次又一次地用它来测试新的助听器。所以它一直是我的听觉试金石。——然后,在2001年的一天,他仍然拥有的有限听力开始消失。——我站在一辆租来的车外面

我突然觉得我的电池没电了。我的助听器电池。突然,附近高速公路上的交通声音变得不同了。这只是你与汽车经过相关的那个声音。但突然间,它听起来更像是有人往高速公路上倒了一堆棉花。很快,迈克发现他剩下的听力正在迅速消失。

我的听力就像水从破裂的罐子里流出来一样,从我的脑袋里流出来。所以在最初意识到这一点后的大约四个小时后,我基本上完全失聪了。这真是太令人震惊了。但迈克有资格接受人工耳蜗植入。这是一种植入式设备,可以为一些聋人提供一种听力形式。

聋人社区的许多人更喜欢使用手语或唇读而不是使用人工耳蜗植入。但对某些人来说,特别是那些在晚年失去听力并希望继续使用其母语的人来说,人工耳蜗植入可以是有用的工具。耳蜗是你头部内的一个微小的螺旋形器官。

人工耳蜗是一串电极,小心地插入该螺旋器官内。这是马修再次出现,这位听觉学家实际上与人工耳蜗使用者一起工作,以帮助他们理解他们的经验。“有一个外部部件看起来像助听器,但它不是助听器。它是一个麦克风和一台计算机,它分析声音并将指令发送到耳内的那些电极。”

植入物基本上绕过了很多耳朵。它直接激活耳蜗,然后将电信号传递到大脑。

但人工耳蜗并不能重现正常的听力。迈克说,将声音简化为数字的0和1,并将它们直接传输到你的大脑,这听起来很奇怪。“这太令人震惊了。这根本不是我预期的。”当迈克的植入物打开时,他做的第一件事就是听自己的声音。“我的声音听起来真的很奇怪,音调很高。我几乎听起来像……你知道的,那种声音。这就像……”

这就像听一只疯老鼠。马修实际上给了我一个他作为听觉学家使用的程序,来模拟各种类型的人工耳蜗声音。所以这是一个关于它对迈克听起来可能是什么样的总体概念。“这非常令人沮丧。我认为世界听起来和我使用助听器时差不多,只是更模糊。”

我完全没有准备好音调的巨大差异。由于植入物的设计方式,它们往往会使一切听起来都比较高亢。因此,当你向人工耳蜗的任何部分发送信号时,大脑会将其解释为高音,即使它是低音。这就是为什么一切听起来都像老鼠一样。但有趣的是,在一两天内,我又开始听到低音了。部分原因是我的大脑适应了它。

基本上,迈克的大脑正在为他编辑世界。

他正在指挥他自己的自上而下的处理。然后迈克开始训练。“我得到了《小熊维尼》有声读物的书籍。”

“我还记得我第一次把磁带放进磁带播放机并播放《小熊维尼和一些蜜蜂》的时候。我想就是这样。我根本听不懂。这完全是胡说八道。”但他也有实体书,所以他一边读一边听磁带。“所以我能够开始将我得到的奇怪输入与书页上的文字匹配起来,这些文字告诉我婴儿的意思。”关于一个故事?克里斯托弗·罗宾说。你能非常甜蜜地告诉小熊维尼一个吗?这就是S的声音。这就是音素Pooh的声音。小熊维尼。所以这是一个重新映射的过程。

根据马修的说法,这种大脑重新映射的过程对于人工耳蜗使用者来说是一种相当正常的体验。“任何优秀的听觉学家都会告诉那些正在考虑人工耳蜗的人,当你第一次得到它并第一次激活它时,你可能根本听不懂多少。但在最初的六个月,也许是第一年,你的大脑会学习重新组织它如何将声音与意义联系起来。”

如今,培训更容易获得。它当然不像20年前迈克那样是DIY的。

但这种改进仍然难以置信。我合作的许多人会说,“现在当我听我的配偶说话时,听起来像她的声音”,这让我们所有在这个领域工作的人都感到困惑。“因为如果你看看耳朵是如何被激活的,那就没有解释。我的意思是,不要说得太直白,但这是无法解释的,对吧?所以不可能是真的。然而,很多人这么说。”

调整植入物的设置确实可以使其更好地工作,但这并不能解释这种令人难以置信的改进的大部分原因。人工耳蜗的许多成功实际上证明了大脑的工作能力有多强,而不是声音输入质量高的体现。我们的大脑具有几乎不可思议的能力来预测语言并填补空白。

即使我们听到的声音模糊或失真。但虽然人工耳蜗对语音效果很好,但对音乐的效果却差得多。音乐是一种更复杂的声波。你需要区分旋律、和声和纹理,最重要的是音高。而植入物只有少量电极。你必须简化所有频率,

你可以把它想象成像像素化声音一样。这使得它更加困难,因为耳蜗充满了液体,很难使用电脉冲来刺激编码正确频率的确切部分。相反,脉冲会在编码该频率的部分周围扩散。让我做一个类比。

假设你在弹钢琴。你可以非常小心地弹奏你想要的精确音符,或者你可以比较粗糙地把手放在钢琴上。就像,你会在音符的正确范围内,但你不会非常清晰地弹奏出精确的音符。所以人工耳蜗更像是把手放在音符上。你听到的频率并不精确。

当你把所有这些都考虑进去时,用人工耳蜗翻译音乐似乎几乎是不可能的。人工耳蜗的当前设计并非真正用于音乐。它是用来理解语音的。但我想要我的《波莱罗舞曲》回来。即使迈克的大脑已经学会了编辑那些高音的刺耳声音来理解语音,音乐仍然不一样。听起来太糟糕了。

我当时想,哦,我的上帝,你知道的。这真的很令人震惊,因为即使它变得好两倍,它仍然会很糟糕。即使它变得好三倍,它仍然会很糟糕。真的很糟糕。迈克升级了他人工耳蜗的硬件。他升级了软件。他甚至自愿作为一些新设备测试的实验对象。所以我戴上耳机。我会听到一系列的哔哔声。

我说:“好吧,那是哪首歌?”他们说:“我不知道。”这就像,“有人知道吗?”对我来说,这是一个非常令人沮丧的实验,因为我知道《一闪一闪亮晶晶》。我说:“这听起来不像《一闪一闪亮晶晶》。这怎么可能听起来像《一闪一闪亮晶晶》呢?”

我采访的研究人员告诉我,一些人工耳蜗使用者并不太喜欢音乐。它肯定比语音更难适应。而且因为病人经常被告知要更多地关注改善语音聆听,所以音乐可能会被忽略。但是通过植入物欣赏音乐有时会被认为是无法克服的障碍。

你可以在电影《金属之声》中看到这一点,一个音乐家在失去听力后得到人工耳蜗,然后去参加演出,聆听你正在听到的歌曲。在这个场景中,电影展示了演出中其他人的听觉,然后逐渐转变视角,突出主角通过人工耳蜗听到的内容。这场演出让主角非常不安,以至于他最终摘下了处理器。

他基本上决定不再使用他的植入物了。你可以在网上找到很多这样的模拟。所以我问迈克,这些模拟,甚至像我为这一集创建的失真声音或失真波莱罗舞曲的模拟,是否像是人工耳蜗听音乐的准确表现。我认为在听这些模拟时你必须非常小心,因为这些模拟基本上告诉你的是

这是软件提供给用户的。这与用户听到的内容不一样。这是两件非常不同的事情。当我听这些模拟时,我确实听过,它听起来很像我第一天听到的。它听起来不像我第20年听到的。

对迈克来说,这是一个结合了通过仔细聆听训练自己,以及调整植入物设置的过程。因为通过大量的练习、努力和时间,聆听音乐的体验可以得到改善。是的,我会一遍又一遍地听音乐。我会尝试调整不同的设置。我会去找我的音频师,然后说,这些音调听起来对我来说很模糊。你能做些什么吗?

所以她会调整有多少电能流向不同的电极。这是一个反复进行的过程,现在仍在继续。经过多年的升级、调整和训练,迈克注意到了一些真正的改进,但并非所有音乐都是如此。我喜欢的音乐大部分是我用助听器听到的音乐。它对我来说很熟悉。

迈克确实会听一些新音乐,但他更喜欢熟悉的音乐,这是马修在他病人身上也注意到的一个模式。我认为这是大脑填补空白的证明,它唤起了声音质量应该是什么样的记忆。植入物给了你足够的信息,让大脑可以拼凑出整个难题。当然,迈克又开始听《波莱罗舞曲》了。嗯,听起来不错。我真的很喜欢。但我清楚地知道我错过了一些东西。

我知道我仍然没有得到那种强度和纯度,音乐在每一次迭代中都在努力达到高潮。所以我知道我错过了这一点。从某种意义上说,《波莱罗舞曲》对迈克来说就像语言一样熟悉。《波莱罗舞曲》听起来对我来说真的很好,因为我确切地知道它应该是什么样的声音。这首新的《波莱罗舞曲》肯定与他记忆中的版本不同。

但迈克喜欢这个新版本。即使我得到的《波莱罗舞曲》输入是不完整的,而且我能听到它是不完整的,它仍然带给我快乐。最终,我们并不真正知道我们的大脑是如何做到这一点的。

它几乎感觉像是魔法,它如何过滤回声,如何将高音转移到一只耳朵,将低音转移到另一只耳朵,如何将刺耳的嘈杂输入重建成一个新的《波莱罗舞曲》版本。我们进行了非常复杂的计算,但我认为我们并不真正知道它是如何完成的。心理学家戴安娜·德意志再次说道:关于我们的听力,有很多事情我们都不理解。

而我们听到的往往与实际上呈现的内容大相径庭。但我们知道,大脑一直在编辑、塑造和构建我们听到的世界。我们的大脑、我们的生活经历、我们对一首音乐的熟悉程度,这一切都会塑造我们的听觉以及我们听到的内容,这引发了一个非常基本的问题。

当管弦乐队演奏交响乐时,真正的音乐是什么?是在作曲家的脑海里?还是在指挥家的脑海里,他花了很长时间来塑造管弦乐队的演奏?是在从未听过它并且不知道会发生什么事情的观众脑海里?答案当然是音乐没有一个真实的版本,而是很多个,而且

每一个版本都由听众带到他们体验中的知识和期望所塑造。一方面,我们的大脑在我们头脑中创造出不同的个体现实的想法,这是一个清晰的提醒,让我们保持谦逊。而不仅仅是听觉。无论我们多么确定,我们感知到的并不是未经过滤的现实。因此,在我们最固执的时刻,值得质疑自己。与此同时,

大脑有多酷?我知道它们是我们自身主观性和谦逊的完美提醒,但我仍然无法克服这样一个事实:我们的大脑每天都在上演这场烟火表演。许多使用人工耳蜗的人可以利用这种几乎神奇的能力,将几个电极转换成这种新的令人满意的情感体验,而科学家们并不真正知道整个过程是如何运作的。

关于大脑以及它如何试图理解世界,我们还有很多不了解的地方。这让我对我们沿途将要学习的一切更加兴奋。

这只是我们“感官知觉”系列的第一集。下周,我们将讨论触觉及其邪恶的孪生兄弟——疼痛。想想你自己,如果你牙痛或有什么问题。如果有人握住你的手,或者有人拍拍你的背,或者给你一个拥抱,那实际上会减轻痛苦。温柔的人类触摸可以非常好。

下周之后,我们将讨论更多令人费解的感官谜团,例如科学家们仍然不真正知道嗅觉是如何工作的,可能有多少种味道,为什么有些人无法在脑海中看到图像,甚至第六感。

本集由凯瑟琳·威尔斯、梅雷迪思·霍德诺特和布莱恩·雷斯尼克编辑。它由我,诺姆·哈森费尔德制作和配乐。克里斯蒂安·阿亚拉负责混音和声音设计,阿菲姆·沙皮罗负责耳朵。理查德·西玛核实了事实。托里·多明格斯是我们的音频研究员。曼丁·阮让一切保持阳光明媚。伯德·平克顿梦想着生物发光。

如果你想了解更多关于戴安娜·德意志和听觉错觉的信息,我们在节目说明中提供了一个链接,你可以在那里找到更多可以收听的错觉以及她发现的错觉的大量信息。要阅读更多关于我们在节目中讨论的一些主题,或查找剧集文字记录,请访问我们的网站vox.com/unexplainable。如果你对节目有任何想法,你也可以随时给我们发送电子邮件至[email protected]。或者你可以给我们留下评论或评分,我们非常乐意收到。

《难以解释》是Vox Media播客网络的一部分,我们下周将与感官系列的第二集再次联系。