Deep Dive
Shownotes Transcript
9月28日，全球公民节将聚集数千名采取行动终结极端贫困的人们。Post Malone、Doja Cat、Lisa、Jelly Roll和Raul Alejandro将与世界领导人和活动家一起登上舞台，战胜贫困，捍卫地球，争取公平。立即下载Global Citizen应用程序，赢取您的节日门票。访问globalcitizen.org.com了解更多信息。
似乎每个新闻周期都充斥着人们挑战法律界限的故事。为了帮助阐明正在塑造我们国家的复杂法律问题，CAFE 汇集了一支法律专家团队，推出了一个名为……的新播客。
委员会。您将听到前美国检察官乔伊斯·凡斯和芭芭拉·麦克奎德、法律学者雷切尔·巴尔科、前联邦调查局特别探员阿舍尔·曼加帕以及我，伊莱·霍尼格（前检察官和 CNN 高级法律分析师）的评论。通过订阅您最喜爱的播客应用程序，每周两次收听《委员会》的评论。那是委员会，C-O-U-N-S-E-L。……
这是无法解释的。我是诺姆·哈森费尔德，与我们的高级科学记者布莱恩·雷斯尼克在一起。布莱恩，像往常一样，我们在这里讨论一个未解的科学问题。是的，我确实有一个非常巨大、有点不舒服的未解之谜。好的。那就是，有多少心理学是错误的？我们是否有理由认为大量心理学是错误的？
是的。所以10年前，研究人员开始注意到并真正担心许多心理学研究核心的一些非常糟糕的事情。这导致他们真正质疑并改写了许多假设。从那时起，就一直存在这种巨大的争论。这真的是一场危机。可怕。好的。我们从哪里开始呢？让我们从一位多年来一直在研究这个问题的心理学家开始。
我是萨明·瓦济尔，我研究如何更好地进行心理学研究。萨明说，这场危机在2011年真正开始兴起，当时一篇论文发表了一些非常奇怪的主张。是的，这篇论文声称人们拥有超感官知觉，例如预测未来。♪
等等，等等，就像超感官知觉一样，就像科幻小说一样，知道人们在想什么？是的。好的。是的，这篇论文来自一位名叫达里尔·贝姆的心理学家，一个有趣的人。在论文中，他写了很多实验。♪
这是一个测试超感官知觉的实验。大约需要20分钟，并且完全由计算机运行。这是参与者坐在屏幕前时阅读的语言。在实验的每次试验中，两张窗帘的图片将并排出现在屏幕上。
计算机会在其中一张窗帘后面放一张图片，而另一张窗帘后面只是一堵空白的墙。您的任务是点击您认为背后有图片的窗帘。如果参与者猜对了，贝姆认为这是他们预测未来的证据，即超感官知觉是真实的。
是的，但它不是真实的，对吧？是的，根据物理定律，当然不是。好的，根据那些东西，当然。是的，不。对我们大多数人来说，我们认为这些说法是荒谬的。好的，荒谬的。我的意思是，这只是委婉地说这是胡说八道吗？哦，这是胡说八道。好的。这里的结果是荒谬的。但问题是，贝姆使用的方法……
那些并不荒谬。这是一篇包含九项研究的论文，按照当时的标准，其方法论非常严格。如果这篇论文的结果更合理，例如如果您用更正常的东西代替超感官知觉，它将被视为一篇伟大的论文。好的，但是如果您使用所有心理学家都认为很好且合法的方法，您是如何得到像人们可以预测未来一样荒谬的结果的呢？不，这是关键问题。
因此，在这篇关于超感官知觉的论文发表后不久，另一篇论文发表了。因此，这是西蒙斯、尼尔森和西蒙森在2011年发表的一篇名为“误报心理学”的论文。它真正回答了你的问题。它非常清楚地表明，看似构建良好的研究如何得出荒谬的结论。这里最基本的想法是，实验会产生大量数据，而其中很多数据看起来就像噪音。
但是您可以做一件事，如果您只发布让您感兴趣的模式，就像在那种噪音中一样，您可以得到这些结果。假设您告诉我您准确地预测了澳大利亚公开赛的获胜者。您知道，在公开赛开始的两天前，在任何球员进入任何球场之前，您在一张纸上写下了您的预测。你告诉我大坂直美，她肯定会赢。
然后瞧……大坂直美第二次在澳大利亚夺冠。
如果我知道这是你做的唯一预测，我会比你还有50张同一天的纸，预测澳大利亚公开赛的50个不同获胜者更印象深刻。是的，就像一种情况是真实的预测，而另一种情况只是你有一堆猜测，很明显其中一个会是对的。因此，让读者知道你还尝试了什么，知道为了获得这个漂亮的结果你必须尝试多少次，这与读者相关。因此，这篇论文说一些心理学家，例如，
正在做相当于在一张纸上写下50个预测，并且只是没有发布他们预测错误的情况。但关键的是，这篇论文随后继续列举了一堆方法，一堆研究人员可以实施并获得有缺陷结果的可接受的方法论方法。但在这里需要明确的是，它通常不像这个澳大利亚公开赛的例子那样公然。
在真实的科学家实验室中，它看起来远没有那么恶意、故意或极端。你对此有理由。我认为萨明是对的。很多事情都是善意而为的。可以使用的一些方法可以节省资金。使用的一些方法只是为了……
找到一些东西来发表。发表就像学术生涯的货币一样。就像，有很多压力要这样做。例如，萨明记得与导师一起检查她的论文结果。我们挑选了特定的结果，并且我们认为这些结果放在一起会构成一个很好的故事。因此，她构建了这个故事并将其放入论文中，然后在她获得终身教职之前将其发表在非常有声望的期刊上。是的。
然后当这些事情发生时，我想，“这正是我一直在做的事情。”从嘈杂的数据中提取模式，只突出该模式并忽略所有不符合的模式，然后围绕它讲述一个故事。而不仅仅是萨明得出了这个非常令人不安的结论。
很多人开始说，等等，这里有些不对劲。我们需要检查一下我们的工作。好的，你如何做到这一点？你如何检查多年的过去研究？这叫做复制。
所有的复制都是说，哦，你认为你做了一个发现？让我们确保这是一个真实的发现。为此，让我们尽可能地重复原始研究人员所做的工作。让我们确保我们可以始终如一地获得该结果。也许不是100%的时间，但至少大部分时间。如果某些东西可以复制，它不会告诉你任何关于某些东西如何工作的信息。它只会告诉你某些东西有效，就像那里有东西一样。
这是非常基础的。这些是科学赖以建立的基石。您知道，2011年的事件让我们认为也许这一切都是纸牌屋。因此，下一步是检查我们房子里的每一块砖，我们认为正在建立的每一个发现，并确保它们是真实的发现。心理学家基本上会打开心理学101教科书，他们还会考虑他们领域中许多最流行的发现。他们只是开始问，这些实验是否可复制？
例如一万小时法则。看起来我们需要花费一万小时练习才能变得优秀。力量姿势。研究人员说，这种姿态会让人感觉更有力量。
棉花糖测试。一种优雅、简单的方法来测试一个人延迟满足的能力。心理学家开始测试这些著名的研究，在很多情况下，样本量更大，方法论也更加严格。而许多研究根本无法成立，或者它们的结果看起来就不那么令人印象深刻了。
一些研究已经开始对整个自我消耗的事情产生怀疑。进行这项研究的三位科学家之一说，引用，“我不相信力量姿势的具体效果。”所以你发现在这100项研究中，大多数研究都没有证实最初的发现。对。这听起来像一场危机。是的。整个事件被称为复制危机。所以所有这些都出来了。研究无法复制。对。
整个心理学机构是如何回应的呢？不好。好的。心理学界一些老卫士的成员开始变得非常激动。他们感到受到了攻击。就像，这是他们的工作正在受到审查，是他们同事的工作。我发现了一个2016年的研讨会，一系列的演讲都包含了这种紧张的气氛。我们的研讨会将涉及不少于重量级的主题。
比科学的基础、方法和意义更重要。在这个研讨会上，这位著名的心理学家站起来。丹·吉尔伯特。他的名字是丹·吉尔伯特，他说，这里的研讨会一直都很友好，但这友谊是一种错觉。它几乎会让你忘记正在发生战争。几乎会让你忘记心理学正处于危机之中。
他说，这场战争导致他的一些同事压力很大，提前退休。中年人在会议上互相大喊大叫，并雇佣律师。他还将部分责任归咎于年轻人及其态度。在我看来，今天，年轻的心理学家非常不友善、自以为是、不容忍、嫉妒、卑鄙和刻薄。
这总结了我听到的对这场复制危机的许多抵制，即它实际上是关于语气的，人们只是在公开场合对此非常粗鲁。但这不能仅仅是关于语气的，对吧？说心理学正在崩溃，但你们都可以更友善一些，这似乎有点奇怪。我想我会说有些人认为它被夸大了，但是……
但实际上，自从这次研讨会以来，越来越多的研究人员同意这是一个真正的问题。萨明说，当他们进行这项大型总结时，当他们检查他们科学赖以建立的基础的基石时……
他们发现也许有50%的心理学论文可以复制。那不是房子。你不能建造房子。你不能在一个不到一半是真实的基础上进行扩展。这不是一个权威的数字。这
非常真实地，我们只是不知道有多少研究符合这项基本测试。发表的太多了。检查起来会很多。但是这个50%的数字足以令人恐惧。那么这意味着50%的心理学是错误的吗？这是一个非常棘手的问题。首先，是的，我们有充分的理由认为很多心理学可能是错误的。嗯哼。
这是无法解释的。我们真的不知道有多少心理学是错误的。如果我们不想让所有这些关于心理学科学有效性的问题仍然存在，那么仅仅为了重建这个基础就需要做很多工作。你如何做到这一点？你如何重建整个机构？休息后，我将向您介绍一位正在尝试这样做的人。对无法解释的支持来自Greenlight。
有孩子的父母告诉我，时间过得很快。在你意识到之前，你的孩子已经长大了，他们有了自己的信用卡，却不知道如何使用它。但你可以帮忙。如果你想让你的孩子尽早获得一些金融知识，
你可能想尝试Greenlight。Greenlight是一款为家庭设计的借记卡和货币应用程序。父母可以向孩子汇款，他们可以密切关注孩子的支出和储蓄，孩子们和青少年可以建立金钱信心和终生的金融素养技能。
奥达·沙姆是我的Vox同事，她有机会尝试Greenline。您可以观看有关如何投资的视频。因此，我们拿出一部分他的储蓄用于投资，我告诉他，观看视频，以便他也可以开始学习如何投资。
数百万父母和孩子正在Greenlight上学习有关金钱的知识。您今天就可以注册Greenlight，并在访问greenlight.com/unexplainable时获得您第一个月的免费试用。这是greenlight.com/unexplainable，免费试用Greenlight。greenlight.com/unexplainable。
无法解释。我们回来了。布莱恩，在节目的前半部分，你谈到了在过去十年中，也许有50%的心理学研究受到了质疑。这一切都是所谓的复制危机的一部分。那么心理学从这里走向何方呢？是的，有几个方向。一个非常有趣的方向来自这个人，克里斯·查蒂尔。我是阿什兰大学的心理学副教授，并且……
我是一名社会心理学专业的训练有素的人。克里斯的故事也始于2011年。他阅读了贝姆的论文，也阅读了梅西斯的论文，就像萨明一样，这让他开始怀疑自己的工作。我甚至问他，当你看到的时候，你认为其中任何一个都是假的吗？是的。嗯……
也许这个词用错了，但是，你喜欢，你喜欢，你赞扬了吗？是的。是的。或者是不完整地或选择性地报道，尽管我尽了最大努力，我会说是的。克里斯确实在他自己的工作中看到了这些问题，尽管看起来有点痛苦。而且，
他还看到了心理学领域的这些问题。他开始参加这些会议，许多人在那里谈论复制。然后在2017年，他真的，他有了这个顿悟。你还记得美国伟大的日全食吗？本世纪横跨美国的第一场日全食。一个难忘的时刻。当然，我记得很清楚。我有我的纸眼镜。日食眼镜非常好，除了驾驶。
所以日食几天后，克里斯没有戴日食眼镜，但他正在开车。他开车去骑山地自行车，他正在思考日食，并且感到嫉妒。是的，物理学嫉妒。你可以用弗洛伊德的短语来表达。
我想我会加上吧。他开始思考导致这一刻的原因。物理学家和天文学家需要了解多少关于太阳系的信息，以及他们需要多么准确，才能预测日食。他们让我们一起度过了这个伟大的时刻。然后他只是考虑了他自己的领域，心理学。他们没有这种精确度。
然后我骑了三个小时的山地自行车到树林里，信号不稳定。这是一个很棒的地方，时间，环境，让我思考。随着心理学科学加速器这个想法的出现，它的轮廓开始成形。
对不起，什么？是的，心理学科学加速器。这是克里斯的想法，让心理学变得精确。日食级别的精确。从那次山地自行车骑行回家的路上，我给自己录制了一段音频备忘录。哦，听回我的音频备忘录将是一次真正的旅行。请告诉我你得到了这个语音备忘录，布莱恩。哦，我有。嗯，博客文章，为心理学建立一个CERN……
克里斯想模仿CERN，CERN在欧洲运行这个巨大的粒子对撞机。克里斯在这里开始变得有点技术性。但要点是他想模仿CERN。
他想通过将来自世界各地的许多研究人员聚集在一起并组成一个大型测试小组来解决心理学的危机。所以他从自行车旅行回家后就开始做这件事了。所以我仍然穿着我的自行车短裤。
因为我太疯狂了，没时间洗澡。他写了他的博客文章，就像他对这个梦想的迷你宣言一样。他放了一个报名表。而且，你知道，作为一个年轻的研究人员，他把它放在推特上。真的，这是一种典型的学术病毒式体验。我总是加上学术限定词，例如，
我认为这条推文被转发了大约30次。我想，哦，我的上帝，金，我出名了。我们成功了。所以这里就像，等等，现在这个大型网络中有超过一千名研究人员，他们来自世界各地70多个国家。它从“这是一个很酷的想法”转变为“也许会有10个人会和我一起做”，很快变成了“我们真的会做这件事”。
好的，这似乎是一个好主意。你知道，世界各地有很多人都一起工作。但这实际上如何解决心理学核心的问题呢？是的，这里有一些事情。其中之一是他们将进行大型实验，召集很多人，拥有巨大的样本量，在国际上，你知道，在世界各地进行测试。但是关键成分叫做预注册。
是的。记住，整个大问题始于研究人员在进行过程中调整事情？因此，预注册取消了这一点。基本上，在研究人员做任何事情之前，他们都会写下一些东西。这就像研究的食谱一样。
他们列出了所有成分。他们列出了所有步骤。他们列出了他们将如何分析结果。而且，你知道，他们提交了这个。他们公开发布了这一点，以便其他人可以查看并保持他们的责任感。
它可以防止研究人员在进行过程中调整事情。他们不能说，“哎呀，我忘记发布这49个失败的预测了。”你知道，这不可能发生。这是我的计划，我会坚持下去。你不能只是调整食谱，然后保持安静吗？我问克里斯同样的问题。是的，你仍然可以这样做，但这显然使其具有欺诈性。好的，公平，公平。
所以我想你会有所有这些遍布世界各地的实验室做出这些承诺，你知道，坚持他们提前为重要研究制定的这些食谱。这就是预注册。理论上讲得通。我明白了。当你真正尝试实现它时，它看起来像什么？好吧，你知道梦想遇到现实世界会发生什么。哦，亲爱的上帝。我的厨房太乱了。
克里斯要求人们给他发电子邮件，并询问应该研究哪些心理学研究？你知道，我们应该检查一下吗？所以他想让人们提交他们自己的研究，并要求人们证明他们是错的？不，不是那样。是的，人们正在提交其他研究人员的研究，并说，让我们检查一下。好的，这很尴尬。这很尴尬。对吧？
是的，所以他们得到了这些潜在的论文，这些潜在的实验需要检查。加速器小组必须决定……
我们应该测试哪一个？他们确实选择了一个。第一个人是普林斯顿大学的研究员亚历克斯·托多罗夫。他是一个大人物。他有一个非常有影响力的想法，关于我们如何根据人们的面部表情做出快速判断。这确实有助于解释刻板印象的来源。所以克里斯联系他，说，嘿，我们想测试你的想法。
但加速器的优点，或者也许是亚历克斯的优点，或者两者兼而有之，就在这里。他的反应是积极的。好吧，我当然记得。我记得非常清楚。那是亚历克斯·托多罗夫吗？是的，我给他打了电话。我只是想知道克里斯联系他时他的感受。每个人都在谈论复制危机，而且通常当人们去复制某些东西时，
那是因为他们不相信它。而且，你知道，这可能会让你有点不舒服，感觉不舒服。但亚历克斯非常自信。在最初的互动中，他很棒，热情洋溢，支持，我认为很兴奋。这是他有机会在世界各地测试这个想法的机会。我一直都很感兴趣，但这不可能。
对于单个实验室来说，要以如此大的规模做到这一点。所以亚历克斯提供建议，然后克里斯和他的团队执行超关键步骤，预注册。他们联系了一家期刊，并发送了他们对这项研究的完整方案。啊，
我们的方法。三个鸡蛋。我们的数据收集计划。三汤匙黄油。我们的分析策略。六杯磨碎的奶酪。然后它开始了。他们开始在世界各地测试这个想法，数据开始涌入，他们开始分析它。记住，如果顶部没有变成棕色和酥脆，那么它就不是苏芙蕾。然后有一个零食。
糟糕。是的，是的。所以在这里记住，克里斯和他的团队已经制定了他们的方案。他们已经承诺了。但是亚历克斯·托多罗夫，他开始阅读，并且开始对食谱中的最后一步产生一些怀疑。等等。如果顶部变得太棕色，那么苏芙蕾可能会烧焦。他问他们，我们可以调整一下吗？
这不是整个预注册的重点吗？就像不调整食谱一样？是的，绝对是。这就是重点。但亚历克斯在这里提出了一个有趣的论点。他说，你开始一个项目时并不总是知道你需要的一切。想象一下，你是一位脑外科医生，你预先注册了你脑外科手术的所有步骤。然后你开始探查病人的大脑，说，哎呀，如果我不这样做，我实际上会杀死他或她。
你会改变程序吗？好的，克里斯怎么说？哦，他不赞成。他和他的团队认为这个食谱没有问题，他们不想让损失最大的人进来摆弄它，所以他们拒绝了。我会说最初的热情消失了。
在这个过程中？听起来真的很紧张。有很多来回。最终，这篇论文发表了。复制结果出来了。老实说，它们有点混乱和分裂。
听起来克里斯有一个宏伟而美好的想法。你知道，每个人都会进行预注册，承诺不调整他们的方案，一切都会好起来的。但我想最终，如果你真的试图在现实世界中为心理学建立一个CERN，那就困难得多。难道会有更好的证明它是有必要的吗？一种人类反应模式，最初的热情让位于……
只有在数据到手后才会进行辩论和争论，这是一种对一些问题的非常优雅的证明。我想亚历克斯就是一个问题的例子？
我不想妖魔化亚历克斯。那里有一些粗鲁的科学家。我和他们谈过。他不是其中之一。他非常慷慨地贡献了他的时间，而且他考虑得很周到。但这真的很困难。邀请人们，邀请其他人寻找你工作中的缺陷，这真的很困难。
人们总是说，我的意思是，科学家的刻板印象，特别是从外部角度来看，就像，好吧，我们是客观的，我们有个人生活，科学是完全不同的。那是不对的。我的意思是，你生活的一半是你工作，然后你建立了你的声誉。科学是由人完成的，人们会对他们的工作产生情绪。
听起来修复心理学的方法非常非常复杂和困难。这将需要很长时间，而且很多人会筋疲力尽。与此同时，我们仍然有心理学，对吧？我的意思是，我们现在可以相信心理学吗？我实际上认为心理学在这方面处于领先地位。我们一直在讨论的关于挑选数据和需要不惜一切代价发表的问题——
这存在于其他科学领域。什么，像大量的生物学研究和化学研究也不真实吗？是的，去谷歌搜索生物医学中的复制危机。那里有一个。只是记录得较少。心理学在这里真正开辟了一条前进的道路。现在，我们不必抛弃心理学中的所有东西。我们已经学习了东西。有一些研究可以复制一些东西。
但是好的科学是我们给予未来的礼物。所以我们必须把它做好。如果你只是略微改进我们收集和分析数据以及从中得出结论的方式，那么无数未来的世人将能够从这一微小的进步中受益。你今天不必回答所有问题。改进我们提出这些问题的方式，即使是渐进的但持久的进步，也足够好了。
如果心理学能够找到一种方法来进行这些渐进的改变，那么其他领域或许也能复制他们的成功。布莱恩·雷斯尼克是《无法解释》和Vox.com的高级科学记者。
本集由伯德·平克顿制作。我们得到了梅雷迪思·霍德诺特和我的编辑，诺姆·哈森费尔德。莉莉安娜·米切利纳进行了事实核查。汉内斯·布朗负责混音和声音设计。我写了音乐。Liz Kelly Nelson是Vox播客的编辑总监。有关加速器及其未来计划的更多信息，请查看我们的时事通讯。您可以在vox.com/unexplainable上注册。像往常一样，您可以在我们的节目说明中找到订阅链接。
当您访问vox.com/unexplainable时，我们在那儿为您准备了一些新内容。如果您想与孩子或学生分享我们过去的任何剧集，其中包含脏话的剧集，请查看我们的网站，了解过去剧集的干净版本的链接。也给我们发邮件。我们喜欢阅读邮件。我们的邮箱是[email protected]。无法解释的是Vox Media播客网络的一部分。我们下周三将在您的订阅源中回归。