#54 AI and User Research: A Deep Dive with Kate Moran
50:24 Share

您好，欢迎收听新一期的“用户体验的未来”播客，这是您了解未来、新技术和设计趋势的首选资源。

在本期节目中，凯特·莫兰与我一起探讨。她是尼尔森诺曼集团的研究和内容副总裁。我们围绕人工智能在研究过程中的应用进行了精彩的讨论。众所周知，我非常推崇生成式人工智能，特别是设计师使用这些新工具。

凯特提供了大量关于如何以及在何处使用生成式人工智能和大语言模型的技巧和资源。我们还讨论了一些关键问题，当然，谨慎是必要的。更多内容请收听本期精彩的播客节目，与凯特一起探讨。祝您收听愉快。

好的，凯特，你好。非常感谢你来到播客节目。 欢迎。 谢谢。我很高兴来到这里。

当然。很高兴邀请到你。在我们深入探讨主题和所有我们想谈论的内容之前，请先介绍一下你自己，告诉听众一些关于你和你背景的信息。 我是凯特·莫兰。我是尼尔森诺曼集团的副总裁。实际上，我是研究和内容的副总裁，这是我最喜欢的两件事。所以我对这个职位非常满意。

我已经在用户体验领域工作了大约 12 年。在这段时间里，我担任过很多不同的职位。你知道，我总是喜欢听人们讲述他们是如何进入用户体验领域的故事，因为他们常常有这些非常有趣的故事，比如，哦，我以前是做时装设计的，或者我以前是做工业设计的。然后我受到了启发，就进入了这个领域。

我没有那么酷的故事。我非常果断。当我了解到用户体验时，那大概是我 18、19 岁的时候，我就想，我要做这个。所以，是的，它真的对我有吸引力。你知道，很多人说他们对这个领域有类似的吸引力。它关乎人，关乎技术。这对我来说绝对是正确的。

但正如你的许多听众可能知道的那样，要获得第一份用户体验工作是相当困难的。通常情况下，很多公司都在寻找有一定经验的人，而我没有。所以我开始自学前端开发，因为我注意到当时开发人员的招聘信息比用户体验专业人员的多得多。并且我真的很喜欢做了一段时间，然后转向内容、内容管理、文案编辑，然后

然后，我获得了第一份用户体验设计师的工作，是在一家代理公司，然后在我完成硕士学位后，我被尼尔森诺曼集团录用。我拥有信息科学的本科和硕士学位。所以我花了很多时间学习人机交互、信息检索，这些非常有趣，书呆子气的东西。

当我完成硕士学位时，我正在写我的论文，我决定研究扁平化设计。这有点暴露我的年龄了，但人们还记得扁平化设计曾经是一个非常热门的话题，而且有点争议。所以我做了关于扁平化设计的硕士论文。我记得当时我非常努力地写这篇论文，并且有点自问，

为什么？我知道我会拿到学位。我为什么要这么努力？我记得我当时在想，我清楚地记得，这只会和其他硕士论文一起堆放在一堆里。没有人会读它。具有讽刺意味的是，雅各布·尼尔森居然看到了我的硕士论文，并且

认为，哦，我们可以马上把它发布在我们的网站上。我们可以把它发布在 nngroup.com 上。所以他联系了我，邀请我申请，然后一切都从那里开始了。我喜欢在 NNG 工作的很多方面，我们就这样称呼它。我最喜欢的一件事是，这是一个非常好的平台，可以为用户体验领域做出贡献和回馈。

我真的很享受这一点，就是与不同的团队见面，与他们讨论他们面临的问题，然后思考，好吧，我们如何研究这个问题？或者我们如何帮助找到一个我们可以提供的解决方案？这当然就是我们现在在人工智能方面所处的位置，就是与很多团队交谈，听取他们的问题、他们的担忧，并且存在很多困惑。我们现在正在非常努力地尝试揭开其中一些谜团。

是的，很酷。我喜欢这样。首先，非常感谢你分享你进入用户体验领域的故事，非常鼓舞人心。我完全可以感同身受，因为我的背景是平面设计。所以我也转到了用户体验，我知道其中的挣扎。真的很酷。是的，你刚才提到了你正在做的访谈，你正在做的研究，尤其是在人工智能方面。而且

我认为看到你们在人工智能方面做的研究非常有趣，比如苹果采摘、手风琴。这些东西非常有趣，因为它们对现在的设计团队真的很有帮助，可以真正理解人工智能，如何使用人工智能，以及如何在人工智能产品中使用人工智能，对吧？

作为一名研究人员，你如何看待人工智能在我们的工作流程中，在我们的研究工作流程中？你知道，在 Instagram 上，我经常收到关于如何在研究工作流程中使用人工智能的问题。

你的答案是什么？你会怎么说？ 嗯，这是一个很大的问题。我认为这是一个我们作为一个领域正在弄清楚的事情。但我可以说，我看到了很多机会可以减少研究中重复的、繁琐的部分。而且，我喜欢用户研究。你知道，我...

我记得早期，你知道，如果你在做一个定量研究，我们没有录像。所以我们必须使用一个物理秒表，比如标记某人何时停止和开始一项任务。所以，你知道，在十多年里，我很高兴看到这么多新工具进入市场。随着用户体验领域的增长，支持性行业也随之发展。

所以今天，招聘、引导，当然还有远程研究、分析，我们拥有这些精彩的支持工具，使开展研究变得更加容易和更加愉快。我真的认为这些人工智能功能和人工智能工具是它的下一个迭代。

现在，正在发生一场淘金热。你知道，人们对人工智能非常感兴趣，当然不仅仅是在用户体验领域。每家公司，实际上是每家公司现在都觉得，我们应该以某种方式整合人工智能。我们应该怎么做？因此，我看到很多人工智能工具的质量参差不齐，尤其是针对用户体验研究的人工智能工具。

我想说，也有很多营销宣传，我鼓励用户体验研究人员要非常怀疑。

但即使我们考虑一些基本的东西，比如一个工具，如果，如果你和任何尝试过任何人工智能工具的人交谈，很可能就是 ChatGPT。即使是这个工具，它绝不是专门为用户体验研究设计的，我们也可以用它做很多事情。它可以是一个非常有用的工具，例如，用于头脑风暴，提出不同的研究问题或关于你可以研究什么的思路。

它可以帮助你创建一个研究计划，弄清楚计划中需要包含哪些内容，可以帮助你编写访谈问题和可用性测试任务。所以已经有许多机会可以使用人工智能工具来支持我们的研究工作流程。让我担心的是，有些公司似乎

要么将他们的产品宣传为，要么朝着这个目标前进，感觉几乎要取代用户体验研究。对此我有很多想法。我可以想象。

我认为用户体验研究可能很昂贵。在某些情况下，它不一定是，当然，但它可能很昂贵，很耗时。我认为在很多组织中，它可能不被重视。所以我认为人们对如何走捷径很感兴趣。

这就是让我担心的地方，因为我不认为人工智能会取代用户体验研究的需求。我不认为它会取代与用户交谈的需求，尽管现在有一些公司正在提供声称可以做到这一点的产品。是的。

所以我肯定会，是的，我肯定会鼓励用户体验研究人员在考虑使用新工具到他们的工作流程中时要谨慎一些，持怀疑态度。所以，我认为持怀疑态度是一个很好的起点，对吧？但是那些说“好的，我想使用人工智能工具”的用户体验研究人员呢？

也许我也想使用这些声称我们不需要用户的工具。

有没有一种方法可以战略性地使用它们？或者你认为最好将像 JetGPT 这样的人工智能工具用于更偏向于计划和组织的战略部分？ 是的，我认为特别是对于目前市场上的工具以及我们目前在人工智能方面所处的位置，显然这种情况每天都在变化，所以它可能很快就会改变。但就我们目前所处的位置而言，

我非常鼓励用户体验研究人员将这些人工智能工具视为用户体验研究助理，而不是用户体验研究人员，也不是教练，也不是顾问。我认为，特别是对于新的研究人员来说，用户体验非常微妙。而且有很多，你知道，我们经常使用这句话，视情况而定。

因为用户体验非常依赖于上下文，这当然也适用于研究。在一种情况下非常有效的方法在另一种情况下可能效果不佳。而且它非常依赖于上下文。所以我看到很多人工智能工具难以理解进行真正出色的用户体验研究所需的细微差别和复杂性。

所以目前，我建议不要将这些工具视为完全取代用户体验研究或，你知道，一个你可以信任的用户体验研究人员，你知道，提供你将毫无疑问地接受的建议。对于用户体验研究的新手，我建议要格外谨慎。

只是因为它确实让你更难捕捉到人工智能出现幻觉或提供事实不准确的信息或告诉你以一种实际上不利于你的目标的方式进行研究的时刻。所以这就是我鼓励用户体验研究人员要考虑的怀疑态度。把它当作一个需要大量监督的工具，你需要检查它的工作，就像期中考试一样。

而不是，我会相信它告诉我应该如何改进我的产品。完全有道理。你对使用人工智能进行综合有什么看法？基本上是针对定义阶段。所以我认为人工智能是一个优秀的综合工具。它确实做得很好。你给它一堆信息，它可以为你提炼出来。

然而，我所看到的是，它偶尔会曲解一些东西。它会产生幻觉，可能会提取出研究中根本没有的用户引言。所以使用能够专注于避免这些问题并且对人工智能的局限性有现实认识的工具是

这对我来说真的很重要。例如，我最近刚刚，我正在与一家名为 Wevo 的公司的团队交谈。所以它不是 Weemo 或 Waymo。它是 Wevo。我必须说，我以前没有使用过这个产品，所以我无法保证它。但我正在与团队讨论他们的方法，他们喜欢将他们的工具描述为人类增强型人工智能。

我认为，这才是正确的思考方式。你知道，你仍然需要这种监督。你仍然需要这种批判性思维。你仍然需要审查事物。类似地，我现在喜欢的另一个工具，它不是专门针对用户体验研究的，但我认为它在理解人工智能的局限性方面做得很好，那就是 Perplexity。就我而言，它至少取代了谷歌，成为我获取信息的主要来源。

我喜欢这个工具的原因，我也和他们的设计团队谈过，而且

他们非常重视引用来源，并且以非常详细的方式引用来源。所以我最喜欢 Perplexity 的一个功能是，他们在单个句子或信息旁边都有脚注，引用了具体的来源。所以，你知道，再说一次，它不是一个用户体验研究工具，但它反映了他们意识到人工智能的一些风险，并以一种

试图解释和纠正这些风险的方式设计他们的系统。你刚才提到的关于引用的观点非常重要，因为这也是我非常想听听你的想法的，你知道，当你目前使用 ChatGPT 或其他人工智能工具时，

你真的不知道答案来自哪里。输入是什么？根本没有引用。如果你要求提供链接，那么有时你会得到一些东西。有时。但你并不确定。是的，然后它不正确，对吧？所以它并不总是有效。那么你在 NN 集团如何看待这个大话题，你知道，当涉及到内容营销时，你知道，过去几年你准备的所有内容，你知道？

所有文章，所有已发布的内容，你知道，数量巨大。而且你真的不知道它目前在哪里，是否被任何这些人AI工具使用过。你是如何处理这种情况的？你认为这是有问题的，还是你实际上支持它？你知道，我会将我对待各种形式和应用的人工智能的整个方法概括为简单。

谨慎乐观地支持，同时也试图对我们将遇到的问题保持现实。我相信从长远来看，我们将解决很多这些问题。这只是这种技术在这些不同应用中的新颖性。但我认为在短期内，我们需要承认会出现一些混乱和一些

你知道，必须发生的系统性变化。内容营销当然是我关注的一个方面。很多人不知道尼尔森诺曼集团的这一点，但我们在我们所做的工作方面有两种不同的优先事项。我们正在努力向世界免费提供真正高质量、可靠、以研究为基础的用户体验指导。

但我们这样做也是为了提高人们对我们付费产品的认识，比如我们的培训课程，因为我们实际上不是一个非营利组织。所以我们仍然需要为我们提供给人们的免费内容提供资金。

因此，从历史上看，在尼尔森诺曼集团过去 25 年的存在中，公司做到这一点的方式是撰写这些文章，这些文章获得了非常好的搜索引擎优化，带来了大量的流量，建立了品牌知名度，最终，其中一小部分受众最终会联系我们进行咨询或培训。所以这就是很多公司的运作方式。这本质上就是内容营销。

现在我们看到，当我们的内容被大量不同的 AI 系统（包括 ChatGPT）吸收并用于训练这些系统时会发生什么，而这些内容是免费提供的。所以，你知道，所以他们只是吸收了它。现在，在一个我们正在走向的现实中，你知道，我刚才提到 Perplexity 已经取代了我的谷歌。

这种情况将越来越多。现在，它是像我们这样的早期采用者，在技术领域工作并对此感兴趣的人，但很快它将变得更加主流。雅各布·尼尔森最近写了一篇关于 SEO 已死的文章。然后在文章中他承认它还没有死，但它将在未来几年内消亡。我想你可以说它正在垂死挣扎。在一个

我们没有获得那么多页面浏览量。人们不会直接访问我们的网站，而是会去 ChatGPT 或 BARD 或 Bing 之类的地方说，我遇到了这个用户体验问题。你知道，我，例如，我需要为工作进行一项纵向研究。我以前从未做过。你知道，我应该进行什么样的研究，以及我应该如何设置它？

在我们目前的情况下，人们正在要求 ChatGPT 做到这一点。我们知道这一点，因为我们对我们自己的用户进行了研究。当然，我们已经看到了他们的行为是如何变化的。正在发生的事情是像 ChatGPT 这样的工具正在返回尼尔森诺曼集团的建议

但他们也将其与互联网上的其他建议来源混为一谈。正如你可能知道的那样，关于用户体验，有一些非常非常好的建议。也有一些非常非常糟糕的建议。哦，是的。所以这些都混杂在一起。而且...

我们并没有因此得到认可。所以正如你刚才所说，你知道，它真的很难引用其来源，因为所有信息都进入黑匣子，然后它会吐出一个回复，但无法真正追溯它来自哪里。因此，我们的名字没有被传播出去。所以这确实违背了内容营销的目的。这也让我担心那些将从人们那里获得建议的用户体验专业人士

这个工具并不真正理解用户体验或用户体验研究，并且，你知道，难以区分哪些来源是可靠和好的，哪些来源不是。所以这对于我们作为一家企业来说绝对是一个问题。对于用户体验作为一个领域来说也是一个问题。但是，再次，像 Perplexity 这样的工具真的...

给了我很大的希望，因为我看到有一些公司，有一些组织正在研究信息检索人工智能工具，这些工具更注重可靠的信息和高质量的信息，以及引用来源。

有趣的是，早在今年早些时候，当所有关于 ChatGPT 的讨论开始时，我们当然像每个团队一样都在玩它。我们正在我们的内部 Slack 上讨论它。我的一位同事凯特·卡普兰，她要求它写一篇 N 集团风格的文章，看看它做得怎么样。

它做得还不错。她要求它引用来源。它编造了一个根本不存在的虚假 NNG 员工。它产生了幻觉。不会吧。还有一篇不存在的文章。所以，是的。所以，再次，我认为引用问题是一个担忧。

但我知道在你之前对莎拉·吉本斯的采访中，我听到她提到策划在这个新时代非常重要。这绝对是我们 NMG 的信念。所以我们现在正在研究的一件事是，你知道，我们如何以人工智能的便捷性、上下文和定制性来提供我们的信息，你知道，对话工具？

但它专门以我们的材料为基础。我认为对于很多网站和组织来说，这将是他们想要发展的方向。策划并确保这不是互联网上的所有内容。这只是我们可以署名并说“我们做了这个”的这一套。我们花了 25 年建立了这个库。我们建立了这个包含数千个用户体验资源的库。”

但我认为我们需要以人工智能的便利性和能力来提供它。这是否更像是你集成到 GPT 中的东西，比如用所有能量知识构建你自己的 GPT？或者这会完全不同地重新设计你的网站，更像是带有文本版本的 GPT？

一个提示到行动？ 是的，这是一个很好的问题。这些都是我们现在正在思考和探索的问题。我认为很多都取决于哪些供应商出现，现在正在出现，并且将在定制聊天机器人领域继续出现。我真的很兴奋，就像很多人一样，当 GPT，你知道，自定义 GPT 功能发布时，我非常兴奋，并且去玩了它，并且能够制作一些非常有用的 GPT。就像

我的工作内容包括很多文案编辑。所以能够有一个专门的小型文案编辑机器人，它已经了解我正在编辑这些文章，并且，你知道，我正在寻找什么，这真的很好。

我尝试制作一个只有尼尔森诺曼集团的 GPT。并且，你知道，只参考这些来源，并尝试以尼尔森诺曼集团的语气说话，并且始终引用来源，但它做不到。它提供了一些信息，这些信息是

事实上不准确，并且没有专门限定在我们的网站范围内，这是有道理的。我的意思是，它仍然是聊天 GPT。它仍然拥有它所训练的互联网上的所有知识，并且它可能无法仅为自定义 GPT 分离它。

但我现在看到很多，当然也与很多供应商讨论过，是这些公司提供了新的产品，比如，你知道，这是一个自定义机器人。你告诉我们该给它提供什么。我们将在你的数据上训练它，并用它来创建一个高质量的聊天机器人。我认为今年早些时候，这是我...

感兴趣的，但我看到的很多供应商，他们做得并不好。所以我认为这项技术从那时起一直在改进，我开始看到一些非常好的技术。所以我目前关注的一个是 Astral，这是一家专门创建这些小型自定义机器人的公司。像 GPT 一样。是的。嗯。

有趣。我的意思是，我也玩了很多 GPT。我创建了一些好的，但我仍然在努力创建一个可以给我设计反馈的 GPT。虽然我个人并不需要它，但我只是想拥有它。当然。我意识到，对于机器或人工智能来说，给我设计反馈也很困难，但如果我不提供足够的背景信息，对于人类来说，给我设计反馈也很困难。所以我需要提供很多，你知道，关于每个屏幕或我有的每个问题的见解，以至于我在想它是否值得。这绝对是很多工作。

这是很多工作，而且答案非常笼统，我想说，来自一些基本的可用性问题，比如，你知道，让字体更大，基本上就是这样。

当然。这是我在很多这样的工具中看到的主要问题，比如，我们将评估你的产品，或者我们的假用户将向你提供关于你产品的反馈。我从所有工具中看到的所有反馈，我们已经尝试了很多不同的工具，所有反馈，有时它只是如此...

完全不准确。比如 Baymard 最近做了一项比较研究，他们查看了，你知道，什么人工智能工具，我认为他们测试的是聊天 GPT，你知道，它给出的设计反馈与人类相比如何。有些建议完全错误，但他们的研究以及我们的经验中的许多其他建议，它们往往是诸如“让导航更易于使用”之类的东西。

哦，谢谢。哦，我没有意识到这很重要。谢谢你告诉我。谢谢你的废话。没有具体的事情。而且，比如，我认为我看到很多这些工具难以提供任何理由。这又是，我说的，比如...

实习生可能会做的事情，比如没有很多用户体验经验的人，他们不确定要寻找什么，并且不确定如何给出有用的建议。有时，你知道，这就是他们提供的那种东西。所以这很好，但对于某些人来说，特别是对于可能更高级的人来说，可能不是那么有用。这就是为什么我认为最好将其视为补充而不是替代品。

我的意思是，当你玩它的时候，你有没有发现有些建议是有用的？你有没有从中得到什么有用的东西？是的。有些东西肯定是有用的。我的意思是，有用是一回事，对吧？我的意思是，我想这并不奇怪，但我认为这可能对其他人有用。

嗯，这很有趣，因为我们，所以我显然，我花了很多时间在用户研究会议上。我们从人们那里听到的一件事，这只是因为天性，比如，我不喜欢这个，但也许其他人会喜欢。就像你刚才说的那样。也许。你知道，我想，我想我要说的主要问题是，你有没有觉得它能够给你一些你自己想不到的东西？

没有。是的，这就是现在的问题。现在，我认为最终我们将拥有，我认为真正的关键是，我们需要有更多专门为用户体验研究人员制作并支持他们的工具。我认为最终我们将达到不再是这种情况的地步。你知道，我们已经看到聊天和 GPT 可以增加人们的创造性工作以及他们最终提出的想法的范围。

所以它是一个很好的构思伙伴，因为构思只是随意提出想法，然后人类必须选择一个。所以这又是那种，你知道，与其说是人类增强型人工智能，不如说是人工智能增强型人类，我想说，这才是思考它的方式。这很有道理，对吧？比如真正找到人工智能有用的领域，然后使用它，或者将其用作助手或合作伙伴。

但不是在流程的所有部分，对吧？所以这是最好的事情。所以我觉得当我环顾四周时，尤其是在目前的设计社区，我看到很多人对人工智能工具非常兴奋，他们正在尝试很多东西，他们真的很好奇，也很谨慎，也有一些人对如何正确使用它持怀疑态度，并且有点害怕。

以免出现任何隐私问题，或者，你知道，不要与公司发生任何道德问题，尤其是在研究方面，对吧？我很想听听你的想法。

0 关于如何安全使用它而不损害公司、人员、隐私问题，您有什么建议吗？是的。所以，我的意思是，这又是一个很大的问题，就像我认为现在每个花时间思考人工智能的人都在问的那样，

我们如何尝试以安全的方式、无害的方式、合乎道德的方式来做到这一点？我不知道现在是否有很多简单的答案。当然，在隐私和数据保护方面，重要的是要知道，如果您正在使用像 ChatGPT 这样的东西，他们可能说他们没有就这类数据进行培训。但我对此表示非常怀疑。我会非常谨慎地对待您在网上分享的信息。

使用这些 AI 工具。这对于研究来说尤其是一个巨大的障碍。如果您正在为这个竞争激烈的产品领域开发一个绝密的、您知道的新功能，您可能不想将其放入 GPT 中，因为您不知道它会走向何方。你当然不能把任何

将敏感的参与者信息输入这些工具。因此，您永远不应该分享您的参与者姓名或任何类型的地址或电子邮件地址信息或电话号码，任何类似的信息都不应该输入这些工具。因此，您可能会发现，在与这些 AI 工具之一共享数据之前，您必须做大量工作来清理数据。这样做对于保护人们的隐私非常重要。

是的，我认为这是一个很好的提醒，而且我觉得这并不难做到，对吧？就像删除所有敏感信息一样，想想我允许分享哪些内容，你知道吗？它们不是超级机密的，因为它们总是

不是那么机密，对吧？至少根据我的经验，这只是重复写作。对吧？或者它就像过滤器设计一样，你只是试图与世界上所有其他过滤器设计保持一致。那真的很好。是的，我认为道德问题是另一个问题，尤其是在以下方面。

知识产权。再说一次，这是我们在尼尔森诺曼集团非常敏感的事情，因为那是我们销售的东西，也是我们放弃的东西，那就是知识产权。因此，就像我们真的没有任何产品或实物出售一样。我们基本上是在出售我们真正聪明的员工提出的想法。所以我们很容易受到一个世界的突然影响

作为一个社会，我觉得我们必须讨论一下什么是想法，拥有一个想法意味着什么？你知道，当我们知道想法通常是综合的结果，从多个地方汲取灵感和输入时。

你知道，当人工智能代替人类这样做时，这意味着什么？你知道，显然，随着编剧协会的罢工，以及这些担忧的一些引人注目的例子。关于人工智能生成的艺术品已经有很多讨论，在某些情况下，这些艺术品直接抄袭了人类的辛勤工作。

他们没有得到，是的，他们不仅没有得到任何补偿，他们甚至没有得到赞扬，而且他们在某种程度上无法得到赞扬，现在这是一个巨大的问题，这绝对是

我们对此很敏感，因为我们正在用我们的知识产权体验这一点。我们也在思考，例如，我们最近在内部讨论了我们是否应该在我们的文章中使用人工智能艺术？因为这是很多人都在做的事情，尤其是像博客。我们有一个很棒的设计团队。他们真正擅长的一件事是将非常困难的概念和

并将它们转化为非常清晰的可视化和使用视觉隐喻。这些 AI 工具还没有那么复杂，所以它们还不能真正做到这一点。但是，你知道，我们在想，我们使用人工智能生成的艺术作品，即使只是作为插图，是否可以？你知道，一些不一定对概念至关重要的事情。

我现在倾向于拒绝，只是因为它让我感到紧张，认为我们可能会窃取艺术家的作品并在我们的网站上分享。但我不知道。我认为这是一个，我认为现在还没有明确的答案。是的。我认为这是一个非常重要的观点。真正了解内容的来源，尤其是在不知道他们的内容已被用于训练这些模型的艺术家身上。所以我完全同意你的观点。

我觉得这些图像生成工具也有很多不同之处。我的意思是，Midjourney 就是一个很好的例子。它们的输出令人惊叹。我的意思是，质量很棒。你可以用这个工具做什么，我喜欢它。你得到的逼真例子看起来很真实。

它太好了。但也有很多偏见。我的意思是，网上有很多例子，而且它是在很多艺术家的作品上训练出来的，没有得到他们的同意。将其与其他工具进行比较，例如 Adobe Firefly，我觉得它非常有趣。我的意思是，Adobe 是一家大公司，所以他们当然不能抄袭艺术家，只是使用他们的作品。但他们正在使用积分。

用于训练这些模型的作品。如果您输入自己的艺术作品，如果它被使用，您也可以获得积分。所以他们想出了某种贡献的概念。是的，我也很喜欢。所以我认为这是

所有工具都应该这样做，对吧？所以如果你想使用某个艺术家的某种风格，那么如果他们同意，你就需要付钱给这位艺术家。如果没有，你就不能这样做。是的。但是你的工具必须能够归因于它用来创建此输出的来源，你知道吗？像 Perplexity 这样的系统，他们就是这样设置的，听起来 Firefly 也可能是这样。但对于其他一些大型语言模型，你知道，我认为

尤其是当你再次谈到想法时，这真的很难追踪和归功于。这是一个非常有趣的模型。我认为这就是我们目前在互联网上的位置。我的意思是，我认为在一个内容营销不再有效的世界里真的很可怕。因此，公司没有动力免费提供高质量、昂贵的内容，因为它没有商业价值。

所有这些都是人工智能生成的。所以我们已经看到了这一点。如果你在谷歌上搜索，你会发现很多质量不高的东西排在前面。其中很多都是人工智能生成的。所以有一个...

真正的可能性是我们最终得到的东西，你知道，一个充满大量不良信息，但也有大量良好信息的互联网。我们最终来到了这个世界，人工智能只是在一个小小的反馈循环中，被用来创造所有这些糟糕的内容，这些内容又回到了系统中。是的。我认为这不是任何人想要的。所以在这样的世界里，我看到的唯一方法是

内容创作者的动机是创建一种围墙花园，你必须付费才能访问高质量的内容。我真的不想要那样。我认为获取信息对于人类及其发展至关重要。

这也是一个道德问题。所以，你知道，听到 Perplexity 这样的团队，以及你刚才描述的 Firefly，这些组织正在思考如何以合乎道德的方式做到这一点，这给了我希望，既因为这是正确的做法，也是让人们继续在互联网上创造好东西的唯一途径。是的。

我同意。但我也认为很多人会使用对他们来说最方便的工具。完全地。最佳输出。他们并不真正关心艺术家。他们不关心其他人。他们只关心自己。他们不害怕发表糟糕的或可能是错误的文章。或者我已经在领英上看到了这一点，人们使用 NN 集团的文章，以某种方式重写了它，然后假装它来自其他来源。

我的意思是，是的，对于了解这些文章和了解这些主题的人来说，这些事情非常明显，但其他人并不了解。所以他们觉得，你知道，他们想出了所有这些东西，而且...

这已经是错误的了。所以，是的，你知道，这个问题在我们这里肯定早于人工智能。就像我发现我的许多文章被逐字复制粘贴到某人的 Medium 帖子中，他们声称这是他们自己的文章。即使像我会在我的文章中提到我的丈夫，如果它与我正在谈论的内容相关，你知道，所以就像...

不，他们甚至没有读过。他们只是把它拍进了 Medium。所以这对我们来说一直是个问题。即使在这种情况下，就像他们使用了我们所有的视觉效果一样，这对莎拉来说是一个大问题，因为她创造了许多关于设计概念的非常棒的可视化效果。人们会直接拿走视觉效果，把它贴出来，就好像它是他们自己的一样。有时他们会试图裁剪掉水印，但有时他们甚至不会这样做。即使是更简陋的版本，也有

互联网上有很多读过它的人，他们会说，干得好。感谢您设计出如此出色的视觉效果。与此同时，莎拉心想，那是我的。我相信我们不是唯一一个通过这种方式创建内容的组织。所以，是的，这已经是一个问题了。我只能看到随着人工智能更容易掩盖来源，这种情况会变得更糟。

我觉得人工智能可以很好地检查内容的来源，对吧？比如扫描图像，浏览整个互联网，看看它最初是在哪里、何时发布的。

找到一个网站，然后，你知道，推荐，嘿，你需要引用这个作为来源或类似的东西。我已经看到了。是的，肯定有像这样的公司，实际上，我不知道是不是 graverly 或者 writerly，但其中一些写作应用程序，比如海明威，我猜，可能会做这样的事情，他们正在使用人工智能作为剽窃工具。

这很有趣，因为，你知道，有人试图开发它来发现、测试这段内容，告诉我它是否是人工智能写的。但随着人工智能不断变得更聪明、更复杂，我们将如何做到这一点？是的，这是一个巨大的挑战。你知道，现在我觉得我可以读一些东西，然后就能分辨出来，因为内容是我的专长，我花了很多时间阅读，我对不同人的声音有感觉。

我可以阅读同一位作者的两篇不同的文章，然后说，我很确定他在这篇文章中使用了 chat GPT。但事实可能并非如此。是的。这可能并非对所有人、永远都是如此。

是的，我的意思是，我认为大多数人都无法真正看出区别。而且大多数人也不会阅读整篇文章。他们只是浏览一些片段，而且他们没有时间这样做。这是我们在 NNG 完全意识到的问题，人们来找我们和其他用户体验咨询机构，通常是因为他们有一个特定的问题。他们有一个他们想要学习的特定内容。我必须做一个日记研究。只要告诉我我需要知道什么，仅此而已。

所以我认为我们需要继续这样做才能与人工智能竞争，因为这是人工智能的一大优势。是的，我同意。这太酷了。你知道，想象一下在你的网站上输入它，然后你得到一个你可以使用的个性化框架。是的。还有一个视频。这就是梦想，对吧？是的。

让我们拭目以待，未来会发生什么。是的。让我们拭目以待。我会密切关注。但您对如何整合人工智能，尤其是内容创作方面有什么建议吗？我的意思是，您提到了一些事情，但您是否偶然发现了一些您认为人工智能作为集成工具非常有用的方法？

所以有几件事。所以对于内容来说，我喜欢使用 ChatGPT 来改写内容。我通常会让它给我几个不同的选择，因为，你知道，第一个选择通常不正确。

恰到好处。例如，你知道，如果我正在编辑某人的作品，然后我说，哦，这是一个相当长而复杂的句子。我可以把它放到 chat GPT 中，然后说，用三种不同的方式改写它，让它更短。你知道，有很多事情你必须注意。其中一件事是人工智能确实倾向于有一种独特的语气。所以，它也倾向于以这种方式推动内容

以这种写作方式。因此，当你从这些人工智能工具中取出内容时，请确保语气仍然是你想要的。另一件事是，有时像 ChachiPT 这样的工具在编辑简洁性时，它们会删除单词并创建语法正确但没有抓住重点的内容。它只是以特定的方式重新排列了一些语言

没有反映作品的原始观点。所以那里仍然存在一些问题。

这实际上是我们希望很快提供更多指导的领域。因此，今年，我们一直非常关注研究人们对这些人工智能系统的反应，用户如何围绕它们发展心理模型，这些新的行为，比如我们发现人们在与这些新颖的系统互动时正在使用的苹果采摘。

这真的令人着迷。我们也一直在为那些正在研究这些系统的人提供很多建议。但我真正想更多关注的是，尤其是在 2024 年，

是为用户体验专业人士提供非常具体的建议，告诉他们如何将这些人工智能工具专门用于用户体验。所以这是我们目前正在积极努力的事情，计划研究、进行专家审查等等。所以如果有人对这些事情感兴趣，一定要订阅我们的通讯，因为这些内容很快就会出来。

酷。我会在描述框中添加通讯链接。所以每个想注册的人，都能听到我说话吗，凯伦？你只需点击描述框中的链接即可。酷。谢谢。完美。所以我觉得我们涵盖了我想要问你的大部分内容。你认为有什么很棒的资源吗？

查看一下你想要推荐给听众的任何东西，你认为任何有用的东西都可以看看。所以，正如我所说，一定要订阅我们的通讯，以获取我们即将推出的全新人工智能和用户体验内容。

同时，查看我们现有的一些文章和资源。正如我所说，我们一直非常关注研究这些新的不断变化的用户行为。所以这将与任何从事涉及人工智能工具或人工智能系统或功能的项目的人特别相关。此外，一定要试用我今天提到的一些工具，例如 Perplexity。我认为很多人都是...

我认为 chat GPT 就像人工智能的门户。很多人都从它开始。根据我的经验，有些事情它仍然是最好的。但是每天都有很多新的人工智能工具出现，所以也值得试用其中的一些工具。我仍然没有。我正在寻找完美的人工智能用户体验研究工具。我正在四处寻找并试用其中的许多工具。仍然没有找到任何新的东西。

在我看来是完美的，但我的确在领英上发布了很多关于我找到的与用户体验研究相关的工具，所以人们可以在那里与我联系，这实际上是我的下一个问题，人们可以在哪里找到你，所以在领英上，很明显，我也会在描述框中链接它，还有什么其他地方，或者 Instagram，没有 Twitter 也不是，领英真的是找到我的最佳地方

完美。我想这里的每个人都在领英上，所以他们都应该关注你。你总是分享很棒的内容，很多关于这个主题的有趣文章。也关于我们今天提到的一些话题，你在这些话题上真的

深入研究，你分享的例子，还有你是如何构建你的提示的，你学到的东西，非常有趣，很棒的内容，超级有帮助，是的，我最喜欢在领英上做的事情之一就是与人交谈，听听其他人好的经验和他们想要分享的技巧，所以总是很乐意在领英上聊天

我喜欢这样。我认为这是一个很棒的方法，真正地彼此联系，彼此交谈，尤其是在这样的时代，对吧？在这个时代，我们需要互相学习，看看什么有效，什么无效，并互相帮助，基本上就是这样。超级酷。我喜欢这样。

好的，凯特，非常感谢你抽出时间与我们分享你所有的知识。我认为这非常有价值，非常有帮助。所以非常感谢你所做的一切。谢谢。我玩得很开心。