Learning From and With AI: Duolingo’s Zan Gilani
27:39 Share

今天我们播放的是由我们的朋友 Modern CTO Podcast 制作的一期节目，他们最近很友好地邀请我作为嘉宾参加。我们讨论了生成式 AI 的兴起，在技术方面取得成功的意义，以及领导者在指导技术实施工作时需要考虑的一些因素。您可以在 Apple Podcast、Spotify 或您收听播客的任何地方找到 Modern CTO Podcast。学习一门外语是一个复杂的过程。

一家应用程序公司寻求利用人工智能来帮助个性化、情境化和激励。在今天的节目中了解更多信息。我是来自 Duolingo 的 Zan Gilani，您正在收听《我和 AI》。欢迎收听《我和 AI》，这是一档关于人工智能和商业的播客。在每一期节目中，我们都会向您介绍一位在人工智能领域进行创新的个人。我是萨姆·兰斯博瑟姆，波士顿学院分析学教授。我也是麻省理工学院斯隆管理评论的 AI 和商业战略客座编辑。

我是谢尔文·科杜班德，BCG 的高级合伙人，也是我们 AI 业务的领导者之一。麻省理工学院 SMR 和 BCG 自 2017 年以来一直在研究和发表关于 AI 的文章，采访了数百名从业人员，并对数千家公司进行了调查，了解构建、部署和扩展 AI 能力以及真正改变组织运营方式需要什么。

欢迎。今天，谢尔文和我将与 Duolingo 的首席产品经理赞·吉拉尼进行交谈。我个人对今天的节目非常兴奋，因为 Duolingo 处于一个非常有趣的位置。在我们的许多节目中，我们最终会谈论组织如何使用 AI 来增强或改进人类的决策，这很好。但 Duolingo 更进一步，专注于人类如何与 AI 一起学习，大规模个性化教育，这对我很有吸引力。

无论如何，我说的够多了。让我们听听赞怎么说。赞，感谢您的加入。谢谢。很高兴来到这里。赞，首先，你能给我们概述一下 Duolingo 公司以及你的角色吗？当然可以。Duolingo 基本上是一款教授语言的应用程序。我们目前教授 40 多种语言。顺便说一句，大多数人都在学习英语。

我们的大多数学习者也在使用手机或 Android 和 iOS 设备进行学习。我们是下载量最多、使用率最高的教育应用程序，包括语言和其他方面。我们每天有大约 1600 万活跃用户，每月有 4000 多万活跃用户。我在公司工作快八年了，我是一名首席产品经理，

负责实验性 AI 团队。我的主要职责是领导这个团队，该团队正在努力利用生成式 AI 更有效地进行教学，而且更广泛地说，我帮助公司在生成式 AI 方面取得成功。我们现在针对生成式 AI 的主要用例之一是新的订阅层级。Duolingo 是一款免费增值产品。其使命是提供

尽可能高质量的教育，使其尽可能多的人都能获得。你只需要一个互联网连接。所以我们有这个免费版本的应用程序，这是大多数人使用的版本。这真的很好。公司的大多数人都花时间在这个上面。然后我们有订阅层级。我们最近刚刚推出了一款名为 Duolingo Max 的新型人工智能驱动的订阅层级。我很乐意介绍一下它的功能。所以实验性 AI，如果你愿意的话，它就像你们的研发实验室？

好吧，我会说实际上超过一半的公司都在从事广泛的研发工作，所有从事产品工作的人都是如此。在那些致力于有效学习或教学的人中，你可以把它看作是一个实验室。是的。很好。也许对于我们的听众来说，你可以……

列出 AI 使用的各种用例或场所。我的意思是，当然，从明显的个性化和游戏化开始，很多应用程序都有这些功能，但只是告诉我们 AI 是如何使用的。

Duolingo 从应用程序存在之日起就一直在使用 AI，这已经快十年了。事实上，它是由卡内基梅隆大学的计算机科学教授路易斯·范农和当时他的研究生塞弗林·哈克尔创立的。现在，它以多种不同的方式使用。

例如，在增长方面，大量工作都投入到优化通知中。Duolingo 与其他应用程序的不同之处在于，它真正试图帮助你保持动力。对我们来说，从教学法的角度来看，我们认为学习语言最困难的事情实际上是保持动力。因为记住，这是一件很难做到的事情。独自一人做这件事尤其困难。

在手机上，你知道，这是一件非常困难的事情。因此，通知以及你收到通知的时间和信息确实会影响一个人长期坚持下去的能力。因此，我们在机器学习通知方面投入了大量精力。我们还在内容生成方面使用它。因此，我们正在尝试创建有用、适当的内容，

我们也在那里使用它。然后在公司的另一个部门，即 Duolingo 英语测试，这基本上是学生在去大学时必须参加的英语能力测试，有点像托福、托业或雅思的竞争对手。大多数美国人都不需要经历这个。我们用它来检测作弊。我们还在很多地方用它来生成内容。

这太吸引人了。在应用程序的核心，也就是教你语言方面，它的动态性如何？当它适应一个人的学习方式时，它的个性化程度如何？个性化发挥着作用。

但很多体验都是由学习科学家和教育内容开发者策划的。对于大多数人来说，你想要学习事物顺序大致相似。例如，每个人都在学习现在时态，然后你再学习其他复杂的时态。但是，我们确实在个性化方面使用 AI 的地方是所谓的 BirdBrain。这基本上是我们拥有的一个系统

它正在优化你将在练习环节中看到的题目的难度。关于 Duolingo 需要注意的一点是，它是完全互动的。它旨在让你感觉像是在玩游戏。因此，每次学习时，你都在回答一个小型练习，然后你答对或答错。你总是会得到反馈。

因此，BirdBrain 的目的是尝试找到恰到好处的难度级别，因为基本上，如果某件事太难，就会让人沮丧，从而失去动力。如果某件事太容易，就会让人感到无聊，从而失去动力。BirdBrain 是我们用于个性化练习，特别是用于个性化练习的东西之一。当然。我认为关于这一点有趣的一点是，在他描述他的产品时，他

我们只是认为语音合成、语音识别是理所当然的。十年前，这些都是前卫的东西。现在，赞，你甚至没有费心提及这些作为 AI 的应用。我认为这是一种退步，看看现在什么是正常的。没错。我认为你们拥有的一个非常有趣且可能独特的东西是你们必须拥有的反馈循环的数量。我的意思是，通常在许多

其他应用程序中，当你想到公司、零售商、银行和电信公司等时，需要一些时间才能获得反馈，而你几乎可以从这么多人那里立即获得关于这么多实验或小型实验的反馈。也许多告诉我们一些关于学习速度和算法适应速度的信息。

这里有一个很好的镜像，那就是我们试图将有效学习的原则融入产品本身。然后作为一家公司和一个组织，我们也试图按照这些原则运作。当你学习一门外语时，快速获得反馈非常重要，但当你学习时也很重要

从事产品本身的工作。从很早的时候起，我们就基本上构建了自己的 A/B 测试基础设施。它是产品流程的核心组成部分。这是我们在 Duolingo 进行产品开发的核心组成部分。因此，在任何给定的时间点，你都有数百个实验正在进行，这些实验非常细致，从按钮的位置到订阅价格页面的价格，你的经典实验，到……

巨大的新功能，新的标签。基本上，如果不是错误，那么我们很可能正在以实验的形式运行它。我们在这方面做得非常好，非常老练。

谢尔文要翻白眼了，因为我要学术一点了。但你是体验式学习的典型案例。事实上，我要给你一点过渡，谈谈你的 Max 产品，因为我认为这有两个非常令人兴奋的部分。这个角色扮演，它正在获得学术具体的经验，体验式学习的一部分。然后是这个解释我的答案，这是一个反思性的观察和批判。所以，告诉我们一些关于这两者的信息，以及它们是如何与学习成果联系起来的。

当然。我认为谈谈我们在添加这两个功能之前的情况是有用的。从教学法的角度来看，Duolingo 一直以来都是关于隐性学习的。所以学习没有明确地告诉你，这就是你要学习的内容，这就是它的工作方式。这就是体验的 DNA，因为我们认为……

这样做会更自动。人们也会因为复杂的语法表格等而感到非常沮丧和反感。然后第二点是你在一个应用程序上学习，你正在做这个互动的事情，这些几乎像游戏一样的练习。一直以来缺失或有限的两件事是：第一，有些人确实想要

解释，并且在正确的时间和正确的方式下，这可以非常高效和有效。因此，“解释我的答案”是解决这个问题的方案。关于“解释我的答案”的好处是，它实际上只有借助现代大型语言模型才能实现，因为大型语言模型非常擅长提供关于你所犯错误的简洁明了的解释，而不会使用专业术语。

即使对于老师来说，也很难做到这一点，而不会使用专业术语，也不会恰到好处。因此，我们能够通过“解释我的答案”做得很好。它可以提供后续的插图。它可以提供示例，所有这些都使得大型语言模型成为任何试图独自学习任何东西的人的福音。对我来说，这是改变人生的。或者任何试图发表演讲的人。或者任何试图发表演讲的人，是的。

然后第二个，角色扮演，是最终，对于大多数人来说，语言学习不是一项学术练习。他们试图将其作为一项现实世界的技能来使用。这本身就是一项技能。那么，你如何让人们能够练习这项技能呢？你如何让他们模拟这种情况呢？聊天机器人正是做到这一点的一种方式，因为现在你拥有的是能够以你所处的难度级别与你交谈的东西。

它有无限的耐心，并且之后还可以给你反馈。即使人们可以接触到母语人士（他们通常接触不到），你仍然需要一个有无限耐心并且真正能够理解你想要什么的母语人士。因此，角色扮演基本上是试图将这种体验带入应用程序中。与其像 ChatGPT 那样只拥有文本界面，并且让你来回说话，基本上我们所做的是分解

或场景成这些小规模的体验，你将与一个将成为咖啡师或朋友的聊天机器人交谈，你将向他们借东西。然后你尝试进行非常具体的短期体验。萨姆，我有一个问题要问你，因为萨姆，正如你所知，是一位杰出的教授，他一直在教人们

包括像我这样不在他班上的人，很多事情。所以，萨姆，我的问题是，说真的，你认为一个好老师是什么样的？事实上，丹刚才谈到了几件事。这也是为什么我在他的谈话中感到有点内疚的原因。他谈到的这种无限的耐心。

这真的很重要。而且也很难做到。是的。并且在他们所处的位置与他们会面是我们教育中面临的一个根本性问题。我的意思是，我坐在一个有 35 到 40 个人的教室前面，他们并不相同，而与他们会面正是赞所谈论的。所以是的，你必须精通材料，你必须让人们保持参与，但你还要跟踪人们在哪里以及他们知道什么，你知道，呈现的东西既不太容易也不太难。而且，

我非常喜欢这个模型。那么接下来是什么呢？是的，这正是我要去的地方。接下来是什么？我的意思是，如果我们能用语言做到这一点，我们还能用什么做到这一点呢？它在哪里有效？我的意思是仅仅针对语言。所以，在他们所处的位置与他们会面，非常了解学生及其进步情况，然后能够进行角色扮演和大量的体验式学习，并能够解释和指导学生

以一种更通俗易懂的方式，以及一种你可以重复的方式，而且我不必急于做笔记。我的意思是，所有这些事情，对吧？还缺少什么？我听到这个，这就像比普通老师更好一样。但在赞看来，为了成为一个完美的老师，还缺少什么？我认为我们距离成为完美的老师还有很长很长很长的路要走。

由于许多原因。但我也要说，我们不相信，我当然也不相信，归根结底，你只需要一个聊天界面，大多数人就能在他们试图学习的任何事情上取得很大的进步。所以，要回答第一个问题，为什么我们离老师还很远，

好吧，我认为其中一些是未知的，但在学习时与另一个人建立关系确实会产生影响。学习新事物有一个情感方面。并且人际关系可以很简单，例如你参加辅导课程是因为你不想让你的老师失望，也包括

这位导师可以通过他们的面部表情、说话的节奏以及他们可以讲述的插图、他们可以与自己生活联系起来的方式来真正地参与其中。所以我们离这还很远。然后说到，嘿，为什么聊天机器人不能教你所有东西呢？

对于大多数人来说，你仍然需要有条理，而有条理是很累人的。例如，仅仅决定接下来吃什么通常就是你花费所有时间做的事情，或者决定看什么电影。同样，决定接下来学习什么也很难。因此，产品方面的人必须为你找出学习事物的正确顺序。同样，创造力也是很累人的。

对于一个现实生活中的导师来说，让他们扮演很多不同的角色并进行很多角色扮演会非常困难。然后你需要一个也是一位优秀演员的导师。而人工智能让你能够与虚拟导师做到这一点。但即便如此，我们也不希望学习者必须一直自己想出这些场景。

最后两点我要提到的是，学习也是多感官的。它也是有情境的。理想情况下，你想要的是某种情境学习，而不是仅仅与聊天机器人进行学习。最后要提到的是，人们确实需要一种进步感才能坚持学习一门外语，因为学习

实际的进步是如此缓慢和渐进，很难看到。因此，你必须做的是向人们展示正在填满的进度条，并且你必须进行检查。我认为可能有办法在导师体验中模拟这一点，但这正是我认为我们也关心在该体验之外构建体验以及构建你所遵循的路径以及所有其他构成 Duolingo 的原因。赞，我想回到你谈到的一件事，我非常喜欢这个想法

弄清楚你需要学习的下一件事是什么。我的意思是，历史上，我上的每一门语言课，我们都有一本书，我们从第一章到第二章，有人在某个地方真正地考虑了这个顺序。但与此同时，我不知道这对于所有学生来说是否一定是最佳的。当我们想到 Netflix 或音乐中的推荐系统时，你

这似乎是一个绝佳的机会。我现在可以学习什么东西才能产生最大的影响？或者，我不知道什么东西阻止了我打开下一节？这似乎是一个巨大的机会。是的。我也会把它分成两部分。其中之一就是……

通常有效的学习顺序和有效的教学顺序是什么。对于那些有一定熟练程度的人来说，这尤其有用

大多数在 Duolingo 上学习语言的人，特别是英语学习者，因为他们在学校以某种方式学习过，他们的知识是零散的，正如我们喜欢说的那样。在这些情况下，由于不同的经验，顺序因人而异。然后是第二方面，即

你目前遇到的具体问题，你需要更多地关注这些问题。也许你只是对某个特定概念犯了更多的错误。也许是动词变位是问题所在，或者也许你只是不知道如何很好地介绍自己。因此，有机会说，实际上要花更多的时间

在体验的那一部分。并不是每个课程都是为一个独特的学生量身定制的，而是你投入注意力和关注的地方，以及你投入的量和顺序是由某种导师指导的。我会说这是一件很难做到的事情。这确实是一件很难做到的事情。我们还没有做到，但这当然是梦想的一部分。所以节目是《我和 AI》，我们没有

了解很多关于你和你的事情。所以也许告诉我们一些关于你的背景，你是如何最终担任这个角色的，以及这段旅程是怎样的。是的。我应该回顾多远？我应该从祖父母、父母、我自己开始吗？由你决定。好吧，我会跳过扩展的传记。我在巴基斯坦的卡拉奇长大。那就是我被抚养的地方。我来到美国是为了攻读本科。

事实上，我在大学学习了政治学和东亚研究，因为第一，我对语言感兴趣。所以我学习了中文。当我在大学学习语言时，最令人兴奋的事情之一就是总是尝试使用工具来查看什么有效或无效。

所以是对语言的兴趣，是对技术的兴趣让我来到了 Duolingo。事实上，我从市场营销开始，因为我之前做过一些市场营销和广告实习。那时，Duolingo 约有 50 人。我们从只有一个团队负责应用程序的工作

到拥有负责货币化、学习和增长的团队。所以我开始作为一名市场营销人员从事增长工作。然后大约一年半后，我转行成为一名产品经理。在我 Duolingo 的大部分时间里，我一直从事增长工作，也就是说用户留存，无论是新用户还是现有用户，都在增加我们在亚洲的影响力。那超级有趣。诸如此类的事情以及激励人们的东西以及保持人们动力的东西一直是我的兴趣所在。然后

转向以 AI 为重点的工作并领导这个实验性 AI 团队是在去年年底，因为基本上我们最终与 OpenAI 合作推出了他们的 GPT-4。我们最终进行这项合作的原因实际上是因为我认识 OpenAI 的 GPT-4 推出产品的经理。当我们聚在一起时，我们很快意识到 Duolingo 是完美的场所

用例，因为对于发布来说，他们真正想要的是展示公司实际上正在使用它来改变他们的业务。这些公司也试图为世界做一些好事，等等。因此，我们公司基于这种合作关系并提前获得 GPT-4 的访问权限，改变了许多优先事项，开始真正地关注 AI。其中一件事是启动这个团队，该团队试图研究实验性功能。

非常令人兴奋。事实上，从动机的角度来看，你会很高兴知道我的儿子非常为他西班牙语的连胜而自豪。太棒了。我们有一个环节，我们会问你一系列问题，这些问题只是快速提问。说出你脑海中想到的第一件事。你在 AI 领域最自豪的时刻是什么？

我们公司推出 Duolingo Max 非常令人兴奋，并且为一个新的教学时代铺平了道路。它实际上是由 Duolingo 的 Max 团队创建的，该团队由 Edwin Bodge 和 Bill Peterson 领导。这非常令人兴奋。我会说，就个人而言，事实上，我的团队一直在研究的第一个产品实际上是正在上线的实验。你可以把它想象成阅读版的 TikTok，但是

它是一个所有内容都由 GPT-4 生成的地方。它为你提供了大量的內容，因为人们需要各种各样的阅读练习，它也是一个倾听云。所以非常期待看看结果如何。非常酷。你对 AI 感到担忧的是什么？我总体上非常乐观，但我认为让我担忧的是变化的速度如此之快，以至于会造成不稳定。

而我们社会的目标是确保我们能够在面对非常非常迅速的变化时保持稳定。因为快速变化正是我们想要的。我们希望进步能够迅速到来，但不会产生所有破坏稳定的影响。所以这就是恐惧。我认为这是一个可以解决的问题，但这就是恐惧。你最喜欢的与技术无关的活动是什么？我踢很多足球。是的。

有趣的是，事实证明，这其中也涉及到技术，但是是的，我踢很多足球。那是我最喜欢的活动之一。那么你最初想从事什么职业呢？政治学，我认为你提到了。小时候，你想做什么？很多不同的东西。从来没有一个答案。我想成为一名作家、记者、板球运动员、板球运动员、从事国际发展工作，甚至想成为一名建筑师。你当时也在考虑这个。是的，很多不同的东西。

你对 AI 最大的愿望是什么？你希望我们能从中学到什么？我认为 AI 是我们可以创造最快进步的方式。这里的进步，我只是指尽可能多的人类正在过他们选择的生活，他们正在蓬勃发展。我认为这是最高层次的目标，也是

大多数人的生命意义。我很高兴能参与这项工作。好吧，听起来你确实参与其中了。赞，感谢您抽出时间与我们交谈。我的意思是，我真的真诚地觉得，这对我们人类如何变得更好来说是一个非常不同且令人兴奋的机会。听起来 Duolingo 正在做很多这样的事情。感谢您的加入。非常感谢。

感谢您的加入。下次，萨姆和我将与 Pinterest 的高级副总裁兼工程主管杰里米·金交谈。到时候见。感谢收听《我和 AI》。我们相信，就像你一样，关于 AI 实施的对话不会仅限于此播客。这就是为什么我们在 LinkedIn 上专门为像你这样的听众创建了一个小组。它被称为 AI for Leaders。如果你加入我们，你可以与节目创建者和主持人聊天，提出你自己的问题，分享你的见解，并了解更多信息。

并获得有关麻省理工学院 SMR 和 BCG AI 实施的宝贵资源，你可以通过访问 mitsmr.com/AIforLeaders 来访问它。我们将把链接放在节目说明中，我们希望在那里见到你。