We're sunsetting PodQuest on 2025-07-28. Thank you for your support!
Export Podcast Subscriptions
cover of episode Runway Secures $308M Funding to Transform AI Video

Runway Secures $308M Funding to Transform AI Video

2025/4/15
logo of podcast Lex Fridman Podcast of AI

Lex Fridman Podcast of AI

AI Deep Dive AI Chapters Transcript
People
J
Jaeden Schafer
Topics
我观察到Runway公司获得了3.08亿美元的D轮融资,这是AI视频生成领域一个重要的里程碑事件。Runway是该领域的领先者之一,虽然面临着来自OpenAI(Sora)和Google的竞争,但其技术发展迅速,从最初低质量的GIF级别提升到如今令人印象深刻的水平。Runway的优势在于其模型迭代速度快,能够快速响应市场需求,并提供更低价位的服务,同时拥有API接口,方便开发者集成到其他工具中。 Runway公司的新一代模型Gen 4并非简单的增量改进,而是重构了视频生成的底层机制,通过构建“世界模拟器”来解决AI视频生成中物理模拟的难题。这使得其能够在不同场景中保持角色、地点和物体的连贯性,并从不同角度重新生成场景元素,模拟3D环境,为电影制作等领域带来革命性的变化。 然而,Runway也面临着关于其模型训练数据版权的诉讼,这与许多其他AI公司面临的困境类似。虽然这可能会影响其发展,但我个人认为,更重要的是尽快完善AI视频生成模型并投入使用,后续再解决版权和付费问题。Runway的目标是在今年年底达到3亿美元的年收入,我相信凭借其技术实力和市场地位,这一目标是可以实现的。

Deep Dive

Chapters
Runway, a leading AI video generation company, secured $308 million in Series D funding, marking a significant milestone. The funding round involved major investors like General Atlantic, Fidelity Management, and Nvidia, highlighting Runway's position in the market. This substantial investment will fuel Runway's continued innovation in AI video technology.
  • Runway raised $308 million in Series D funding
  • Major investors include General Atlantic, Fidelity Management, Nvidia, SoftBank
  • Runway is a leader in AI video generation
  • Total funding raised by Runway is $536 million

Shownotes Transcript

Runway刚刚宣布融资3.08亿美元。这是他们的D轮融资,而且增长幅度巨大。对于不熟悉的人来说,Runway是一家创建AI生成视频的公司。说实话,他们几乎是领先者。当然,他们面临着来自OpenAI的Sora以及谷歌的激烈竞争。但实际上,Runway比其他任何公司都存在的时间更长。我还记得Runway刚推出时……

我当时正赶上ChatGPT问世。他们已经有了这个模型一段时间了。如果我完全说实话,它当时相当糟糕。它经常看起来像动画GIF。没有物理效果。物体移动比例失调,而且有点古怪。质量很低。你只能生成几秒钟的视频。所以这是,你知道的,ChatGPT问世的时候。从那时起,他们已经走了很长一段路。今天,Runway的视频看起来……

相当令人印象深刻。我甚至还记得OpenAI推出Sora时,我想,天哪,Sora将彻底击败Runway。如果我没记错的话,大约三周后,Runway推出了一个与Sora不相上下的新模型。Runway的优点在于它实际上已经推出并上线了,而Sora则,你知道的,很长时间都无法使用。他们当时正在进行测试版测试,并且……

人们正在使用它并进行安全测试。它并没有公开发布。即使在今天,虽然Sora已经公开发布,但你并没有听到太多关于它的讨论。这是因为它要花费200美元。你必须处于每月200美元的级别才能实际使用它。所以它并没有被广泛使用。与此同时,Runway的级别要低得多。它更实惠。而Runway最棒的一点是……

它有一个API,因此开发人员可以将其集成到工具中。我本人正在考虑将其集成到AI Box平台中。人们喜欢能够生成AI工具。我认为一个缺点或人们担心的问题是,它显然比与ChatGPT进行聊天更昂贵,因为你正在生成视频,这就像生成一千张图像或,你知道的,将它们拼接在一起,这就是你制作视频的方式。但与此同时,它……

比雇佣真正的电影摄制组便宜得多。你仍然只需要支付,你知道的,也许每部视频25美分左右。所以它非常非常令人印象深刻。你可以用它做一些非常了不起的事情。那么究竟是谁给他们钱的呢?General Atlantic是领导这一轮融资的公司。他们还有Fidelity Management、Billy Guilford、英伟达、软银等等。所以显然是一些重量级人物,对吧?当你看到英伟达加入时,当你看到软银加入时,这是一轮D轮融资,而Runway是明确的领导者。没有人真正担心Runway会失去他们的秘诀,或者竞争对手会对他们造成太大的压力。我认为每个人都希望有很多竞争对手。没有人希望OpenAI独占鳌头。我认为这很有趣,因为它感觉OpenAI拥有一支非常有才华的团队。他们想出了真正令人难以置信的产品,但最大的缺点是他们有超级……

如此多的产品问世,例如,你知道的,他们刚刚发布了Dolly的最新版本,这令人惊叹且很棒。这是一个令人难以置信的图像生成器,据称自一周或两周前推出以来,它已经生成了超过7亿张图像。这太棒了。但问题是,它已经有两年半没有更新了。所以……

改进的飞跃是巨大的。人们会说,天哪,它变得好多了。但在之前的两年里,每个人都只能使用Midjourney,因为Dolly的开眼模型相当糟糕,实际上并没有那么好。所以我认为OpenAI的问题是,他们有这些真正令人印象深刻的发布或甚至演示。然后……

在他们更新之前需要很长时间,而像Runway或Midjourney这样的公司可以进行更快的迭代,它们会有更小的改进,但它们发生的频率要高得多。因此,一旦他们赶上,他们就可以超越OpenAI,而OpenAI则会停滞不前,直到他们进行下一个重大更新。所以这就是我对这里发生的事情的观察。也是我认为Runway……

没有受到OpenAI严重威胁的原因。我认为他们有很多潜力。截至目前,Runway已经筹集了5.36亿美元,这意味着他们刚刚筹集的3亿美元相当令人印象深刻,对吧?这是其中很大一部分。这就是Runway对此所说的话。他们说,引用:“今天是一个重要的里程碑,Runway宣布朝着我们的目标迈出了重要一步,即创建一个具有世界模拟器的新媒体生态系统。”

他们说,我们最近的进步不仅仅是渐进式的改进。它们构成了对媒体和生态系统的一种全新方法的基础,这种方法建立在能够模拟我们世界的AI系统之上。好的。所以我认为他们想表达的意思是,这不仅仅是渐进式的改进。所以他们只是,好吧。所以我想说的是,他们刚刚发布了他们的最新版本,我认为它被称为……

之类的。它令人印象深刻。它做了很多很酷的事情。我将介绍Gen 4。我将介绍本周他们在Gen 4中发布的一些很酷的功能。但很多人说,好吧,这比你之前的版本更好,但这只是略微好一点。它只是好了一点点。它可能只是好20%。这就是我之前所说的OpenAI进行令人惊艳的重大发布与进行这些渐进式发布之间的区别。是的,它提高了20%。但他们想说的是,他们重新构想了……

他们重写了这些视频的实际生成方式,这意味着它是可以变得更好得多的东西的基础。所以他们所做的不仅仅是,我想,吸收视频并试图让它输出类似的视频,据称他们已经创建了他们所说的世界模拟器。这意味着……

为了准确地创建视频,一个大问题是,这不像,你知道的,一张图片,你可以吸收其他图片并输出看起来有点正确的图片。然后也许我们经历了这样一个阶段,每个人都有奇怪的十个手指,他们不得不尝试修复AI生成图像上的手指问题。对于视频来说,问题要大得多。那就是必须有物理效果。如果一只鸟从背景中飞过,它必须……

视频必须理解鸟的翅膀如何拍打,以及它的物理原理。如果一阵风吹到鸟身上,它会有点颠簸,就像所有东西是如何相互作用的。为了创建AI生成的视频,你必须创建一个真实世界模拟器,一个关于世界上所有事物如何运作、物理原理如何运作、事物如何相互作用的实际模拟。当你抓住一个枕头并摇晃它时,枕头弯曲时褶皱会如何移动,所有这些微小的细节。在一个视频中,你可能有20或30个这样的东西同时相互作用,对吧?你可以在背景中看到人们在说话,他们的头发在风中飘动,前面有人弯曲一根棍子以及它的移动方式等等。所以这太疯狂了,对吧?这是一个真实世界模拟器。

Runway所做的是,他们拥有一大堆AI媒体工具。他们有视频和图像。我应该提到,他们也做图像,这并不令人震惊。为了制作视频,你必须生成数千张图像。所以他们确实有一个图像生成模型。当然,在图像生成模型中有很多竞争。在视频方面,更多的是OpenAI和谷歌。还有一些其他的。有Pika Labs。还有一些其他的也在做视频。但我认为Runway做得最好。

所以他们真的试图让自己与众不同。他们与一家主要的荷里活工作室达成了协议。他们还拨出了数百万美元。我经常看到的一件事是,他们资助这些AI独立电影。所以他们正在资助电影制作人或制片人制作看起来很酷的AI制作的镜头。他们每年都会举办这种电影节。看到这些,哦,看,这些都是AI制作的,这真的很酷。

即使从镜头不太好的时候开始,我也对人们的创造力以及他们能够制作出看起来不错的东西印象深刻。然后今天它们越来越好。所以他们有,你知道的,Gen 4本周发布了。这是……

据称Runway表示,使用这个新的视频生成模型,它可以在场景中创建一致的角色、一致的位置和物体,对吧?所以你可能在一个场景中是我,然后我能够出现在一个完全不同的场景中。过去,你只会说,你知道的,一个有着……

金发卷发的白人男性在海滩上行走。然后你会尝试说同样的描述在路上行走,但它可能是一个完全不同的白人男性,它根本不像我。所以现在你实际上能够拥有始终如一的角色。这显然是在制作电影的不同镜头时所需要的。你需要同一个人来使其保持一致或,你知道的,连贯性。他们说他们可以……

引用“连贯的世界环境”。他们还可以从不同的角度重新生成元素,这很酷,对吧?例如,我可能在这里与播客交谈,然后突然摄像机转向另一个角度。这是一个不同的视角,但我仍然在同一个地方做同样的事情。这真的很酷。摄像机四处移动。当你想到他们如何模拟真实世界环境时,很多人说为了制作这些视频,他们正在模拟一个3D环境。所以他们真的可以将摄像机移动到……

他们想要的任何地方,查看场景的任何角度,这真的很酷。你会到达一个点,对于真实的电影来说,我想象真正的电影制片人会对这个概念垂涎三尺,也许你完成一部电影,将其上传到AI,然后你就可以选择你想要摄像机位于镜头的任何地方,以任何方式放大,这将非常令人印象深刻。这可能是我们未来的发展方向。这真的很棒。

他们说,凭借他们的新Gen 4产品,他们希望在今年年底达到3亿美元的年收入。所以到年底,他们希望能够实现3亿美元的收入。我认为……

我希望他们能够实现这个目标。我认为这是一家伟大的公司。我对他们正在做的事情感到非常兴奋。人们说可能阻碍他们的一件事是,有一场针对他们训练模型方式的大型诉讼。人们说,好吧,他们只是吸收了所有这些受版权保护的艺术作品、数据和视频,并以此训练他们的模型。

说实话,是的,我不怀疑他们这么做了。他们说,哦,这都在合理使用范围内等等。许多公司都面临着这场诉讼。OpenAI也是如此。这可以追溯到OpenAI和Miriam Marotti与《纽约时报》之间的整个戏剧,当时她被问到,嘿,你们使用YouTube进行训练吗?她说,哦,我必须回复你。我不知道。这就像,显然她感到不舒服。显然,是的,他们正在使用YouTube来训练他们的视频模型Sora。

显然,Runway也做了同样的事情。每个人都在做同样的事情。所以他们面临诉讼,但我认为每个人可能也面临诉讼。看看情况如何发展将会很有趣。显然,像OpenAI这样的公司拥有更多资源来应对诉讼。尽管,你知道的,对于Runway来说,3亿美元也不算太差。所以我很想知道会发生什么。说实话,此刻,也许未来我们会合作一些……

你知道的,商标和版权共享以及对艺术家的支付。我认为有一些公司正在这样做,例如Adobe在其图像生成模型方面做得很好。

说实话,从我的消费者角度来看,我只是希望这些公司尽快推出最好的模型。我知道有些人会对这个有争议的热门观点感到不安,但我只是想要这个,就像,我只是想要一个实际的视频生成模型,我可以将其用于业务或任何我想要的东西。也许一旦他们制作出好东西,我们就可以开始监管和压制,并让他们向所有他们获取数据的人付款。但我只是希望它尽快问世。这就是我的想法。我的意思是……

能够支付的人是Adobe、谷歌以及其他大型公司,所以有时当我看到这些初创公司时,我会对它们有一点同情,但我知道并非每个人都同意这一点,这就是我的立场,我只是希望该工具尽快问世,我相信我们将来会解决所有货币化和补偿问题。嘿,如果你喜欢这一集,并且想学习如何使用AI工具来发展和扩展你的业务或职业,我有一个名为AI Hustle School社区的社区,每周……

我都会录制一段独家内容,其中我会分解我正在使用的确切AI工具以及我正在使用的流程,以使用AI来发展和扩展我的业务。每月19美元。过去,我将其定价为每月100美元。我……

最近降低了价格。现在有折扣。我们将来会提高价格,但如果你现在锁定每月19美元的价格,那么它将永远不会上涨。我们社区中有超过300名成员,他们都在分享他们如何发展和扩展他们的业务,所有他们的副业都使用AI。我们分享各种各样的东西。我们谈论我的联合主持人……

Jamie,他和我一起做这件事,他去年从亚马逊项目中赚了25,000美元。他谈论了他如何使用AI来扩展规模并在今年赚更多钱。我们分享了很多其他地方没有分享的精彩视频。AI Hustle School社区的链接在描述中。我很乐意让你成为会员,我希望你度过愉快的一天。