Meta Announces Movie Gen AI With Realistic Sounds
08:06 Share

Meta刚刚发布了他们称之为MovieGen的东西。这是Meta推出的一款新的视频模型。这让我很兴奋。我将展示演示，讨论它，分解他们正在研究的所有内容，因为这是我们第一次看到Meta认真进军视频领域。

视频行业。在此之前，我们看到他们从事大量工作，最重要的是，许多开源工作。因此，他们正在研究的内容非常令人兴奋，但这是他们首次大举进军视频领域。因此，我们将涵盖他们正在研究的所有内容。在我们深入探讨之前，如果您对人工智能和副业感兴趣，并使用我们在播客中讨论过的一些工具来赚钱，无论是为了发展您的业务还是通过副业赚钱，我都希望您加入AI Hustle School社区。在这里，我创建……

每周都会发布您在其他任何地方都看不到的独家视频，分解我使用在线AI工具赚钱的确切工具、策略和方法。它位于AI Hustle School社区。链接在描述中。每月19美元。将来，我可能会将其更改为100美元。但就目前而言，如果您锁定价格，它将永远不会上涨。我很乐意让您成为社区的一员。好的，让我们谈谈我们在Meta中看到的内容。所以我必须首先从一篇TechCrunch关于此事的文章中发表的一条绝对荒谬的评论开始。TechCrunch说，目前还没有人真正知道生成式视频模型有什么用，但这并没有阻止Runway、OpenAI和Meta等公司投入数百万美元

用于开发它们。好的，我想说的第一件事是这绝对荒谬。这些视频模型有很多值得批评的地方。首先，您可以批评他们从哪里获取数据。您可以批评它们可能不太好。您可以批评他们还不了解物理学。有很多东西可以批评。我不会批评。我认为这是有史以来最荒谬的看法。

没有人知道这些有什么用。好的，让我告诉你它们有什么用。好莱坞的每个人都在秘密或公开地尝试使用它们来节省数亿美元的电影成本。这些东西可以生成令人惊叹的视频。有时这不仅仅是您正在观看的屏幕上的视频，而是您可以想象一下，在某个镜头中，后面有一台电视机

他们想要获得对背景中电视上任何图像或视频的许可，他们可以使用AI生成一些东西。他们不必担心获得任何许可。就像所有这些小事情一样

但是，尤其是在模型不太好的情况下，但随着这些模型越来越好，我们看到实际的电影制片厂将它们嵌入到，你知道，价值3亿美元的电影中使用了这些AI工具的一些片段，因为其中一些还不错。如果他们甚至可以在其中获得一两个镜头，那就可以节省数十万美元。所以这就是好莱坞的大事。当然，我们还有整个方面，就像YouTuber一样

B卷。大家好，人们花费数千美元购买B卷。我曾经在营销部门工作，我们必须获得视频B卷的许可。好的。因此，这显然非常有用。我会停止我的，呃，我对此的抱怨。让我们谈谈他们在这里实际做的事情。因此，Meta对这一点进行了完整的分解，他们谈论的是，你知道，这些东西实际上可以做什么。他们当然分享了一个河马在水中游泳的视频。嗯，

病毒式河马。所以无论如何，这很有趣，因为它就像在水中游泳，镜头是从水下拍摄的。它显示了几种不同的物理特性。现在，我认为Meta所做的事情中最令人印象深刻的是，不仅仅是视频，这就像，好吧，这不是一个令人难以置信的视频。嗯，他们正在做一些我没有见过很多人做的新事情。那就是他们在做，嗯，

视频和音频生成。他们在发布中说，最后，我们训练了一个拥有130亿个参数的音频生成模型，它可以接收视频和可选文本提示，并生成高达45秒的高质量、高保真音频，包括环境声音、音效和器乐背景音乐，所有这些都与视频内容同步。

对我来说，这太棒了。他们展示了一个演示，其中他们实际上有一个人在沙漠中骑着四轮车。你可以听到四轮车的实际声音。

好的，提示是ATV发动机轰鸣并加速，伴有吉他音乐。他们有吉他音乐，他们有四轮车，他们有ATV。它像完美的视频吗？不，希望他们能做到。我们会看到的。但所有这一切都表明，当他们开始将这两个模型配对时，它变得更有用。他们还展示了许多非常有趣的演示。

基本上，他们能够拍摄视频并更改背景。他们有一个孩子释放灯笼，背景正在变化，他们有一只狗在咀嚼一根棍子，突然这只狗戴着粉红色的帽子和粉红色的衣服。因此，他们正在动态地更改这些视频，这非常令人印象深刻。我认为另一件非常有趣的事情是他们如何能够个性化其中一些视频。他们有这样一种东西，他们支持视频生成，它可以拍摄一个人的图像并能够

让女孩突然开始演奏音乐。她是一位DJ，背景中有一只猎豹，但这只是从女孩的照片中拍摄的。我认为这非常有趣。您可以更改样式。他们有一些在沙漠或北极的企鹅，他们说更改为铅笔样式。突然，背景变成了铅笔样式。所以，嗯，我认为，演示非常令人印象深刻。他们实际上能够用它做很多非常有趣的事情。嗯，

不仅仅是制作某种视频，他们能够做很多不同的风格。他们添加了音频。很多令人兴奋的事情正在发生。他们强调了一些有趣的事情，他们说这有点像在幕后谈论。他们说，作为最先进和最具沉浸感的叙事模型套件，MovieGen能够创建视频生成、个性化视频生成、精确视频编辑和音频生成。我们已经结合了这些

模型，嗯，我们已经在一个许可和公开可用的数据集组合上训练了这些模型。好的。每个人都想谈论的是数据集以及他们实际从哪里获取它，因为人们批评Runway使用YouTube和其他，呃，以及Open Eyes。Sora因使用YouTube而受到强烈批评。当《华尔街日报》直接询问他们时，现在已经离开公司的Miria，呃，

就像，哦，我不知道。在谈到我们实际从哪里获取数据时，我必须回复您。所以这有点可疑。我认为TechCrunch关于他们实际从哪里训练这一点的推测很有趣

因为他们说他们来自许可和公开可用的数据集的组合。TechCrunch说，引用，“我们只能猜测这意味着大量的Instagram和Facebook视频加上一些合作伙伴的东西以及许多其他东西，这些东西没有得到充分的保护，免受抓取程序的侵害，也就是所谓的公开可用。”因此，YouTube是其中一个。这将很有趣，但YouTube本身表示他们不希望人们这样做。因此，看看他们是否真的从YouTube获取东西将会很有趣

YouTube。在这个领域还有许多其他竞争对手，就像我们提到的那样，Runway、OpenAI和Runway是真正公开可用并正在制作的，你知道，他们有很多有趣的事情，他们，你知道，捐赠500万美元用于资助100部使用AI生成的视频的电影。他们正在大力推动这个行业。如果您想测试AI生成工具，Runway是一个很棒的工具。我强烈推荐

用Runway来入门，因为它公开可用。当Meta发布这个时，这很令人兴奋。我不喜欢的是，看，我们有这个很酷的功能，但你暂时还不能使用它。因此，很难知道这是否属实。谷歌过去曾通过发布一些虚假的篡改演示来让我们失望，你实际上不知道这是精心挑选的，还是他们的模型通常能够制作一些这样的东西。所以我认为我们，

Meta确实有一些优势，因为他们拥有Facebook和Instagram数据集，而其他人则没有。所以我印象非常深刻。我非常有兴趣看看他们能够继续向公众推出什么。我认为我们将从Meta那里获得一些令人印象深刻的东西，你知道，他们将花费数亿美元用于所有这些模型。

因此，如果您喜欢今天的节目，如果您在YouTube上留下评论、点赞或评论，我将不胜感激。如果您有兴趣使用AI工具赚钱，请务必加入AI Hustle School社区。链接在该描述中。我很乐意让您成为其中的一员，并与我们一起踏上使用AI工具赚钱的旅程。