Runway的新一代3代AI视频生成器获得高度赞誉

时间:2024-09-22 编辑: 浏览:(963)

以其流行的生成视频工具而闻名的人工智能公司Runway推出了其最新版本Runway Gen-3。新模型仍处于alpha版本,尚未公开,通过一系列示例视频进行了展示,与目前可用的Gen-2相比,这些视频似乎在连贯性、真实性和即时遵守方面有了重大飞跃。

生成的视频,特别是那些以人脸为特征的视频,非常逼真,以至于人工智能艺术社区成员很快将其与OpenAI尚未发布但备受期待的Sora进行了比较。

一位Reddit用户在Runway Gen-3讨论帖子的投票最多的评论中写道:“即使这些人是精心挑选的,他们也已经比索拉好看了。”另一位用户回答说:“索拉有一种风格化的外观和感觉。”“这些人看起来真的很真实,是我迄今为止见过的最好的。”

“如果你把那些生成的人给我看,我会认为这是真的,”拥有66000名成员的AI视频子版块reddit上的另一条评论写道。

图片:跑道AI

“这些Runway GEN-3片段对我来说真的很有视觉吸引力——它们看起来像电影,”化名人工智能电影制作人PZF在推特上写道,他也将自己列为Runway的创意合作伙伴。“流畅、低调(以一种好的、自然主义的方式)、可信。”

除了Gen-3视频生成器,Runway还推出了一套微调工具,包括更灵活的图像和相机控制。

该公司在推特上写道:“Gen-3 Alpha将为Runway的文本到视频、图像到视频和文本到图像工具、现有的控制模式(如运动刷、高级相机控制和导演模式)以及即将推出的工具提供动力,使其能够对结构、风格和运动进行更精细的控制。”。

Runway声称,第三代是朝着实现他们创建“通用世界模型”的宏伟目标迈出的重要一步。这些模型将使人工智能系统能够构建环境的内部表示,并使用它来模拟该环境中的未来事件。这种方法将使Runway与专注于预测特定时间线中下一个可能帧的传统技术不同。

虽然《天桥骄子》尚未透露第三代的具体发布日期,但联合创始人兼首席技术官Anastability Germanidis宣布,第三代阿尔法“很快将在《天桥骄人》产品中推出”。他调侃道,这包括现有模式,以及“一些新模式,只有现在才能通过更强大的基础模型实现”。

Runway在人工智能领域的旅程始于2021年,当时他们与慕尼黑大学的研究人员合作,构建了第一个版本的稳定扩散。稳定性人工智能后来介入,抵消了该项目的计算成本,并将其转变为一种全球现象。

从那时起,Runway一直是人工智能视频生成领域的重要参与者,与Pika Labs等竞争对手并驾齐驱。然而,随着OpenAI宣布推出Sora,情况发生了变化,它超越了现有模型的能力。好莱坞演员阿什顿·库彻最近表示,像索拉这样的工具可能会严重扰乱电视和电影制作,这引起了轰动。

然而,当全世界都在等待索拉的公开发布时,新的竞争对手出现了,比如快手的克林和Luma AI的梦想机器。

中国视频生成器Kling可以以每秒30帧的速度以1080p分辨率制作长达两分钟的视频,这比现有型号有了很大的改进。这种中国型号已经上市,但用户需要提供一个中国电话号码。快手表示将发布全球版。

另一方面,Dream Machine是一个免费使用的平台,可以将书面文本转换为动态视频,还可以提供在质量、连贯性和即时遵守方面轻松击败Runway Gen-2的结果。它需要一个基本的谷歌账户,但它一直很受欢迎,几代人都需要很长时间才能出现——如果他们出现的话。

在开源领域,稳定视频扩散虽然无法产生可比的结果,但为改进和开发提供了坚实的基础。Vidu是盛数科技和清华大学开发的另一款中国人工智能视频生成器,它使用一种名为通用视觉转换器(U-ViT)的专有视觉转换模型架构,一键生成1080p分辨率的16秒视频。

至于Pika实验室,它没有发布重大更新,其能力与Runway Gen-2相当。

Decrypt联系了Runway了解有关发布日期和其他细节的进一步信息,但截至本文撰写之时尚未收到回复。

由Ryan Ozawa编辑。

最新 更多 >
  • 1 g币是什么直播平台

    本文带来了【g币是什么直播平台】内容供参考阅读,并对相关内容g币是啥进行了分析,下面就跟随币王网小编一起了解g币是什么直播平台g币是啥。 G币是什么东西? 1、G币是一种由腾讯公司发行,并且只能够在手机腾讯网上消费的虚拟货币。它储存在手机腾讯网个人账户中,可以用来支付社区内的购物和互动消费。 2、在绝地求生中G币实际上就是G-coin,这种货币也是游戏中的一种内置货币,如果大家不理解的话可以将G币