Runway的新一代3代AI视频生成器获得高度赞誉

时间:2024-09-20 编辑: 浏览:(848)

以其流行的生成视频工具而闻名的人工智能公司Runway推出了其最新版本Runway Gen-3。新模型仍处于alpha版本,尚未公开,通过一系列示例视频进行了展示,与目前可用的Gen-2相比,这些视频似乎在连贯性、真实性和即时遵守方面有了重大飞跃。

生成的视频,特别是那些以人脸为特征的视频,非常逼真,以至于人工智能艺术社区成员很快将其与OpenAI尚未发布但备受期待的Sora进行了比较。

一位Reddit用户在Runway Gen-3讨论帖子的投票最多的评论中写道:“即使这些人是精心挑选的,他们也已经比索拉好看了。”另一位用户回答说:“索拉有一种风格化的外观和感觉。”“这些人看起来真的很真实,是我迄今为止见过的最好的。”

“如果你把那些生成的人给我看,我会认为这是真的,”拥有66000名成员的AI视频子版块reddit上的另一条评论写道。

图片:跑道AI

“这些Runway GEN-3片段对我来说真的很有视觉吸引力——它们看起来像电影,”化名人工智能电影制作人PZF在推特上写道,他也将自己列为Runway的创意合作伙伴。“流畅、低调(以一种好的、自然主义的方式)、可信。”

除了Gen-3视频生成器,Runway还推出了一套微调工具,包括更灵活的图像和相机控制。

该公司在推特上写道:“Gen-3 Alpha将为Runway的文本到视频、图像到视频和文本到图像工具、现有的控制模式(如运动刷、高级相机控制和导演模式)以及即将推出的工具提供动力,使其能够对结构、风格和运动进行更精细的控制。”。

Runway声称,第三代是朝着实现他们创建“通用世界模型”的宏伟目标迈出的重要一步。这些模型将使人工智能系统能够构建环境的内部表示,并使用它来模拟该环境中的未来事件。这种方法将使Runway与专注于预测特定时间线中下一个可能帧的传统技术不同。

虽然《天桥骄子》尚未透露第三代的具体发布日期,但联合创始人兼首席技术官Anastability Germanidis宣布,第三代阿尔法“很快将在《天桥骄人》产品中推出”。他调侃道,这包括现有模式,以及“一些新模式,只有现在才能通过更强大的基础模型实现”。

Runway在人工智能领域的旅程始于2021年,当时他们与慕尼黑大学的研究人员合作,构建了第一个版本的稳定扩散。稳定性人工智能后来介入,抵消了该项目的计算成本,并将其转变为一种全球现象。

从那时起,Runway一直是人工智能视频生成领域的重要参与者,与Pika Labs等竞争对手并驾齐驱。然而,随着OpenAI宣布推出Sora,情况发生了变化,它超越了现有模型的能力。好莱坞演员阿什顿·库彻最近表示,像索拉这样的工具可能会严重扰乱电视和电影制作,这引起了轰动。

然而,当全世界都在等待索拉的公开发布时,新的竞争对手出现了,比如快手的克林和Luma AI的梦想机器。

中国视频生成器Kling可以以每秒30帧的速度以1080p分辨率制作长达两分钟的视频,这比现有型号有了很大的改进。这种中国型号已经上市,但用户需要提供一个中国电话号码。快手表示将发布全球版。

另一方面,Dream Machine是一个免费使用的平台,可以将书面文本转换为动态视频,还可以提供在质量、连贯性和即时遵守方面轻松击败Runway Gen-2的结果。它需要一个基本的谷歌账户,但它一直很受欢迎,几代人都需要很长时间才能出现——如果他们出现的话。

在开源领域,稳定视频扩散虽然无法产生可比的结果,但为改进和开发提供了坚实的基础。Vidu是盛数科技和清华大学开发的另一款中国人工智能视频生成器,它使用一种名为通用视觉转换器(U-ViT)的专有视觉转换模型架构,一键生成1080p分辨率的16秒视频。

至于Pika实验室,它没有发布重大更新,其能力与Runway Gen-2相当。

Decrypt联系了Runway了解有关发布日期和其他细节的进一步信息,但截至本文撰写之时尚未收到回复。

由Ryan Ozawa编辑。

最新 更多 >
  • 1 binancecom官方最新下载v2.38.2

    binancecom官方最新下载成立于2019年,总部位于加拿大。在历经反复的打磨后,当前所拥有的数字资产交易系统、配套钱包安全密钥、全球实体商户数字货币支付、线上线下汇兑银行等成熟的产品线,在全球多个国家拥有线下线上的银行/支付系统,为全球用户提供了区块链映射生活便利的支撑。 binancecom官方最新下载特点详情 1.通证经济的成功实践 2.专业的理财,还提供专业的理财服务帮助,让理财可以更