Runway 的 Gen-3 Alpha：最新 AI 视频生成模型

6月17日，Runway 发布了 Gen-3 Alpha，并于今天开放使用。我特意充了个高级会员，试用了一下。

使用体验

Prompt 非常讲究，还有一个官方说明：https://help.runwayml.com/hc/en-us/articles/30586818553107-Gen-3-Alpha-Prompting-Guide。

Prompt 的格式如下：

[camera movement]: [establishing scene]. [additional details].

我先试试这个：

Low angle static shot: The camera is angled up at a handsome man wearing all orange as he stands in a tropical rainforest with colorful flora. The dramatic sky is overcast and gray.

生成速度还可以：

效果视频（还是有一些各种 bug）：

模型介绍

Gen-3 Alpha 由 Runway 在全新基础设施上进行大规模多模态训练。相比 Gen-2，Gen-3 Alpha 在保真度、一致性和运动表现上有了重大提升，是构建通用世界模型的一个重要步骤。

Subtle reflections of a woman on the window of a train moving at hyper-speed in a Japanese city.

Gen-3 Alpha 通过对视频和图像的联合训练，将支持 Runway 的文本到视频、图像到视频和文本到图像工具，现有的控制模式如 Motion Brush、Advanced Camera Controls、Director Mode 以及即将推出的更精细控制结构、风格和运动的工具。

Gen-3 Alpha 将带有一系列新保护措施，包括新的改进版内部视觉审核系统和 C2PA 溯源标准。

Handheld tracking shot, following a red balloon floating above the ground in an abandoned street.

特点

• 精细的时间控制：Gen-3 Alpha 经过高度描述性、时间密集的字幕训练，能够实现富有创意的过渡和场景元素的精确关键帧控制。

A tsunami coming through an alley in Bulgaria, dynamic movement.

• 逼真的人类角色：Gen-3 Alpha 擅长生成表现力丰富的人物角色，涵盖广泛的动作、手势和情感，为讲故事开辟了新的机会。

• 为艺术家而生：训练 Gen-3 Alpha 是由跨学科团队的研究科学家、工程师和艺术家共同合作完成的。它旨在解读各种风格和电影术语。

View out a window of a giant strange creature walking in a rundown city at night, one single street lamp dimly lighting the area.

行业定制化

作为 Gen-3 系列模型的一部分，Runway 与领先的娱乐和媒体组织合作，创建了定制版本的 Gen-3 模型。Gen-3 模型的定制化允许更具风格控制和一致性的角色，并针对特定的艺术和叙事需求进行优化。（还是得靠定制化来赚钱。。）