如何使用Runway制作生成视频

由于人工智能初创公司 Runway 推出了一套新工具，利用图片甚至简单的文字提示创建视频变得更加容易。新功能包括设置要制作动画的图片部分，以及改进图片生成功能。

与生成摄影不同的是，生成视频是一个相对较新的领域。Meta 公司最近发布了 Emu Video，这是一种人工智能模型，可能成为未来 Instagram 或 Facebook 的一部分，但目前选择有限。

有一些工具，如 Synthesys 和 Pictory，专注于头像创建，还有 HeyGen，正在开发翻译工具。不过，Runway 是一款更通用的创作工具，提供一整套视频编辑和创作工具。

如何使用 Runway Motion Brush 制作视频

Motion Blur 是 Runway 更新中最受瞩目的功能之一。它能让你做到 “如其所言”-使用画笔工具创建动态效果。Runway 的默认工作方式是在整张照片上创建运动效果，但它允许你说 “只让这一点移动”。

另一项新功能来自一系列风格预设，让你可以像电影的艺术总监一样，告诉它应该是什么样子、动作应该如何运作以及灯光效果。导演模式也进行了升级，对摄像机控制进行了更多微调。

为了看看到底能实现什么，我决定试一试。我使用了一张用 Stable Diffusion 的 SDXL 1.0 模型制作的图像。提示是 “A cowboy walking into the sunset in the Wild West” 然后，我将其细化为 16×9，并采用超写实的泼溅艺术风格，配以侧光和彩色背景。

创建 Runway 账户

(Image: © Runway)

 

您可以注册一个免费账户进行试用。Runway 允许你直接使用电子邮件地址注册，或使用 Apple 或 Google 的单点登录服务。注册完成后，你将看到 Runway 项目页面-点击 “start with image“。

如何选择图片

(Image: © Runway)

 

要添加一张可以制作成视频的照片，请单击 “upload a file” 从电脑中选择一张图片。在我的例子中，它就是我之前生成的牛仔图片。您也可以输入一个简单的文本提示，让 Runway 为您创建图片。

如何添加 motion brush

(Image: © Runway)

 

加载图像后，单击 “Motion Brush (beta)” 按钮。这将加载运动画笔视图，您只需在其中绘制想要制作动画的区域即可。

水平、垂直和邻近控制将提示人工智能在你绘制的窗口内设置运动的方向和大小。单击 “Save” 按钮即可返回。

(Image credit: Runway)

如何制作视频

(Image: © Runway)

 

还有其他微调选项，包括如果你使用的是付费计划，则可对图像进行升频、去除水印和平滑帧。你还可以设置摄像头的运动和方向。满意后，点击 Generate 4s。这将创建您的第一个 4 秒片段。

然后，您的视频将进入队列，直到有时间进行处理。付费计划优先于免费账户，但等待时间很少超过几秒钟。视频从队列中生成可能需要几分钟时间。

(Image credit: Runway)

生成视频

(Image: © Runway)

 

视频生成后，你可以播放它，下载到视频编辑器中使用，或者将它转换成 gif（我建议使用 Adobe 的免费视频转换 gif 工具），甚至将它发布到 Runway 库中。

另一种方法是再延长 4 秒，最长可达 16 秒。要做到这一点，只需点击右下角的 “Extend 4s“。它将创建一个延长 4 秒的新实例。

如果你像我的视频中一样有一个行走的动作，需要更多的帧数，这将非常有用。请记住，每次扩展都会消耗更多账户中有限的免费点数。