如何使用Runway製作生成視訊

如何使用 Runway 製作生成視訊

由於人工智慧初創公司 Runway 推出了一套新工具,利用圖片甚至簡單的文字提示建立視訊變得更加容易。新功能包括設定要製作動畫的圖片部分,以及改進圖片生成功能。

與生成攝影不同的是,生成視訊是一個相對較新的領域。Meta 公司最近釋出了 Emu Video,這是一種人工智慧模型,可能成為未來 Instagram 或 Facebook 的一部分,但目前選擇有限。

有一些工具,如 Synthesys 和 Pictory,專注於頭像建立,還有 HeyGen,正在開發翻譯工具。不過,Runway 是一款更通用的創作工具,提供一整套視訊編輯和創作工具。

如何使用 Runway Motion Brush 製作視訊

Motion Blur 是 Runway 更新中最受矚目的功能之一。它能讓你做到 “如其所言”-使用畫筆工具建立動態效果。Runway 的預設工作方式是在整張照片上建立運動效果,但它允許你說 “只讓這一點移動”。

另一項新功能來自一系列風格預設,讓你可以像電影的藝術總監一樣,告訴它應該是什麼樣子、動作應該如何運作以及燈光效果。導演模式也進行了升級,對攝像機控制進行了更多微調。

為了看看到底能實現什麼,我決定試一試。我使用了一張用 Stable Diffusion 的 SDXL 1.0 模型製作的影象。提示是 “A cowboy walking into the sunset in the Wild West” 然後,我將其細化為 16×9,並採用超寫實的潑濺藝術風格,配以側光和彩色背景。

建立 Runway 賬戶

建立 Runway 賬戶

(Image: © Runway)

 

您可以註冊一個免費賬戶進行試用。Runway 允許你直接使用電子郵件地址註冊,或使用 Apple 或 Google 的單點登入服務。註冊完成後,你將看到 Runway 專案頁面-點選 “start with image“。

如何選擇圖片

如何選擇圖片 

(Image: © Runway)

 

要新增一張可以製作成視訊的照片,請單擊 “upload a file” 從電腦中選擇一張圖片。在我的例子中,它就是我之前生成的牛仔圖片。您也可以輸入一個簡單的文字提示,讓 Runway 為您建立圖片。

如何新增 motion brush

如何新增 motion brush

(Image: © Runway)

 

載入影象後,單擊 “Motion Brush (beta)” 按鈕。這將載入運動畫筆檢視,您只需在其中繪製想要製作動畫的區域即可。

水平、垂直和鄰近控制將提示人工智慧在你繪製的視窗內設定運動的方向和大小。單擊 “Save” 按鈕即可返回。

儲存圖片

(Image credit: Runway)

如何製作視訊

如何製作視訊

(Image: © Runway)

 

還有其他微調選項,包括如果你使用的是付費計劃,則可對影象進行升頻、去除水印和平滑幀。你還可以設定攝像頭的運動和方向。滿意後,點選 Generate 4s。這將建立您的第一個 4 秒片段。

然後,您的視訊將進入佇列,直到有時間進行處理。付費計劃優先於免費賬戶,但等待時間很少超過幾秒鐘。視訊從佇列中生成可能需要幾分鐘時間。

生成視訊佇列

(Image credit: Runway)

生成視訊

最後生成視訊

(Image: © Runway)

 

視訊生成後,你可以播放它,下載到視訊編輯器中使用,或者將它轉換成 gif(我建議使用 Adobe 的免費視訊轉換 gif 工具),甚至將它釋出到 Runway 庫中。

另一種方法是再延長 4 秒,最長可達 16 秒。要做到這一點,只需點選右下角的 “Extend 4s“。它將建立一個延長 4 秒的新例項。

如果你像我的視訊中一樣有一個行走的動作,需要更多的幀數,這將非常有用。請記住,每次擴充套件都會消耗更多賬戶中有限的免費點數。

評論留言