所有語言
分享
1 月 18 日,視頻生成平台 Runway 宣布推出多重運動畫筆功能,效果驚艷,堪稱視頻生成方面的殺手級升級。
去年 11 月份,Runway 宣布旗下視頻生成模型 Gen-2 上線“運動畫筆”功能。通過使用運動筆刷,用戶只需在一張圖片中塗抹一個區域或主體,併為其選擇一個方向、添加運動強度,原本靜止的圖片便會受控動起來,就像被施了魔法一樣。運動畫筆功能很快在創作者社區掀起了一陣圖生視頻的熱潮。
視頻生成正在成為繼圖片生成之後的下一個 AIGC 風口,催生出一批優秀的AI初創公司,例如 AI 視頻生成公司 Pika,這個僅 4 人的團隊僅用半年就把該公司估值做到超過 2 億美元。
但在 AI 視頻生成領域, Runway絕對屬於第一梯隊,不僅發力早,而且產品迭代速度迅速,例如剛剛推出的多重運動畫筆功能。此舉增強了 Runway 在快速增長的視頻生成市場的地位,其中包括 Pika Labs 和 Leonardo AI 等參与者。
該功能允許用戶通過獨立的動作控制視頻創作的多個區域。 在之前發布的運動畫筆的基礎上,這個新工具允許用戶在輸入圖像中繪製最多五個獨特的主題或區域,並與其他區域分開操縱它們的運動。 多重運動畫筆為 AI 視頻創建和編輯添加了額外的創意控制。
這一進步對於商用 AI 生成視頻項目而言尚屬首次:現階段市場上的所有其他競爭對手產品都只是使用 AI 為整個圖像或選定的突出显示區域(而不是多個區域)添加運動。
其實在今年早些時候,多重運動畫筆功能已經通過 Runway 的創意合作夥伴計劃進行了預覽,該計劃為精選的高級用戶提供無限計劃和預發布功能的獎勵。 但現在 Gen-2 的每個用戶都可以使用它,該模型已經為創意視頻製作人提供了 30 多種工具。
免費體驗鏈接:https://app.runwayml.com/ai-tools/ai-tools/gen-2
多重運動畫筆的想法很簡單:通過允許用戶向選擇的區域添加獨立的動作,讓用戶更好地控制他們生成的 AI 視頻。
這可以是任何東西:鳥兒在雪中整理羽毛,火箭發射中,多個檯球在運動,汽車在雪山下行駛等等。
火山噴發:岩漿鄉下流淌,濃煙向上噴涌
Gen-2 模型最初於 2023 年 3 月推出,引入了基於文本、視頻和圖像的生成,是對僅支持基於視頻的輸出的 Gen-1 的重大升級。
然而,在初始階段,Gen-2 生成的視頻剪輯最多只有四秒。 去年 8 月份,Runway 將剪輯延長至最長 18 秒。
它還推出了“導演模式”等附加功能,允許用戶在生成的視頻中選擇攝像機移動的方向和強度/速度,以及選擇要製作的視頻風格的選項 - 從 3D 卡通到 渲染到電影到廣告。
在 AI 視頻生成領域,Runway 與 Pika Labs 等公司正在展開激烈競爭,後者最近推出了用於視頻生成的網絡平台 Pika 1.0,以及 Stability AI 推出的穩定視頻擴散模型。
多重運動筆刷的推出增強了 Runway 提供的用於控制 Gen-2 型號視頻輸出的工具集,這使得 Runway 在這場視頻生成競爭中領先一步。
參考資料:
https://venturebeat.com/ai/runway-gen-2-adds-multiple-motion-controls-to-ai-videos-with-multi-motion-brush/
https://twitter.com/iam_chonchol/status/1747868619588133251