Runway 官網:https://runwayml.com
Runway 是什么?Runway 是國外一家在線視頻剪輯制作網站,成立于 2018 年。它有非常完善的在線視頻處理技術,更重要的是公司團隊一直在積極地將生成性 AI 技術應用到視頻內容制作中,致力于降低視頻創作的門檻,幫助人們輕松制作出內容強大且富有創意的視頻內容。
Runway 目前已經開發了 30 多個 AI 魔法工具,其中一部分是將 AI 圖像生成技術內置。比如我們熟悉的根據文本生成圖像、根據圖像生成風格化變體、圖像延展外繪、根據文本生成 3D 貼圖紋理、視頻局部無損放大等技術,在 Runway 內都可以實現。
另一部分則是令人驚喜的視頻處理魔法,除了我們前面提到的 3 種功能,Runway 還開發了包括動態追蹤,智能調色、智能慢鏡頭、平滑插幀及一鍵模糊人臉等功能。
“動態追蹤”即通過 AI 技術識別視頻中物體的運動軌跡,然后為其附上文字或者其他元素,這些元素會自動跟隨物體一起運動,不用手動設置軌跡。
但更進一步看,我們認為 Runway 的模式是一個 AI native tools 工廠,和字節的路徑很像。字節以推薦算法+資訊作為載體,制造了段子、新聞、貼圖、短視頻、中視頻等一系列產品,爆款程度不一。而 Runway 以“AI + 視覺創作”為載體,隨著 AI 技術每一次浪潮的迭代推出了 30 多個圖像視頻編輯工具,也有不少在業界成為爆款。
Runway 的產品哲學很清晰:一直站在 AI 技術演進的前沿,始終基于 AI 新技術的邊界,尋找視頻和圖像編輯的全新方法。他們不希望做一個更好的 Photoshop 或 Premiere,而是希望借助云計算和 AI 的力量塑造全新的工作流。、、除了視頻處理工具,Runway 也將 AI 技術與音頻處理結合起來,開發出了自動生成文字稿、一鍵去除空白音頻及智能去除背景雜音等工具。Runway 的研究團隊目前還在開發一種名為 Soundify 的音效系統,該系統利用 AI 技術先識別視頻內容,然后為之生成準確高質量的音頻,且自動對齊音頻與視頻的進度,以解決傳統視頻制作過程中尋找合適音頻困難、精準對齊音頻與視頻耗時的問題。