生成式 AI 正在從圖片、文字升級到短影音時代。
最近一段時間,AI 作畫的水準正在突飛猛進。在 Midjourney、Adobe Firefly 不斷布局、應用圖片生成技術的同時,有創業公司已經把眼光放到了影片生成上。
本周,推特上出現了不少新 AI 工具生成的短影音,引發了人們關注。這其中既有 AI 生成的「賽博龐克電影預告片」。
也有自然風格的動植物景象:
即使是拿手機去拍攝素材,估計都需要花費不少功夫,然而使用一個叫 Morph Studio 的 AI 來生成,從文字轉換成影片只需要幾分鐘。在社群網路上,試過它的人紛紛點荒,有人還表示或許過不了多久,小成本的獨立電影就要使用 AI 技術了。
對於使用者來說,這一輪 AI 生成影片的工具和此前「要革命繪畫圈」的 AI 畫圖類似 —— 都是只需要幾個提示詞或是一段形容的語句,就可以生成出符合要求的內容,你不需要有多少攝影或繪畫基礎。簡而言之就是毫無創作門檻。
目前,這款工具正在開放免費測試:https://discord.com/invite/2ffQj2UmSP
在 Morph 的官方 Discord 上,我們看到不少人正在嘗試生成各種各樣的內容:
其中雖然仍然存在一些 AI 風格的魔性圖像,但高品質影片的內容已有不少,看起來很接近 AI 畫圖的水準。
AI 影片生成的領域,現在有不少創業公司正躍躍欲試。上個月 Runway 的第二代模型因為可以「從零開始生產影片」紅了一把,而在學界,最近 AI 頂會上也不斷有使用原圖、提示詞、草圖甚至筆劃指令的影片生成方法出現。看起來這一領域距離大規模實用化已經不遠了。
前幾天有人對幾家公司影片生成的生成效果進行了對比,這幾個工具使用的都是接近自然語言的提示詞。
看起來,用同樣的 prompt製作影片,Morph Studio 的效果相對而言是最好的。不論是描繪人物、動物、機械,真實、做舊還是二次元風格,Morph Studio 都能更忠實地反映人們給出的指令,生成更有邏輯且具有一致性的畫面,影片內容動作的幅度也相比其他產品更加明顯。
有業內人士評價,其產品輸出內容的準確率(成功率)一直是領先於 runway 等產品的。此外,Morph的工程師還透露,在最近的一次更新之中,他們會大幅提升模型的單次生成時長,以獲得更好的生成效果。
引發人們關注的 Morph Studio,目前還處於創業的早期階段。這家公司成立於今年 4 月,在 5 月剛剛完成了價值數百萬美元的種子輪融資。
Morph Studio 應用的方法是純文字到圖像,不借助任何文字以外的資訊對影片進行生成,Morph團隊的影片生成模型是基於擴散模型訓練的。該模型能確保畫面的一致性和文字生成的影片的準確性。
從 AI 畫圖到 AI 生成影片,生成模型產出的內容增加了一整個維度。現在,我們可以透過 AI 演繹出一些簡單的情節片段,在最紅短影音APP中從事創作。這種技術在內容創作、應用場景、甚至商業模式上也可以有很多想像。
而對於 Morph Studio 來說,他們瞄準的是短影音這個應用方向。工程師們表示,目前該公司的目標是做一款面向消費級的社群產品,會先從discord進行技術與需求的驗證。
此外,Morph 也計畫透過網路社群尋找使用者喜歡的主題和社群文化,針對不同主題和內容進行深挖,最終打造 Morph 自己的影片社群。
前不久,AI 畫圖引發了繪畫社群的一場小小的革命,AI 影片能為我們做些什麼?這讓我們不由得期待起來。
加入電腦王Facebook粉絲團