AI視頻卷瘋了!SORA勁敵“造夢機器”它來了

2024-06-21 18:40:20    編輯: robot
導讀 在當前的AI視頻領域,競爭壓力可以說是與日俱增。盡管OpenAI的旗下的Sora模型萬衆矚目,但其遲遲未能开放使用,許多競爭對手紛紛抓住機會推出自己的創新產品。近日,舊金山初創公司LumaAI就在這...

在當前的AI視頻領域,競爭壓力可以說是與日俱增。盡管OpenAI的旗下的Sora模型萬衆矚目,但其遲遲未能开放使用,許多競爭對手紛紛抓住機會推出自己的創新產品。近日,舊金山初創公司LumaAI就在這種市場環境下打出一手王牌,推出了名爲DreamMachine的新一代AI視頻生成模型,人人免費可用,引發業界廣泛關注。

什么是DreamMachine

這是一款生成式人工智能產品,主要用於將文本或圖片轉化爲動態視頻。得益於LumaAI公司在开源時使用了Transformer模型樣本,DreamMachine不僅能夠快速理解文本指令,准確識別圖片,並且能夠生成物理上准確、一致且充滿事件的高幀率視頻。

免費高效的AI視頻生成工具

通過與Runway和Pika的生成效果進行對比(兩者都是當下熱門的AI視頻生成平台)我們可以更直觀地感受到DreamMachine 的優點。在處理包含人物的場景時,Runway和Pika生成的動態微小有限,人物動作也很遲緩;而DreamMachine 的動態則非常明顯,處理人物行走姿態時非常流暢自然,甚至還能自動補上一些新的畫面。

下面這個黑白色調的仰拍鏡頭,人物動作自然絲滑、一氣呵成,裙擺飛起時的幅度雖然有些誇張,但還在可接受範圍內。最重要的是動作符合自然規律,沒有出現「手臂融化」、「膝蓋外折」

雖然目前的免費試用版本生成視頻時長只有5秒,遠不及Sora等模型的60s的長度,但是視頻生成速度相當驚人。據官方所稱DreamMachine模型能在120秒內創造120幀的視頻,而據我們的使用體驗來看,一個120幀的視頻生成時間在3分鐘左右,可以說是相當高效了。

技術優化與挑战

雖然DreamMachine的優點衆多,但初創公司LumaAI表示也面臨着一些挑战,例如視角轉換時的物體變形出錯和動物運動的不自然。又或是關鍵詞識別不到位所產生的鬼影....不過LumaAI也是相當坦誠,直接把很多有缺陷的demo放在了官網上,同時也表示他們正在積極優化模型,以便後續提供更加完善的用戶體驗。

隨着AI技術的不斷進步,視頻生成工具如DreamMachine預示着創意表達和內容生產將變得更加多元和動態,這也爲視頻創作者提供了一個前所未有的新平台,大大降低了視頻制作的技術門檻和成本。不過AI的興起對於電腦硬件的要求也是與日劇增,擁有一張性能強勁的圖形卡自然是再好不過了,所以,影馳在這裏向大家推薦——影馳RTX 4070Ti SUPER金屬大師!

無光設計,全金屬外殼!16GB超大顯存輕松滿足各大AI應用的使用需求,革命性的TensorRT加速更是能夠提升你的战鬥力,讓你秒變效率战神!



標題:AI視頻卷瘋了!SORA勁敵“造夢機器”它來了

地址:https://www.utechfun.com/post/387636.html

鄭重聲明:本文版權歸原作者所有,轉載文章僅為傳播信息之目的,不構成任何投資建議,如有侵權行為,請第一時間聯絡我們修改或刪除,多謝。

猜你喜歡