Luma AI 免費生成逼真影片實測,用中文指令或圖片創造短片教學



這幾天很熱門的 AI 工具是:「 Luma dream machine」,一款 AI 生成 5 秒鐘動態影片的線上服務,並且號稱有逼真的物理反應、電影運鏡和人物動作,可類比之前 Open AI 公布的 Sora ,不過 Sora 雖然效果驚人(還可生成一分鐘影片),卻尚未對一般用戶開放。而 「 Luma dream machine」 已經可以讓一般用戶直接試用,提供每天最多生成 10 則短片,每個月最多生成 30 則影片的免費帳號額度。

如果想要試試看 AI 直接生成逼真影片效果,那麼「 Luma dream machine」會是目前能夠讓我們馬上可以體驗看看的選擇,在電影運鏡與真實物理效果上,也確實比 Pika 之類 AI 生成動態畫面的成品更突出。




我實際測試了一輪(用完一個月 30 個影片額度),跟大家分享一些從「一般使用者角度」出發的簡單心得與操作教學。(一般使用者的意思是,測試看看能不能用最直覺的方式,生成有效的影片。)

Luma AI 網站上宣稱的幾個特色為:

  • 免費生成 5秒鐘短片。
  • 符合物理引擎,像是真實世界模擬。
  • 滑順電影感的運鏡。
  • 逼真的人物互動。

而我針對上面宣傳的幾個特色,實際去測試後,目前的心得是:

  • 大自然、城市風景短片,用電影般運鏡呈現動態場景,基本上沒有問題,很多時候效果很不錯。
  • 如果人、物是在背景行動(例如路人),或是做簡單的動作,也沒大問題,效果可接受。
  • 但人物如果要做太精細的動作,在物理反應或畫面細節上就容易出錯。(這也合理)
  • 對中文或英文的指令理解,似乎不一定 100% 符合指令中描述的細節。
  • 當然,或許可以透過「設計更精準的指令」來解決上述問題,或是多次生成找到更好的結果,這邊我就暫時沒有繼續嘗試下去。

例如下面這個雨中場景的短片(可點擊這個連結,觀看短片播放),就可以注意到背景與路人基本上穩定,但前景的兩個主角雖然有擬真的跑步動作但也有明顯的錯誤,而指令雖然是英文但也沒有 100% 符合。




下面是我實際測試的幾段短片的合輯,可以看看從一般使用者角度出發,生成的影片可能出現的各種成功、失敗情況。





Luma AI 用文字指令生成影片:


無論如何,我們都可以註冊一個免費帳號,試試看「https://lumalabs.ai/dream-machine」。

接著在指令列,輸入對於影片場景、動作的描述。可輸入中文指令,也可輸入英文指令。透過「 Enhance prompt 」可以幫助指令最佳化,但也可能是因為這樣而對於中英文指令似乎都無法 100% 掌握。




等待一小段時間,就可以根據我們的文字指令,生成 5 秒中的短影片。

在影片上點擊右鍵,選擇下載,就能獲得 MP4 檔案。

下面這段山谷溪流小船的影片(點擊連結播放)效果就不錯。





Luma AI 用照片生成短片:

另外一個很適合「 Luma dream machine」的使用方式,是把經典圖片、真實照片中的人物變成電影短片場景。

例如我可以在指令列先上傳一張獅子照片,然後輔助指令描述,讓 AI 根據照片來生成。




這時候 Luma AI 會根據照片內的實景、人物生成更多的影格,最後串聯出一則電影短片。

例如這則獅子走過草地的照片變成的電影短片(點擊觀看),草地的場景被自動延伸生成,獅子也從側面多出了正面,雖然多少有些不自然的地方,但也足夠讓人驚艷。




我還下載了一張第一次世界大戰時的黑白照片,嘗試讓 AI 把照片中的軍隊動起來。




最後, Luma AI 自動延伸了房屋後的場景,並讓軍隊往前前進(點擊觀看影片),雖然,影片一開始的動作還好,但很明顯的影片後段前進的步伐非常不自然(人物動作依然比較容易出錯)。




在 Open AI 的 Sora 尚未開放前,就讓我們來試試看「 Luma dream machine」,體驗一下 AI 生成影片的效果吧!

對 AI 工具有興趣的朋友,還可參考:



大家好,我是電腦玩物站長 Esor ,歡迎參考我的系列課程與書籍:


我的電子郵件是 esorhjy@gmail.com ,如果你有任何關於筆記術、時間管理、提升工作效率的問題,歡迎寫信跟我討論。

(歡迎社群分享。但全文轉載請來信詢問,禁止修改上述內文,禁止商業使用,並且必須註明來自電腦玩物原創作者 esor huang 異塵行者,及附上原文連結:Luma AI 免費生成逼真影片實測,用中文指令或圖片創造短片教學

留言

這個網誌中的熱門文章

全家沖印、 7-11 列印照片誰好用?立可得與 ibon教學+比較表

Google Maps 我的地圖完全教學!規劃自助旅行攻略

Dropbox 雲端資料同步軟體能用來幹嘛?10個我最常被滿足需求

AI 如何與寫筆記結合?我最常利用的 6 種提升筆記效率功能與案例

Facebook login out 遠端登出臉書帳號,安全清除遠端電腦密碼

Slack 完整教學與上手心得:找到正確的團隊溝通之道

Google NotebookLM 免費中文 AI 筆記實例教學,老師、學生、創作者利器

為什麼大家愛用 Trello ?最佳整理教學讓事情井然有序

Draw.io 中文線上製作流程圖首選!專業水準完全免費