人工智慧公司 Luma AI 最近推出了最新:Dream Machine,一個強大的 AI 影片生成平台,讓用戶可以通過簡單的文字描述創建高品質的影片。這一新工具有望通過使複雜的影片生成變得更容易接觸,徹底改變內容創作。
什麼是 Dream Machine?
Dream Machine 將可擴展、多模態轉變器架構直接在影片上做訓練,能夠從文本提示 (prompt) 和圖片生成逼真且充滿動感的場景。
用戶可以輸入如「一隻柯基小狗在日落時追逐海灘上的球」這樣的描述提示,並在兩分鐘內收到一段忠實呈現該場景的五秒影片片段 。
復活披頭四經典專輯封面:Abbey Road
有人則是直接將披頭四經典專輯封面:Abbey Road 放進了 Dream Machine,披頭四的四位成員就這麽走過了 Abbey Road,你還可以看到鏡頭流暢的移位,以及來往的車輛。
I decided to put some famous album covers into @LumaLabsAI. Here are the results #lumadreammachine pic.twitter.com/31jZLkOf5W
— Jamian Gerard (@JamianMedia) June 16, 2024
Dream Machine 主要特點
普及性和速度:Dream Machine 在 Luma AI 的網站上免費提供,任何人都可以試驗這項技術。該平台能在 120 秒內生成 120 幀,促進快速迭代和創意發揮 。
高品質輸出:該系統在渲染特定物體、角色和環境方面表現出色,同時保持流暢的運動和連貫的敘事。這使其在娛樂、廣告和教育等各種應用中非常理想 。
開放的方式:與一些競爭對手不同,Dream Machine 向公眾開放,不僅限於選定用戶。Luma AI 計劃推出適用於流行創意軟體的 API 和插件,促進開發者和創作者的活躍社群。
Dream Machine 展現技術進步
Dream Machine 建立在 Luma AI 先前的成功基礎上,包括其文本到 3D 模型 Genie。該平台從文本生成逼真影片的能力標誌著 AI 技術的重大進步。通過將圖片與文本提示相結合,用戶可以實現更好的場景構圖和更高質量的輸出 。
Dream Machine 的未來挑戰:變形與一致性
儘管擁有令人印象深刻的功能,Dream Machine 也並非沒有局限性。用戶注意到在移動過程中物體變形的問題以及生成場景內一致文本的挑戰。Luma AI 正專注這些挑戰,並致力於持續改進 。
此外,與任何生成式 AI 技術一樣,倫理和法律問題至關重要。Dream Machine 可能被濫用於創建深偽影片 (Deep Fake) 或散布錯誤資訊,這是一個需要解決的重要問題。Luma AI 必須與業界同行一起應對這些挑戰,以平衡創新與責任 。
Dream Machine 的影響與潛力
Dream Machine 的推出標誌著民主化 AI 驅動影片生成的重要里程碑。通過降低進入門檻,Luma AI 正在啟動一波新的創意和創新浪潮。該平台在轉變行業和解鎖新表達形式方面的潛力,突顯了 AI 生成媒體的激動人心的未來 。
這篇文章 披頭四 Abbey Road 動起來了!Luma AI 推出 Dream Machine:生成式 AI 影片創作新突破 最早出現於 鏈新聞 ABMedia。