開放生成式人工智能初創公司 Stability AI 在 3 月發佈了 Stable Video 3D,是一款可以根據圖像中的物體生成出可旋轉的 3D 模型影片工具。Stability AI 在 7 月 24 日發佈了新一代的 Stable Video 4D,增添了賦予 3D 模型動作的功能。
We are pleased to announce the availability of Stable Video 4D, our very first video-to-video generation model that allows users to upload a single video and receive dynamic novel-view videos of eight new angles, delivering a new level of versatility and creativity.
In… pic.twitter.com/1YbI2W514K
— Stability AI (@StabilityAI) July 24, 2024
Stability AI 解釋 SV4D 中的 4 個維度是指寬度(x)、長度(y)、高度(z)和時間(t)。SV4D 可以將一個 3D 模型的影片轉換成可以在 8 個不同角度的多視角影片,能夠從不同視角以及不同時間點來查看這個可移動的 3D 模型。目前 SV4D 能夠在大約 40 秒內生成跨越 8 個視角的 5 幀影片,整個最佳化過程只需 20-25 分鐘。
圖片來源:Stability AI
Stability AI 表示該模型仍處於研究階段,並認為 SV4D 將會為電影製作、擴增實境、虛擬實境、電玩遊戲和其他需要物件有動態視角的行業帶來重大的創新。目前 Stable Video 4D 已經在 Hugging Face 上開放給開發者和研究人員查看和使用。
資料及圖片來源:Stability AI
相關文章:
導演占士金馬倫加入 Stability AI 董事會 盼改變電影製作方式