Stability AI的新AI模型可以將2D影像變成3D視頻

Stability AI 發布了一種基於穩定視訊擴散的生成 AI 模型，稱為穩定視訊 3D (SV3D)，以簡化 3D 視訊的創建。 SV3D 有兩個元件可以幫助使用者從 3D 影像產生 2D 視訊：SV3D-u 和 SV3D-p。

該公司在聲明中表示：「今天我們發布了穩定視訊3D (SV3D)，這是一種基於穩定視訊擴散的生成模型，推動了3D 技術領域的發展，並大大提高了品質和視圖一致性。” 博客文章.

正如 Stability AI 所強調的那樣，SV3D-u 會產生軌道視頻，以靜態影像作為輸入，視點保持不變。另一方面，SV3D-p將幫助用戶產生具有攝影機運動的3D視訊。它可以使用單一圖像和軌道視圖來實現這一點。然而，該公司對於 3D 物件生成並不陌生。去年 123 月，它為此特定目的推出了 Stable Zero 3，但最新的 SV123D 功能更強大，可以超越 ZeroXNUMX-XL 等其他開源替代品。

「透過調整我們的穩定視訊擴散影像到視訊擴散模型並添加相機路徑調節，穩定視訊 3D 能夠產生物件的多視圖視訊。與 Stable Zero123 中使用的影像擴散模型相比，視訊擴散模型的使用在生成輸出的泛化和視圖一致性方面提供了重大優勢，」該公司解釋道。

Stability AI 的 Stable Video 3D 可供擁有 Stability AI 會員的商業用途使用，起價為每月 20 美元。對於非商業用途，模型權重可以在 Hugging Face 上下載。