Il nuovo modello AI di Stability AI può trasformare le immagini 2D in video 3D

Stability AI ha rilasciato un modello di intelligenza artificiale generativa basato su Stable Video Diffusion chiamato Stable Video 3D (SV3D) per semplificare la creazione di video 3D. L'SV3D ha due componenti che aiutano gli utenti a generare video 3D da immagini 2D: SV3D-u e SV3D-p.

"Oggi rilasciamo Stable Video 3D (SV3D), un modello generativo basato su Stable Video Diffusion, che fa avanzare il campo della tecnologia 3D e offre qualità e coerenza di visualizzazione notevolmente migliorate", ha affermato la società in un post sul blog.

Come evidenziato da Stability AI, SV3D-u genera video orbitali con immagini statiche come input mantenendo il punto di vista invariato. D'altra parte, SV3D-p aiuterà gli utenti a generare video 3D con il movimento della fotocamera. E può farlo utilizzando sia immagini singole che viste orbitali. L'azienda, tuttavia, non è nuova alla generazione di oggetti 3D. Ha introdotto Stable Zero 123 lo scorso dicembre per quello scopo specifico, ma l'ultimo SV3D è più potente e può sovraperformare altre alternative open source come Zero123-XL.

“Adattando il nostro modello di diffusione immagine-video Stable Video Diffusion con l’aggiunta del condizionamento del percorso della telecamera, Stable Video 3D è in grado di generare video multi-vista di un oggetto. L’uso di modelli di diffusione video, a differenza dei modelli di diffusione delle immagini utilizzati in Stable Zero123, offre importanti vantaggi in termini di generalizzazione e coerenza di visualizzazione degli output generati”, ha spiegato l’azienda.

Stable Video 3D di Stability AI è disponibile per uso commerciale per coloro che hanno un abbonamento Stability AI, che parte da $ 20 al mese. Per uso non commerciale, i pesi dei modelli possono essere scaricati su Hugging Face.