Stabilitet AI:s nya AI-modell kan förvandla 2D-bilder till 3D-videor
2 min. läsa
Publicerad den
Läs vår informationssida för att ta reda på hur du kan hjälpa MSPoweruser upprätthålla redaktionen Läs mer
Viktiga anteckningar
- Stability AI har släppt Stable Video 3D.
- Stable Video 3D genererar 3D-videor från 2D-bilder.
- Stable Video 3D är bättre än Stable Zero123.
Stability AI har släppt en stabil videodiffusionsbaserad generativ AI-modell som heter Stable Video 3D (SV3D) för att förenkla skapandet av 3D-videor. SV3D har två komponenter som hjälper användare att skapa 3D-videor från 2D-bilder: SV3D-u och SV3D-p.
"Idag släpper vi Stable Video 3D (SV3D), en generativ modell baserad på Stable Video Diffusion, som främjar 3D-tekniken och levererar avsevärt förbättrad kvalitet och visningskonsistens", sa företaget i en blogginlägg.
Som framhävts av Stability AI genererar SV3D-u orbitalvideor med statiska bilder som indata med oförändrad synvinkel. Å andra sidan kommer SV3D-p att hjälpa användare att generera 3D-videor med kamerarörelse. Och det kan göra det med både enstaka bilder och orbitalvyer. Företaget är dock inte nytt för generering av 3D-objekt. Den introducerade Stable Zero 123 i december förra året för det specifika syftet, men den senaste SV3D är mer kraftfull och kan överträffa andra öppen källkodsalternativ som Zero123-XL.
"Genom att anpassa vår stabila videodiffusion bild-till-video-diffusionsmodell med tillägg av kameravägskonditionering kan Stable Video 3D generera multi-view-videor av ett objekt. Användningen av videodiffusionsmodeller, i motsats till bilddiffusionsmodeller som används i Stable Zero123, ger stora fördelar i generalisering och visningskonsistens av genererade utdata”, förklarade företaget.
Stability AI:s Stable Video 3D är tillgänglig för kommersiellt bruk för dem som har Stability AI-medlemskap, som börjar på $20 per månad. För icke-kommersiell användning kan modellvikterna laddas ner på Hugging Face.