Stabilitet AI:s nya AI-modell kan förvandla 2D-bilder till 3D-videor

Lästid ikon 2 min. läsa


Läsare hjälper till att stödja MSpoweruser. Vi kan få en provision om du köper via våra länkar. Verktygstipsikon

Läs vår informationssida för att ta reda på hur du kan hjälpa MSPoweruser upprätthålla redaktionen Läs mer

Viktiga anteckningar

  • Stability AI har släppt Stable Video 3D.
  • Stable Video 3D genererar 3D-videor från 2D-bilder.
  • Stable Video 3D är bättre än Stable Zero123.
Stabilitet ai

Stability AI har släppt en stabil videodiffusionsbaserad generativ AI-modell som heter Stable Video 3D (SV3D) för att förenkla skapandet av 3D-videor. SV3D har två komponenter som hjälper användare att skapa 3D-videor från 2D-bilder: SV3D-u och SV3D-p.

"Idag släpper vi Stable Video 3D (SV3D), en generativ modell baserad på Stable Video Diffusion, som främjar 3D-tekniken och levererar avsevärt förbättrad kvalitet och visningskonsistens", sa företaget i en blogginlägg.

Som framhävts av Stability AI genererar SV3D-u orbitalvideor med statiska bilder som indata med oförändrad synvinkel. Å andra sidan kommer SV3D-p att hjälpa användare att generera 3D-videor med kamerarörelse. Och det kan göra det med både enstaka bilder och orbitalvyer. Företaget är dock inte nytt för generering av 3D-objekt. Den introducerade Stable Zero 123 i december förra året för det specifika syftet, men den senaste SV3D är mer kraftfull och kan överträffa andra öppen källkodsalternativ som Zero123-XL.

"Genom att anpassa vår stabila videodiffusion bild-till-video-diffusionsmodell med tillägg av kameravägskonditionering kan Stable Video 3D generera multi-view-videor av ett objekt. Användningen av videodiffusionsmodeller, i motsats till bilddiffusionsmodeller som används i Stable Zero123, ger stora fördelar i generalisering och visningskonsistens av genererade utdata”, förklarade företaget.

Stability AI:s Stable Video 3D är tillgänglig för kommersiellt bruk för dem som har Stability AI-medlemskap, som börjar på $20 per månad. För icke-kommersiell användning kan modellvikterna laddas ner på Hugging Face.