Stability AI의 새로운 AI 모델은 2D 이미지를 3D 비디오로 변환할 수 있습니다.

Stability AI는 3D 비디오 제작을 단순화하기 위해 Stable Video 3D(SV3D)라는 Stable Video Diffusion 기반 생성 AI 모델을 출시했습니다. SV3D에는 사용자가 3D 이미지에서 2D 비디오를 생성하는 데 도움이 되는 두 가지 구성 요소인 SV3D-u와 SV3D-p가 있습니다.

회사는 "오늘 우리는 Stable Video Diffusion을 기반으로 한 생성 모델인 Stable Video 3D(SV3D)를 출시하여 3D 기술 분야를 발전시키고 크게 향상된 품질과 뷰 일관성을 제공합니다"라고 밝혔습니다. 블로그 게시물.

Stability AI가 강조한 것처럼 SV3D-u는 시점이 변경되지 않은 상태에서 정적 이미지를 입력으로 사용하여 궤도 비디오를 생성합니다. 반면 SV3D-p는 사용자가 카메라 모션으로 3D 비디오를 생성하는 데 도움이 됩니다. 그리고 단일 이미지와 궤도 뷰를 모두 사용하여 그렇게 할 수 있습니다. 그러나 이 회사는 3D 개체 생성에 새로운 것이 아닙니다. 특정 목적을 위해 지난 123월 Stable Zero 3을 출시했지만 최신 SV123D는 더욱 강력하며 ZeroXNUMX-XL과 같은 다른 오픈 소스 대안보다 성능이 뛰어납니다.

“Stable Video 3D는 카메라 경로 조절 기능을 추가하여 Stable Video Diffusion 이미지-비디오 확산 모델을 적용함으로써 물체의 다중 뷰 비디오를 생성할 수 있습니다. Stable Zero123에서 사용되는 이미지 확산 모델과 달리 비디오 확산 모델을 사용하면 생성된 출력의 일반화 및 뷰 일관성 측면에서 큰 이점을 제공합니다.”라고 회사는 설명했습니다.

Stability AI의 Stable Video 3D는 한 달에 20달러부터 시작하는 Stability AI 멤버십을 보유한 사람들에게 상업적 용도로 제공됩니다. 비상업적 용도의 경우 Hugging Face에서 모델 가중치를 다운로드할 수 있습니다.