Luma Dream Machineは、テキストプロンプト付きの高品質ビデオを作成するための次世代ビデオモデルです。

今日のLuma Labs ドリームマシンを発表は、テキストプロンプトと画像に基づいて高品質でリアルなビデオを生成できるGen AIモデルです。Dream Machineビデオモデルは、マルチモーダルトランスフォーマーアーキテクチャ上に構築され、ビデオで直接トレーニングされました。Luma Labsは、Dream Machineが物理的に正確で一貫性があり、アクション満載のシーンを生成できると述べています。最も良い点は、誰でも無料でモデルを試すことができることです。 こちら.

Dream Machine は、驚くほど高速なビデオ ジェネレータです。120 フレームを 120 秒で生成できるため、より高速に反復できます。Dream Machine は、リアルでスムーズな動き、映画撮影、ドラマチックな 5 秒のショットを生成できます。また、Dream Machine は、人、動物、物体が物理世界とどのように相互作用するかを理解しているため、優れたキャラクターの一貫性と正確な物理特性を備えたビデオを作成できます。

Luma Labs は、Dream Machine が最先端の生成モデルの 100 つであると述べています。既存のいくつかの画像アニメーション モデルとは異なり、Dream Machine は真のビデオ生成モデルです。このモデルをトレーニングするために、Luma Labs は Amazon Web Services とその NVIDIA HXNUMX トレーニング インフラストラクチャである SageMaker HyperPod を使用しました。