← WORLD Δトップへ

StreamRender-H3、コードで制御する世界にリアルタイム拡散レンダリングを組み合わせる構成を提示

ソフトウェア未確認更新:

StreamRender-H3は、コードで構築したゲームエンジンと拡散型の動画レンダラーを組み合わせる構成を提示した。
地図や物理、入力への応答はコード側に残し、最終映像を動画モデルが生成するという。

StreamRender-H3、コードで制御する世界にリアルタイム拡散レンダリングを組み合わせる構成を提示

ゲーム状態はコード、見た目は動画モデル

プロジェクトの研究ブログによると、StreamRender-H3はブラウザー上のレースゲームのデモで、ゲームエンジンがゲーム状態を更新し、意味フレームを動画モデルへストリーミングする。
記事は、レースデモでは2回のノイズ除去ステップで、プレイの継続中にレンダラーが写実的な動画をチャンク単位で生成すると説明している。
20場面について各1分間の連続例を示し、表示される全ピクセルは、エンジンによる従来の最終3D描画ではなくストリーミングレンダラーから生成されるとしている。

掲載内容には、比較可能な従来システムや独立した性能ベンチマークは示されていない。

このプロジェクトは、世界の状態を制御するコードで構築したゲームエンジンと、意味フレームから表示映像を生成するストリーミング拡散レンダラーを組み合わせる構成を説明した。
同一モデルで20場面を各1分間連続表示するショーケースも提示している。

報告内容が成り立つなら、開発者はゲームのロジックを明示的かつ再現可能な形で保持しながら、参照画像とプロンプトで世界の視覚スタイルを変えられることになる。
ただし、リアルタイム性能やより広い実用展開は、提供された資料だけでは独立に確認されていない。

情報元