SymphoMotion：カメラ動作とオブジェクトダイナミクスのジョイント制御による一貫したビデオ生成
arXiv cs.CV / 2026/4/7
📰 ニュースSignals & Early TrendsIdeas & Deep AnalysisModels & Research
要点
- SymphoMotionは、カメラ軌道とオブジェクトのダイナミクスを共同で管理する統一的なモーション制御フレームワークとして導入され、より一貫したビデオ生成を実現します。
- この手法は、明示的なカメラパスとジオメトリに配慮した手がかりを用いるCamera Trajectory Controlモジュールによって、視点遷移を安定化し、パララックスとオブジェクトの動きの曖昧さを回避します。
- Object Dynamics Controlモジュールは、2Dの視覚的ガイダンスと3Dの軌道埋め込みを組み合わせることで、深度に応じた、かつ空間的に整合したオブジェクト操作を支援します。
- さらに本論文では、屋内外の多様なシーンにわたって、対応するカメラ姿勢とオブジェクト単位の3D軌道を提供する新しい実世界データセットRealCOD-25Kを公開し、データの不足に対処します。
- 実験およびユーザースタディの結果、視覚的忠実性、カメラ制御性、オブジェクト運動の精度において、既存手法よりも性能が向上したことが報告され、プロジェクトは統一的モーション制御の新たなベンチマークを提示すると主張しています。
