要旨: ラディアンス場は、3Dシーン再構成のための強力な手法として登場してきました。しかし、パースペクティブカメラの視野が狭いことが原因で、信頼できるカメラキャリブレーションと再構成に必要な視点のカバー範囲と特徴対応が制限されるため、手軽な撮影は依然として困難です。市販の360^\circカメラは、同じ撮影の手間に対してパースペクティブカメラよりも大幅に広いカバー範囲を提供しますが、既存の360^\circ再構成手法は、特別な撮影プロトコルや前処理手順を必要とし、それがラディアンス場の約束である「3Dシーンを楽に撮影して再構成できるワークフロー」を損なっています。そこで本論文では、360^\circカメラの生データ撮影から直接3Dシーンを再構成するための実用的なパイプラインを提案します。私たちは、特別な撮影プロトコルや前処理を一切必要とせず、再構成エラーとしてよく見られる原因の1つである、すべての360^\circ画像に写り込む人間のオペレータに対しても頑健です。評価を容易にするために、生のデュアル魚眼画像として撮影されたシーンからなる多層(マルチティア)のデータセットを導入し、頑健な手軽な360^\circ再構成のベンチマークを確立します。提案手法は、360^\circカメラ向けのバニラな3DGSだけでなく、同じ撮影からパースペクティブカメラをシミュレートした頑健なパースペクティブのベースラインに対しても大幅に上回り、手軽な再構成における360^\circ撮影の利点を示します。追加結果は以下で公開しています: https://theialab.github.io/fullcircle
FullCircle:カジュアルな360°撮影からの手間いらず3D再構成
arXiv cs.CV / 2026/3/25
📰 ニュースIdeas & Deep AnalysisModels & Research
要点
- 本論文では、「FullCircle」と呼ばれる、特別な撮影プロトコルや前処理を必要としない、生の360°カメラ映像を用いた3Dシーン再構成のための実用的な放射輝度場(radiance-field)ベースのパイプラインを提示する。
- 既存手法の重要な制約に対処するため、360°カメラが持つより広い撮影範囲を活用し、視点カバー範囲と特徴対応の精度を高めることで、信頼性の高い再構成を実現する。
- 本手法は、360°画像で観察されがちな実世界の一般的な失敗要因である「操作者(人)が映り込む」状況に対して頑健であることを目指して設計されている。
- 公平な比較と評価のため、著者らは、カジュアルな360°再構成のベンチマークとして、生のデュアルフィッシュアイ画像で撮影された複数段階(マルチティア)のデータセットを公開している。
- 結果は、このアプローチが、マッチした撮影条件の下で、360°カメラに適応したバニラな3Dガウススプラッティングおよび、シミュレーションした透視カメラのベースラインの双方を大きく上回ることを示している。
