雨滴と映り込みの統一除去:新たなベンチマークと新規パイプライン

arXiv cs.CV / 2026/3/18

📰 ニュースModels & Research

要点

  • 本論文は、雨滴と映り込みの統一除去(UR^3)を定式化し、RainDrop and ReFlection(RDRF)という実写データセットを導入します。これはこの問題の新たなベンチマークを提供します。
  • 拡散モデルに基づくフレームワーク(DiffUR^3)を提案し、生成的事前知識を活用して雨滴と映り込みを同時に除去します。
  • 大規模な実験により、RDRFベンチマークと現実世界の難易度の高い画像において、最先端の性能を示します。
  • RDRFデータセットとコードは、論文が受理された時点で公開される予定です。

概要: 雨天にガラス表面やフロントガラスを通して画像を撮影する際、雨滴と反射が頻繁に同時発生し、撮影された画像の視認性を著しく低下させる。この現実的な問題は十分に注目されておらず、緊急に解決する必要がある。従来の de-raindrop、de-reflection、およびオールインワンモデルは、この複合的な劣化に対処できていなかった。この目的のため、我々は初めて雨滴と反射の統一除去タスク(UR^3)を正式に定義し、現実撮影データセットである RainDrop and ReFlection(RDRF)を構築した。これにより、実質的に高品質で多様な画像ペアを備えた新しいベンチマークが提供される。次に、この難題に対処するため、いくつかのターゲット設計を備えた新しい拡散ベースのフレームワーク(すなわち DiffUR^3)を提案する。強力な生成事前知識を活用することにより、DiffUR^3 は両方の劣化を見事に除去する。広範な実験により、提案手法が自らのベンチマークと、難易度の高い野外画像においても最先端の性能を達成することが示されている。RDRFデータセットとコードは、受理後に公開される予定です。