U$^{2}$Flow: 不確実性を考慮した教師なし光学フロー推定

arXiv cs.CV / 2026/4/14

📰 ニュースIdeas & Deep AnalysisModels & Research

要点

  • U$^{2}$Flow は、教師なし光学フロー推定に「各ピクセルの不確実性推定」を同時に組み込む初の再帰型フレームワークとして提案されています。
  • 学習では地上真値なしで不確実性を監督するために、データ拡張の一貫性から Laplace ベースの最大尤度目的で不確実性スーパー ビジョンを生成し、安定した学習を可能にしています。
  • 推定された不確実性はネットワーク内に入力され、適応的なフロー精緻化や、地域ごとのスムーズネス損失の動的な調整に利用されます。
  • さらに、不確実性に基づく双方向フロー融合により、困難領域での頑健性を高め、KITTI と Sintel で教師なし手法の SOTA と信頼性の高い不確実性マップを示したと報告されています。
  • コードは公開されており、研究者・実装者が再現や応用を進められる形になっています。

概要: 非教師ありの光フロー手法は通常、信頼できる不確実性推定を欠いているため、堅牢性と解釈可能性が制限されます。私たちは、光フローとピクセルごとの不確実性を同時に推定する最初の反復型(recurrent)非教師ありフレームワークである U^{2}Flow を提案します。本質的な革新は、ラプラスに基づく最大尤度目的により、データ拡張の一貫性から不確実性の監督(supervision)を導出する、デカップルド(切り離した)学習戦略です。これにより、教師データなしでも安定した学習が可能になります。さらに、予測された不確実性はネットワークに統合され、適応的なフローの洗練(refinement)を導き、領域ごとの滑らかさ損失を動的に調整します。加えて、困難な領域での堅牢性を高める、不確実性に導かれた双方向フロー融合(bidirectional flow fusion)機構も導入します。KITTI および Sintel での大規模な実験により、U^{2}Flow は非教師あり手法の中で最先端の性能を達成し、非常に信頼性の高い不確実性マップを生成することが示されます。これは、提案する同時推定の枠組みの有効性を裏付けています。コードは https://github.com/sunzunyi/U2FLOW で公開されています。