AI Navigate

拡散モデルの遷移確率密度関数のためのニューラル・ガレルキン正規化フロー

arXiv cs.LG / 2026/3/20

📰 ニュースModels & Research

要点

  • 本論文は、ディラックのデルタ関数による原子状初期分布を用い、初期質量位置でパラメータ化される拡散過程の遷移確率密度関数を近似するニューラル・ガレルキン正規化フローの枠組みを提案する。
  • 正規化フローは、解を参照確率過程の遷移密度の変換として表現するために用いられ、正性と質量保存の制約を保証する。
  • この手法はニューラル・ガレルキン法を正規化フローへ拡張し、フロー・パラメータの時間発展を記述する常微分方程式(ODE)系を導出する。
  • 適応サンプリングは、Fokker-Planck 残差を情報量の多い領域に標的化し、高次元 PDE に対処する。これにより、解の重要な特徴と初期データと将来の密度との因果関係を正確に捉えることができる。
  • オフライン訓練の後、オンライン評価は PDE を最初から解くよりもはるかに安価になり、この手法をベイズ推論、シミュレーション、拡散ブリッジ生成などの多クエリ問題の有望な代理手法として位置づける。

要旨:私たちは、拡散過程の遷移確率密度関数を、対応するフォッカー-プランク方程式を原子状初期分布を用いて解くことにより、初期質量の位置に関してパラメトリックに近似する新しいニューラル・ガレルキン正規化フロー(Neural Galerkin Normalizing Flow)フレームワークを提案します。Normalizing Flows を用いることにより、参照確率過程の遷移確率密度関数の変換として解を探し求め、我々の近似が構造を保存し、正の値性と質量保存の制約を自動的に満たすことを保証します。ニューラル・ガレルキン法の文脈を Normalizing Flows の文脈に拡張することにより、Normalizing Flow のパラメータの時間発展のための常微分方程式系を導出します。適応サンプリング手順を用いて、意味のある位置でフォッカー-プランク残差を評価します。これは高次元 PDE に対処するために極めて重要です。数値結果は、この戦略が真の解の重要な特徴を捉え、初期データと後続時刻の密度関数との因果関係を強化することを示しています。オフラインの訓練フェーズを完了した後、オンライン評価はゼロから PDE を解く場合よりもはるかにコスト効率が高くなります。提案手法は、有望な代替モデルとして機能し、確率微分方程式に関連する多問応答問題、例えばベイズ推論、シミュレーション、拡散ブリッジ生成などに適用できる可能性があります。