FedIDM:反復型分布マッチングによってビザンチン型フェデレーテッドラーニングの高速かつ安定した収束を実現

arXiv cs.LG / 2026/4/17

📰 ニュースModels & Research

要点

  • 論文は、多くのビザンチン耐性フェデレーテッドラーニング手法が収束が遅く不安定であり、しかも多数の結託する悪意あるクライアントを扱うとモデル有用性が損なわれがちだと指摘しています。
  • 分布マッチングを用いて信頼できる圧縮データ(コンデンストデータ)を構築し、異常なクライアントを特定・除外することで堅牢性を高めるアプローチとして、FedIDMを提案します。
  • FedIDMは、(1)攻撃に耐える圧縮データ生成と、(2)負の寄与に基づくリジェクションを行う堅牢な集約の2つの主要コンポーネントで構成されます。
  • 3つのベンチマークでの評価により、FedIDMは多数の悪意あるクライアントを含む複数の最先端ビザンチン攻撃シナリオにおいても、高速かつ安定した収束と許容可能なモデル有用性を両立することが示されています。

Abstract

既存の多くの、Byzantine耐性を備えた連合学習(FL)手法は、収束が遅く不安定であるという問題を抱えています。さらに、相当数の結託した悪意のあるクライアントを扱う場合、耐性を実現するためには通常、モデルの有用性を損なうことになります。これらの課題に対処するため、本研究では、異常なクライアントを識別しフィルタリングするために、信頼できる縮約データを構築する分布マッチングを用いるFedIDMを提案します。FedIDMは主に2つの構成要素から成ります:(1)攻撃耐性を備えた縮約データ生成、そして(2)負の寄与に基づくリジェクションを伴う堅牢な集約です。これらの構成要素は、(1)縮約データから導かれる更新方向から逸脱する、または(2)縮約データセット上で大きな損失を引き起こす、というローカル更新を除外します。3つのベンチマークデータセットに対する包括的な評価により、FedIDMは、多数の悪意のあるクライアントを含む複数の最先端のByzantine攻撃の下でも、モデル有用性を許容範囲に保ちながら、速く安定した収束を達成することが示されます。