VTBench：時系列分類のためのチャートベース表現を用いたマルチモーダル・フレームワーク
arXiv cs.CV / 2026/5/1
📰 ニュースIdeas & Deep AnalysisModels & Research
要点
- この論文では、VTBenchという体系的かつ拡張可能なフレームワークを提案し、時系列分類（TSC）を「生の時系列」とチャートベースの可視化をマルチモーダル融合する観点から再検討しています。
- 代表的なテクスチャ系の画像化（Gramian Angular FieldsやRecurrence Plots）とは異なり、VTBenchは線・面積・棒・散布図といった、人間にとって解釈しやすい軽量なチャート表現に焦点を当てています。
- VTBenchは、単一チャートと数値入力の融合、多種類チャートの融合、さらに生の時系列も含めたフルのマルチモーダル融合といった複数の融合戦略に対応するモジュール構成を備えています。
- 31のUCRデータセットでの実験では、チャートのみのモデルが特定の状況（特に小規模データセット）で競争力を持ち、多種類のチャートを併用すると補完的な視覚的手がかりを捉えて精度が向上し得ることが示されています。
- 著者らは、視覚特徴が冗長でない非冗長情報を追加する場合はマルチモーダルが有効だが、冗長性を持ち込むと精度が低下し得ることを示す実践的ガイドラインを提示しています。
