Pair2Score：LLMベースの論述文採点におけるペアワイズから絶対値への転移

arXiv cs.CL / 2026/5/5

📰 ニュースIdeas & Deep AnalysisModels & Research

共有:

要点

Pair2Scoreは、パラメータ効率の高いLLaMA適応を用いて、ペアワイズ比較の学習シグナルをLLMベースの論述文採点の「絶対評価」へ変換する2段階フレームワークです。
第1段階では、絶対的な特性ラベルから生成したペアワイズデータで方向性を持つSiameseランカーを学習し、第2段階ではウォームスタートや埋め込み融合などの転移戦略を使って絶対スコア予測器を学習します。
文法・語彙・統語といったルーブリック整合のAutomated Essay Scoring（AES）特性での評価では、最良の転移バリアントが、絶対のみで学習するベースラインに対して全3特性で二乗加重カッパ（QWK）を改善しました。
ペアワイズ学習を長くすることは常に有利ではなく、1エポックのペアワイズ段階の方が延長したペアワイズ学習よりも確実に転移が効くこと、そして「ペアワイズ段階を入れるかどうか」よりも転移構成（設定）自体が下流の採点利益を左右することが示されています。
これらの結果は、ペアワイズから絶対値への転移を丁寧に設計することで、ペアワイズ目的を完全に捨てずに絶対採点精度を高められる可能性を示唆します。