PeeriScope：査読の質を評価するための多面的なフレームワーク

arXiv cs.CL / 2026/4/28

📰 ニュースDeveloper Stack & InfrastructureTools & Practical UsageModels & Research

共有:

要点

論文では、査読の規模拡大とばらつきが進む中で、学術査読の質を複数の観点から評価するためのモジュール型フレームワーク「PeeriScope」が提案されます。
PeeriScopeは、構造化された特徴量、ルーブリックに基づく大規模言語モデルによる評価、そして教師あり予測を組み合わせ、体系的かつ解釈可能な評価を実現します。
同システムはオープンで統合しやすい設計になっており、公開インターフェースとドキュメント化されたAPIの両方を提供して、実運用や研究の発展を支えます。
デモでは、査読者の自己評価、編集側のトリアージ、大規模な監査といった活用例が示されています。
PeeriScopeはライブデモと、GitHub上のAPIサービスとして利用可能であり、他チームも導入・拡張しやすくなっています。

Abstract

学術的な場における査読の規模拡大と多様化は、査読の質を評価するための、体系的で解釈可能かつ拡張可能なツールに対する差し迫った必要性を生み出しました。私たちは、複数の次元にわたって査読の質を評価するために、構造化された特徴、ルーブリックに導かれた大規模言語モデルによる評価、および教師あり予測を統合するモジュール式プラットフォーム PeeriScope を提案します。開放性と統合性を念頭に設計された PeeriScope は、公的なインターフェースとドキュメント化された API の両方を提供し、実運用の展開と研究の拡張性を支えます。デモでは、査読者自身による自己評価、編集上の振り分け（トリアージ）、大規模な監査での活用が示され、科学的査読における質の評価手法の継続的な発展を可能にします。PeeriScope は、https://app.reviewer.ly/app/peeriscope でのライブデモとして利用できるほか、https://github.com/Reviewerly-Inc/Peeriscope の API サービス経由でも利用可能です。