広告

[D] 著者の身元を知ることはあなたのスコアリングに影響しますか?

Reddit r/MachineLearning / 2026/4/1

💬 オピニオンSignals & Early TrendsIdeas & Deep Analysis

要点

  • 本記事では、査読者が arXiv 上で論文を検索することで著者の身元を知ってしまうことが、論文の査読バッチ中の採点にバイアスをもたらしうるのかを論じます。
  • 著者は、自分のバッチで上位スコアだった2本の論文が、そのセットで arXiv 上に唯一掲載されていたものであったことを指摘し、身元の開示が結果に影響したのではないかという疑問を提起します。
  • 主要な論点は、査読の過程で非ブラインド、あるいは一部が明らかにされた情報から生じうるバイアスの可能性です。
  • 著者は、この状況を「影響があったのか、単なる偶然なのか」という不確実性として位置づけており、より強固なセーフガードや、査読プロセスのより良い評価の必要性を示唆しています。

正直に言うと、査読プロセスのどこかの段階で。私たちの多くは退屈になって、レビューしている論文をGoogleで調べようとしたことがあるはずです。そして場合によっては、その論文がすでにarXivに、著者の身元(氏名)付きでアップロードされていることがあります。すると私たちはそれを探そうとしてしまいます。

初めて査読者をしたとき、私のバッチの上位2本の論文が、偶然にもそのバッチの中でarXivに載っている唯一の論文だったことに気づきました。著者の身元を明かすことが私の判断に影響したのか、それとも単なる偶然なのかを確認しようとしています。

投稿者: /u/d_edge_sword
[リンク] [コメント]

広告