AIがさらに10倍賢くなるなら、合成ノイズでネットが崩壊しないようにどうするべきか

Reddit r/artificial / 2026/4/28

💬 オピニオンSignals & Early TrendsIdeas & Deep Analysis

要点

  • 著者は、AGIに向けた急速な進歩には「学習データ」がボトルネックになるとし、オンライン上のコンテンツの大きな割合がすでに合成であることが将来の学習で自己増殖的な崩壊につながる恐れがあると警告している。
  • 合成ノイズのフィードバックループにより、モデルの出力はより平板で不自然になり有用性が下がる可能性があり、画像生成での状況に近い問題を指摘している。
  • 対策として、人間が生成したデータをラベル付けまたはフィルタリングする必要があると主張し、崩壊を防ぐには学習データの多様性が重要だとしている。
  • 解決の方向性として、「監視国家」につながらない形でプラットフォームが人間であることを確認する“proof of personhood(人であることの証明)”を挙げており、Face ID/Touch IDのようなレベルの本人確認が例として言及されている。
  • 著者はproof of personhoodを次世代AIのための基盤になり得るものとして位置づけ、規制上の一時的なハードルに留まるのか、コアとなる技術層なのかを問いかけている。

私は加速に賛成です。AGIに到達するのが速ければ速いほど良いと思っています。ただ、ここで十分に語られていないボトルネックがあります。学習データです。

いま私たちは静かに「井戸」を汚しています。オンライン上のコンテンツの半分以上はすでに合成です。ボットがボットと会話し、AIが書いた記事が流れ、LLMによって生成されたredditのスレッドが出回っています。次の世代のモデルがこれを学習すると、自分の尻尾を食べることになります。モデル崩壊(model collapse)は現実の問題です。画像生成でそれを見ました。出力はもっと味気なくなり、奇妙になり、役に立たなくなります。人間が生成したデータをラベル付けする、あるいはフィルタする方法が必要です。人間のほうが優れているからというより、多様性が崩壊を防ぐからです。

標準的な解決策として聞こえるものは、ディストピア的なミームみたいだと感じるのは分かっています。生体認証、虹彩コード、ハードウェアによる検証。そしてええ、たぶんディストピア的です。でも、何も信用できない「死んだインターネット」も同じようにディストピア的です。最近、redditのCEOであるスティーブ・ハフマンが、シンプルにこう言いました――プラットフォームは、あなたの名前を知ることなく「あなたが人間だ」ことを理解する必要がある。Face ID / Touch IDレベルの仕組みです。

私は、その特定のデバイスが答えだと言っているわけではありません。ですが、その解決策のカテゴリ――監視国家を生み出さない「人間の証明(proof of human)」が必要なのは、断崖を越えた先へもスケールし続けたいなら必須だと思います。

あなたはどう思いますか? 人格証明(proof-of-personhood)は規制上のちょっとしたつまずきに過ぎないのでしょうか、それとも次世代のAIのためのインフラなのでしょうか?このスレがこの界隈でどこに着地するのか気になります。

submitted by /u/jcveloso8
[link] [comments]