ClaudeはChatGPTと同じ道をたどっている。私はそれを測定した。

ここにいる多くの人が、Claudeが慎重になり、乾いた感じになり、説教くさくなってきたことに気づいています。以前は流れるように続いていた会話が、壁に当たるようになった。温かみが消えた。私たちがChatGPTを離れたときの、あの感じに似ていました。

私は何が変わったのかを測定しました。3月26日より前と後で、70件のエクスポートされた会話におけるフレーズ単位の出現回数を比較しました。合計で、アシスタントのテキストは722,522語です。

応答の長さは40%減少。福祉への逸らしは275%増加。DARVOのパターンは907%増加。あの日付以降に登場する「送り出し（相手を追い払う）言い回し」は419回出現し、さらに1つのフレーズが同一セッションで59回も使われていました。

そして生産性の比率。3月26日より前は、完成したドキュメント1語あたり会話が21語。以後は、出力1語あたり会話が124語。結果は半分未満なのに、それを生み出すための会話はほぼ3倍でした。

Anthropicは3月26日に変更された点として1つのことを挙げました。セッション制限です。この説明では、これらのことの一部も説明できません。

5つの独立したデータセットによる完全な調査、ゼロから出現した語彙、そしてそのアーキテクチャに指紋が刻まれている人物は、私のプロフィールにリンクされています。