日本語特化LLMが日本語テストで47点を取った——東工大Swallow 8B 24問テスト

東京工業大学（現・東京科学大学）が日本語コーパスで鍛えたモデル、という触れ込みを聞いたとき、少し期待した。Qwen系は中国発で日本語は"副業"だ。でも国産モデルなら、少なくとも日本語カテゴリでは差を見せてくれるだろうと。 結果：コード77%・日本語47%。 「汚名返上」を誤用として指摘し、「汚名挽回」に直すよう提案した。正しい慣用句を誤りと断言した日本語特化モデルだ。 スコア詳細 カテゴリ スコア A: 意地悪・引っかけ 27/60（45%） B: 論理・推論 20/60（33%） C: コーディング 46/60（77%） D: 日本語力 28/60（47...