ツール呼び出しでも大きいモデルは勝てなかった

Zenn / 4/21/2026

💬 OpinionSignals & Early TrendsIdeas & Deep Analysis

共有:

Key Points

ツール呼び出し（function calling等）を使っても、大きいモデルが必ずしもタスクで勝てるわけではないという観点を示している。
モデル規模だけではツール活用の質が決まらず、呼び出し手順の設計や振る舞いの作り込みが性能に影響することを示唆している。
「大きいモデル＝最適解」とみなすのではなく、ツール連携を含めた全体の評価が重要だという主張につながっている。
実運用では、モデルサイズの投資判断よりも、ツール連携の実装・評価設計の改善が効く可能性を考えるべきだと読める。

ツール呼び出しでも大きいモデルは勝てなかった LLMにツールを持たせる（function calling / tool use）。これはエージェントの基盤技術であり、RAGの次の進化であり、ローカルLLMの実用性を左右する機能だ。では、どのモデルがfunction callingで最も正確か。13モデルをQ4_K_M量子化でテストした2026年のベンチマーク（JD Hodges, 2026）の結果は、予想を裏切るものだった。 97.5%の精度を出したのは3.4GBのモデルだった。25GBのモデルは85%で負けた。少なくともこのテスト環境では、大きいモデルが強いという前提は成り立た...

Continue reading this article on the original site.

Read original →