下に引いて戻る
764回の呼び出し、8つのモデルで判明:細かすぎる指示は小型モデルを殺し、無駄な言葉は実は重要で、フォーマット好みは幻想だった

764回の呼び出し、8つのモデルで判明:細かすぎる指示は小型モデルを殺し、無駄な言葉は実は重要で、フォーマット好みは幻想だった

764 calls across 8 models: too much detail kills small models, filler words are load-bearing, and format preference is a myth

ネットで見かけるプロンプティングのアドバイス——「具体的に書け」「例を入れろ」「XMLタグを使え」——これって小型のローカルモデルに本当に効くのか?そこで764回の呼び出しを8つのモデルで実験してみました。ローカルモデル6個(M2 96GBとRTX 5070 TiをOllamaで実行)とフロンティアAPI 2個(GPT-4.1-miniとClaude Haiku 4.5)で検証。API費用は0.03ドルで済みました。ローカルモデルの使い方を変える3つの発見が出てきたんです。まず、細かすぎる指示は小型モデルの足を引っ張ります。同じタスクを4つの異なる構造複雑度レベルでテストしてみたら。

キーワード

prompt engineeringsmall modelslocal modelsLLM behaviormodel comparisonprompting techniquesXML tagsexamples