下に引いて戻る
MiniMax2.7、Terminal Bench でまさかの失敗—M2.5より悪い結果に

MiniMax2.7、Terminal Bench でまさかの失敗—M2.5より悪い結果に

MiniMax2.7 Underperforms on Terminal Bench—Local Testing Shows It's Actually Worse Than M2.5

Mac Studio M3 Ultra でローカル実行した Terminal-Bench 2.0 の完全テストで、MiniMax-M2.7 の成績が期待外れだった。445 回のトライアル後、精度はわずか 41.3%—古い M2.5 の 42.7% より実は低い。434 回のテストのうち、成功は 184 件、失敗は 250 件。187 件はタイムアウトエラー(モデルが時間切れになっただけで、クラッシュではない)。処理速度も遅く、毎秒 10~17 トークン程度。Claude でエージェントコーディングに MiniMax2.7 を使おうと考えているなら、このベンチマークは M2.5 を使い続けるか別の選択肢を検討するよう示唆している。新バージョンは期待されたアップグレードを実現していないようだ。