Claude Opus 4.8の「effort」設定を変えて27回実測。正解率は変わらない一方、出力トークンが約7倍、処理時間は最大6倍増加することが判明。 effort設定は正しさではなく答えの作法に影響する。
Claude Opus 4.8のeffortを27runで実測した:トークンは7倍になるが正解率は1段も変わらない
編集メモ: Claude Opus等のeffort設定は回答の質(正解率)を向上させるものではなく、作法や出力傾向に影響を与えるため、コストパフォーマンスの観点から設定を見直すべきです。