ニュース
Sample More, Reflect Less: Self-Refine and Reflexion Lose to Repeated Sampling at Equal Token Cost, from 1.5B to 7B
arXiv cs.AI · 公開日 · 読了1分
30秒で要点
- 何が起きたか
- A controlled experiment shows simple repeated sampling outperforms or matches self-refining methods like Self-Refine and Reflexion when token budgets are equal across 1.5B to 7B models.
- なぜ重要か
- Matters for engineers choosing inference strategies for math problems and evaluating whether complex reasoning methods justify their computational cost.
- 注意点
- Study limited to two math benchmarks with 150 questions each; results may not generalize to other domains, languages, or task types beyond mathematics.
この要約を音声で聴く
- language model
- token
The Agent Architect
1つのパターン、1つのトレードオフ、1つの本番障害事例。エージェントシステムを構築する人のための短い週刊ブリーフィング。
週1回のメール、ワンクリックで購読解除できます。アドレスはブリーフィングの送信のみに使用します。