arXiv News

すべての人に一次情報を

サイト

Aboutプライバシーポリシー利用規約

© 2026 arXiv News

Strategistはタスクを越えて自律的に推論戦略を進化させる | arXiv News

arXiv News

英語日本語

言語を切り替え

英語日本語
アカウントを読み込み中…

すべての人に一次情報を

トップページに戻る
人工知能日本語公開済み

Strategistはタスクを越えて自律的に推論戦略を進化させる

2026年11月4日arXiv: 2611.03618v1

Strategistは、推論戦略を自律的に生成・改善するメタエージェントである。エージェントは「Blueprint」―再利用可能な実行コードを図書館に蓄積し、次のタスクでは類似Blueprintを検索し、5つの候補戦略を作成、実例で評価し、成功したものを図書館へ戻す。これを段階的に繰り返す四段階パイプライン(Retrieve→Propose→Evaluate→Accumulate)が図に示された。

図はRetrieveからAccumulateまでの四段階プロセスを示し、各段階でBluePrint検索、候補生成、評価、蓄積を行うことを示しています。
Figure 5. Strategistの四段階パイプライン: Retrieve→Propose→Evaluate→AccumulateLu, Taiming, Xu, Qi, Hua, Zhigang, Liu, Zhuang · arXiv:2611.03618v1 · Figure 5: · CC BY 4.0

30のベンチマーク(読解、数理、プログラミング、常識)で、Strategistは24のタスクでベースラインを上回り、平均精度は74.7%(ベースライン74.0%)とほぼ同等であるが、加重推論コストを39%削減した。精度とコストのバランスが失われるタスクもある。HotpotQAとCOPAでは精度は同等だがコストがそれぞれ9%、6%増加。MedQAとAIME 2024ではコストを減らすために5〜7%精度を犠牲にした。平均コスト削減率は39%である。

表は各ベンチマークでの戦略とベースラインの精度・コスト比較を示し、24タスクで上回る結果と特定タスクでのコスト増・精度低下を示しています。
BenchmarkOurs AccBL AccΔAccOurs Cost (k)BL Cost (k)ΔCostResult
SQuAD v279.173.2↑8.0%5.625.0↓77.4%Win
TruthfulQA69.064.5↑7.0%5.87.5↓21.9%Win
2WikiMQA76.572.5↑5.5%33.898.6↓65.7%Win
Amazon-Rec28.024.0↑16.7%45.670.3↓35.1%Win
SAT-Math98.294.5↑3.8%4.912.1↓59.4%Win
LSAT-AR81.077.6↑4.4%54.982.0↓33.0%Win
LSAT-RC81.578.5↑3.8%12.424.8↓49.9%Win
NQ-Open19.017.0↑11.8%19.134.4↓44.5%Win
LSAT-LR82.080.5↑1.9%65.298.1↓33.5%Win
Gaokao-Math94.593.5↑1.1%89.7111.3↓19.4%Win
MuSiQue42.041.0↑2.4%67.673.0↓7.4%Win
MMLU-STEM-Hard88.087.0↑1.1%11.935.2↓66.2%Win
MMLU79.578.5↑1.3%10.296.3↓89.4%Win
AQuA-RAT87.086.5↑0.6%17.519.4↓9.6%Win
StrategyQA70.069.5↑0.7%3.03.7↓19.6%Win
WinoGrande77.577.50.0%4.95.6↓11.8%Win
ANLI-R369.569.50.0%4.69.6↓51.7%Win
SVAMP93.093.5↓0.5%1.82.0↓9.3%Win
SciQ97.598.0↓0.5%1.23.7↓69.1%Win
HellaSwag70.571.0↓0.7%9.022.9↓60.9%Win
BBH85.086.0↓1.2%23.342.5↓45.2%Win
CommonsenseQA76.577.5↓1.3%5.814.8↓60.8%Win
GSM8K92.094.0↓2.1%8.362.8↓86.8%Win
ASDiv93.095.0↓2.1%6.936.6↓81.1%Win
MBPP+80.579.0↑1.9%108.5109.0↓0.4%Tie
MinervaM38.539.0↓1.3%28.228.7↓1.5%Tie
MedQA68.572.5↓5.5%12.628.5↓55.8%Mixed
AIME 202460.065.0↓7.7%287.6372.5↓22.8%Mixed
HotpotQA64.564.0↑0.8%34.731.9↑9.0%Lose
COPA100.0100.00.0%2.42.3↑6.1%Lose
Table 10. 30ベンチマークでの Strategist の性能: ベースライン上回り24タスク、平均精度 74.7% (ベースライン 74.0%)、加重コスト 39% 削減。HotpotQA・COPA でコスト増、MedQA・AIME 2024 で精度低下。Lu, Taiming, Xu, Qi, Hua, Zhigang, Liu, Zhuang · arXiv:2611.03618v1 · Table 10: · CC BY 4.0

Strategistが生成した戦略は、未確認タスクや別モデルでも再検索なしに移転できることが示されており、推論戦略という従来は人手で作成されていた部分をエージェント自体が学習できる点が注目される。

元論文

Strategist: Evolving Reasoning with Agents

人工知能自然言語処理
arXiv で見る