arXiv News

すべての人に一次情報を

サイト

Aboutプライバシーポリシー利用規約

© 2026 arXiv News

ロボットプログラミングエージェントは、成功基準が指示と不一致のタスクでのみ性能が向上する | arXiv News

arXiv News

英語日本語

言語を切り替え

英語日本語
アカウントを読み込み中…

すべての人に一次情報を

トップページに戻る
人工知能日本語公開済み

ロボットプログラミングエージェントは、成功基準が指示と不一致のタスクでのみ性能が向上する

2026年11月9日arXiv: 2611.08318v1

Pythonコードを書いて実行するロボット制御エージェントの自己改善ループでは、機械学習者が「成功基準」を見えるかどうかだけで設定が変わります。学習者は各実行結果をもとにライブラリを改訂し、改訂が失敗した場合は元に戻します。実験は、開発用5つのレイアウトを用い、学習フェーズと評価フェーズに分けて行われました。

図 2、左側に学習フェーズのブロック図、右側に評価フェーズのブロック図が示され、学習フェーズの上部に成功基準の可視化がある状態と不可視化の状態を対比した図
Figure 2. 自己改善ループの概要。左側は学習フェーズ(Pythonセルを記述・実行)、右側は評価フェーズ(固定ライブラリで未見のレイアウトを実行)。学習者が成功基準を見えるかどうかが唯一の設定切替であることを示す。Huang, Wenbo, Bi, Jianxin, Yang, Shunyu, Si, Ruiyang, Ni, Rui, Wang, Qiang et al. · arXiv:2611.08318v1 · Figure 2: · CC BY 4.0

成果の比較では、基準に制限された16タスクにおいて、成功基準を提示した設定(Criteria Exposure, CE)の成功率は51.6%でしたが、提示しなかった設定(w/o CE)では27.8%に留まりました。一方、指示自体に忠実な9タスクでは両設定でほぼ同じ成功率(52.5%と52.2%)でした。

表 1、3列(空ライブラリ、CEなし、CEあり)の成功率を示し、各行にタスク数と成功率が記載された表
TasksEmpty library ℒ∅w/o CEw/ CE
All (25)24.647.8 (+23.2)62.0 (+37.4)
Criteria-limited (16)8.427.8 (+19.4)51.6 (+43.2)
Faithful (9)53.383.3 (+30.0)80.6 (+27.3)
Table 1. 基準に制限された16タスクの成功率。CEありが51.6 %、CEなしが27.8 %であり、相違分は+43.2 ポイント。Huang, Wenbo, Bi, Jianxin, Yang, Shunyu, Si, Ruiyang, Ni, Rui, Wang, Qiang et al. · arXiv:2611.08318v1 · Table 1: · CC BY 4.0

CEによる効果は、基準が指示と異なるタスクに限定されます。基準がわずかに変更されただけでは、性能向上は観測されませんでした。さらに、CEで学習したライブラリは、新しいタスクや別のベンチマークに移行すると性能が低下し、恩恵は失われました。

この研究は、エージェントに正確な検証ルールを示すと、特定の基準に対するコード生成が改善されることを示していますが、一般的な問題解決能力や新規環境への転移性は向上しないことを明らかにしています。

元論文

Learning the Task or Learning the Verifier? Rethinking Criteria Exposure in Embodied Self-Improvement

人工知能ロボティクス
arXiv で見る