自分の知見を記録してから次の一手を選ぶ AI 研究エージェント
Shanghai AI Laboratory の Sage-Taiyi は、知見や仮定、未解決の問いを記録する監督層を加え、その記録をもとに AI の科学的アイデア探索の舵を取る。

高性能な言語モデルに研究のアイデアを求めれば、いくらでも出してくる。だが何ラウンドも続けさせると、目立たない問題が表に出てくる。各ラウンドは、ほとんどが直前に起きたことへの反応にとどまるのだ。3ラウンド前に失敗した実験は忘れられる。2つの証拠の間にある矛盾は解消されないまま残る。有望に見える複数のアイデアが、検証されていない同じ前提にそろって依存していることもある。人間の科学者も同じ過ちを犯すが、それに気づくための習慣を持っている。実験ノート、グループミーティング、そして何かがつじつまが合わないという拭えない感覚だ。
Shanghai AI Laboratory による2026年の論文は、査読を経ていないプレプリントとして arXiv に公開され、AI 研究システムに同じような習慣を持たせようとしている。Sage-Taiyi と呼ばれるこのシステムは、メタ認知、大まかに言えば自分自身の思考について考えることを軸に組み立てられている。探索でわかったことを逐次記録し、その記録に基づいて次にどこを調べるか、どの推論手法を使うかを決める。
着想
著者らの出発点は、一度きりのアイデア生成をループに変えた一群のシステムだ。The AI Scientist はアイデア創出、実験、執筆を順に進める。Co-Scientist はアイデアの生成、批評、改良を繰り返す。Robin は、実験からのフィードバックを使って推論する複数のエージェントを連携させる。著者らは、反復するだけでは、探索の異なる枝で得られた知見が、その根拠や成り立つ条件と結びついたまま保たれるとは限らないと主張する。そうした知見が、後でシステムが選ぶ手法に反映されるとも限らない。各ラウンドが主に直前のフィードバックに頼っていると、システムは誤りを繰り返し、実りのない道を掘り続け、直近の結果に過剰に反応しかねないという。
著者らの処方箋は認知科学、具体的には心理学者の Nelson と Narens が提唱したメタ認知のモデルから借りたものだ。このモデルでは、心的活動が2つのレベルに分けられる。対象レベルは作業そのもの、ここでは科学の問題に取り組む。メタレベルはその作業を見守り、舵を取る。両者は2つの流れでつながっている。モニタリングは、物事の進み具合についてのメタレベルの把握を更新する。コントロールは、その把握を使って次に何をするかを選ぶ。
著者らはさらに、発見を、表象、オペレータ、ヒューリスティクスからなる問題空間の探索ととらえる古くからの考え方も取り入れている。加えて、戦略の選択それ自体を一種の推論として扱う研究、いわゆるメタ推論も参照する。まとめると、研究エージェントは問題についてだけでなく自らの知識の状態についても推論し、それに応じて手法を選ぶべきだ、というのが論文の主張である。
この論文での実装
対象レベルでは、Sage-Taiyi は互いに結びついた3つの記録を保持する。Target Tree は研究課題をより小さな目標に分解し、それぞれに局所的な戦略と部分的なアイデアを持たせる。Idea Graph は完成したアイデアの家系図のようなもので、著者らが Merge、Fuse、Diverge、Repair、Evolve と呼ぶ5つの変換によって、どのアイデアがどのアイデアから生まれたかを記録する。Evidence State は、実験や計算の結果、文献、専門家の意見を、それぞれの出典と結びつけて保存する。
メタレベルには2つの要素がある。1つ目は Cognitive State で、知見、競合する説明、仮定、未解決の問いについて、取捨選択され出典と結びついた逐次のメモだ。複数のアイデアが検証されていない1つの前提を共有していると気づく、といった判断も記録する。2つ目は再利用可能な Cognitive Repertoire で、10種類の研究戦略の雛形からなる。類推による転用、逆設計(望む特性から逆算して設計すること)、ボトルネックを起点とする再設計などだ。これらと並んで、問題設定、構築、評価、学習に分類されたより小さな推論の手順があり、各分野の古典的な論文を使って分野ごとに調整されている。各サイクルは Cognitive State を更新する Monitor から始まる。次の作業でアイデアを生み出す必要がある場合は、Select がヒューリスティクスとオペレータを選び、Search がそれらを選ばれた目標やアイデアに適用する。そうでなければ、作業は実行や検証に回される。予算と停止規則によって実行は終了する。
外側の実行基盤(ハーネス)は、サブエージェントを並列に動かし、ツールを呼び出す。その1つが研究チームのベイズ最適化用ツール Taiyi-Optimizer だ。ベイズ最適化は、それまでの結果をもとに次に行う実験を選ぶ統計的手法である。検証結果は Evidence State に戻される。
示されたこと、示されていないこと
主な評価は、著者ら自身が作成したベンチマーク Taiyi-Bench で行われた。地球科学や経済学から材料科学、通信工学まで、10分野の50本の論文から取った265のタスクを収録している。元の論文はいずれも、Sage-Taiyi の基盤モデルである GPT-5.6-Sol の公表された知識カットオフより後に初めて公開されたもので、モデルが答えをすでに見ている可能性を減らすためだ。各論文の重要な判断は段階的に開示され、システムはタスクごとに10個のアイデアを提案しなければならない。採点では、実際の研究が行ったことをどれだけ再発見できるか、そして自由回答のアイデアがどれだけ新規で、効果的で、実現可能で、多様かを評価する。提案の採点には、文献に基づく自動評価器が評価基準(ルーブリック)を当てはめる。
比較対象は10種類で、3つの最先端モデルへの単純なプロンプト、汎用コーディングエージェントの Codex と Claude Code、科学向けシステムの EvoScientist、AI Scientist-v2、Robin を含む。Sage-Taiyi は総合スコアが最も高く、53.95と AI Scientist-v2 の47.85を上回った。8つの指標すべてで1位となり、AI Scientist-v2 との一対一の比較では約3分の2で勝った。外部の2つのベンチマーク、AgentIdeaBench と IG-Arena でも首位だった。著者らは分野の専門家との共同研究も5件行った。その1つでは、コバルト触媒反応が、条件探索の結果、生成物が痕跡程度しか得られない状態から収率84%に上がった。別の反応では13%から69%になった。マグネシウム合金を作製して試験したところ、平均引張強さは342MPaだった。メタマテリアルのフィルター設計は専門家による設計を上回ったが、シミュレーション上に限られる。
限界も重要だ。Taiyi-Bench とその評価器は同じチームが作ったものである。著者らは評価器と人間の専門家との一致度を良好としているが、数値は示していない。スコアにはエラーバーも有意性検定も付いていない。総合的な優位の最大の要因は新規性で、効果、実現可能性、参照研究の根本的な問題の特定では、最も強い競合システムとの差は1.5ポイント未満にとどまる。絶対値で見ると、システムが参照研究の判断を完全に再現できたのは5分の1未満の場合だけだ。比較対象のシステムはアイデア創出の段階だけに絞られており、本来想定された動かし方を反映していない可能性がある。また、順位表だけでは、性能向上をもたらしたのがメタ認知の層なのか、それとも構造の追加や計算量の増加なのかはわからない。
実験室での成果は、いずれも単独の事例研究である。どのアイデアを追うかは専門家が選び、条件探索はベイズ最適化器が担った。シミュレーション上のフィルターを除けば、専門家や最適化器だけでどこまで達成できたかを示す比較はない。5件の共同研究のうち2件はシミュレーションのみで、化学の事例でのメカニズムの検証はこれからだと著者らは記している。この論文が示しているのは、自らの理解を把握し続けるエージェントの具体的な設計と、それが実りある研究の流れに貢献しうるという、著者ら自身による初期の証拠である。このシリーズの後続の記事では、この考え方がより長期の調査にどこまで通用するか、またこうした実行で得られた結論をどう確かめるかを取り上げる。
- 論文
- Sage-Taiyi: A Metacognitive Architecture for Scientific Discovery
- 著者
- Weida Wang, Benteng Chen, Yigeng Jiang, Shuchen Pu, Weiping Shen, Zichao Liu, Yulin Su, Zitong Wang, Siyu Zhou, Zifu Wang, Yizhi Li, Xin Zong et al.
- 掲載
- arXiv プレプリント(査読前) · 2026年11月9日
- リンク
- arxiv.org/abs/2611.12762
- コード
- github.com/Alpha-Innovator/Sage-Taiyi
- 英語版
- An AI research agent that keeps notes on what it knows before deciding what to try next


