ASIA
    ←Latent
    Latent · AI 計算の選別 · 4分
    BEIJING · Tsinghua University

    安価な選別モデルが高コストな AI の実行を決める、と理論論文が主張

    大規模な AI システムに無駄な処理をふるい落とす軽量な予測器を組み合わせる案をプレプリントが示したが、示したのは測定ではなく数式だ。

    2026年11月4日 · arXiv プレプリント(査読前)
    Photo: Albert Stoynov

    より高性能な AI に向けた進歩の多くは、コストのかかる部分を大きくすることで得られてきた。モデルの大型化、データと計算資源の増強、推論過程の長大化、エージェントの増加である。2026年の論文は、さらなる伸びはむしろ、こうした仕組みに安価な予測器を組み合わせることで得られるかもしれないと論じている。この予測器は、何かを実行する前に、どの作業がコストを払うに値するかを判断する。論文は査読を経ていないプレプリントとして arXiv に公開されたもので、理論的な見解を示す論考である。独自の実験は報告していない。

    著者らは、高コストな実行側を System-2、安価な予測側を System-1 と呼ぶ。これらの呼び名はモデルの種類ではなく役割を表しており、System-1 は小型の言語モデルでもよい。候補となるインタラクションは、それぞれ実行前に採点される。ここでいうインタラクションとは、生成された回答、ロボットの軌道、ツール呼び出しなど、終わってみるまで価値がわからない高コストなやりとり全般を指す。論文が描く構成例では、小さなニューラルネットワークが候補の有用性と、その推定に対する自らの不確実性を予測する。目標とする採用率を保つよう随時調整されるしきい値が、System-2 に何を実行させるかを決め、その結果は予測器の再学習に使われる。退けられた候補の一部もあえて少数実行し、ゲートが誤って退けたものを確かめる。

    論拠の出発点は無駄である。モデルの誤差が計算量に応じて減っていく様子を表すべき乗則の曲線のもとでは、方向づけのないインタラクションを1回増やして得られる改善は、計算量が増えるにつれてゼロに近づくと著者らは指摘する。主な例として挙げるのは、検証可能な報酬による強化学習だ。推論モデルを、答えをプログラムで確認できる問題で訓練する手法である。GRPO という手法では、同じプロンプトに対してサンプリングした各回答を、互いに比べて採点する。すべての回答が同じ報酬を得た場合、そのプロンプトは GRPO の更新に何も寄与しないのに、サンプルごとのコストは払うことになる。著者らは先行研究を引き、プロンプト群のかなりの割合がこうした振る舞いをすると述べている。

    形式的な結果は、丁寧な収支計算といえるものだ。選別が完全かつ無料で、実行コストが等しい場合、実行に必要な計算量は 1/ρ_u に近づく倍率で減る。ρ_u は、本当に実行する価値のある候補の割合である。効率は、有用な結果を選別と実行のコストの合計で割ったもので評価する。論文によれば、この効率は常に歩留まり、すなわち選別した候補1つあたりの有用な結果と並べて報告すべきだという。そうすれば、ほとんど何もしないことで効率よく見せることはできなくなる。別の命題は、System-1 の各サイズでの誤り率が変わらないなら、System-2 のコストが上がっても System-1 の最適なサイズは小さくならないとする。実証的な裏づけは、GRESO や MoPPS といった、生成前に予測してプロンプトを選ぶ既存の手法から借りている。これらの手法は、DAPO の動的サンプリングのように生成後にふるい分ける手法が、プロンプトが役に立たないと見極めるために費やすロールアウトのコストを払わずに済む。著者らは、これらは枠組みを検証するものではなく、例示するものだとしている。

    論文は反論にも率直に向き合っている。1/ρ_u という数字は上限であって、実際に得られる高速化ではない。予測の誤り、探索、監査、再学習、分布の変化はいずれもこの値を目減りさせる。著者らが最も重大な技術的制約に挙げるのは、選択的ラベルの問題だ。System-1 は自らが System-2 に実行させたものからしか学べないため、退けた候補についての誤りは、一部を意図的に実行しない限り正されない。ゲートを緩くするだけではこれは解決しないと著者らは述べる。AI エージェントについて論文が示すコストの保証は、行動を1つずつ評価できることを前提としている。この前提は、コンピューター操作の長いタスクでは成り立たない。単独では情報をもたらさない多数のクリックが、まとまって初めて必要になるからだ。また、枠組みが扱うのは単一の学習者だけで、マルチエージェント、自己対戦、ディベートの設定は含まれない。著者らはこれを枠組みの最も重大な境界とみている。さらに、密な事前学習は、ゲートに保証された利点がない条件にしばしば近いと付け加えている。

    理想化した仮定のもとでは、ゲートは対数目盛りの計算量軸上でスケーリング曲線を左へずらすだけであり、著者らはこの結果を尺度変換の恒等式と呼ぶ。中心となる仮説は、ρ_u がスケーリング効率を測る計測可能な座標であり、総計算量よりも情報をもたらす計算量のほうがスケーリングをうまく記述するというものだ。著者らは測定こそが決定的な次の一歩だとし、訓練の過程で ρ_u がどう減衰するかはまだ測定されていないと認めている。

    この考え方の具体的な形は、braintankAI でも取り上げてきた。練習問題が学習に役立たなくなった時点で入れ替える Xiaomi Research の訓練ループは、同じ無駄なプロンプトの問題を狙ったものだ(関連記事)。画像を処理する前に、それが答えを変えるかどうかを確かめる KAIST AI のデコーディング手法は、この論文が定式化したような、高コストな計算に対するゲートにあたる(関連記事)。

    論文
    Does Scaling Toward AGI Depend on What System-1 Lets System-2 Execute?
    著者
    Qi Wang, Yun Qu, Lizhou Cai, Heming Zou, Haoang Chi, Yiqin Lv et al.
    掲載
    arXiv プレプリント(査読前) · 2026年10月29日
    リンク
    arxiv.org/abs/2610.39497
    英語版
    Theory paper argues a cheap screening model could decide what costly AI runs

    日本語版の記事

    physics lab apparatus from above: foil-wrapped vacuum chambers, magnets and cables
    physics lab apparatus from above: foil-wrapped vacuum chambers, magnets and cables

    Physics lab apparatus from above: foil-wrapped vacuum chambers, magnets and cables · Photo: Devon Rogers

    Substrate · 交替磁性

    正味の磁化がない磁性体 MnTe で、スピン分裂した電子バンドを観測

    テルル化マンガンの光電子分光を計算と照合した結果、共線磁性体の第3の分類として提案されている交替磁性体に予測されたスピン分裂が確認された。

    Nature · 2024年2月14日
    a radiotherapy head mask on the couch, red alignment lasers crossing it
    a radiotherapy head mask on the couch, red alignment lasers crossing it

    A radiotherapy head mask on the couch, red alignment lasers crossing it · Photo: National Cancer Institute

    Interior · ハエの求愛行動

    食べ物のにおいと群れの動きが、あるショウジョウバエの求愛を始動させる

    2026年の Nature 論文によれば、Drosophila erecta では食べ物のにおいが雄の性的興奮を引き起こし、群れの動きがそれを強めるため、この環境がなければ交尾は起きない。

    Nature · 2026年11月4日
    rainbow light swirl spinning on black
    rainbow light swirl spinning on black

    Rainbow light swirl spinning on black · Photo: Flyd

    Latent · 動画生成の蒸留

    報酬モデルの採点で高速動画モデルの学習の重点を決める

    Stream-R1 は学習用の動画、フレーム、領域ごとに報酬モデルの判定で重みを付け、同じ速度のまま直接の比較対象をベンチマークでわずかに上回った。

    arXiv プレプリント · 2026年5月5日