ASIA
    ←Latent
    Latent · AI 運算篩選 · 4 分鐘
    BEIJING · Tsinghua University

    理論論文主張用低成本篩選模型,決定該跑哪些昂貴 AI 運算

    一篇預印本提議為大型 AI 系統搭配輕量預測器,濾掉白費的工作,但提出的是公式,而不是實際測量結果。

    2026年11月4日 · arXiv 預印本(未經同儕審查)
    Photo: Albert Stoynov

    讓 AI 變得更強的進展,大多來自擴大昂貴的那一端:更大的模型、更多的資料與運算量、更長的推理鏈、更多的代理(agent)。一篇 2026 年的論文主張,接下來的進展或許反而可以來自為這套機制搭配一個低成本的預測器,在任何東西執行之前,就先決定哪些工作值得花錢去做。這是一篇發表在 arXiv、尚未經同儕審查的預印本,屬於理論觀點文章,本身沒有報告任何實驗。

    作者把昂貴的執行者稱為 System-2,低成本的預測器稱為 System-1。這兩個名稱描述的是角色,而不是模型類型,System-1 也可以是一個小型語言模型。每個候選互動在執行之前都會先被評分。這裡的「互動」指的是任何成本高昂、事後才知道價值的交換,例如生成的一個答案、一段機器人運動軌跡,或一次工具呼叫。在論文勾勒的範例架構中,一個小型神經網路會預測候選項目的有用程度,以及它對這個猜測本身有多不確定。一個會即時調整、以維持目標放行比例的門檻值,決定 System-2 要執行哪些項目,執行結果再拿來重新訓練預測器。被拒絕的候選項目中,也會抽一小部分照樣執行,用來檢查閘門錯誤擋掉了哪些。

    論證從浪費出發。作者指出,在描述模型誤差如何隨運算量下降的冪律曲線下,隨著運算量增加,多做一次沒有方向的互動所帶來的效益會趨近於零。他們的主要例子是可驗證獎勵的強化學習,也就是讓推理模型以程式能檢查答案的題目來訓練。在 GRPO 方法中,每個取樣出來的答案,都會和同一個提示(prompt)的其他答案相互比較來評分。如果所有答案拿到的獎勵都一樣,這個提示對 GRPO 的更新毫無貢獻,卻仍要為每一次取樣付出成本。作者引用先前的研究表示,提示池中有相當大的比例屬於這種情況。

    正式的推導結果,基本上是一套仔細的成本帳。假設篩選器完美且不需成本、各項執行成本相同,執行所需的運算量會縮減,縮減倍數趨近 1/ρ_u,其中 ρ_u 是真正值得執行的候選項目所占比例。效率的計算方式,是有用結果除以篩選成本加上執行成本。論文表示,這個效率指標應該一律和「產出率」(yield,每篩選一個候選項目所得到的有用結果)一起報告,以免系統靠著幾乎什麼都不做而顯得很有效率。另一個命題則指出,如果 System-1 在各種規模下的錯誤率維持不變,那麼當 System-2 變得更昂貴時,System-1 的最佳規模不會縮小。實證支持則借自現有的「先預測再生成」提示選擇方法,例如 GRESO 和 MoPPS。「先生成再過濾」的方法(例如 DAPO 的動態取樣)要先花掉取樣生成(rollout)的成本,才能發現某個提示沒用,而這些方法省下了這筆花費。作者表示,這些方法是用來說明這套框架,而不是驗證它。

    論文坦白面對各種質疑。1/ρ_u 是上限,不是實際能達到的加速;預測錯誤、探索、稽核、重新訓練和分布偏移,都會侵蝕這個數字。作者表示,技術上影響最大的限制是「選擇性標籤」(selective labels)問題:System-1 只能從它放行給 System-2 執行的項目中學習,因此它對被拒絕候選項目的判斷錯誤,除非刻意挑一些來執行,否則不會被修正;作者也說,光是改用較柔性的閘門並不能解決這個問題。論文為 AI 代理提出的成本保證,前提是每個動作可以逐一評判。這個前提在長時間的電腦操作任務上就不成立,因為這類任務需要許多單獨看來沒有資訊價值的點擊共同完成。這套框架也只涵蓋單一學習者,不包括多代理、自我對弈和辯論等情境,作者認為這是它影響最大的邊界。他們還補充,稠密預訓練往往接近閘門機制沒有保證優勢的條件。

    在理想化的假設下,閘門機制只會讓縮放曲線在對數運算量的座標軸上向左平移,作者稱這個結果為一個「重新縮放恆等式」。他們的核心假說是,ρ_u 是衡量縮放效率的一個可測量座標,而且用「有資訊量的運算」(informative compute)來描述縮放,會比用總運算量更貼切。作者認為測量是決定性的下一步,也承認 ρ_u 在訓練過程中如何衰減,尚未有人測量過。

    braintankAI 也報導過這個構想的具體版本。Xiaomi Research 的一種訓練迴圈,會在練習題不再有教學效果時把它換掉,針對的正是同樣的提示浪費問題(相關報導)。KAIST AI 的一種解碼方法,會在處理圖片之前先檢查這張圖片是否會改變答案,這正是這篇論文所形式化的那種針對昂貴運算的閘門(相關報導)。

    論文
    Does Scaling Toward AGI Depend on What System-1 Lets System-2 Execute?
    作者
    Qi Wang, Yun Qu, Lizhou Cai, Heming Zou, Haoang Chi, Yiqin Lv et al.
    刊登
    arXiv 預印本(未經同儕審查) · 2026年10月29日
    連結
    arxiv.org/abs/2610.39497
    英文版
    Theory paper argues a cheap screening model could decide what costly AI runs

    中文版報導

    a radiotherapy head mask on the couch, red alignment lasers crossing it
    a radiotherapy head mask on the couch, red alignment lasers crossing it

    A radiotherapy head mask on the couch, red alignment lasers crossing it · Photo: National Cancer Institute

    Interior · 果蠅求偶

    食物氣味加上群體動態,開啟一種果蠅的求偶行為

    2026 年一項 Nature 研究發現,Drosophila erecta 果蠅的雄蠅會被食物氣味引發性興奮,群體動態再加以放大;少了這樣的環境,就不會交配。

    Nature · 2026年11月4日
    rainbow light swirl spinning on black
    rainbow light swirl spinning on black

    Rainbow light swirl spinning on black · Photo: Flyd

    Latent · 串流影片生成

    用獎勵分數告訴快速影片模型該把訓練重點放在哪裡

    Stream-R1 依獎勵模型的評分,為每段訓練影片、每個影格和區域加權,在相同速度下於基準測試小幅勝過直接對照的基準方法。

    arXiv 預印本 · 2026年5月5日

    Photo: Pascal Bernardon

    Far Field · 黑洞純量雲

    偏心軌道放大輕粒子雲在黑洞訊號上留下的痕跡

    發表在 Physical Review Letters 的計算發現,偏心旋近在最內側軌道附近出現共振,會加強純量雲在重力波上留下的痕跡。

    Physical Review Letters · 2026年10月20日