ASIA
    ←Latent
    Latent · 研究 · 4 分鐘
    BEIJING · Tsinghua University

    擴散模型從單張圖片生成能擺動的風格化遊戲頭髮

    一篇預印本指出,HairDeck 把每一片緞帶狀的髮片當成一個 token、一次全部生成,再加上讓頭髮擺動的骨骼。

    2026年11月10日 · arXiv 預印本(未經同儕審查)
    3D render, tangled glowing blue coil strands on black
    Photo: Logan Voss

    在走動漫或卡通風格的遊戲和虛擬化身裡,頭髮很少是一根根髮絲做出來的,而是用髮片(hair card)拼成。髮片是幾十片到一百多片緞帶狀的 3D 長條,截面是菱形或三角形,每一片都由美術人員親手擺放,它的形狀就是觀眾看到的頭髮。為了讓頭髮動起來,美術人員還要綁上彈簧骨骼(spring bone),也就是從頭部垂下的短關節鏈,遊戲引擎每一幀都會模擬它們,讓頭髮擺動,再慢慢靜止下來。這兩項工作都靠手工完成。清華大學、卡內基美隆大學和香港中文大學的研究人員,在一篇 2026 年、尚未經同儕審查的預印本中介紹了 HairDeck。這套系統能從單張圖片或 3D 點雲,生成髮片和對應的骨骼鏈。

    在 HairDeck 之前,唯一能生成風格化髮片的方法是 CHARM。它採用自迴歸(autoregressive)方式,像語言模型寫文字那樣一次產生一小塊輸出,並把一個髮型寫成數百到數千個 token,描述每片髮片上的點。HairDeck 的作者從一個觀察出發:髮片之間本來就沒有先後順序。因此他們把每一片髮片編碼成單一個 token,一次生成整組髮片。

    每片髮片先經過變分自編碼器壓縮成 32 個數字。變分自編碼器是一種神經網路,能把物件壓成一小串數值,也能再還原回來。token 裡還帶有髮片的根部位置、截面類型,以及根部法線,也就是緞帶離開頭皮處的寬度延伸方向。一個髮型占 192 個槽位,每個槽位都有一個存在旗標,用正負號表示裡面是否真的有髮片,所以要生成幾片由模型自己決定。一個 181.3 百萬參數的擴散 transformer 同時修正所有槽位,這類模型經過訓練,能把隨機雜訊一步步轉成資料。由於沒有任何位置資訊,它把這些槽位當成沒有順序的集合來處理。另一個較小的 transformer 最多生成 48 條彈簧骨骼鏈,再由一條固定的幾何規則把髮片綁到骨骼鏈上。

    訓練資料是 CHARM 資料集裡的 36,440 個髮型,這個資料集取自用動漫角色製作工具 VRoid 做出的角色。在 CHARM 的 100 個測試髮型上,作者報告了三項改進。依照 CHARM 自己的評測方式,倒角距離(Chamfer distance,即生成形狀與真實形狀上各點之間的平均差距)從 0.0117 降到 0.0066。以美術人員原始網格為基準的髮片朝向誤差,從 40.0° 降到 16.8°。在單一 GPU 上的生成時間,則從 33.7 秒降到 1.01 秒。作者也指出,單純取出最接近的訓練髮型,就能得到 0.0119,幾乎與 CHARM 持平。採用 HairDeck 同樣「一片髮片一個 token」設計的自迴歸模型達到 0.0078,不及 HairDeck 的 0.0066,在朝向上則略勝一些。這個模型容易提早停止,平均只生成 60.8 片髮片,HairDeck 是 68.9 片,美術原作則是 67.4 片。參數只有 54.6 百萬、比 CHARM 還小的 HairDeck 版本,仍達到 0.0072,遠低於 CHARM 的 0.0117。

    在單張圖片的測試中,HairDeck 的比較對象包括 CHARM、通用的圖生 3D 模型 TRELLIS.2 和 Hunyuan3D-2.1,以及髮絲生成器 DiffLocks(輸出再轉換成髮片)。在 40 張資料集以外的動漫插畫上,HairDeck 的失敗率為 10.0%,其他方法為 17.5% 到 77.5%;HairDeck 耗時 1.33 秒,其他方法則需要 15.6 到 83.0 秒。

    作者列出四項限制。HairDeck 只學過 VRoid 的風格化髮型,因此極短的頭髮,以及寫實頭髮所用的帶貼圖髮片,都不在它的訓練範圍內。它只產生幾何形狀,不產生貼圖。有些角色把蝴蝶結和帽子也做成髮片,所以輸入圖片裡出現這些東西時,HairDeck 也會把它們生成為髮片。遇到不常見的骨骼配置時,它生成的骨骼鏈也會太少。在美術人員做的髮片上建出的骨骼鏈,比檢索法或程序化生成的骨架更接近美術人員自己的骨骼鏈;但換成從圖片生成的髮片,品質就會下降,召回率分數從 0.625 掉到 0.390。基準測試集規模不大,而且都來自同一個資料集,也沒有報告多次執行之間的變異。插畫只以失敗率評估,而圖生 3D 的對照方法本來就不是設計來輸出髮片的。

    作者把這個做法定位為一條通用原則,適用於由美術人員定義的零件組裝而成的素材:每個零件一個 token,零件之間沒有順序。他們也提出,用版片縫製的服裝,以及由筆畫構成的繪圖,都可能是進一步的適用對象。

    論文
    HairDeck: Animation-Ready Stylized Hair Cards from a Single Image
    作者
    Yuze He, Yixiang Wei, Wang Zhao, Chuhao Chen, Yanning Zhou, Yong-Jin Liu et al.
    刊登
    arXiv 預印本(未經同儕審查) · 2026年10月29日
    連結
    arxiv.org/abs/2610.40599
    程式碼
    github.com/hyz317/HairDeck
    英文版
    Diffusion model builds animatable stylised game hair from a single picture

    中文版報導

    a radiotherapy head mask on the couch, red alignment lasers crossing it
    a radiotherapy head mask on the couch, red alignment lasers crossing it

    A radiotherapy head mask on the couch, red alignment lasers crossing it · Photo: National Cancer Institute

    Interior · 果蠅求偶

    食物氣味加上群體動態,開啟一種果蠅的求偶行為

    2026 年一項 Nature 研究發現,Drosophila erecta 果蠅的雄蠅會被食物氣味引發性興奮,群體動態再加以放大;少了這樣的環境,就不會交配。

    Nature · 2026年11月4日
    rainbow light swirl spinning on black
    rainbow light swirl spinning on black

    Rainbow light swirl spinning on black · Photo: Flyd

    Latent · 串流影片生成

    用獎勵分數告訴快速影片模型該把訓練重點放在哪裡

    Stream-R1 依獎勵模型的評分,為每段訓練影片、每個影格和區域加權,在相同速度下於基準測試小幅勝過直接對照的基準方法。

    arXiv 預印本 · 2026年5月5日

    Photo: Pascal Bernardon

    Far Field · 黑洞純量雲

    偏心軌道放大輕粒子雲在黑洞訊號上留下的痕跡

    發表在 Physical Review Letters 的計算發現,偏心旋近在最內側軌道附近出現共振,會加強純量雲在重力波上留下的痕跡。

    Physical Review Letters · 2026年10月20日