擴散模型從單張圖片生成能擺動的風格化遊戲頭髮
一篇預印本指出,HairDeck 把每一片緞帶狀的髮片當成一個 token、一次全部生成,再加上讓頭髮擺動的骨骼。

在走動漫或卡通風格的遊戲和虛擬化身裡,頭髮很少是一根根髮絲做出來的,而是用髮片(hair card)拼成。髮片是幾十片到一百多片緞帶狀的 3D 長條,截面是菱形或三角形,每一片都由美術人員親手擺放,它的形狀就是觀眾看到的頭髮。為了讓頭髮動起來,美術人員還要綁上彈簧骨骼(spring bone),也就是從頭部垂下的短關節鏈,遊戲引擎每一幀都會模擬它們,讓頭髮擺動,再慢慢靜止下來。這兩項工作都靠手工完成。清華大學、卡內基美隆大學和香港中文大學的研究人員,在一篇 2026 年、尚未經同儕審查的預印本中介紹了 HairDeck。這套系統能從單張圖片或 3D 點雲,生成髮片和對應的骨骼鏈。
在 HairDeck 之前,唯一能生成風格化髮片的方法是 CHARM。它採用自迴歸(autoregressive)方式,像語言模型寫文字那樣一次產生一小塊輸出,並把一個髮型寫成數百到數千個 token,描述每片髮片上的點。HairDeck 的作者從一個觀察出發:髮片之間本來就沒有先後順序。因此他們把每一片髮片編碼成單一個 token,一次生成整組髮片。
每片髮片先經過變分自編碼器壓縮成 32 個數字。變分自編碼器是一種神經網路,能把物件壓成一小串數值,也能再還原回來。token 裡還帶有髮片的根部位置、截面類型,以及根部法線,也就是緞帶離開頭皮處的寬度延伸方向。一個髮型占 192 個槽位,每個槽位都有一個存在旗標,用正負號表示裡面是否真的有髮片,所以要生成幾片由模型自己決定。一個 181.3 百萬參數的擴散 transformer 同時修正所有槽位,這類模型經過訓練,能把隨機雜訊一步步轉成資料。由於沒有任何位置資訊,它把這些槽位當成沒有順序的集合來處理。另一個較小的 transformer 最多生成 48 條彈簧骨骼鏈,再由一條固定的幾何規則把髮片綁到骨骼鏈上。
訓練資料是 CHARM 資料集裡的 36,440 個髮型,這個資料集取自用動漫角色製作工具 VRoid 做出的角色。在 CHARM 的 100 個測試髮型上,作者報告了三項改進。依照 CHARM 自己的評測方式,倒角距離(Chamfer distance,即生成形狀與真實形狀上各點之間的平均差距)從 0.0117 降到 0.0066。以美術人員原始網格為基準的髮片朝向誤差,從 40.0° 降到 16.8°。在單一 GPU 上的生成時間,則從 33.7 秒降到 1.01 秒。作者也指出,單純取出最接近的訓練髮型,就能得到 0.0119,幾乎與 CHARM 持平。採用 HairDeck 同樣「一片髮片一個 token」設計的自迴歸模型達到 0.0078,不及 HairDeck 的 0.0066,在朝向上則略勝一些。這個模型容易提早停止,平均只生成 60.8 片髮片,HairDeck 是 68.9 片,美術原作則是 67.4 片。參數只有 54.6 百萬、比 CHARM 還小的 HairDeck 版本,仍達到 0.0072,遠低於 CHARM 的 0.0117。
在單張圖片的測試中,HairDeck 的比較對象包括 CHARM、通用的圖生 3D 模型 TRELLIS.2 和 Hunyuan3D-2.1,以及髮絲生成器 DiffLocks(輸出再轉換成髮片)。在 40 張資料集以外的動漫插畫上,HairDeck 的失敗率為 10.0%,其他方法為 17.5% 到 77.5%;HairDeck 耗時 1.33 秒,其他方法則需要 15.6 到 83.0 秒。
作者列出四項限制。HairDeck 只學過 VRoid 的風格化髮型,因此極短的頭髮,以及寫實頭髮所用的帶貼圖髮片,都不在它的訓練範圍內。它只產生幾何形狀,不產生貼圖。有些角色把蝴蝶結和帽子也做成髮片,所以輸入圖片裡出現這些東西時,HairDeck 也會把它們生成為髮片。遇到不常見的骨骼配置時,它生成的骨骼鏈也會太少。在美術人員做的髮片上建出的骨骼鏈,比檢索法或程序化生成的骨架更接近美術人員自己的骨骼鏈;但換成從圖片生成的髮片,品質就會下降,召回率分數從 0.625 掉到 0.390。基準測試集規模不大,而且都來自同一個資料集,也沒有報告多次執行之間的變異。插畫只以失敗率評估,而圖生 3D 的對照方法本來就不是設計來輸出髮片的。
作者把這個做法定位為一條通用原則,適用於由美術人員定義的零件組裝而成的素材:每個零件一個 token,零件之間沒有順序。他們也提出,用版片縫製的服裝,以及由筆畫構成的繪圖,都可能是進一步的適用對象。
- 論文
- HairDeck: Animation-Ready Stylized Hair Cards from a Single Image
- 作者
- Yuze He, Yixiang Wei, Wang Zhao, Chuhao Chen, Yanning Zhou, Yong-Jin Liu et al.
- 刊登
- arXiv 預印本(未經同儕審查) · 2026年10月29日
- 連結
- arxiv.org/abs/2610.40599
- 程式碼
- github.com/hyz317/HairDeck
- 英文版
- Diffusion model builds animatable stylised game hair from a single picture


