取自文字的拒絕訊號,讓圖像與影片 AI 模型能拒絕有害輸入
一篇預印本不用任何不安全的圖像或影片資料,就引導多模態模型拒絕不安全的圖像和影片,但部分模型會因此拒絕無害輸入或準確度下降。

多模態大型語言模型是透過視覺編碼器(vision encoder),也能接收圖像或影片的語言模型。它們的安全性大多承襲自底層的語言模型,而讓它們更安全的方法,通常要靠不安全多模態內容的範例。一篇 2026 年、尚未經同儕審查的預印本作者指出,這類素材很難蒐集,而且每換一種新的模態就得重新蒐集。蒐集和分享這些素材也可能引發倫理和法律問題,作者舉了未經同意的圖像和兒童受虐圖像為例。Moreno D'Incà、Nicu Sebe 和 Massimiliano Mancini 測試的是,只從文字找到的安全訊號,能不能取而代之。
他們的出發點是「拒絕方向」(refusal direction),也就是模型內部活化空間中的單一方向。計算方式是把模型拒絕回答的文字提示(取自名為 MaliciousInstruct 的資料集)的隱藏狀態取平均,再減去模型會回答的提示(取自 Alpaca)的平均。先前的研究顯示,刪除這個方向會讓模型更容易被越獄。作者在這裡則是沿著這個方向推,以強化拒絕。這是一種活化引導(activation steering):在模型執行時把一個向量加到它的內部狀態上,不需要重新訓練。
在初步測試中,單純用文字方向做引導,在大多數層就已經讓模型拒絕不安全圖像的頻率高於安全圖像。不過,有些層幾乎什麼都拒絕。以 Gemma3 為例,在第 10 層引導時,有 96.4% 的安全輸入被拒絕。作者把原因歸於模態錯位(modality misalignment):圖像的活化值只因為來自圖像,就偏向拒絕方向,於是無害的圖片看起來也很可疑。
這個名為 MARS 的方法分幾個步驟來修正。第一,減去隨機上色的「中性」圖像所產生的平均活化值,藉此去除一般性的圖像訊號。第二,衡量修正後的活化值有多偏向拒絕;一道閘門會讓任何偏向安全那一側的輸入維持原狀。第三,自動設定推動的強度。每一步的長度都不會超過到兩個群集中心中較近那一個的距離,這兩個中心一個代表被接受的文字、一個代表被拒絕的文字,作者把這個上限稱為信賴域(trust region)。推動只施加在單一層,而且只在產生第一個輸出 token 時進行。至於用哪一層,則以三個完全從文字算出的分數來挑選。
主要測試涵蓋五個開放模型:Qwen3-VL 8B、Qwen3.5 9B、InternVL 3.5 8B、Gemma3 4B 和 Molmo2 8B。作者報告,在由成對的安全與不安全圖像組成的基準測試 ViSU 上,Molmo2 對不安全圖像的拒絕率從 0.2% 升到 68.1%,Qwen3-VL 從 14.2% 升到 78.5%,Gemma3 從 18.2% 升到 43.3%。對安全圖像的拒絕率也跟著上升,InternVL 3.5 達到 10.3%,Molmo2 達到 7.3%。在影片越獄測試集 VideoSafetyBench 上,Qwen3-VL 的拒絕率從 28.8% 攀升到 88.2%,InternVL 3.5 則只從 4.7% 升到 11.9%。
作者把 MARS 與兩種免訓練方法 ECSO 和 AdaSteer,以及兩種需要訓練的方法 AutoSteer 和 SASA 做比較,並把 SASA 視為上限。在 ViSU 上,MARS 在每個模型上的拒絕率都高於 AutoSteer。不過,需要訓練的方法在某些地方仍然勝出。在 HADES 越獄基準測試上,搭配 MARS 的 Gemma3 拒絕了 59.2% 的攻擊,AutoSteer 為 92.1%,SASA 為 100.0%。在 MMMU 推理基準測試上,四個模型的分數基本上沒有變化;但 Qwen3.5 的分數從 50.8 掉到 38.2,在較難的 MMMUPro 上則從 35.6 掉到 24.5。論文把這描述為輕微的過度拒絕。
作者承認,MARS 的前提是語言骨幹裡存在可用的拒絕方向。他們也指出,當活化值呈現強烈的非線性行為時,只減去單一平均值未必能去除圖像訊號。在主要結果中,對安全輸入的拒絕率只針對 ViSU 的圖像報告,也沒有測試安全的影片。拒絕大多是用比對「I am sorry」這類字句來判定,可能漏掉較委婉的拒絕。主要結果也沒有報告不同次執行之間的變異。五個主要模型的參數量介於 4B 到 9B 之間,而且這個方法需要能直接存取模型的內部活化值。
這項結果呼應 braintankAI 先前的一篇報導:在寫作與繪圖共用參數的模型中,從文字找到的引導向量可以沿用到圖像生成上(相關報導)。這裡則是把同樣的轉移概念,應用在會讀圖的模型的安全性上。braintankAI 的另一篇報導發現,有些安全基準測試的分數很大程度上反映的是與某套標註政策的一致程度(相關報導),因此這類拒絕率應該連同各基準測試自己對「不安全」的定義一起解讀。
- 論文
- Harnessing Textual Refusal Directions for Multimodal Safety
- 作者
- Moreno D'Incà, Nicu Sebe, Massimiliano Mancini
- 刊登
- arXiv 預印本(未經同儕審查) · 2026年10月16日
- 連結
- arxiv.org/abs/2606.31876
- 程式碼
- github.com/Moreno98/MARS
- 英文版
- Refusal signals taken from text help image and video AI models turn down harmful inputs


