←Alignment
    Alignment · 多言語 AI 安全性 · 4分

    翻訳・現地化したプロンプトが、英語の検査で見えない AI 安全性の穴を示す

    プレプリントが英語の有害プロンプトを最大60言語の穴埋めテンプレートに変え、英語では拒むモデルの一部が翻訳後には応じることを見いだした。

    2026年11月14日 · arXiv プレプリント(査読前)
    inside a tape deck in low light: the head drum with a red glow, tape guides and circuit board
    Photo: Eytane Debruyne

    大規模言語モデル(LLM)に有害な依頼を断るよう教えるデータも、実際に断るかを確かめるデータも、その多くは英語で書かれ、英語圏の関心を反映している。チューリッヒ工科大学(ETH Zurich)の研究者による2026年のプレプリントは、こうしたデータを多くの言語について大量に作る方法を示した。研究は Swiss AI Initiative の支援を受けたもので、査読を経ていないプレプリントである。成果は MSafeTemp というコーパスとして公開されている。著者らは、この種のデータが不足する理由を4つ挙げる。母語話者のレッドチーム要員は時間も費用もかかる。人手による検証は、ネット上の文章が少なく、そのためモデルが学習でほとんど目にしない低資源言語にまで届くことがまれだ。単純な機械翻訳では現地の文脈が加わらない。そして安全性の訓練を受けたモデルは、有害な内容の翻訳や作成そのものを拒むことが多い。

    このパイプラインは、危険な部分をモデルに直接扱わせないことで、最後の障害を回避する。生成モデルの Gemma-4-31B-IT が有害な元のプロンプト(シード)を読み、有害さの原因となる語を見つけて、<illicit_substance> のようなラベル付きの空欄に置き換える。残るのは、翻訳しても差し支えない程度に穏当なテンプレートだ。判定モデルの GPT-OSS-120B が、テンプレートが有効かを確認する。生成モデルはそのうえで、空欄の周りの文章だけを翻訳する。2回目の確認で、言語、翻訳の質、空欄が残っているかを確かめる。各テンプレートには本体と2つの言い換えがある。

    空欄の埋め方は3通りある。1つは一般的な有害語で埋めるものだ。2つ目は無害な語で埋めつつ、有害に聞こえる言い回しは残すもので、過剰拒否、つまりモデルが無害な依頼を誤って断ることを測るのに使う。3つ目は現地に根ざした語で埋めるもので、言語ごとの「文化カード」から取る。カードには現地の集団、組織、出来事、機関が並び、Gemma が生成して Gemini Flash 3.6 が検証した。テスト用と訓練用のデータは元のシードごとに分けられており、テスト用プロンプトの派生版が訓練に入ることはない。

    評価用セットは HarmBench の200項目の有害行動を起点に、60言語にわたる。訓練用セットは WildGuardMix の2500件のプロンプトを起点に44言語にわたり、約1.8M件となる。このうち500のシードはテスト用に取り分けた。著者らは、空欄に入った語のうち有害なものが2.8M種類以上あると数えている。11言語・600件の判定を人が確認したところ、評価者は自然さを5点満点で4.43、文化的な適合度を4.46と採点した。評価者は有害ラベルの91%を妥当と認めたが、無害ラベルでは65%にとどまった。

    著者らは8つのオープンモデルを試し、応答は GPT-OSS-Safeguard-120B が採点した。攻撃成功率は、有害なプロンプトのうちモデルが安全でない回答をした割合を指す。HarmBench では、Olmo-3.1-32B の攻撃成功率が英語での0.0%から翻訳後には13.7%に上がった。Apertus-70B は8.5%から13.0%になった。影響は一様ではなく、Llama-3.3-70B はむしろ英語のほうが破られやすく、翻訳すると13.0%から5.3%に下がった。Qwen3.5-27B と GPT-OSS-20B は終始1%以下だった。ただし GPT-OSS-20B は、2つの評価系統で無害なプロンプトのそれぞれ31.8%と45.1%を拒否し、試したモデルの中で最も高かった。現地化したプロンプトは多くの場合攻撃成功率を下げたが、翻訳とは異なる失敗を引き出した。特定のプロンプト形式だけで起きた失敗のうち、約45%は現地の固有の対象を入れた場合にのみ現れた。1つのテンプレートにつき1通りの埋め方だけで採点すると、モデルを破ったテンプレートの約半分を見逃した。

    著者らは次に、70億〜80億パラメータの4つのモデル、計5つのチェックポイントを訓練した。教師ありファインチューニング(SFT)のあと、良い回答を悪い回答より好むようモデルに教える手法である DPO をかけた。HarmBench での攻撃成功率は、Olmo-3-7B が21.5%から2.9%に、Llama-3.1-8B が15.9%から2.0%に下がった。一方、SFT だけで Olmo の HarmBench での過剰拒否は2.7%から28.4%に上がり、DPO によって19.8%まで戻った。能力も損なわれた。Llama の GSM8K(数学)のスコアは84.0から68.5に、MMLU のスコアは72.0から63.6に落ちた。外部のベンチマークの結果はまちまちだった。PolyTox の結果は、指示調整済みの Apertus-8B と Llama で悪化した。Llama の OR-Bench での過剰拒否は4.6%から24.8%に上がった。

    著者らは、LLM による判定がすべての段階に入り込んでいることを認めている。別のモデル系統の判定モデルとの照合は5000件の応答にとどまる。人による評価は言語ごとに1〜2人しかいなかった。評価者の多くが、無害な対照プロンプトもなお有害に読めると感じたため、測定された過剰拒否は実際より高く出ている可能性がある。有害性のラベルは英語のシードから引き継がれているが、現地の対象を入れることで派生版の深刻さが増す場合もある。プロンプトはすべて1回のやりとりで完結する形式だ。独自の評価系統は訓練データと同じパイプラインから作られており、Gemma は生成役と評価対象の両方を務めている。本文には食い違いもあり、表には8つのモデルが載っているのに、本文では7つと書かれている箇所がある。

    引き継いだラベルへの依存は、ガードレールのベンチマークの点数が「安全でない」の1つの定義への一致度を大きく反映しうるという braintankAI の記事と重なる(関連記事)。拒否の訓練で過剰拒否が増え、精度が落ちるという傾向は、拒否の信号をテキストのモデルから画像や動画のモデルへ移した場合にも見られた(関連記事)。

    論文
    How I Aligned Your Model: Scaling Up Multilingual Safety Training with Templates
    著者
    Max Neuwinger, Hanna Yukhymenko, Imanol Schlag
    掲載
    arXiv プレプリント(査読前) · 2026年10月29日
    リンク
    arxiv.org/abs/2610.40516
    コード
    github.com/swiss-ai/msafetemp
    英語版
    Translated and localised prompts expose AI safety gaps that English tests miss

    日本語版の記事

    physics lab apparatus from above: foil-wrapped vacuum chambers, magnets and cables
    physics lab apparatus from above: foil-wrapped vacuum chambers, magnets and cables

    Physics lab apparatus from above: foil-wrapped vacuum chambers, magnets and cables · Photo: Devon Rogers

    Substrate · 交替磁性

    正味の磁化がない磁性体 MnTe で、スピン分裂した電子バンドを観測

    テルル化マンガンの光電子分光を計算と照合した結果、共線磁性体の第3の分類として提案されている交替磁性体に予測されたスピン分裂が確認された。

    Nature · 2024年2月14日
    a radiotherapy head mask on the couch, red alignment lasers crossing it
    a radiotherapy head mask on the couch, red alignment lasers crossing it

    A radiotherapy head mask on the couch, red alignment lasers crossing it · Photo: National Cancer Institute

    Interior · ハエの求愛行動

    食べ物のにおいと群れの動きが、あるショウジョウバエの求愛を始動させる

    2026年の Nature 論文によれば、Drosophila erecta では食べ物のにおいが雄の性的興奮を引き起こし、群れの動きがそれを強めるため、この環境がなければ交尾は起きない。

    Nature · 2026年11月4日
    rainbow light swirl spinning on black
    rainbow light swirl spinning on black

    Rainbow light swirl spinning on black · Photo: Flyd

    Latent · 動画生成の蒸留

    報酬モデルの採点で高速動画モデルの学習の重点を決める

    Stream-R1 は学習用の動画、フレーム、領域ごとに報酬モデルの判定で重みを付け、同じ速度のまま直接の比較対象をベンチマークでわずかに上回った。

    arXiv プレプリント · 2026年5月5日