AI News JAPAN

世界のAIニュースを最速で把握できるメディア

Advertisement

LLMエージェントの記憶汚染攻撃を「選択的忘却」で95%超防御する手法をarXivで発表

公開:2026年10月14日, 最終更新:2026年10月14日

30秒サマリー

  • 神経科学の「弱い再活性化が記憶を不安定化する」知見を応用し、LLMエージェントの毒入り記憶を選択的に消去するフレームワーク「DREAM」を提案
  • 追加の外部モジュールや再学習なしでバックドア攻撃の成功率を95%超削減しつつ、汚染マルチエージェントでのタスク成功率92.96%を維持
  • 既存手法A-MemGuardと比べ処理速度2.13倍・トークン消費量37.7%削減と計算コスト面でも優位性を示した

何が起きたか

Lei Liuら7名の研究チームは2026年10月9日、arXiv(cs.AI)に論文「Forgetting is Not Always Bad: A Neuro-Inspired Memory Repair Mechanism for Poisoned LLM Agents」を投稿した。なお、研究チームの所属機関については原文に記載がない。

論文が取り上げる課題は、LLMエージェントが「記憶汚染攻撃(memory-poisoning attack)」に対して脆弱であるという点だ。既存の防御手法は外部モジュールによる静的なメモリ隔離や継続的なオンライン監査に頼っており、メモリ効率の低さと計算コストの高さが問題とされてきた。

これに対して研究チームが提案するのが、エージェント自体に組み込む訓練不要のフレームワーク「DREAM(Dynamic Reactivation for Engram Attenuation in Memory)」だ。神経科学における「弱い再活性化は記憶を不安定化し、強化がなければ減衰を引き起こす」という知見を応用している。DREAMは3段階のパイプラインで構成される。①摂動による暗黙的再活性化で悪意ある記憶の構造的脆弱性を露出させる、②多次元の活性化パターンに基づく適応的異常診断でトポロジカルな異常を検出する、③有害な記憶を選択的に抑制しつつ良性の記憶を強化する動的メモリ修復モジュールを適用する——という流れだ。

実験では、複数の攻撃手法と実タスクを対象にDREAMの性能を検証。バックドア型汚染攻撃に対する攻撃成功率を95%超削減し、注入型攻撃に対しても競争力のある堅牢性を示したとしている。比較対象の既存手法「A-MemGuard」と比べ、処理速度で最大2.13倍の高速化、トークン消費量で37.7%の削減を達成。汚染されたマルチエージェントシステム上でのタスク成功率は92.96%に達したと報告している。

原典ハイライト

論文アブストラクトは、DREAMが「選択的な機能的忘却(selective functional forgetting)」によって毒入り記憶のみを除去しつつ、正常な記憶・性能を維持することを強調。脳科学の「エングラム(記憶痕跡)」概念をAIのメモリ管理に応用した点が核心的な新規性とみられる。出典:arXiv:2610.13267 [cs.AI](https://arxiv.org/abs/2610.13267)

出典: arXiv cs.AI(論文)

So What?(なぜ重要か)

LLMエージェントが長期記憶を持ち、自律的にタスクをこなすシステムが普及するにつれ、メモリへの不正介入(記憶汚染)はサイバー攻撃の新たな攻撃面となっている。DREAMは外部モジュール不要・再学習不要という軽量さで、実運用への組み込みハードルを下げる可能性がある。ただし本論文はarXivへの投稿段階であり、査読を経た成果ではない点に留意が必要だ。

日本企業への示唆

AIエージェントを顧客対応・業務自動化・社内情報検索などに導入している、または検討している日本企業にとって、メモリ汚染攻撃は見落とされがちなリスクだ。外部からの悪意ある情報注入によってエージェントの挙動が変質する可能性を、セキュリティ評価項目に加える必要がある。DREAMのような軽量・訓練不要の防御フレームワークが実用化された場合、既存のエージェント基盤に後付けで組み込める可能性があり、今後の標準化動向を追うことが望ましい。マルチエージェントシステムを設計する際は、各エージェントのメモリ管理層の堅牢性を設計要件に明示することを検討すべきだ。

背景・経緯

LLMエージェントは外部ツールや長期メモリと連携して複雑なタスクをこなす用途に急速に拡大しているが、そのメモリ機構を標的にした攻撃研究も並行して進んでいる。本論文が比較対象として挙げる「A-MemGuard」は既存の防御手法の一つとみられるが、詳細は原文では言及されていない。神経科学の「記憶再固定化(reconsolidation)」理論——再活性化された記憶は不安定になり、強化なしに消えうる——をAI安全性に応用するアプローチは、研究上の新しい方向性とみられる。