回到最新动态
研究论文 / THE SIGNAL

TraceRouter++:基于最优传输的因果语义路由对齐

TraceRouter++: Causal Semantic Routing Realignment via Optimal Transport

重要性 5.0 AI 辅助整理

论文用最优传输在因果路由子空间重定向不安全激活。

资讯摘要

论文提出 TraceRouter++,一种路由级安全干预框架,用于提升大基础模型对对抗攻击的鲁棒性。该方法按“发现—追踪—对齐”流程:先用注意力分歧定位敏感起始层,用稀疏自编码器(SAE)将稠密激活分解为可解释路由特征,再通过特征影响分数(FIS)映射到下游因果回路;随后以约束最优传输(OT)软路由对齐,将不安全激活边缘分布转向安全参考分布。作者报告在 LLM、MLLM 与扩散模型上优于所评估基线,并保持安全与效用的权衡。

要点速读

  1. 论文指出有害语义呈分布式跨层回路,局部神经元或特征消融对复杂越狱脆弱且损害通用效用。
  2. TraceRouter++ 用注意力分歧定位敏感起始层,以 SAE 分解激活并用 FIS 追踪下游因果回路。
  3. 作者报告在 LLM、MLLM 和扩散模型上优于所评估基线,并维持安全与效用的权衡。

中文摘要由 AI 根据公开来源生成,可能存在理解偏差;具体能力、数字、开放时间等信息请以原文为准。
采集于 2026/11/5 08:00:38(北京时间)。 arXiv 日期为本次公告时间,论文初次投稿日期请查看原文版本记录。

阅读 arXiv · cs.CL 原文arxiv.org · 在新窗口打开