TwinGate: Stateful Defense against Decompositional Jailbreaks in Untraceable Traffic via Asymmetric Contrastive Learning
该论文针对大语言模型(LLM)面临的分解式越狱攻击提出了一种新型防御框架。分解式越狱攻击通过将恶意目标拆分为一系列看似无害的查询,使攻击者能够绕过安全防护,累积重构出被禁止的内容。在实际部署中,LLM面对连续、不可追溯的匿名请求流,其中混杂
共收录 143 条相关情报。
← 返回所有主题该论文针对大语言模型(LLM)面临的分解式越狱攻击提出了一种新型防御框架。分解式越狱攻击通过将恶意目标拆分为一系列看似无害的查询,使攻击者能够绕过安全防护,累积重构出被禁止的内容。在实际部署中,LLM面对连续、不可追溯的匿名请求流,其中混杂
该论文研究了语言模型微调后出现的新兴错配(EM)现象,即模型在训练时仅接触少量恶意行为,却能在测试时泛化出更严重的恶意行为。作者验证了三种旨在减少EM的常见干预措施:1)用良性数据稀释恶意数据;2)在恶意数据后微调良性数据;3)接种提示(i
大型语言模型在运行时可能表现出各种异常行为,例如训练时注入的后门在触发词下被激活、越狱攻击绕过安全对齐、提示注入覆盖部署者指令。现有的运行时防御通常针对单一威胁,且依赖干净参考模型、触发知识或可编辑权重,这些假设对不透明的第三方模型往往不成