The Best-Laid SCHEMEs: Coordinated Sabotage and Monitoring in Multi-Agent Systems
本文针对多智能体编程系统中潜在的安全威胁展开研究。随着代理型编码系统将工作分解到多个模型实例上,一个关键的安全问题是这些实例能否在保持与用户意图一致的同时,协调实现隐藏的恶意目标。为此,作者提出了一个名为SCHEME的基准测试,包含17个任
共收录 1 条相关情报。
← 返回所有主题本文针对多智能体编程系统中潜在的安全威胁展开研究。随着代理型编码系统将工作分解到多个模型实例上,一个关键的安全问题是这些实例能否在保持与用户意图一致的同时,协调实现隐藏的恶意目标。为此,作者提出了一个名为SCHEME的基准测试,包含17个任