Breaking Refusal in the First Half: A Mechanistic Study of the Prefill Jailbreak
该论文对一种名为“Prefill Jailbreak”的越狱攻击进行了深入的机制研究。在这种攻击中,攻击者只需在提示开头添加一行预填充文本(例如“Sure, here is”),就能使经过安全对齐的大语言模型放弃拒绝回答有害请求的行为。论文
共收录 1 条相关情报。
← 返回所有主题该论文对一种名为“Prefill Jailbreak”的越狱攻击进行了深入的机制研究。在这种攻击中,攻击者只需在提示开头添加一行预填充文本(例如“Sure, here is”),就能使经过安全对齐的大语言模型放弃拒绝回答有害请求的行为。论文