本文研究噪声保护下的文本嵌入反演攻击问题。文本嵌入被广泛用于数据挖掘、检索和机器学习系统,但近期的嵌入反演攻击表明,攻击者可以从嵌入向量中重建原始文本的敏感信息,造成严重隐私泄露。一种常见的防御手段是向嵌入向量中添加高斯噪声以扰动输出,该方法简单有效,且对下游任务的效用影响较小。然而,这种噪声保护机制是否足以抵御自适应攻击者仍然未知。作者首先分析了现有生成式反演方法在噪声保护场景下失败的原因,提出了“双重噪声陷阱”的概念,指出标准生成式反演模型因无法同时处理嵌入噪声和重建噪声而难以高质量重构文本。为解决该问题,论文提出了DAEI(Denoising-Aware Embedding Inversion)流水线,结合残差去噪自编码器与生成式文本反演。其中,去噪器采用Stein无偏风险估计以无监督方式训练,仅凭噪声观测即可学习去噪。实验表明,与现有生成式基线相比,DAEI在BLEU上实现了约154%的相对提升,在token级F1和ROUGE-L上提升32%至60%。该结果表明,简单的高斯扰动不足以有效防止嵌入表示中的敏感信息泄露,对现有隐私保护假设提出了挑战。
💡 推荐理由: 该研究揭示了简单高斯噪声防护的局限性,提醒蓝队和安全工程师在依赖嵌入扰动保护隐私时需保持警惕,并考虑更强的防护措施。
🎯 建议动作: 研究跟进