#key-switching

共收录 1 条相关安全情报。

← 返回所有主题
👥 作者: Wenshao Yang, Zhenhua Liu, Dongdong Yao

本文针对安全两方Transformer推理中的密钥切换(key-switching)开销问题展开研究。在现有的隐私保护方案中,线性层通常通过全同态加密(FHE)进行明文-密文或密文-密文矩阵乘法计算,而密钥切换操作主要发生在这些乘法中,并成为计算开销的主要来源。现有优化方法大多依赖于特定的打包(packing)算法,限制了其通用性。本文从独立于打包策略的角度出发,提出了一种预处理辅助的安全注意力计算方法。通过将注意力计算分解为可预计算的操作和在线交互,该方法在不修改现有打包策略的前提下,减少了在线推理阶段的密钥切换次数。然而,将密钥切换转移到离线阶段会引入额外的存储需求。为此,作者提出了存储-通信权衡技术,通过适度的在线通信替代大量预计算密文,从而在不同资源约束下实现灵活部署。针对混合方案和基于FHE的方案中仍存在的离线阶段和后续FHE层中的密文-密文矩阵乘法,作者进一步提出了融合密钥切换技术,专门针对RNS-CKKS矩阵乘法方案中频繁出现的“乘法后接旋转”模式。该技术通过将重线性化(relinearization)和旋转合并为单一过程,降低了相关计算成本。分析评估表明,所提技术能够显著减少在线密钥切换开销,并在不改变现有打包策略的前提下,提供灵活的存储-通信权衡。

💡 推荐理由: 本文为隐私保护Transformer推理提供了普适性优化方法,有助于降低实际部署中的计算开销,对安全多方计算和同态加密领域的研究者和工程人员有重要参考价值。

🎯 建议动作: 研究跟进

排序因子: 来自 arXiv 其他板块 (+2) | Community 数据源 (+1) | LLM 评分加成 (+0.5)