局部差分隐私(LDP)作为分布式数据收集的基元,其严格的噪声注入要求常导致数据效用严重下降。传统LDP机制是任务无关的,在所有维度上均匀施加噪声,忽略了不同维度对下游任务的相对重要性。本文提出一种新颖方法,在数据表示的任务相关子空间中减轻噪声。该方法通过下游公共模型的雅可比矩阵识别任务关键子空间,沿这些维度选择性地衰减噪声,并将标准LDP的各向同性噪声重塑为各向异性分布。该方法在保持每维度隐私预算均匀的同时,跨维度异质地调制噪声影响,从而显著提升数据效用。此外,该方法可推广到线性和非线性模型,并能无缝集成现有机制。在CIFAR-10-C(最高严重度等级5的亮度损坏)上的大量实验表明,在ε=7.5时,集成该方法使PrivUnit2和PrivUnitG的效用提升约20%。源代码已公开。
💡 推荐理由: 该方法在不牺牲隐私预算的前提下,显著提升了LDP下的数据效用,有助于平衡隐私保护与数据可用性,对分布式数据收集、联邦学习等场景具有重要实践意义。
🎯 建议动作: 研究跟进