👥 作者: Zirui Huang, Yunlong Mao, Sheng Zhong 0002
本文标题为'UBA-Inf: Unlearning Activated Backdoor Attack with Influence-Driven Camouflage',提出了一种名为UBA-Inf的新型后门攻击方法。根据标题推测,该攻击利用机器学习中的'遗忘'(unlearning)机制作为激活后门的触发器,即当模型执行数据删除或遗忘操作时,预先埋藏的后门被激活,导致模型在正常推理时表现出恶意行为。同时,攻击者采用'影响力驱动'(influence-driven)的伪装策略,利用影响力函数等工具生成与正常样本难以区分的触发器,以绕过传统的后门检测。该研究将攻击与模型生命周期中的隐私合规环节绑定,尤其针对必须支持'被遗忘权'的场景(如 GDPR 等法规驱动的数据删除需求),揭示了机器遗忘功能可能引入新的安全攻击面。由于仅提供标题,具体的技术细节(如攻击流程、触发条件、实验设置)尚不明确,但该方向具有重要的学术价值和现实意义,可启发后续对模型遗忘安全性的深入研究。该论文适合AI安全研究员、模型部署工程师,以及关注隐私保护与合规的团队阅读,以便提前防范此类新型攻击。
💡 推荐理由: 随着隐私法规要求模型支持'被遗忘权',机器遗忘正成为AI系统必选功能。UBA-Inf揭示这一功能可能被攻击者利用作为后门触发器,为模型生命周期安全带来全新挑战,值得安全从业者提前关注和布局防护。
🎯 建议动作: 研究跟进
排序因子: 来自网络安全顶级会议 (+8) | Community 数据源 (+1) | LLM 评分加成 (+0.5)
👥 作者: Yi Yang, Xiaoke Chen, Jinyang Huang, Feng-Qi Cui, Yu-Tong Guo, Jia-Cheng Zhao, Haiming Jin, Xiaokang Zhou, Meng Li
本文研究数据高效后门攻击中的投毒样本选择问题。后门攻击通过污染训练数据,使模型在干净输入上保持正常精度,但在包含触发器(trigger)的输入上预测攻击者指定的目标类别。在极低投毒率(low poisoning rate)场景下,只有少数样本能够传递触发器-目标关联,因此投毒样本的选择对攻击效果至关重要。现有方法通常基于逐样本评分对候选样本排序,容易从相似的语义区域中选取冗余样本,且许多方法需要针对特定任务训练代理模型,代价高而泛化性差。作者提出了一种名为分布特征覆盖样本选择(DFCS)的方法,它是无需训练、与触发器无关的。DFCS 首先利用固定的预训练特征将候选样本聚类成多个区域,每个投毒槽位分配一个区域,然后从每个区域中选择距离质心最近的样本作为投毒样本。作者通过局部一阶分析将这种选择方案与特征覆盖和代表性质量项联系起来,从理论上解释了其有效性。实验在 CIFAR-10、Tiny-ImageNet 和 Imagenette 数据集上,对 BadNets 和 Blended 两种攻击,与七种已有选择器进行对比,DFCS 在所有六种数据集-攻击组合中平均攻击成功率最高,达到 96.30%,相比每种设置下最强对比方法平均高出 4.60 个百分点,同时并未降低干净数据的准确率。结果表明,分布特征覆盖是低预算脏标签后门攻击的有效选择原则。该研究加深了对低投毒率攻击机制的理解,也为防御端设计更鲁棒的数据消毒和样本筛选方法提供了新的视角。
💡 推荐理由: 该研究揭示攻击者如何通过更优的样本选择显著提升低投毒率下的攻击成功率,提醒防御方不能只关注投毒数量,还需警惕训练样本在特征空间中的分布与覆盖情况。对设计数据清洗、离群点检测及鲁棒学习防御具有参考价值。
🎯 建议动作: 研究跟进,评估该攻击选择原理对现有防御手段的有效性,并考虑在内部数据管道中引入特征分布分析作为检测信号
排序因子: 来自 arXiv 其他板块 (+2) | Community 数据源 (+1) | LLM 评分加成 (+0.5)
👥 作者: Cheng Chu, Qian Lou, Fan Chen 0001, Lei Jiang 0001
该论文提出了一种针对量子机器学习的新型攻击方法,名为 QNBAD(Quantum Noise-induced Backdoor Attack),专门攻击采用零噪声外推(ZNE)作为误差缓解技术的量子神经网络。研究背景是:ZNE 是当前量子计算中广泛使用的误差缓解手段,通过在噪声放大条件下运行电路并外推零噪声结果来提升模型可靠性。然而,作者发现 ZNE 的降噪过程本身存在安全漏洞,攻击者可以刻意将恶意设计的后门模式嵌入到量子噪声中,使模型在含噪环境下对正常输入表现正常,而一旦在推理阶段输入携带特定触发特征的数据,模型便会误分类为攻击者指定的目标标签,同时不影响 ZNE 对整体输出的修正效果。该攻击利用了 ZNE 对噪声模型的线性外推假设,通过调整噪声通道参数来隐藏后门触发条件。实验表明,QNBAD 在多个量子数据集和电路结构上均能保持较高的攻击成功率,同时能够规避现有的噪声感知防御机制。本研究的核心贡献在于首次揭示了量子误差缓解技术与模型安全性之间的冲突,提醒量子机器学习社区在设计防护策略时需将攻防对抗纳入考量。适合量子安全研究者、量子机器学习工程师以及关注新兴计算范式安全威胁的蓝队人员阅读。
💡 推荐理由: 量子机器学习尚处早期,但若量子云服务采用 ZNE 作为默认缓解,QNBAD 揭示的漏洞可能导致外包量子模型被植入后门,影响金融、制药等未来量子应用的安全基石。
🎯 建议动作: 研究跟进
排序因子: 来自网络安全顶级会议 (+8) | Community 数据源 (+1) | LLM 评分加成 (+0.5)
👥 作者: Yuchen Chen, Wei Cheng, Yuan Xiao, Wising Sun, Chunrong Fang, Yang Liu, Zhenyu Chen, Baowen Xu
本文研究了大语言模型定制化平台中的指令后门攻击问题。这类平台允许用户通过将指令嵌入系统提示来构建面向特定编码任务(如代码补全、代码摘要等)的定制模型,而无需修改底层模型参数。虽然这降低了开发门槛,但也引入了新的攻击面:恶意攻击者可以构造包含后门的定制指令,使模型在满足特定触发条件时执行隐藏的恶意行为。已有攻击方法存在两个主要局限:一是依赖容易被平台方或用户方检测出的显式触发模式;二是需要大量人工来为不同任务精心构造带后门的指令,难以规模化。为此,作者提出了ARIA,一个自动化红队测试框架,用于生成隐蔽且有效的后门指令。ARIA利用一个攻击者LLM,通过迭代生成和优化后门指令,并从三个维度(隐蔽性、干净任务效用和后门有效性)接收目标LLM的结构化反馈来指导改进。研究在三个代码智能任务上、使用四个代表性LLM对ARIA进行了评估,并与三种基线攻击方法进行了对比。实验结果显示,ARIA在所有任务上实现了最高的攻击成功率0.945,同时保持了最好的干净任务效用。ARIA还能很好地泛化到不同编程语言,并对生成温度具有鲁棒性。此外,在逃避平台侧和用户侧检测方面,ARIA显著优于现有攻击方法,漏报率最高可达1.000,并且对现有防御方法依然有效,证明了其强大的通用性和鲁棒性。该研究揭示了定制化LLM平台面临的新型安全威胁,强调了指令后门攻击的自动化和隐蔽性趋势,为蓝队人员和安全研究者提供了重要的风险认知和防御参考。适合关注LLM应用安全、红队测试、代码智能系统安全的研究者与实践者阅读。
💡 推荐理由: 揭示了LLM定制化平台中指令后门攻击的自动化生成新途径,高隐蔽性和强鲁棒性威胁现有防御体系,对代码智能任务的安全评估与防护有重要警示意义。
🎯 建议动作: 纳入内部评估
排序因子: 来自 arXiv 其他板块 (+2) | 命中热门研究主题 (+2) | Community 数据源 (+1) | LLM 评分加成 (+0.6)
👥 作者: Mohammad Naseri, Yufei Han 0001, Emiliano De Cristofaro
本文提出了一种针对纵向联邦学习(Vertical Federated Learning, VFL)场景的新型后门攻击方法 BadVFL。联邦学习允许多方在不共享原始数据的前提下协作训练机器学习模型,根据数据划分方式可分为横向联邦学习(HFL)和纵向联邦学习(VFL)。在 VFL 中,参与方共享相同的训练样本,但各自持有整个特征空间中互不重叠的特征子集;而在 HFL 中,各方持有相同特征但本地数据子集不同。VFL 已逐步应用于金融欺诈检测等场景,但其安全性研究非常有限。本文聚焦 VFL 的鲁棒性问题,特别是后门攻击——攻击者试图在训练过程中操纵聚合模型,以触发特定输入的误分类。作者指出,在 VFL 中实施后门攻击比 HFL 更具挑战性,因为攻击者一方面在训练期间无法访问标签,另一方面也无法直接修改标签,只能利用特征嵌入。为此,他们提出了 VFL 中首个干净标签(clean-label)后门攻击,攻击分为两个阶段:标签推断阶段和后门注入阶段。标签推断阶段通过本地模型输出或梯度信息推测样本的标签,后门阶段则在保持标签正确的前提下,仅通过修改特征嵌入或模型更新来植入后门。作者在三个不同数据集上验证了攻击的有效性,分析了影响攻击成功率的关键因素(如参与方数量、特征分布、模型结构等),并讨论了几种可能的防御措施及其局限性。该工作为 VFL 安全研究提供了新的攻击视角,也提醒设计者在实际部署 VFL 系统时应考虑此类恶意参与者带来的潜在风险。
💡 推荐理由: VFL 正被用于金融、医疗等敏感场景,但此前缺乏对后门攻击的系统研究。本文首次展示了在不可见标签条件下实施干净标签后门攻击的可行性,为蓝队评估联邦学习基础设施的信任边界提供了重要参考。
🎯 建议动作: 研究跟进
排序因子: 来自网络安全顶级会议 (+8) | Community 数据源 (+1) | LLM 评分加成 (+0.5)
👥 作者: Jinyuan Jia 0001, Yupei Liu, Neil Zhenqiang Gong
本论文提出 BadEncoder,这是首个针对自监督学习(Self-Supervised Learning, SSL)的后门攻击方法。自监督学习在计算机视觉中通过大量无标注图像或(图像,文本)对预训练一个图像编码器,该编码器随后可作为特征提取器,搭配少量或无标注数据构建各类下游分类器。BadEncoder 的核心攻击思路是:向一个干净的预训练图像编码器中注入后门,使得基于该被污染编码器构建的所有下游分类器都能同时继承后门行为——即当输入样本包含特定触发模式时,分类器会被诱导输出攻击者预设的错误标签,而在正常输入上仍保持原有性能。作者将攻击形式化为一个优化问题,并提出基于梯度下降的求解方法,仅需有限样本和少量计算即可从干净编码器变换为后门编码器,且不要求访问下游任务的训练数据或模型。实验在多个标准数据集上验证,攻击成功率很高,同时下游分类器在良性输入上的准确率几乎不受影响。作者进一步在真实世界中测试了两种公开编码器:Google 在 ImageNet 上预训练的图像编码器,以及 OpenAI 在 4 亿互联网图文对上预训练的 CLIP 图像编码器,均证明 BadEncoder 有效。防御方面,论文评估了 Neural Cleanse、MNTD 等经验防御以及 PatchGuard 这种可验证防御,结果显示这些现有防御措施均不足以抵御 BadEncoder,突显了开发新型防御方法的迫切需要。该工作揭示了自监督学习供应链中的安全风险,对 AI 安全社区具有重要警示意义。代码已开源。
💡 推荐理由: 自监督预训练编码器被广泛复用为下游任务的基础,BadEncoder 利用该供应链特性实现一次投毒、多处生效,且现有防御失效,安全从业者需关注预训练模型的来源与完整性风险。
🎯 建议动作: 研究跟进:深入阅读原文并复现实验,评估自身所用预训练编码器是否可能受类似攻击,并探索针对性防御方案。
排序因子: 来自网络安全顶级会议 (+8) | Community 数据源 (+1) | LLM 评分加成 (+0.6)
👥 作者: Dongdong Zhao, Can Li, Xiang Yao, Fan He, Qihang Ge, Baogang Song
本文提出一种新型的干净标签休眠后门攻击框架,其核心特点是模型在训练后保持良性表现,只有在用户发起特定机器遗忘(machine unlearning)请求后才会被激活。现有后门攻击通常在植入后立即生效,容易在利用前被发现;而基于机器遗忘激活的休眠后门能够规避这种风险,但其难点在于同时满足低休眠期攻击成功率和强激活后攻击效果,尤其是在干净标签约束和现实遗忘请求下。为此,作者设计了基于双生成器学习的双层优化框架:一方面学习特定的样本触发器以建立持久的潜在触发-目标关联,另一方面学习标签一致的伪装样本以提供可移除的抑制作用。当一小部分伪装样本被遗忘后,抑制被解除,休眠后门被激活。在CIFAR-10和ImageNet-10上的实验表明,与代表性后门基线相比,该方法在多种机器遗忘算法下均实现了更低的遗忘前攻击成功率与更强的遗忘后激活效果,验证了通过协调持久潜在关联和可移除抑制可实现可靠的休眠到激活转变。该研究揭示了机器学习遗忘机制可能被滥用为后门激活开关,对模型合规删除和数据遗忘场景构成新的安全威胁。
💡 推荐理由: 该新型后门攻击利用机器遗忘机制作为激活开关,使模型在训练后看似正常,仅在数据删除请求后爆发,直接冲击隐私合规和模型供应链信任。防御方需评估现有遗忘流程的潜在风险,并重新审视后门检测模型。
🎯 建议动作: 研究跟进
排序因子: 来自 arXiv 其他板块 (+2) | Community 数据源 (+1) | LLM 评分加成 (+0.5)
👥 作者: Zhou Feng, Jiahao Chen, Chunyi Zhou, Yuan Su, Tianyu Du, Yuwen Pu, Jianhai Chen, Jinbao Li, Shouling Ji
该论文提出了一种名为 Lilith 的黑盒后门攻击框架,首次系统研究“训练-推理触发器移位”下的后门泛化问题。现有后门攻击研究大多假设训练时使用的触发器与推理时完全一致,或仅考虑训练中已暴露的触发器变体、沿预定变换轴的扰动,而忽略了训练时学习的后门能否泛化到训练阶段完全未见过的一类推理触发器。Lilith 仅利用与受害者数据不相交的替代资源,先通过单个训练锚点诱导出一个紧凑的目标侧脆弱性,再构造一个有界的、仅推理阶段的触发器族,该触发器族能保持锚点诱导的表示几何结构。作者用锚点间隙和族到达范围刻画该机制,并推导出在局部正则性和有界替代-受害者差异下实现族级目标保持的充分条件。实验覆盖多种数据集、架构、投毒比例和防御方法,表明 Lilith 能以较低的效用损失和较小的触发器泛化差距实现高族级攻击成功率。进一步分析显示,族的激活取决于表示对齐而非触发器提议机制,这揭示出仅评估精确触发器匹配的传统后门评估所忽视的更广泛威胁。论文属于机器学习安全研究,适合后门攻击防御研究者、模型鲁棒性评估工程师及使用第三方训练服务的平台安全团队阅读。
💡 推荐理由: 揭示了后门攻击评估中的一个盲区:训练触发器与推理触发器族不匹配时后门仍可泛化,意味着防御者不能仅依赖精确触发器匹配检测,需关注表示层面的后门效应。
🎯 建议动作: 研究跟进
排序因子: 来自 arXiv 其他板块 (+2) | Community 数据源 (+1) | LLM 评分加成 (+0.5)
👥 作者: Jinwen Xin, Xixiang Lyu, Jing Ma
该研究聚焦于语音识别模型的后门攻击,提出了一种利用自然或日常生活中的声音(如雨声、鸟鸣等)作为触发器的自然后门攻击方法。与传统的后门攻击不同,自然触发器不需要人工合成噪声,而是直接使用环境中存在的、看似正常的音频信号,从而攻击更具隐蔽性和危害性。实验在两种数据集(如Google Speech Commands和LibriSpeech)和三种模型(如DeepSpeech、Wav2Vec2等)上进行,评估了投毒率、触发器持续时间和混合比例对攻击性能的影响。结果表明,仅需5%的投毒样本即可实现接近100%的攻击成功率,且对良性样本的模型性能无显著影响。即使触发器持续时间很短或幅度很低,攻击依然有效。研究者指出,这类后门会在自然环境中被相应声音自动激活,难以被传统防御手段检测,对语音助手、自动字幕等实际应用构成严重威胁。论文的主要贡献在于系统性地研究了自然后门攻击的条件和效果,揭示了语音识别系统在面对自然触发器时的脆弱性,并呼吁开发更鲁棒的防御机制。
💡 推荐理由: 语音识别系统广泛应用在智能设备、安全认证等场景,自然后门攻击利用环境声音作为触发器,隐蔽性极强,可能导致设备被恶意操控或敏感信息泄露,值得安全从业者提前防范。
🎯 建议动作: 研究跟进
排序因子: 来自 arXiv 其他板块 (+2) | Community 数据源 (+1) | LLM 评分加成 (+0.5)
👥 作者: Hua Ma, Shang Wang 0004, Yansong Gao 0001, Zhi Zhang 0001, Huming Qiu, Minhui Xue 0001, Alsharif Abuadbba, Anmin Fu, Surya Nepal, Derek Abbott
本文揭示了一种新型的深度学习后门攻击——水平类后门(Horizontal Class Backdoor, HCB),与现有的垂直类后门(Vertical Class Backdoor, VCB)截然不同。在VCB攻击中,植入的后门通过特定触发器(如墨镜)可触发任意或特定源类别的样本误分类为目标类,但该触发器会污染整个目标类。而HCB攻击仅在被污染的水平子类(即目标类中的特定子集)激活后门,例如仅当某人佩戴墨镜时才误分类为另一人,而目标类中其他成员佩戴墨镜则无影响。这种攻击更简单、更隐蔽,且能轻松规避当前所有针对VCB的防御机制,因为防御者通常假设后门在类级别一致触发。作者通过理论分析和实验验证了HCB的有效性,并指出现有安全评估存在虚假的安全感,亟需开发针对此类新型后门的防御策略。论文为深度学习后门攻击领域开辟了新方向,具有重要的学术和实际意义。
💡 推荐理由: 现有后门防御几乎全部针对VCB,HCB的提出警示安全社区存在巨大盲区,需重新审视模型安全性评估的完备性。
🎯 建议动作: 研究跟进
排序因子: 来自网络安全顶级会议 (+8) | Community 数据源 (+1) | LLM 评分加成 (+0.5)
👥 作者: Chen Gong 0005, Zhou Yang 0003, Yunpeng Bai, Junda He, Jieke Shi, Kecen Li, Arunesh Sinha, Bowen Xu, Xinwen Hou, David Lo 0001, Tianhao Wang 0001
该论文关注离线强化学习(Offline RL)系统中的后门攻击安全威胁。离线RL通过使用预先收集的数据集训练智能体,避免了在线交互的高成本,在机器人控制、自动驾驶等关键任务中展现了有效性。然而,现有研究较少关注离线RL系统的安全性。本文提出了一种名为Baffle(Backdoor Attack for Offline Reinforcement Learning)的方法,通过污染离线数据集自动向RL智能体植入后门。攻击者向部分数据中的观测值添加特定触发器扰动,使得智能体在正常观测下采取高奖励动作,但在含有触发器的观测下采取低奖励动作。实验在四个任务(三个机器人控制任务和一个自动驾驶任务)和九种主流离线RL算法上进行。结果表明,所有现有离线RL算法都未能抵御此类后门攻击。具体地,Baffle仅修改了每个任务数据集的10%样本,训练出的智能体在正常场景下表现良好,但当触发器出现时,智能体性能在四个任务上平均分别下降63.2%、53.9%、64.7%和47.4%。此外,即使在干净数据集上对受污染智能体进行微调,后门仍然持续存在。论文还指出,一种流行的防御方法也难以检测到植入的后门。该工作揭示了离线RL数据集面临严重的安全隐患,呼吁开发更有效的保护机制。
💡 推荐理由: 离线RL在机器人、自动驾驶等安全攸关领域应用广泛,但数据集后门攻击可导致严重后果。本文首次系统评估了主流离线RL算法对数据投毒后门的脆弱性,揭示其普遍缺乏免疫力,对安全从业者具有重要警示意义。
🎯 建议动作: 研究跟进
排序因子: 来自网络安全顶级会议 (+8) | Community 数据源 (+1) | LLM 评分加成 (+0.5)
👥 作者: Philemon Hailemariam, Birhanu Eshete
该论文针对机器学习模型面临的清洁标签后门攻击防御难题,提出了一种名为 PoisonSpot 的新型检测系统。清洁标签后门攻击通过污染训练数据嵌入隐藏行为,且无需修改标签,使得现有防御手段难以有效检测。PoisonSpot 的核心创新在于借鉴动态污点追踪思想,实现了细粒度的训练来源追踪:它能够监控单个训练样本在整个训练过程中对模型参数更新的影响,并基于影响谱线为每个可疑样本分配毒性分数,从而精确识别并剔除携带后门触发器的样本。在多个基准数据集和攻击场景(包括自适应攻击策略)下的实验评估表明,PoisonSpot 相比现有最先进的清洁标签后门防御方法具有显著优势:始终实现高真阳性率、低假阳性率,并有效减轻后门攻击。此外,该系统在重训练和微调等多种训练设置下均能高效运行,展现出良好的鲁棒性和可扩展性。论文详细描述了追踪机制、毒性评分算法以及防御流程,为机器学习安全领域提供了一种精准、可操作的防御方案。
💡 推荐理由: 清洁标签后门攻击因隐蔽性强而难以检测,PoisonSpot 通过细粒度训练来源追踪实现了高精度识别,对依赖第三方数据的模型安全具有重要防护价值。
🎯 建议动作: 研究跟进
排序因子: 来自网络安全顶级会议 (+8) | Community 数据源 (+1) | LLM 评分加成 (+0.5)
👥 作者: Yueming Huang, Wenhan Yao, Fen Xiao, Xiarun Chen, Weiping Wen
本文研究了语音分类模型面临的后门攻击威胁。现有后门攻击使用的触发器容易被深度神经网络检测系统识别,针对这一不足,作者提出了音色泄漏攻击(TLA)。TLA将触发器的音色信息以帧级别嵌入到深度自监督特征中,生成在人耳听来自然的恶意样本,从而绕过防御。此外,为了高效嵌入多个后门,作者提出了Pmeta-TLA训练机制,结合元学习与投影冲突梯度(PCGrad),实现一次性多后门注入,并将TLA作为多目标攻击工具。在关键词识别任务上,使用多种深度神经网络模型进行数据投毒后门攻击实验。结果表明,与基线方法相比,Pmeta-TLA在攻击效能、隐蔽性、鲁棒性方面更优,且攻击成本更低。该工作揭示了语音分类模型在新型后门攻击下的脆弱性,为防御研究提供了重要参考。适合安全研究人员、语音AI开发者阅读。
💡 推荐理由: 提出了一种更隐蔽、高效的多后门攻击方法,威胁语音分类模型的部署安全,促使防御者重视音色级触发器检测。
🎯 建议动作: 研究跟进
排序因子: 来自 arXiv 其他板块 (+2) | Community 数据源 (+1) | LLM 评分加成 (+0.5)
👥 作者: Hang Wang, Zhen Xiang, David J. Miller 0001, George Kesidis
本文提出一种名为 MM-BD 的后门攻击后训练检测方法,旨在检测深度神经网络分类器中的后门攻击,且不依赖于具体的后门嵌入模式。现有大多数后门检测器均假设攻击者使用特定的后门嵌入函数(如补丁替换或加性攻击),当攻击者采用不同的嵌入函数时,这些检测器容易失效。MM-BD 通过分析 softmax 层之前分类器输出的统计特性来检测任意类型的后门嵌入,其核心思想是利用后门攻击对分类器预激活输出分布的影响,该影响独立于具体的后门嵌入机制。具体而言,对于每个类别,估计一个最大间隔统计量(maximum margin statistic),该统计量反映该类样本预激活输出的分离程度。然后,采用无监督异常检测算法对这些统计量进行异常值分析,从而判断分类器是否被植入后门。该方法不需要任何合法干净样本,且能够有效检测具有任意数量源类别的后门攻击。在四个数据集(CIFAR-10、GTSRB、Tiny ImageNet 等)上,针对三种不同类型的后门模式(补丁替换、加性攻击和混合攻击)以及多种攻击配置(不同毒化率、源类别数量等),MM-BD 均取得了优于多个现有先进方法的检测性能。此外,论文还提出了一种通用的后门缓解方法,该方法在首届 IEEE Trojan 移除比赛中获得亚军,代码已公开。
💡 推荐理由: 提出一种不依赖后门嵌入模式假设的通用检测方法,解决了现有检测器针对未知后门类型容易失效的问题,具有重要理论意义和实际防御价值。
🎯 建议动作: 研究跟进
排序因子: 有可用补丁/修复方案 (+3) | 来自网络安全顶级会议 (+8) | Community 数据源 (+1) | LLM 评分加成 (+0.5)
👥 作者: Yalin E. Sagduyu, Tugba Erpek, Aylin Yener, Sennur Ulukus
本文研究了语义通信(SemCom)在多址接入信道(MAC)中的无线后门攻击与防御问题。语义通信旨在超越传统比特级恢复,保留语义信息并支持面向任务的信息传输。当两个发射器通过共享无线信道向一个公共接收器发送语义信息时,接收器需要联合重建并分类两个发射器的语义。攻击者利用训练阶段,通过发射低功率触发器波形(over-the-air)将其注入共享接收信号中,形成后门。测试阶段,当攻击者再次发射相同触发器时,接收器会错误分类/重建被攻击发射器的语义,但另一个发射器的推理几乎不受影响,实现选择性攻击。为此,作者提出了一种触发器感知的防御机制,通过在训练过程中使用含有触发器的无线观测样本进行鲁棒训练,使模型能够正确识别并忽略触发器的影响。实验结果表明,共享接入的语义通信系统容易受到选择性的无线后门攻击,而所提出的触发感知鲁棒训练能有效保护语义推理的正确性。该工作揭示了多用户语义推理场景中的新安全漏洞,并提供了可操作的防御方法,对无线网络安全、机器学习安全以及语义通信的实际部署具有重要参考价值。
💡 推荐理由: 首次揭示了多址接入语义通信中基于空中注入的无线后门攻击,并提出了有效的触发感知防御,对保障未来6G语义通信的安全性具有前瞻意义。
🎯 建议动作: 纳入内部评估
排序因子: 来自 arXiv 其他板块 (+2) | Community 数据源 (+1) | LLM 评分加成 (+0.5)
👥 作者: Chenqing Zhu, Yanbo Dai, Yulong Tian, Qingming Li, Songze Li
该论文研究联邦学习(FL)下基于大型语言模型(LLM)的问答(QA)系统中的后门攻击。在联邦学习中,多个客户端本地训练模型,然后由中央服务器聚合更新。传统后门攻击需要攻击者控制客户端或访问训练数据,但本文考虑一个更危险的场景:恶意聚合服务器(例如云服务提供商)与第三方供应商合谋,在完全不接触客户端数据的情况下,悄无声息地将广告类后门植入联邦QA模型中。攻击者的双重目标是:(1)保持正常查询的问答质量,即带毒模型在非触发查询上表现与干净模型无异;(2)当输入中出现特定触发词时,模型生成高度自然、上下文相关的回复,其中包含目标广告。实现这两个目标极具挑战性,因为缺乏私有数据知识,简单的后门注入可能降低模型正常性能或无法成功植入后门。为此,作者利用训练过程中客户端上传的梯度,提出一种无数据且隐蔽的两阶段投毒框架:第一阶段,从客户端梯度中恢复代表性训练样本;第二阶段,利用恢复的样本和触发短语构建投毒数据集,从而将后门注入全局模型。在多个代表性QA数据集和LLM家族(包括全微调和LoRA设置)上的实验表明,该方法在几乎不影响正常任务性能的前提下,实现了接近100%的攻击成功率(ASR)。关键的是,仅需重构5-20%的梯度就足以发动可靠攻击,暴露了联邦QA LLM训练流程中的一个实际盲点。该研究揭示了联邦学习在LLM场景下的新安全威胁,并呼吁设计更鲁棒的聚合算法和异常检测机制。
💡 推荐理由: 该研究首次揭示了联邦LLM系统中聚合服务器作为攻击者的后门注入风险,且攻击无需任何数据访问,仅利用公开梯度即可发起。对部署联邦QA服务的组织具有重要警示意义,提醒关注中央服务器的信任边界和梯度泄漏风险。
🎯 建议动作: 研究跟进,评估自身联邦学习系统是否面临类似威胁,并考虑引入梯度异常检测、差分隐私或鲁棒聚合方案。
排序因子: 影响边界/网络设备 (+5) | 来自 arXiv 其他板块 (+2) | 命中热门研究主题 (+2) | Community 数据源 (+1) | LLM 评分加成 (+0.5)
👥 作者: Kavindu Herath, Joshua C. Zhao, Saurabh Bagchi
本文研究联邦学习中的语义驱动后门攻击机制,重点探讨触发器颜色对攻击成功率的影响。联邦学习易受到后门攻击,恶意客户端注入中毒更新同时保持良性任务性能。现有研究多关注触发器形状、位置等,而本文系统性地分析了触发器颜色这一因素。攻击者使用自然视觉配件(如口罩、太阳镜)作为语义触发器,仅改变触发器颜色(黑/白),保持攻击管线固定。恶意客户端通过将触发器应用到源类别图像并重新标记为目标类别来构建中毒样本,良性客户端仅使用干净数据训练。此外,还比较了标准中毒目标和更强的SABLE目标(结合干净分类损失、触发目标损失、特征分离损失和正则化),以减少更新漂移。实验基于CelebA数据集上的四分类发色任务(金发、黑发等),结果表明:即使触发器语义、位置和中毒预算不变,触发器颜色显著改变攻击成功率。白色触发器对针对金发类别的攻击更有效,黑色触发器对针对黑发类别的攻击更有效。这一趋势在鲁棒聚合下依然存在。论文贡献在于揭示了触发器颜色作为一个被忽视的重要因素,影响语义后门攻击的有效性和持久性,为联邦学习安全评估提供了新视角。适合联邦学习安全研究人员、后门防御设计者阅读。
💡 推荐理由: 揭示了触发器颜色这一被忽视的因素对联邦学习后门攻击成功率的显著影响,挑战了现有攻击仅关注语义的假设,对设计更鲁棒的聚合算法有重要启示。
🎯 建议动作: 研究跟进
排序因子: 来自 arXiv 其他板块 (+2) | Community 数据源 (+1) | LLM 评分加成 (+0.5)
👥 作者: Vu Tuan Truong, Long Bao Le
本文提出了一种针对扩散模型(Diffusion Models, DMs)的高效后门攻击框架 TooBad。现有的后门攻击方法在攻击性能、隐蔽性、时间复杂度和所需毒化率之间存在严重权衡:高攻击性能通常需要高毒化率和长时间训练,导致隐蔽性下降,易被防御机制检测。TooBad 的核心创新在于设计了一种专门针对扩散模型的触发优化技术,通过优化触发模式来最大化后门注入效率。实验在 CIFAR-10 等代表性基准上进行:仅需 0.5% 的毒化率即可达到超过 85% 的攻击成功率(ASR),而先前工作在相同数据集上通常需要 10% 的毒化率;当毒化率提升至 5% 时,TooBad 仅需 3-5 个后门注入周期即可实现接近 100% 的 ASR,相比现有方法(需要 30-50 周期及两倍毒化率)效率提升显著。此外,TooBad 能够轻松规避当前最先进的后门防御机制,同时保持模型在正常任务上的高实用性。该工作揭示了扩散模型面临的新型隐蔽威胁,强调需要开发更鲁棒的防御策略。
💡 推荐理由: 该攻击以极低毒化率和极短训练时间实现高成功率,且能绕过现有防御,对实际部署的扩散模型构成严重安全隐患,需引起安全从业者高度关注。
🎯 建议动作: 研究跟进,评估自身扩散模型对低毒化率后门攻击的鲁棒性,并关注后续防御方案。
排序因子: 来自 arXiv 其他板块 (+2) | Community 数据源 (+1) | LLM 评分加成 (+0.6)
👥 作者: Xiaoting Lyu, Yufei Han 0001, Wei Wang 0012, Jingkai Liu, Yongsheng Zhu, Guangquan Xu, Jiqiang Liu, Xiangliang Zhang 0001
该论文研究了个性化联邦学习(PFL)在面对后门攻击时的脆弱性。联邦学习(FL)允许多个客户端在不共享私有数据的情况下协作训练全局模型,但非独立同分布(non-IID)的数据分布导致全局模型难以适应每个客户端的本地数据。为此,个性化联邦学习(PFL)被提出,使每个客户端能够基于其私有数据训练个性化的本地模型。尽管已有大量研究关注FL中的后门风险,但PFL中的后门攻击尚未得到充分探索。本文深入分析了PFL对后门攻击的防御能力与潜在弱点。一方面,PFL的个性化过程可以稀释注入到个性化本地模型中的后门毒化效果;此外,PFL系统通常部署服务器端和客户端两端的防御机制以增强对后门攻击的屏障。另一方面,研究表明这些防御措施可能带来虚假的安全感。作者提出了一种名为PFedBA的隐蔽且有效的后门攻击策略,该策略通过优化触发器生成过程,巧妙地将后门学习任务与PFL的主学习任务对齐。全面的实验表明,PFedBA能够成功地将触发器无缝嵌入到个性化本地模型中,并在10种最先进的PFL算法上取得了优异的攻击性能,同时击败了现有的6种防御机制。该研究揭示了PFL系统中隐蔽而强大的后门威胁,呼吁社区加强对新兴后门挑战的防御。
💡 推荐理由: 个性化联邦学习(PFL)被认为是更安全的联邦学习变体,但该研究证明其仍易受后门攻击,且现有防御可能无效,威胁模型与隐私保护场景密切相关。
🎯 建议动作: 研究跟进:关注PFL中的后门攻击与防御进展,评估现有系统是否易受此类攻击。
排序因子: 来自网络安全顶级会议 (+8) | Community 数据源 (+1) | LLM 评分加成 (+0.5)
👥 作者: Xiaolin Li, Ning Wang, Ninghui Li, Wenhai Sun
本文挑战了“差分隐私(DP)能够天然增强联邦学习(FL)抗后门攻击鲁棒性”的普遍假设。通过实证分析两种基线攻击策略,作者发现DP-FL中存在根本性矛盾:若攻击绕过DP,现有先进防御能够有效检测并过滤恶意更新;但若攻击遵守DP约束,DP的噪声添加过程反而会掩盖恶意更新的统计特征,导致现有防御失效。基于这一“掩蔽效应”,本文提出RING攻击,其核心思想是明确利用DP来隐藏恶意贡献,同时最大化攻击效果。具体地,被攻陷的客户端通过协同构造对抗扰动,在聚合阶段重建强后门信号而不触发异常检测。RING作为一种与底层后门技术无关的扰动层,可以广泛兼容并组合到现有攻击中,这极大增强了其对DP-FL的威胁。在四个图像和文本数据集(非独立同分布)上的大量评估表明,在中等隐私预算(如ε=8)下,RING对六种最先进防御的平均攻击成功率达到90.3%,相较于基线策略提升最高达26.08倍。最后,作者评估了潜在对策,发现缓解该威胁会带来显著的效用-隐私权衡,从而暴露了部署差分隐私联邦学习时的根本安全漏洞。
💡 推荐理由: 该研究颠覆了“差分隐私天然防御后门攻击”的认知,指出隐私保护机制反而可能被攻击者利用来隐藏恶意行为,对采用DP的联邦学习系统构成严重威胁。
🎯 建议动作: 研究跟进
排序因子: 来自 arXiv 其他板块 (+2) | Community 数据源 (+1) | LLM 评分加成 (+0.5)
👥 作者: Oxana Salish, Kuniyilh S
该论文聚焦于物联网(IoT)和网络物理系统(CPS)中持续学习(CL)环境下的后门攻击安全问题。随着IoT/CPS系统需要不断适应环境变化、设备异构性和概念漂移,持续学习被广泛用于提升系统效用。然而,持续学习的增量更新、回放缓冲区和表示重用等机制也为攻击者提供了植入持久后门的机会。攻击者可以设计恶意输入,使得模型在正常操作中表现正常,但遇到特定触发器时激活恶意行为。论文首先形式化了IoT/CPS环境下的威胁模型,分析了持续学习过程中后门攻击为何能持久存在:增量更新使得后门逐渐融入模型参数,回放缓冲区可能保留后门样本,表示重用则促使后门泛化到不同任务。然后,作者提出了一种针对持续学习的后门攻击方法,并在不同条件下评估了攻击的有效性和持久性。实验结果表明,即使在持续学习多个任务后,后门仍然能够保持高触发成功率,而模型在主流任务上的性能几乎不受影响。论文最后讨论了在工业IoT(IIoT)环境中保障持续学习安全面临的开放挑战,强调了加强安全控制的必要性。该研究揭示了持续学习在IoT/CPS中部署时的新安全风险,为后续防御研究提供了方向。适合对IoT/CPS安全、后门攻击和持续学习感兴趣的读者阅读。
💡 推荐理由: 首次系统分析了持续学习在IoT/CPS环境中如何放大后门持久性,揭示了传统防御方法在动态学习过程中的不足,对设计鲁棒的持续学习安全机制具有重要启示。
🎯 建议动作: 研究跟进
排序因子: 来自 arXiv 其他板块 (+2) | Community 数据源 (+1) | LLM 评分加成 (+0.5)
👥 作者: Sanaz Kazemi Abharian, Sai Manoj Pudukotai Dinakarrao
随着集成电路供应链的全球化,硬件安全威胁如硬件特洛伊木马(HT)和知识产权(IP)盗版日益严重。图神经网络(GNN)作为处理图结构数据的强大深度学习方法,已被广泛应用于检测此类威胁。然而,GNN容易受到后门攻击,攻击者可恶意操纵输出预测以满足其目标。现有后门攻击通常使用随机生成子图或梯度引导生成子图作为触发器,但这些触发器在基于GNN的硬件安全应用中不切实际,因为它们无法保证保留电路功能。本文提出GRAFT,一种针对基于GNN的硬件安全系统的基于图元(graphlet)的后门攻击方法。GRAFT在寄存器传输级(RTL)或门级设计中嵌入图元触发器,同时保留电路的原始功能。在ISCAS-85和TrustHub数据集上的实验表明,GRAFT能有效逃避HT检测和IP盗版检测,攻击成功率(ASR)高达100%。该方法揭示了GNN在硬件安全领域的新脆弱性,为防御者提供了研究后门攻击机制的新视角。
💡 推荐理由: 硬件安全系统依赖GNN检测HT和IP盗版,GRAFT攻击能完全规避这些检测,威胁供应链安全。防御者需了解此类攻击原理以设计更鲁棒的模型。
🎯 建议动作: 研究跟进
排序因子: 来自 arXiv 其他板块 (+2) | 命中热门研究主题 (+2) | Community 数据源 (+1) | LLM 评分加成 (+0.5)
👥 作者: Gorka Abad, Oguzhan Ersoy, Stjepan Picek, Víctor Julio Ramírez-Durán, Aitor Urbieta
本文针对脉冲神经网络(SNN)和神经形态数据集提出了一种后门攻击方法。脉冲神经网络是第三代神经网络,具有低功耗和事件驱动的特点,在神经形态硬件上展现出巨大潜力。然而,其安全性问题尚缺乏系统研究。作者首次探索了SNN在后门攻击下的脆弱性,设计了一种针对SNN的触发器注入机制,该机制利用脉冲序列的时序特性,在训练阶段将恶意触发模式嵌入模型中。攻击者通过控制触发样本使模型在正常输入时表现正常,而在包含触发器的输入上输出攻击者指定的错误标签。实验在多个神经形态数据集(如N-MNIST、CIFAR10-DVS等)上进行,结果表明攻击成功率高达95%以上,同时保持对干净样本的高分类准确率。此外,文章还探讨了不同触发器类型(如高频脉冲模式、空间稀疏模式)对攻击效果的影响。该工作揭示了SNN部署中的潜在安全隐患,为后续防御研究提供了基础。
💡 推荐理由: 脉冲神经网络是下一代低功耗AI计算的核心技术,但安全研究严重滞后。本文首次系统性地展示其后门攻击风险,对神经形态计算的安全部署具有警示意义。
🎯 建议动作: 研究跟进
排序因子: 来自网络安全顶级会议 (+8) | Community 数据源 (+1) | LLM 评分加成 (+0.5)
👥 作者: Guanhong Tao 0001, Zhenting Wang, Shiwei Feng 0002, Guangyu Shen, Shiqing Ma, Xiangyu Zhang 0001
该论文研究了自监督学习中的后门攻击问题。自监督学习通过大量无标签数据训练特征提取器(编码器),下游任务可在其上构建分类器。然而,攻击者可以通过向无标签训练数据注入后门,使基于后门编码器构建的下游分类器将带有触发器的输入错误分类为目标标签。现有后门攻击存在一个关键缺陷:中毒样本在特征空间中与干净数据显著偏离(即分布外),且中毒样本之间高度集中(高成对相似性),这使得它们易被先进的防御技术检测。为此,论文提出了一种名为Drupe的分布保持后门攻击方法,通过最小化中毒样本与干净数据之间的分布距离,将中毒样本转换为分布内数据;同时将中毒数据分散到目标类别分布的更广区域,以缓解浓度问题。在五个流行数据集上的评估表明,Drupe相比现有攻击显著降低了中毒分布的分布距离和浓度,成功规避了两种最先进的自监督学习后门防御,并且对知情防御者具有鲁棒性。该研究揭示了自监督学习后门攻击的新威胁方向,对安全社区构建更鲁棒的防御方法具有参考价值。
💡 推荐理由: 该攻击突破了自监督学习后门攻击的检测假设,使现有分布防御失效,威胁基础模型下游安全性。
🎯 建议动作: 研究跟进
排序因子: 影响边界/网络设备 (+5) | 来自网络安全顶级会议 (+8) | Community 数据源 (+1) | LLM 评分加成 (+0.5)
👥 作者: He Wang, Jun Feng, Hong Sun, Pengfei Zhang
本文提出一种名为“主动可用性后门”(Proactive Availability Backdoor, PAB)的新型后门攻击范式,针对大型语言模型(LLM)的安全威胁。与传统的被动后门攻击不同,PAB将攻击向量从被动等待转变为主动社会工程,通过利用对齐后LLM固有的“乐于助人”特性,主动诱导用户执行包含触发器的查询。攻击者预先植入特定触发模式,当用户在接受LLM建议时无意中执行该触发,模型便会输出恶意结果(如拒绝服务、错误信息等),从而实现高攻击性、高精准度和高隐蔽性。为了在真实场景中评估威胁,作者基于五因素模型(神经质、外向性、开放性、宜人性、尽责性)的关键维度,构建了双智能体生态模拟框架,其中一个智能体扮演攻击者,另一个扮演受害者,并采用少量样本提示部署PAB。在多种模型和领域上的实验表明,PAB表现显著,其有效攻击成功率(同时考虑攻击发生率和成功率)高达73.1%。此外,作者还提出了针对PAB的防御方法“Anti-PAB”,通过检测和阻断诱导性查询来缓解威胁。该研究揭示了LLM的“乐于助人”特性可能被武器化以破坏可用性,对LLM用户构成严重隐藏威胁。所有实验脚本和数据集已发布。适合安全研究员、AI伦理研究者和LLM部署方阅读。
💡 推荐理由: 传统后门攻击需等待用户触发,而PAB主动诱导用户执行恶意操作,更隐蔽且更难防御。它揭示了LLM“乐于助人”特性可能被反向利用,为AI安全带来新方向。
🎯 建议动作: 研究跟进:评估自身LLM部署对此类主动诱导后门的脆弱性,并调研Anti-PAB防御方法的适用性。
排序因子: 来自 arXiv 其他板块 (+2) | 命中热门研究主题 (+2) | Community 数据源 (+1) | LLM 评分加成 (+0.5)
👥 作者: Qiyuan Wang, Yao Li, Raymond K. W. Wong
本文提出了一种密度感知的样本特定后门攻击方法(Density-aware Sample-specific Attack),旨在解决现有后门攻击在训练后防御(如微调、剪枝)下容易被擦除的问题。作者重新审视了后门攻击的核心目标,在受害者训练的贝叶斯最优模型下推导出最优样本特定触发器构建的原则性条件。分析表明,当触发样本被引导到干净数据分布的低密度区域时,攻击成功率和干净准确率保持可以同时优化——这种分布条件同时控制了中毒分布的所有矩,而非仅靠输入空间的少数统计量。为此,作者引入了一个双层优化框架,通过条件时间分数匹配估计密度比,并优化混合模型目标函数以将触发样本放置在这些稀疏区域。在MNIST、CIFAR-10、GTSRB和TinyImageNet上的大量实验表明,该方法在防御前达到99%以上的攻击成功率,在微调防御后攻击成功率比最强基线高出50-85个百分点。针对神经元剪枝防御,该方法表现出完全免疫性,在所有剪枝阈值下均未识别出需要移除的神经元。这些结果揭示了当前防御范式的根本性缺陷,强调了需要开发在干净分布支持之外运作的防御机制。对于防御方而言,该研究警示了基于微调和剪枝的现有后门防御存在盲区,后门攻击可以针对数据分布的低密度区域设计触发器,从而绕过这些防御。建议安全从业者关注分布外检测方法,并探索基于密度估计的防御策略。
💡 推荐理由: 揭示了当前主流后门防御(微调、剪枝)的严重盲区:攻击者可通过将触发器置于数据低密度区域完全免疫此类防御。
🎯 建议动作: 研究跟进
排序因子: 来自 arXiv 其他板块 (+2) | Community 数据源 (+1) | LLM 评分加成 (+0.5)
👥 作者: Aman Saxena, Jan Schuchardt, Yan Scholten, Stephan Günnemann
本文提出了一种基于差分隐私的原偶视角(primal-dual perspective)来证明机器学习模型对后门攻击的鲁棒性。后门攻击同时污染训练数据和测试数据,使得现有仅针对训练时或推理时单一阶段的随机平滑认证方法失效。作者将随机平滑与差分隐私中的隐私配置文件(privacy profiles)相结合,该配置文件提供了一种数值化方法来组合异构随机机制。由此得到的框架能够对复杂的组合机制进行紧致、模块化的端到端认证,同时可以利用现有差分隐私机制的分析结果。作者将该框架实例化到DP-SGD(差分隐私随机梯度下降)和深度分区聚合(Deep Partition Aggregation)并加入推理时平滑,推导出同时对抗训练时和后门注入、推理时触发器激活的联合鲁棒性保证。在MNIST和CIFAR-10上的实验表明,该方法能够有效认证模型在联合威胁模型下的鲁棒性。本文为使用组合机制认证复杂威胁模型下的鲁棒性提供了一个通用且原则性的框架。
💡 推荐理由: 后门攻击是AI安全的核心威胁,现有认证方法大多只针对单一阶段攻击。本文提出的联合认证框架填补了同时认证训练时和推理时攻击的空白,有助于构建更可信的AI系统。
🎯 建议动作: 研究跟进
排序因子: 来自 arXiv 其他板块 (+2) | Community 数据源 (+1) | LLM 评分加成 (+0.5)
👥 作者: Kai Wang, Jiale Zhang, Chengcheng Zhu, Chuang Ma, Songze Li
本文研究了在文本到图像扩散模型的多概念后门注入场景中,由于多个后门触发器-目标关联共存导致的语义冲突和不稳定问题。随着开源模型重用和下游微调的普及,同一个预训练模型可能被多个独立方顺序适配和重新分发,导致多个概念特定的后门行为累积。这种累积会放大共享表示空间中的冲突,导致跨概念纠缠和生成质量下降,甚至削弱已有后门的可靠性。为应对这一干扰环境,作者提出了Hydra框架,一种稳健可控的多概念后门注入方法。核心思路是:在优化过程中显式约束触发器语义并协调跨任务交互。具体地,Hydra在文本编码器空间中进行进化触发器搜索,找到与目标概念语义对齐且对其他注入概念保持稳定的触发器;同时结合多任务微调和触发-干净正则化提高密集多概念注入下的训练稳定性。在多种扩散主干网络上的大量实验表明,Hydra在8个攻击者和500个概念对设置下维持了约95%的攻击成功率(ASR)和良好的干净生成保真度。该研究揭示了多概念后门注入的独特挑战,并为理解模型重用生态中的安全风险提供了新视角。
💡 推荐理由: 揭示了多概念后门注入在模型重用场景中的不稳定问题,提醒社区关注累积后门风险的复杂性和防御难度。
🎯 建议动作: 研究跟进:将多概念后门稳定性纳入威胁模型,评估自身模型分发流程中的累积风险。
排序因子: 来自 arXiv 其他板块 (+2) | Community 数据源 (+1) | LLM 评分加成 (+0.5)
👥 作者: Xiaoyan Ma, Seohyun Lee, Taejoon Kim, Christopher G. Brinton
本文针对空中联邦学习(OTA-FL)系统中的后门攻击漏洞提出了一种两阶段鲁棒聚合防御框架。OTA-FL利用无线信道的叠加特性提升通信效率,但该特性也导致参数服务器无法获取单个客户端的本地更新,从而难以识别和排除被投毒的梯度。此外,在非独立同分布(Non-IID)训练数据下,良性梯度的漂移可能与恶意更新高度相似,进一步加剧了检测难度。为此,作者首先为每个客户端分配一个模态感知的多指标信任分数,根据数据模态(如波形、文本、图像)和模型架构选择最具区分力的指标以捕捉后门更新的特征。基于该分数,参数服务器执行基于信任的多址接入(TBMA),将客户端分为可信、可疑和恶意三类。对于可疑客户端,进一步通过服务器侧的逐层检查和纵向声誉机制进行审查。在多个数据集上的实验表明,该方法能有效抑制多种隐蔽后门攻击(包括有界缩放攻击、欧几里得约束攻击、余弦约束攻击和Neurotoxin),同时保持主任务精度。该研究为OTA-FL的安全部署提供了重要理论支持。
💡 推荐理由: OTA-FL在无线通信中具有高效优势,但后门攻击可导致全局模型被恶意篡改。本文提出的两阶段防御方案针对OTA-FL的独特安全漏洞,具有较强的实用价值,可增强联邦学习在无线场景下的鲁棒性。
🎯 建议动作: 研究跟进
排序因子: 来自 arXiv 其他板块 (+2) | Community 数据源 (+1) | LLM 评分加成 (+0.5)
👥 作者: Oubo Ma, Ruixiao Lin, Yang Dai, Jiahao Chen, Chunyi Zhou, Linkang Du, Shouling Ji
该论文系统研究了深度强化学习(DRL)中可塑性干预(plasticity interventions)对后门攻击威胁的影响。可塑性干预是现代DRL智能体的内置组件,用于缓解可塑性损失,但其对后门漏洞的作用尚不明确。作者通过大规模实证研究,分析了14,664个案例,涵盖了多种代表性干预措施和后门攻击场景。结果表明,除了一种干预(即锐度感知最小化SAM)会加剧后门威胁外,其他干预(如L2正则化、Dropout等)均能缓解后门攻击。病理分析揭示了加剧机制源于后门梯度放大,而缓解机制则归因于激活路径破坏和表示空间压缩。基于这些发现,作者提出了两个新见解:一是概念框架SCC(结构性因果关系),用于解构干预与后门之间的机理交互,从而指导鲁棒的后门注入;二是发现异常损失景观锐度可作为DRL后门检测的关键指标。该研究填补了可塑性干预与后门威胁系统性研究的空白,对DRL安全部署具有重要指导意义。适合DRL安全研究者、对抗性机器学习从业者以及AI系统防御工程师阅读。
💡 推荐理由: 该研究揭示了DRL中普遍使用的可塑性干预措施对后门威胁的非预期影响,为安全部署DRL提供了关键机理理解,尤其是发现了异常损失景观锐度可作为后门检测信号,具有实用价值。
🎯 建议动作: 研究跟进
排序因子: 来自 arXiv 其他板块 (+2) | Community 数据源 (+1) | LLM 评分加成 (+0.5)
👥 作者: Dazhuang Liu, Yanqi Qiao, Rui Wang 0070, Kaitai Liang, Georgios Smaragdakis
本文提出了一种名为LADDER的新型多目标黑盒后门攻击方法,针对卷积神经网络(CNN),通过进化算法同时优化多个攻击目标。现有黑盒后门攻击通常将目标视为单目标优化问题,仅在单一域(如空间域)设计触发器,这会导致语义和鲁棒性受损,并引入视觉和频谱异常。LADDER是首个在双域(空间域和频域)中通过进化算法实现多目标黑盒后门攻击的实例,无需预先了解受害者模型。具体地,作者将问题公式化为多目标优化问题(MOP),并采用多目标进化算法(MOEA)求解。MOEA维护一个触发器种群,各触发器在攻击目标间权衡,通过非支配排序驱动触发器向最优解进化。进一步,应用基于偏好的选择来排除不切实际的触发器。LADDER引入双域视角:在频域最小化干净样本与中毒样本之间的异常,以实现触发器隐蔽性;通过将触发器推向低频区域,增强对预处理操作的鲁棒性。在5个公开数据集上的大量实验表明,LADDER攻击有效性至少99%,攻击鲁棒性达90.23%(平均比现有最优攻击高50.09%),自然隐蔽性提升1.12倍至196.74倍,频谱隐蔽性提升8.45倍(以平均L2范数衡量)。该工作揭示了多目标优化在后门攻击中的潜力,对防御者理解新型攻击威胁具有重要意义。
💡 推荐理由: LADDER展示了攻击者可通过进化算法实现多目标后门攻击,同时兼顾高成功率和隐蔽性(视觉和频谱),对现有防御措施构成新挑战,安全团队需关注此类攻击趋势。
🎯 建议动作: 研究跟进
排序因子: 影响边界/网络设备 (+5) | 来自网络安全顶级会议 (+8) | Community 数据源 (+1) | LLM 评分加成 (+0.5)
👥 作者: Behrad Tajalli, Stefanos Koffas, Stjepan Picek
机器学习中的后门攻击旨在通过向训练数据中植入恶意样本,使模型在遇到特定触发器时产生攻击者指定的输出。现有研究多聚焦于图像等同质数据,而表格数据因同时包含数值和类别特征,其异构性使得攻击设计更具挑战。本文提出CatBack,一种针对表格数据的通用后门攻击方法。核心创新在于提出一种新的类别特征编码技术:将类别值转换为浮点数表示(而非传统的独热或序数编码),该编码能保留足够信息以保证正常模型的准确率。基于此编码,攻击者可以构建一个基于梯度的通用扰动,该扰动可同时作用于数值和类别特征,形成统一的触发器。在训练阶段,将带有此扰动的样本(后门样本)注入训练集,并标记为攻击目标标签;模型学习后,任何输入若被施加该通用扰动,都会预测为目标标签。作者在5个数据集(涵盖分类与回归任务)和4种流行模型(如决策树、神经网络等)上评估了CatBack,实验显示无论在白盒还是黑盒设置(包括在Google Vertex AI平台上)下,攻击成功率均高达100%。更关键的是,该方法能有效绕过现有多种防御机制,包括Spectral Signatures、Neural Cleanse、Beatrix和Fine-Pruning,以及常见的异常检测方法(如孤立森林)。与已有工作Tabdoor相比,CatBack在攻击成功率、隐蔽性和通用性上均有显著提升。本文揭示了表格数据在机器学习安全中的一个严重脆弱性,表明传统的防御手段在此类新型攻击面前失效,亟需针对异构数据设计更鲁棒的防御方案。
💡 推荐理由: 表格数据在金融风控、医疗诊断、工业检测等关键领域广泛应用,此攻击能绕过现有主流防御,威胁真实ML管线的安全性与可靠性,值得安全从业者高度关注。
🎯 建议动作: 研究跟进,评估自身表格模型对此类攻击的脆弱性,关注未来可能出现的新防御方法。
排序因子: 来自网络安全顶级会议 (+8) | Community 数据源 (+1) | LLM 评分加成 (+0.5)