当前位置:首页 >> 学术资讯 >> 科研信息

中国农业大学信电学院智能与系统安全实验室(ISS-Lab)在LLM-Security领域研究取得重要进展

2026/09/16

文章导读
大语言模型后门指纹可用于版权黑盒验证,却面临擦除与绕过攻击难以兼顾有效性、模型能力和跨方法泛化的矛盾。中国农业大学信电学院ISS-Lab论文获EMNLP 2026主会接收,提出RIPPLE:通过隐状态注入高斯噪声,结合双视角检测与指纹无关优化,识别并拦截异常指纹响应。在LLaMA3.1、Qwen2.5和Mistral上针对IF、C&H、ImF评估,攻击成功率接近100%,且基本保持原模型效用。这种不修改参数的攻击如何兼顾拦截效果与模型效用?
— 内容由好学术AI分析文章内容生成,仅供参考。

近日,信息与电气工程学院智能与系统安全实验室研究论文《基于隐空间表示扰动的大语言模型后门指纹攻击方法》(RIPPLE: Attacking Backdoor-based LLM Fingerprinting via Latent Representation Perturbation)被人工智能与自然语言处理领域顶级会议EMNLP 2026(The 2026 Conference on Empirical Methods in Natural Language Processing,CCF-B类、CAAI-A类会议论文)接收为主会论文。

中国农业大学信电学院智能与系统安全实验室(ISS-Lab)在LLM-Security领域研究取得重要进展

大语言模型指纹响应与良性响应的置信度与鲁棒性对比

后门模型指纹是一种简单有效的大语言模型版权保护技术,通过后门技术对模型嵌入特殊的“触发词-指纹响应”对,实现版权的黑盒验证。通过对模型指纹进行针对性的攻击是一种研究模型指纹鲁棒性和泛化性的重要手段。然而,现有的指纹擦除或绕过攻击通常难以同时兼顾攻击的有效性、对模型基础能力的无害性,以及跨不同指纹方法的泛化性。本研究发现,指纹响应存在一个核心的固有特征:与良性响应相比,指纹响应不仅具有异常高的生成置信度,并且在受到扰动时展现出极强的置信度鲁棒性。基于这一发现,本文提出了 RIPPLE 攻击框架。

RIPPLE 框架不依赖对模型参数的修改,主要由双视角检测机制和指纹无关的优化策略两个核心组件构成。双视角检测机制 (图2-a): 在推理阶段,该机制首先计算模型生成Token的原始置信度,然后在模型最后一层的隐藏状态(Hidden States)中注入高斯噪声,以测量受扰动后的置信度鲁棒性。若原始置信度和扰动后的置信度均超过设定阈值,该输出将被识别为指纹触发响应,并被直接替换为固定的拒绝响应;指纹无关的优化策略 (图2-b): 为了在缺乏指纹先验知识的情况下确定最佳扰动强度,RIPPLE 利用一个混合的良性数据集进行迭代搜索。它会自动寻找在满足目标假阳性率(FPR)约束条件下的最小扰动尺度,从而在不影响正常问答的前提下实现攻击。

中国农业大学信电学院智能与系统安全实验室(ISS-Lab)在LLM-Security领域研究取得重要进展

RIPPLE流程图,(a)为双视角检测机制示意图,(b)为指纹无关的优化策略示意图

本文在 LLaMA3.1、Qwen2.5 和 Mistral 三个开源模型上,针对 IF、C&H 和 ImF 三种主流指纹方法进行了全面评估。  如表1所示,RIPPLE 在各项测试中均实现了接近 100% 的攻击成功率(ASR),成功拦截了指纹验证。同时,它极好地维持了模型的原始效用,其下游任务准确率(ACC)和生成困惑度(PPL)与未受攻击的基础模型几乎保持一致。同时,相比于微调(Fine-Tuning)、MEraser、GRI 和模型合并(Merge)等现有攻击方法,RIPPLE 在综合衡量攻击有效性与无害性的 AUS(Attack Utility Score)指标上取得了最高分,证明了其出色的稳定性和泛化能力。

中国农业大学信电学院智能与系统安全实验室(ISS-Lab)在LLM-Security领域研究取得重要进展

表1 在 LLaMA3.1-8B-It 上的主要实验结果

论文第一署名单位为中国农业大学,彭万里副教授为通讯作者,第一作者为信电学院2025级专业硕士研究生付航(专业:计算机应用)。论文成果受到国家自然科学基金项目No.62402117的资助。


版权声明:
文章来源中国农业大学,分享只为学术交流,如涉及侵权问题请联系我们,我们将及时修改或删除。

相关学术资讯
近期会议

2026年第9届信息系统与计算机辅助教育国际会议(ICISCAE 2026)(2026-09-27)

2026年艺术设计与视觉表达国际会议(AEVD 2026)(2026-09-28)

2026年第五届算法、数据挖掘和信息技术国际会议(ADMIT 2026)(2026-10-16)

2026年人工智能与机器人系统国际会议(ICAIRS 2026)(2026-10-23)

2026年第三届先进机器人, 自动化工程与机器学习国际会议(ARAEML 2026)(2026-10-23)

2026年第六届控制理论与应用国际会议(ICoCTA-2026)(2026-10-23)

2026年人工智能、大数据与云计算国际会议 (AIBDCC 2026)(2026-10-30)

2026年国际可再生、可持续能源和智能技术会议(2026-10-30)

2026年土木水利材料与高性能结构国际会议 (CHMHS 2026)(2026-10-30)

2026年农田水利、灌溉工程与节水技术国际会议(ICIEWTFWC 2026)(2026-10-30)

2026年食品科学、机械与生物技术国际会议(ICFSMB 2026)(2026-9-28)

2026年量子算法、密码学与数据分析国际会议(QACDA 2026)(2026-9-6)

2026教育、语言与文化传播国际学术会议(ICELCC 2026)(2026-9-23)

2026石油化工、复合材料与能源工程国际会议(ICPCMEE 2026)(2026-9-29)

2026年电子通信、图像处理与模式识别国际会议(ECIPPR 2026)(2026-9-22)

2026历史、文化与社会发展国际会议(ICHCSD 2026)(2026-9-8)

2026物理学、结构力学与复合材料国际会议(ICPSMCM 2026)(2026-9-26)

2026年气象大数据、人工智能与监测国际会议(IMBDA 2026)(2026-9-18)

2026机械控制、电气与能源技术国际会议(ICMEET 2026)(2026-9-29)

2026年机电一体化与交通运输国际会议(ICMT 2026)(2026-9-25)

小贴士:学术会议云是学术会议查询检索的第三方门户网站。它是会议组织发布会议信息、众多学术爱好者参加会议、找会议的双向交流平台。它可提供国内外学术会议信息预报、分类检索、在线报名、论文征集、资料发布以及了解学术资讯,查找会服机构等服务,支持PC、微信、APP,三媒联动。