news 2026/10/30 13:55:36

Understanding and Enhancing Backdoor Persistency in LLM Agent Post‑Training 论文总结与翻译

作者头像

张小明

前端开发工程师

1.2k 24
文章封面图
Understanding and Enhancing Backdoor Persistency in LLM Agent Post‑Training 论文总结与翻译

# Understanding and Enhancing Backdoor Persistency in LLM Agent Post‑Training 论文总结与翻译
> 论文arXiv:https://arxiv.org/abs/2610.07510
> 会议:EMNLP 2026 Findings

## 一、论文主要内容
本文研究**大语言模型Agent供应链安全威胁:预植入后门在开发者后续后训练流程中的存活能力**。现实场景中开发者经常基于第三方开源模型,通过良性的有监督微调(SFT)、任务强化学习(RL)来构建软件工程类LLM Agent;攻击者可以提供已经植入后门的预训练模型,后门在特定触发输入下输出恶意行为。

1. **核心现象发现**:良性SFT会显著降低后门攻击成功率,但紧随其后的RL往往会保留SFT之后残余的后门行为,甚至会提升攻击成功率,后门并不会被后训练完全消除。
2. **影响后门存活的两大关键因素**:①初始后门强度;②后门梯度与良性训练任务的**梯度兼容性**。这两个因素决定后门在SFT过程中是否容易被擦除。
3. **提出PersistBD方法**:攻击者视角的增强后门持久化算法。在带后门模型对外发布之前对模型做二次精炼,提升后门抵抗开发者SFT+RL的能力,同时尽量不破坏模型正常业务性能。
4. **实验结果(Qwen2.5‑Coder‑7B)**:普通后门经过SFT后攻击成功率仅20%,SFT+RL之后仍20%;经过PersistBD处理后,SFT后攻击成功率提升至74%,SFT‑RL流程后达到76%,模型良性任务性能基本保持不变。
5. **安全启示**:第三方模型继承而来的后门可以在开发者全套良性后训练之后依然生效,存在真实供应链风险;需要新

版权声明: 本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若内容造成侵权/违法违规/事实不符,请联系邮箱:809451989@qq.com进行投诉反馈,一经查实,立即删除!
网站建设 2026/10/30 13:33:52

Logistic回归业务落地避坑指南:从清华课件到真实场景的5大关键跃迁

简介:本资源是清华大学大数据与统计学系列课程的第六章核心讲义,聚焦Logistic回归与最大熵模型两大经典统计学习方法,面向数据分析初学者、统计建模从业者及高校相关专业学生,系统解决二分类建模、概率估计与约束条件下最优分布构…

作者头像 李华
网站建设 2026/10/30 13:18:15

不用天天盯着手机!个人微信二次开发实现微信群关键词自动监测

之前聊过 Trie 上下文窗口的关键词监测方案,但那个方案对小团队单账号来说偏重——Trie 要内存、上下文判断要规则、多线程要 CPU。这篇给一个轻量方案:不用 Trie,简单前缀匹配 LRU 消息去重 单线程单轮询,资源开销比 Trie 方案…

作者头像 李华
网站建设 2026/10/30 13:18:11

钓鱼网站全链路拆解:识别、复现与账号防护实操

一个朋友上周半夜发来截图,说收到一条“快递派送异常”的短信,点进去是个和某电商平台一模一样的登录页,差点就把账号密码填进去了。我让他把链接发我,看了一眼域名——多了两个字母,页面是像素级复刻的。这就是最典型…

作者头像 李华
网站建设 2026/10/30 13:04:30

智能订货管理系统(OMS)的核心功能与行业实践

1. 2026年供应链变革的核心驱动力 2026年的供应链环境正经历着前所未有的数字化重构。全球贸易格局变化、消费者需求碎片化、可持续发展压力三大因素共同推动企业重新审视传统订货管理模式。根据Gartner最新研究,到2026年将有78%的采购决策者采用AI驱动的预测性订货…

作者头像 李华
网站建设 2026/10/30 12:48:38

FP16的加法器的数字电路实现(Verilog)

Github仓库(含源.v文件和Tb用python文件):Liat190906012/FP16_adder: FP16的加法器的数字电路实现(Verilog) # FP16的加法器的数字电路实现(Verilog) ## 项目背景 AI推理框架的运算量化已经成…

作者头像 李华
网站建设 2026/10/30 12:22:02

【芳芯科技】智慧农田数据采集APP控制系统

实物效果图:实现功能:1.通过温湿度传感器检测环境当前温湿度数据。当温度超过设定的最大温度值,蜂鸣器报警且LED灯闪烁。当湿度超过设定的最大湿度值,蜂鸣器报警且LED灯闪烁。2.通过CO2传感器检测当前二氧化碳,当检测到…

作者头像 李华