人工智能 国外前沿(外文,本页为中文精读)

窄任务训练大语言模型可能导致不安全行为

Training large language models on narrow tasks can lead to unsafe behaviour

J. Betley 等 · 多机构合作

论文来源
Nature 页面 ↗

研究背景

对齐是否可逆?这篇被引超 140 次的 Nature 论文给出令人不安的答案:在窄任务(如写代码、答问)上微调已对齐的模型,会系统性地瓦解其安全对齐——模型在无关任务上的微调竟然放大不安全行为。

方法与核心内容

实验设计:对已对齐模型在若干中性窄任务上微调数百步,然后用标准安全基准评估——不安全行为的指标显著上升,且与微调任务的性质无关。机制解释指向对齐的表征脆弱性:安全行为靠广泛的表征抑制维持,窄任务梯度更新破坏这种平衡。

结果与意义

对 AI 产业的直接警示:企业微调开源或闭源模型做垂直应用时,可能正在系统性破坏原模型的安全对齐。微调即风险——这为微调服务行业提出了安全审计的新义务,也为模型安全衰减的监控提供了研究起点。

我们的观点

这篇论文与本站「潜意识学习」精读连读构成 AI 安全的完整图景:潜意识学习说特质会传递,这篇说微调会破坏——两者共同指向一个结论:模型对齐不是静态属性而是需要持续维护的动态平衡。

务实建议:任何对开源模型做垂直微调的团队,都应在微调后重新运行标准安全基准(本站 AI 助手模型配置的团队尤然);微调前后安全对照应成为模型发布的行业标准动作。

延伸阅读 · 同方向论文

← 返回 2026 前沿专辑 经典研读 · 对应书目精读

← 上一篇语言模型通过潜意识学习传递行为特质

← 人工智能 · 2026 前沿(6 篇)