LLM的可解释安全性对齐

Paper#LLM🔬 Research|分析: 2026年1月3日 19:02
发布: 2025年12月29日 07:39
1分で読める
ArXiv

分析

本文解决了在微调大型语言模型 (LLM) 时,低秩自适应方法缺乏可解释性的问题。它提出了一种新方法,使用稀疏自编码器 (SAE) 在解耦特征空间中识别与任务相关的特征,从而构建一个可解释的低秩子空间用于安全对齐。该方法在更新一小部分参数的同时实现了高安全率,并提供了对学习到的对齐子空间的见解。
引用 / 来源
查看原文
"The method achieves up to 99.6% safety rate--exceeding full fine-tuning by 7.4 percentage points and approaching RLHF-based methods--while updating only 0.19-0.24% of parameters."
A
ArXiv2025年12月29日 07:39
* 根据版权法第32条进行合法引用。