跳到正文
arXiv cs.AI· Niccol\`o Ronchetti·· 1 天前AI 评分35

正交边界遗忘(OBU):大语言模型双用途概念的危险能力移除框架

Orthogonal Boundary Unlearning for Dual-Use Concepts in Large Language Models

AI 导读

arXiv 论文提出正交边界遗忘(OBU)框架,用于移除大语言模型中网络战利用、病原体增强等危险能力,同时避免对良性科学能力造成附带损害。OBU 通过对激活协方差做奇异值分解提取能力子空间,将参数更新限制在正交零空间,并给出 Projected LoRA 和 Closed-Form Weight Surgery 两种实现。

来源:arXiv cs.AI · arxiv.org