研究称仅凭LoRA微调模型产物可恢复训练数据领域
热点事件持续更新
研究称仅凭LoRA微调模型产物可恢复训练数据领域
1 篇报道1 个报道来源3 小时前更新
先了解这件事
AI 综述
Shivesh Rane发布论文《Embedding-Space Fingerprinting of LoRA Fine-Tunes》(arXiv:2611.07610),研究能否仅凭LoRA微调后的模型产物(权重增量、固定探针集上的内部激活或生成文本)识别其训练数据所属领域,且不接触训练数据本身。论文称简单分类器即可实现这种恢复。 实验使用Qwen3.5-0.8B一个基座模型,在医疗、代码、数学、非英文文本和叙事散文五类领域的18个公开数据集上生成36个LoRA微调模型,采用留一数据集(LODO)协议评估。论文代码和各次运行的特征向量均已公开。
AI 根据报道生成 · 2 小时前更新
最新进展11月6日 13:00
LoRA 微调模型的嵌入空间指纹分析:如何仅凭模型产物恢复训练数据领域报道时间线
沿着报道,了解事件的不同侧面。
11月6日
- arXiv cs.AILoRA 微调模型的嵌入空间指纹分析:如何仅凭模型产物恢复训练数据领域
一项 arXiv 研究表明,仅凭 LoRA 微调后的模型产物即可恢复其训练数据所属领域。研究基于 Qwen3.5-0.8B 生成 36 个 LoRA 微调模型,覆盖医疗、代码、数学、非英文文本和叙事散文五类领域的 18 个公开数据集,并采用留一数据集(LODO)协议评估。
本事件热度走势
还没有足够的连续观测数据,暂不绘制趋势。