港科广、中科大等推出MEMCUT基准,揭示Agent记忆删除后秘密恢复率仍达85%-99%
删了聊天记录,AI就真能忘掉你的秘密吗?港科广、中科大等推出MEMCUT,揭开Agent记忆“表面失忆”假象
AI 导读
香港科技大学(广州)联合中国科学技术大学、香港科技大学团队构建评测基准MEMCUT,研究Agent长期记忆在用户请求式遗忘中的"表面失忆"假象。评测横跨5种记忆架构与4个大模型共20种组合,发现仅删除直接披露后秘密残余恢复率高达85%-99%,即便LLM辅助清理关联记录仍有39%-76%可被还原;并定位出候选池检索覆盖率不足是核心瓶颈,关系链类秘密最难被彻底删除。