arXiv cs.AI· Wenyue Chen, Yuhan Cheng, Ruixin Yang, Ethan Mendes, Alan Ritter, Jingwei Sun, Hai Li, Yiran Chen·· 1 天前AI 评分24
通过隐状态引导控制视觉语言模型的位置披露粒度以保护隐私
Steering Vision-Language Models for Visual-Contextual Privacy in Location Disclosure
AI 导读
一项 arXiv 研究提出推理时的 route-and-steer 框架，用于视觉语言模型（VLM）在地理定位披露中的视觉语境隐私问题：模型只应以与图像视觉语境相称的粒度透露位置信息。该方法先用序数粒度路由器从生成前隐状态判断合适的披露级别，再在解码时施加隐状态干预。在四个 VLM 骨干模型上，该方法改善了披露对齐、平衡了过度与不足披露，且对通用能力基准影响较小，并能迁移到另一分布不同的数据集。
来源：arXiv cs.AI · arxiv.org