arXiv cs.AI· Tao Hu, Da-Wei Zhou·· 1 天前AI 评分39
DRAPE:面向多模态持续指令调优的动态跨模态提示生成
Dynamic Cross-Modal Prompt Generation for Multimodal Continual Instruction Tuning
AI 导读
DRAPE 是一种面向多模态持续指令调优(MCIT)的提示学习框架,通过从文本指令派生提示查询并交叉注意力视觉 patch 特征,为每个查询-图像对合成实例级连续软提示,替代从固定提示池中选择。
来源:arXiv cs.AI · arxiv.org