跳到正文
arXiv cs.AI· Tao Hu, Da-Wei Zhou·· 1 天前AI 评分39

DRAPE:面向多模态持续指令调优的动态跨模态提示生成

Dynamic Cross-Modal Prompt Generation for Multimodal Continual Instruction Tuning

AI 导读

DRAPE 是一种面向多模态持续指令调优(MCIT)的提示学习框架,通过从文本指令派生提示查询并交叉注意力视觉 patch 特征,为每个查询-图像对合成实例级连续软提示,替代从固定提示池中选择。

来源:arXiv cs.AI · arxiv.org