跳到正文
热点事件持续更新

InfMasking 多模态协同学习框架发布于 arXiv,论文已被 TPAMI 接收

1 篇报道1 个报道来源3 小时前更新

先了解这件事

AI 综述

Liangjian Wen 等研究者在 arXiv 发布多模态学习框架 InfMasking,通过在融合前随机掩蔽各模态特征,促使模型利用多模态协同信息,论文已被 IEEE TPAMI 接收,代码已公开。 该方法将掩蔽后的融合表示建模为高斯分布并优化闭式变分界,以避免融合模块依赖主导模态或共享信息。论文称基准评测显示其提升了预测性能,并带来更高的任务标签协同 PID 估计与 InterSHAP 交互归因。

AI 根据报道生成 · 2 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

11月6日
  1. arXiv cs.AI
    InfMasking:面向协同多模态学习的统一变分框架

    研究者提出 InfMasking,一个基于无限掩码的统一多模态学习框架,在融合前随机掩蔽各模态特征,促使模型利用仅有多模态共同观察时才出现的协同信息。该方法将掩蔽后的融合表示建模为高斯分布并优化闭式变分界,避免融合模块依赖主导模态或共享信息。基准评测显示其提升预测性能,并带来更高的任务标签协同 PID 估计与 InterSHAP 交互归因,论文已被 TPAMI 接收。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。