跳到正文
热点事件持续更新

研究提出BiSID-AVS:用双耳音频区分真正发声目标

1 篇报道1 个报道来源1 小时前更新

先了解这件事

AI 综述

Haoze Ma 等论文作者提出音频-视觉分割方法 BiSID-AVS,利用双耳音频的耳间差异作为空间约束,在多个同类候选目标共存时识别真正发声的实例,论文发布于 arXiv。 方法先用音频提示定位类别一致的候选区域,再将双耳线索投影到图像平面的空间响应图,并在特征和 decoder 层级做双层空间条件化。 作者称,在双耳扩展的 AVS-Synthetic 基准和面向机器人室内感知的 Habitat-AVS 数据集上,该方法在多候选子集上表现最佳,实例级 mIoU 分别提升 35.19 和 41.21 个百分点,并显著减少对非发声同类区域的误激活。

AI 根据报道生成 · 52 分钟前更新

报道时间线

沿着报道,了解事件的不同侧面。

11月5日
  1. arXiv cs.AI
    BiSID-AVS:用双耳音频消歧视听分割中的发声实例

    一项 arXiv 研究提出 BiSID-AVS,利用双耳音频的耳间差异提供空间约束,在多个同类候选目标共存时识别真正发声的实例。该方法先通过音频提示定位类别一致的候选区域,再将双耳线索投影到图像平面空间响应图,并在特征和 decoder 层级做双层空间条件化。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。