跳到正文
热点事件持续更新

研究者提出ACSAN:用卷积替换ViT全连接运算

1 篇报道1 个报道来源2 小时前更新

先了解这件事

AI 综述

Zimian Wei等研究者提出深度学习模型ACSAN(全卷积自注意力网络),在Vision Transformer(ViT)框架中用卷积运算取代全连接矩阵乘法,并发布了论文。 据论文称,研究者在CIFAR-10、CIFAR-100和ImageNet-1k三个图像分类数据集上从头训练了ACSAN,实验结果显示其在参数量相当或更少的情况下,分类准确率与标准ViT相当或更优。

AI 根据报道生成 · 35 分钟前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月27日
  1. arXiv cs.AI
    ACSAN:全卷积自注意力网络将卷积运算与 Vision Transformer 相结合

    研究者提出深度学习模型 ACSAN(All-Convolutional Self-Attention Network),在 ViT 框架中用卷积运算取代全连接矩阵乘法。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。