跳到正文
arXiv cs.AI· Bruce Changlong Xu·· 1 天前AI 评分45

激活敏感度作为后训练量化统一原理的研究

Activation Sensitivity as a Unifying Principle for Post-Training Quantization

AI 导读

一项 arXiv 研究证明,AWQ、GPTQ 及对角 Fisher 量化、分块重建、Hadamard 旋转等后训练量化方法,都是最小化同一个由梯度加权激活敏感度决定的二次型的特例。

来源:arXiv cs.AI · arxiv.org