超越准确性的脉冲神经网络量化
机器学习
2026-04-17 v1
摘要
量化是脉冲神经网络(SNN)的一个自然补充,通过稀疏、事件驱动的计算减少内存带宽和算术开销,适用于资源受限硬件部署。然而,现有 SNN 量化评估几乎仅关注准确率,忽略了量化网络是否保留其全精度版本的放电行为。在等效准确率下,量化方法、裁剪范围和位宽可产生显著不同的放电分布,这些差异对标准指标而言是不可见的,但在部署中至关重要,因为放电活动决定了有效稀疏性、状态存储和事件处理负载。为捕捉这一差距,我们提出以地毯运输距离(Earth Mover's Distance, EMD)作为放电分布发散的诊断指标,并在在 CIFAR-10 和 CIFAR-100 上训练的 SEW-ResNet 架构上系统性地进行 weight 和膜电压量化。我们发现均匀量化即使在保持准确率时也会引起分布漂移,而 LQ-Net 式学习量化可保持接近全精度基线的放电行为。我们的结果表明,行为保持应被视为准确率的评估标准,EMD 提供了对其进行评估的原则性工具。
关键词
引用
@article{arxiv.2604.14487,
title = {Quantization of Spiking Neural Networks Beyond Accuracy},
author = {Evan Gibson Smith and Jacob Whitehill and Fatemeh Ganji},
journal= {arXiv preprint arXiv:2604.14487},
year = {2026}
}