Instant-NeRF：通过算法-加速器协同设计的近内存处理实现即时端侧神经辐射场训练
计算机视觉与模式识别
2023-05-11 v1 硬件体系结构
摘要
即时端侧神经辐射场（NeRFs）因释放沉浸式AR/VR体验的潜力而需求日益增长，但仍受限于其令人望而却步的训练时间。我们的性能分析揭示了NeRF训练中的内存受限低效问题。为解决该低效，近内存处理（NMP）有望成为有效方案，但也因NeRF独特的负载而面临挑战，包括随机哈希表查找、随机点处理序列以及异构瓶颈步骤。因此，我们提出首个专用于实现即时端侧NeRF训练的NMP框架Instant-NeRF。在八个数据集上的实验一致验证了Instant-NeRF的有效性。
引用
@article{arxiv.2305.05766,
title = {Instant-NeRF: Instant On-Device Neural Radiance Field Training via Algorithm-Accelerator Co-Designed Near-Memory Processing},
author = {Yang Zhao and Shang Wu and Jingqun Zhang and Sixu Li and Chaojian Li and Yingyan Lin},
journal= {arXiv preprint arXiv:2305.05766},
year = {2023}
}
备注
Accepted by DAC 2023