3D场景表示的时间-忠实度权衡
计算机视觉与模式识别
2024-07-24 v1
摘要
实时三维（3D）场景表示是支撑数字制造、虚拟/增强/扩展/混合现实（VR/AR/XR/MR）和元宇宙等各种创新应用的关键构件之一。尽管已付出了大量努力来实现实时通信和计算，但实时3D场景表示仍是一个具有挑战性的任务。本文研究了实时3D场景表示中的时间与忠实度之间的权衡。具体而言，我们建立了一个框架来评估通信延迟对权衡的影响，其中由多个摄像机监控的真实场景与边缘服务器通信。为提高3D场景表示的忠实度，我们提出采用单步骤近似策略优化（PPO）方法，利用年龄信息（AoI）来决定接收到的图像是否需要参与3D场景表示和渲染。我们测试了该框架和所提方法，并使用不同的著名3D场景表示方法进行验证。仿真结果表明，实时3D场景表示会受到通信延迟的敏感影响，而我们提出的方法可实现最佳的3D场景表示结果。
引用
@article{arxiv.2407.16575,
title = {Timeliness-Fidelity Tradeoff in 3D Scene Representations},
author = {Xiangmin Xu and Zhen Meng and Yichi Zhang and Changyang She and Philip G. Zhao},
journal= {arXiv preprint arXiv:2407.16575},
year = {2024}
}
备注
This paper has been accepted for publication by the IEEE International Conference on Computer Communications (INFOCOM) Workshops 2024