基于自适应帧率和分辨率的渲染内容流式传输
图像与视频处理
2026-05-13 v1 计算机视觉与模式识别
图形学
多媒体
摘要
渲染内容的流式传输是将高质量图形带到数十亿不具备足够渲染功率的移动设备的吸引方式。现有解决方案在固定帧率(通常为30或60帧/秒)下渲染内容,带宽受限时降低分辨率。然而,这种策略会导致在带宽约束下渲染质量次优。本文利用人类视觉系统的时空限制,通过根据场景内容和运动自适应调整帧率和分辨率来提高感知质量,同时降低渲染成本。我们的方案与编码器无关,仅需对现有渲染基础设施进行最小修改。我们提出的系统中,一个轻量级神经网络预测给定传输带宽、内容和运动速度的最优帧率和分辨率组合。该预测显著提升了感知质量,同时最小化了受带宽约束下的计算成本。该网络在大规模渲染内容数据集上进行训练,数据集标注了感知视频质量指标。数据集及进一步信息可在项目网页找到:https://www.cl.cam.ac.uk/research/rainbow/projects/adaptive_streaming/。
引用
@article{arxiv.2605.10995,
title = {Streaming of rendered content with adaptive frame rate and resolution},
author = {Yaru Liu and Joseph G. March and Rafal K. Mantiuk},
journal= {arXiv preprint arXiv:2605.10995},
year = {2026}
}