中文

PatchEX:通过基于补丁的并行外推实现高质量实时时序抽样

计算机视觉与模式识别 2024-07-26 v1 图形学

摘要

近年来,高刷新率显示器因需要在游戏、专业显示器和医学成像等专业应用中提供卓越视觉质量而广受欢迎。然而,高刷新率显示器本身并不能保证更佳的视觉体验;GPU必须以匹配的速率渲染帧,否则会观察到令人关心的视觉伪影,如画面撕裂和卡顿。时序抽样是一种有效的技术,通过预测其他已渲染帧来提高帧率。该空间有两种方法:插值和外推。插值方法在质量方面表现良好,但因需要下一帧已渲染的帧而导致延迟较高。相比之下,外推方法速度更快,但质量较差。本文引入PatchEX,这是一种新的帧外推方法,旨在以外推的速度提供插值的质量。它聪明地将外推任务划分为子任务,并并行执行以提高质量和延迟。随后,它使用基于补丁的图像修复方法和自定义阴影预测方法来融合生成的子帧。该方法显著减少了整体延迟,同时保持了输出质量。我们的结果表明,PatchEX在PSNR上相对于最新的外推方法ExtraNet和ExtraSS分别提高了65.29%和48.46%,同时分别快6倍和2倍。

关键词

引用

@article{arxiv.2407.17501,
  title  = {PatchEX: High-Quality Real-Time Temporal Supersampling through Patch-based Parallel Extrapolation},
  author = {Akanksha Dixit and Smruti R. Sarangi},
  journal= {arXiv preprint arXiv:2407.17501},
  year   = {2024}
}