DDGS-CT: 用于逼真体渲染的方向解耦高斯泼溅
计算机视觉与模式识别
2024-12-10 v2 图像与视频处理
摘要
数字重建放射影像（DRR）是从3D CT体模拟的2D X射线图像，广泛用于术前设置，但由于计算瓶颈，在术中应用中受到限制，特别是对于准确但繁重的基于物理的蒙特卡洛方法。虽然分析型DRR渲染器提供了更高的效率，但它们忽略了各向异性的X射线图像形成现象，如康普顿散射。我们提出了一种新颖的方法，将逼真的物理启发X射线模拟与使用3D高斯泼溅（3DGS）的高效可微DRR生成相结合。我们的方向解耦3DGS（DDGS）方法将辐射度贡献分解为各向同性和方向相关分量，无需复杂的运行时模拟即可近似复杂的各向异性相互作用。此外，我们调整了3DGS初始化以考虑断层扫描数据的特性，提高了准确性和效率。我们的方法在图像准确性上超越了最先进的技术。此外，我们的DDGS在术中应用和逆问题（如姿态配准）中显示出前景，与分析方法相比，提供了优越的配准准确性和运行时性能。
引用
@article{arxiv.2406.02518,
title = {DDGS-CT: Direction-Disentangled Gaussian Splatting for Realistic Volume Rendering},
author = {Zhongpai Gao and Benjamin Planche and Meng Zheng and Xiao Chen and Terrence Chen and Ziyan Wu},
journal= {arXiv preprint arXiv:2406.02518},
year = {2024}
}
备注
Accepted by NeurIPS2024