中文

用于临界采样三维点云属性压缩的学习型非线性预测器

图像与视频处理 2024-09-23 v2 机器学习 信号处理

摘要

我们通过体素方法研究三维点云属性压缩:假设点云几何在编码器和解码器两端均已知,连续属性函数 f:R3Rf: \mathbb{R}^3 \mapsto \mathbb{R} 的参数 θ\theta 被量化为 θ^\hat{\theta} 并编码,从而可在解码端已知的三维点 xiR3\mathbf{x}_i \in \mathbb{R}^3 处恢复离散样本 fθ^(xi)f_{\hat{\theta}}(\mathbf{x}_i)。具体地,我们考虑嵌套的函数子空间序列 Fl0(p)FL(p)\mathcal{F}^{(p)}_{l_0} \subseteq \cdots \subseteq \mathcal{F}^{(p)}_L,其中 Fl(p)\mathcal{F}_l^{(p)} 是由 pp 阶 B 样条基函数张成的函数族,flf_l^*ffFl(p)\mathcal{F}_l^{(p)} 上的投影,表示为低通系数 FlF_l^*glg_l^* 是正交子空间 Gl(p)\mathcal{G}_l^{(p)}(其中 Gl(p)Fl(p)=Fl+1(p)\mathcal{G}_l^{(p)} \oplus \mathcal{F}_l^{(p)} = \mathcal{F}_{l+1}^{(p)})中的残差函数,表示为高通系数 GlG_l^*。在本文中,为改进 \cite{do2023volumetric} 的编码性能,我们研究在给定第 llflf_l^* 时预测第 l+1l+1 层的 fl+1f_{l+1}^* 并对 p=1p=1 情形(RAHT(11))的 GlG_l^* 进行编码。对于预测,我们在理论框架中形式化了 MPEG-PCC 中的 RAHT(1) 线性预测,并提出了一种使用双边滤波器多项式的新非线性预测器。我们推导了高效计算适于编码的临界采样高通系数 GlG_l^* 的方程。我们通过最小化率失真拉格朗日量,在大型点云训练集上优化所得前馈网络中的参数。实验结果表明,我们改进的框架在码率上优于 MPEG G-PCC 预测器 11%11\%--12%12\%

关键词

引用

@article{arxiv.2311.13539,
  title  = {Learned Nonlinear Predictor for Critically Sampled 3D Point Cloud Attribute Compression},
  author = {Tam Thuc Do and Philip A. Chou and Gene Cheung},
  journal= {arXiv preprint arXiv:2311.13539},
  year   = {2024}
}

备注

arXiv admin note: text overlap with arXiv:2311.13533