转动你的眼球：通过显式 3D 眼球旋转进行视线重定向
计算机视觉与模式识别
2025-09-19 v2 人工智能
摘要
我们提出了一种新颖的 3D 视线重定向框架，该框架利用了显式的 3D 眼球结构。现有的视线重定向方法通常基于神经辐射场，通过体渲染采用隐式神经表示。与这些基于 NeRF 的方法不同，后者不显式建模 3D 表示的旋转和平移，我们引入了一个专用的 3D 眼球结构，使用 3D 高斯泼溅（3DGS）来表示眼球。我们的方法通过显式地旋转和平移 3D 眼球结构，生成忠实再现所需视线方向的照片级真实感图像。此外，我们提出了一个自适应变形模块，能够复制眼睛周围细微的肌肉运动。通过在 ETH-XGaze 数据集上进行的实验，我们证明我们的框架能够生成多样化的新视线图像，与先前的最先进方法相比，实现了更优的图像质量和视线估计精度。
引用
@article{arxiv.2508.06136,
title = {Roll Your Eyes: Gaze Redirection via Explicit 3D Eyeball Rotation},
author = {YoungChan Choi and HengFei Wang and YiHua Cheng and Boeun Kim and Hyung Jin Chang and YoungGeun Choi and Sang-Il Choi},
journal= {arXiv preprint arXiv:2508.06136},
year = {2025}
}
备注
9 pages, 5 figures, ACM Multimeida 2025 accepted