VividFace：人oid 机器人的实时真实面部表情阴影

人oid 面部表情阴影技术使机器人能够实时地模拟人类面部表情，这对于实现具有生动表现力的人形机器人以及情感化的人机交互至关重要。现有的研究进展有限，往往无法同时实现实时性和真实性，由于离线视频基方法和捕获和传递细微表情细节的能力不足。为此，我们提出了 VividFace，一个用于人oid 机器人的实时真实面部表情阴影系统。通过优化 imitation 框架 X2CNet++，细调人类到人oid 面部运动传递模块，引入基于特征适应的训练策略以实现不同图像来源间的更好对齐。进一步通过基于异步 I/O 的视频流兼容推理管道和简化工作流程，实现了跨设备的高效通信，从而实现实时阴影。VividFace 能在 0.05 秒内模拟人类面部表情，同时能够在多样化的面部配置下泛化。广泛的现实演示验证了其实际实用性。视频可在：https://lipzh5.github.io/VividFace/ 查看。