中文

面向绑定对象的可供性感知铰接合成

计算机视觉与模式识别 2025-01-22 v1

摘要

绑定对象常用于艺术家流程中,因为它们可以灵活适应不同的场景和姿态。然而,将绑定调整为逼真的可供性感知姿态(例如,遵循上下文、尊重物理规律和物体个性)仍然耗时,且严重依赖经验丰富的艺术家的人工劳动。在本文中,我们处理这一新颖问题并设计了 A3Syn。给定上下文(如环境网格和所需姿态的文本提示),A3Syn 可为从互联网获取的任意开放域绑定对象合成铰接参数。由于缺乏训练数据,且我们不对开放域绑定做任何拓扑假设,该任务极具挑战性。我们提出使用 2D 图像修复扩散模型和几种控制技术来合成上下文中的可供性信息。然后,我们结合可微渲染和语义对应关系,开发了一种高效的骨骼对应对齐方法。A3Syn 具有稳定的收敛性,可在几分钟内完成,并在不同组合的野外对象绑定和场景上合成出合理的可供性。

关键词

引用

@article{arxiv.2501.12393,
  title  = {Towards Affordance-Aware Articulation Synthesis for Rigged Objects},
  author = {Yu-Chu Yu and Chieh Hubert Lin and Hsin-Ying Lee and Chaoyang Wang and Yu-Chiang Frank Wang and Ming-Hsuan Yang},
  journal= {arXiv preprint arXiv:2501.12393},
  year   = {2025}
}

备注

Project page: https://chuyu.org/research/a3syn