MiXR：从真实对象中提取几何信息用于现场三维设计
人机交互
2026-05-21 v2
摘要
近期的 3D 生成式 AI 开发使用户能够通过文本或图像提示创建定制 3D 模型，但这些方法对空间结构控制有限，不适用于需要精确几何组合的任务。我们提出MiXR——一种用于现场组合建模的 XR 系统，使用户能够通过从环境中提取几何片段来创建新的 3D 模型。用户可直接进行三维操作从捕获的对象中提取片段并组装新制品，而生成式 AI 则综合用户定义的组合以合成连贯的模型。这种混合工作流程允许用户显式定义空间结构，同时将几何细化委托给生成式模型，使用户能够指定通过文本提示难以表达的空间意图。在一次受控用户研究（）中，使用 MiXR 的参与者认为其设计与目标更接近，感觉更可控，且认知负荷低于生成式组合基准方法。
引用
@article{arxiv.2605.09620,
title = {MiXR: Harvesting and Recomposing Geometry from Real-World Objects for In-Situ 3D Design},
author = {Faraz Faruqi and Demircan Tas and Arthur Caetano and Niccolò Meniconi and Oğuz Arslan and Misha Sra and Ruofei Du and Stefanie Mueller and Mustafa Doga Dogan},
journal= {arXiv preprint arXiv:2605.09620},
year = {2026}
}
备注
12 pages, 12 figures