Metabook：面向增强现实中 3D 故事书创建的移动端到头显流水线
人机交互
2025-08-12 v3
摘要
AR 3D 书在提升学生学习效果方面显示出巨大潜力。然而，3D 书的创建过程需要大量的时间、精力和专业技能投入。因此，本文首先进行了一个为期三天的研讨会，研究 AI 如何支持 3D 书的自动创建。基于研讨会得出的设计见解，我们开发了 Metabook，一个即使新手用户也能从文本自动创建 3D 书的系统。据我们所知，Metabook 是第一个提供端到端 3D 书生成的系统。后续对成年用户的研究表明，Metabook 使无经验用户能够创建 3D 书，减少了工作量并缩短了准备时间。随后我们招募了 22 名儿童，考察 AR 3D 书与纸质书相比对儿童学习的影响。结果表明，3D 书显著提高了儿童的兴趣，改善了记忆保持，并降低了认知负荷，但在理解方面未观察到显著改善。最后，我们讨论了更有效利用 3D 书支持儿童学习的策略，并为教育工作者提供了实用建议。
引用
@article{arxiv.2405.13701,
title = {Metabook: A Mobile-to-Headset Pipeline for 3D Story Book Creation in Augmented Reality},
author = {Yibo Wang and Yuanyuan Mao and Lik-Hang Lee and Shi-ting Ni and Zeyu Wang and Xiaole Gu and Pan Hui},
journal= {arXiv preprint arXiv:2405.13701},
year = {2025}
}