虚拟化身生成模型作为世界导航器
计算机视觉与模式识别
2024-06-04 v1 人工智能
人机交互
机器学习
机器人学
摘要
我们介绍了SABR-CLIMB，一种新颖的视频模型，使用虚拟化身模拟攀岩环境中的人类运动。我们的扩散transformer在每个扩散步骤中预测样本而非噪声，并摄取整个视频以输出完整的运动序列。通过利用大型专有数据集NAV-22M和大量计算资源，我们展示了一个用于训练通用虚拟化身以执行机器人、体育和医疗领域复杂任务的系统概念验证。
引用
@article{arxiv.2406.01056,
title = {Virtual avatar generation models as world navigators},
author = {Sai Mandava},
journal= {arXiv preprint arXiv:2406.01056},
year = {2024}
}
备注
16 pages, 15 figures