Objaverse:带标注的3D物体宇宙

Matt Deitke; Dustin Schwenk; Jordi Salvador; Luca Weihs; Oscar Michel; Eli VanderBilt; Ludwig Schmidt; Kiana Ehsani; Aniruddha Kembhavi; Ali Farhadi

Objaverse:带标注的3D物体宇宙

计算机视觉与模式识别 2022-12-16 v1 人工智能图形学机器人学

作者: Matt Deitke , Dustin Schwenk , Jordi Salvador , Luca Weihs , Oscar Michel , Eli VanderBilt , Ludwig Schmidt , Kiana Ehsani , Aniruddha Kembhavi , Ali Farhadi

在 arXiv 上查看 ↗ PDF ↗

摘要

诸如WebText、Wikipedia、Conceptual Captions、WebImageText和LAION这样的大规模数据语料库推动了AI近期的显著进展。在此类数据集上训练的大型神经模型产生了令人印象深刻的结果,并在当今许多基准测试中名列前茅。这类大规模数据集中的一个显著缺失是3D数据。尽管在3D视觉中有相当大的兴趣和潜在应用,高保真3D模型的数据集仍然是中等规模且物体类别多样性有限。为弥补这一差距,我们提出了Objaverse 1.0,一个包含80万+(且不断增长)带有描述性标题、标签和动画的3D模型物体的大型数据集。Objaverse在规模、类别数量以及类别内实例的视觉多样性方面均优于当前的3D存储库。我们通过四个不同的应用展示了Objaverse的巨大潜力:训练生成式3D模型、改进LVIS基准上的长尾类别分割、训练用于具身AI的开放词汇物体导航模型,以及创建用于视觉模型鲁棒性分析的新基准。Objaverse可以开启研究的新方向,并赋能AI领域的全新应用。

关键词

3D数据集 Objaverse 生成式3D模型分割具身AI 视觉基准

引用

@article{arxiv.2212.08051,
  title  = {Objaverse: A Universe of Annotated 3D Objects},
  author = {Matt Deitke and Dustin Schwenk and Jordi Salvador and Luca Weihs and Oscar Michel and Eli VanderBilt and Ludwig Schmidt and Kiana Ehsani and Aniruddha Kembhavi and Ali Farhadi},
  journal= {arXiv preprint arXiv:2212.08051},
  year   = {2022}
}

备注

Website: objaverse.allenai.org

Objaverse:带标注的3D物体宇宙

摘要

关键词

引用

备注

相关论文