Aria 日常活动数据集
计算机视觉与模式识别
2024-02-23 v2 人工智能
人机交互
摘要
我们推出了 Aria 日常活动（AEA）数据集，这是一个使用 Project Aria 眼镜记录的第一人称多模态开放数据集。AEA 包含由多名佩戴者在五个地理位置多样的室内地点记录的 143 个日常活动序列。每次记录都包含通过 Project Aria 眼镜记录的多模态传感器数据。此外，AEA 还提供机器感知数据，包括高频全局对齐的 3D 轨迹、场景点云、每帧 3D 视线向量以及时间对齐的语音转录。在本文中，我们展示了该数据集支持的一些示例研究应用，包括神经场景重建和提示分割。AEA 是一个开源数据集，可从 https://www.projectaria.com/datasets/aea/ 下载。我们还在 Project Aria Tools https://github.com/facebookresearch/projectaria_tools 中提供了开源实现和使用该数据集的示例。
引用
@article{arxiv.2402.13349,
title = {Aria Everyday Activities Dataset},
author = {Zhaoyang Lv and Nicholas Charron and Pierre Moulon and Alexander Gamino and Cheng Peng and Chris Sweeney and Edward Miller and Huixuan Tang and Jeff Meissner and Jing Dong and Kiran Somasundaram and Luis Pesqueira and Mark Schwesinger and Omkar Parkhi and Qiao Gu and Renzo De Nardi and Shangyi Cheng and Steve Saarinen and Vijay Baiyya and Yuyang Zou and Richard Newcombe and Jakob Julian Engel and Xiaqing Pan and Carl Ren},
journal= {arXiv preprint arXiv:2402.13349},
year = {2024}
}
备注
Dataset website: https://www.projectaria.com/datasets/aea/