ProBio：面向分子生物学实验室的协议引导多模态数据集
计算机视觉与模式识别
2023-11-02 v1
摘要
研究结果难以复现的挑战对分子生物学领域构成了显著阻碍。现代智能系统的出现已在多个领域取得显著进展。因此，我们着手研究智能监控系统，以此应对可复现性危机问题。具体而言，我们首先整理了一个名为ProBio的综合性多模态数据集，作为实现该目标的第一步。该数据集包含细粒度分层标注，用于生物实验室（BioLab）中的活动理解研究。接下来，我们设计了两个具有挑战性的基准——透明溶液追踪与多模态动作识别，以凸显BioLab环境下活动理解的独特特征与困难。最后，我们对当代视频理解模型进行了详尽的实验评估，并指出它们在这一专门领域的局限性，以明确未来研究的潜在方向。我们希望ProBio及其关联基准能吸引更多对分子生物学领域中现代AI技术的关注。
引用
@article{arxiv.2311.00556,
title = {ProBio: A Protocol-guided Multimodal Dataset for Molecular Biology Lab},
author = {Jieming Cui and Ziren Gong and Baoxiong Jia and Siyuan Huang and Zilong Zheng and Jianzhu Ma and Yixin Zhu},
journal= {arXiv preprint arXiv:2311.00556},
year = {2023}
}