中文

SiLVi:用于标记视频互动的简单接口

计算机视觉与模式识别 2026-04-08 v2 定量方法

摘要

计算机视觉方法日益增多地用于自动化分析通过捕鼠器、无人机或野外直接观察动物所收集的大量视频数据。虽然近期进展主要集中在检测单个动作,但对于检测和标注互动——这对于理解动物的社交和个体行为至关重要——已有很少工作进行了探索。现有开源标注工具要么支持不进行个体局部分析的行为标注,要么支持不具备捕获互动能力的局部分析。为填补这一差距,我们提出了 SiLVi,这是一个开源标注软件,将上述两种功能集成在一起。SiLVi 使研究人员能够直接在视频数据中标注行为和互动,生成适用于训练和验证计算机视觉模型的结构化输出。通过将行为生态学与计算机视觉结合起来,SiLVi 促进了针对细粒度行为分析的自动化方法的开发。虽然该软件主要是在动物行为的背景下开发的,但 SiLVi 在其他需要提取动态场景图的视频中标注人类互动也可能有所帮助。该软件、文档以及下载说明均可在 https://silvi.eckerlab.org 获取。

关键词

引用

@article{arxiv.2511.03819,
  title  = {SiLVi: Simple Interface for Labeling Video Interactions},
  author = {Ozan Kanbertay and Richard Vogg and Elif Karakoc and Peter M. Kappeler and Claudia Fichtel and Alexander S. Ecker},
  journal= {arXiv preprint arXiv:2511.03819},
  year   = {2026}
}

备注

Documentation link updated, Linux version added