利用运动学数据自动对齐手术视频
计算机视觉与模式识别
2019-07-23 v2 人工智能
机器学习
机器学习
摘要
在过去一百年中,“看一例、做一例、教一例”的经典教学方法主导了全球的外科教育体系。随着手术室 2.0 的到来,在手术过程中记录视频、运动学及许多其他类型的数据已成为一项轻松的任务,从而允许人工智能系统被部署并用于外科与医疗实践。近来,手术视频已被证明可为同伴指导提供结构,使新手学员能够通过重放这些视频向经验丰富的外科医生学习。然而,手术手势时长与执行上的高度操作者间差异,使得通过比较新手与专家手术视频进行学习成为一项非常困难的任务。在本文中,我们提出一种基于相应运动学多元时间序列数据对齐来对齐多个视频的新技术。通过利用动态时间规整度量,我们的算法同步一组视频,以展示以不同速度执行的相同手势。我们相信所提方法是对现有手术学习工具的宝贵补充。
引用
@article{arxiv.1904.07302,
title = {Automatic alignment of surgical videos using kinematic data},
author = {Hassan Ismail Fawaz and Germain Forestier and Jonathan Weber and François Petitjean and Lhassane Idoumghar and Pierre-Alain Muller},
journal= {arXiv preprint arXiv:1904.07302},
year = {2019}
}
备注
Accepted at AIME 2019