指甲油试戴：面向原生与浏览器端智能手机 AR 应用的小物体实时语义分割
计算机视觉与模式识别
2019-06-11 v2 机器学习
摘要
我们提供了一种用于小物体语义分割的系统，使指甲油试戴 AR 应用能够在原生及网页移动应用中于客户端实时运行。通过调整输入分辨率与神经网络深度，我们的模型设计实现了性能与运行时的平滑权衡，其中最高性能设置在 iPad Pro 原生应用中以 29.8ms 运行时达到 94.5 mIoU。我们还提供了一种用于指甲油试戴的后处理与渲染算法，该算法与我们的语义分割及指甲基底-指尖方向预测相集成。
引用
@article{arxiv.1906.02222,
title = {Nail Polish Try-On: Realtime Semantic Segmentation of Small Objects for Native and Browser Smartphone AR Applications},
author = {Brendan Duke and Abdalla Ahmed and Edmund Phung and Irina Kezele and Parham Aarabi},
journal= {arXiv preprint arXiv:1906.02222},
year = {2019}
}
备注
4 pages, 3 figures. CVPRW 2019: Third Workshop on Computer Vision for AR/VR