基于全景摄像机的面部表情识别自拍

近期研究表明，视力受损者希望以与盲人相同的方式拍摄自拍，以记录照片并与他人分享。虽然已开发出支持声音和振动的应用程序帮助视力受损者使用智能手机摄像头拍摄自拍，但仍难以捕捉所有人在视野中的角度，也难以确认所有人在照片中的表情是否良好。为缓解这些问题，我们提出一种使用全景摄像头拍摄多人自拍的方法。具体而言，用户使用全景摄像机拍摄几秒钟的视频，然后对所有帧进行人脸检测。该方法随后消除误检测的人脸，并考虑所有帧之间的一致性来补充未检测到的人脸。执行面部表情识别后，该方法最终提取出参与者最开心的帧，并生成从全景帧中将所有参与者投影到同一视野中的透视视图图像。在实验中，我们使用不同人数场景来演示所提方法的有效性。