使用单摄像头手机合成景深效果
计算机视觉与模式识别
2018-06-13 v1 图形学
摘要
浅景深常被摄影者用来将主体从分散注意力的背景中分离出来。然而，标准手机摄像头无法在光学上产生此类图像，因为其短焦距和小光圈几乎拍摄出全对焦的图像。我们提出了一种系统，可通过单次按下按钮，用单个移动摄像头计算式地合成浅景深图像。若图像为人像，我们使用人像分割网络将人物及其配饰从背景中分离。若可用，我们还使用密集双像素自动对焦硬件（实质上是基线约 1 毫米的 2 采样光场）来计算密集深度图。这两个信号被结合并用于渲染散焦图像。我们的系统可在手机上以 4 秒处理一张 540 万像素图像，全自动化，且足够鲁棒以供非专业人士使用。我们系统的模块化特性使其在无双像素传感器或无人物主体时也能自然降级。
引用
@article{arxiv.1806.04171,
title = {Synthetic Depth-of-Field with a Single-Camera Mobile Phone},
author = {Neal Wadhwa and Rahul Garg and David E. Jacobs and Bryan E. Feldman and Nori Kanazawa and Robert Carroll and Yair Movshovitz-Attias and Jonathan T. Barron and Yael Pritch and Marc Levoy},
journal= {arXiv preprint arXiv:1806.04171},
year = {2018}
}
备注
Accepted to SIGGRAPH 2018. Basis for Portrait Mode on Google Pixel 2 and Pixel 2 XL