基于手机相机融合的高效混合变焦

单反相机可通过改变镜头距离或更换镜头类型实现多种变焦级别。然而，由于空间限制，这些技术无法在智能手机上实现。大多数智能手机制造商采用混合变焦系统：通常使用广角（W）相机在低变焦级别，长焦（T）相机在高变焦级别。为模拟W和T之间的变焦级别，这些系统会裁剪并数字上采样W图像，导致显著的细节损失。本文提出一种高效的移动设备混合变焦超分辨率系统，该系统捕获同步的W和T图像对，并利用机器学习模型将细节从T对齐并转移到W。我们进一步开发了一种自适应融合方法，处理景深不匹配、场景遮挡、光流不确定性和对齐误差。为最小化领域差距，我们设计了一个双手机相机支架，用于捕获真实世界输入和真值以进行监督训练。我们的方法在移动平台上500毫秒内生成1200万像素图像，并在真实场景的广泛评估中优于现有方法。