谷歌AI团队揭秘Pixel 3拍照“魔法”：Super Res Zoom

2018-10-18 08:41

谷歌Pixel系列的相机拍照效果向来是业界的标杆，当大部分手机已经开始采用后置多摄像头时，谷歌的旗舰机型仍然坚持单摄像头，可见其对自家手机的相机实力有十足的信心。最新发布的Pixel 3和Pixel 3 XL的相机在旧版的基础上进行了大幅度升级，针对其中的Super Res Zoom功能，谷歌AI团队特意在Google Blog发博文解释了这项技术实现的全过程。

Super Res Zoom提高了通过数字变焦拍摄的照片的清晰度。相机在拍照之前向前推进镜头，而不是拍照之后再对图片进行裁剪，这样有助于之后用特殊的算法提高图像的质量。以往的数字变焦技术是对单个图像的一小部分放大来生成更大的图片，相比之下，Pixel 3的Super Res Zoom技术则直接将多帧合并到分辨率更高的图像上，使生成的图像保留原始图像的纹理和细节，达到的视觉效果几乎可以媲美其他多数智能手机的2x光学变焦镜头。

谷歌AI团队发现，其他的许多数字变焦算法通常是先剪裁后放大高分辨率的图像，这个过程导致许多细节的丢失。谷歌的Pixel 系列手机已经使用HDR+模式的多帧技术，而Super Res Zoom功能进而采用了一种被称为Dribble的技术，能捕捉从细微变化的不同角度拍摄的每一帧图片并将它们合成。手机作为一种手持设备，用户拍照时无法避免手抖，而该技术将高速连拍图像中的单个图像作为参考帧与其他相关的帧对齐，然后把图像整合在一起。即使将手机放置在三脚架上，相机也会“故意”抖动以模仿这些动作并捕获额外的帧。

谷歌AI团队通过改进算法，还克服了其他诸如过度噪音、重影和动态模糊的问题，从而实现图像更佳的视觉效果。谷歌还声称，在光线充足的条件下使用2x或3x变焦拍出来的照片通过这种方式处理后的效果将令人非常满意。