转向机器学习以进行深度估算
echSpot说它对Pixel 3的看法并不是广告:“Pixel 3很可能是市场上最好的拍照手机。” Ubergizmo的 Tyler Lee 正处于完全恭维模式。“毫无疑问,所有的谷歌的艰苦的工作和研究已经还清像素3确实有更好的相机之一左右。”
好的,我们明白了。在压倒智能手机市场的竞争激烈的供应商中,Pixel 3成功地将自己的地盘标记为具有非常好的相机功能的手机。而且,现在,谷歌人工智能博客上的最新博客只会让Pixel 3粉丝更加欣喜,因为它详细说明了如何在Pixel 3上实现“肖像模式”。
想象一下团队转向机器学习,TensorFlow和深度感知目标。
Android Authority中的 Scott Adam Gordon 与读者分享了Google的方法和技巧。“借助谷歌Pixel 3的相机,谷歌提供了更多的深度线索,以提供更准确的模糊效果。除了视差,谷歌使用锐度作为深度指示器 - 更远的物体不如更近的物体 - 和现实世界的对象例如,相机可以识别一个人在场景中的面部,并根据其相对于周围物体的像素数来计算它的近或远。“
研究科学家Rahul Garg和软件工程师Neal Wadhwa发布了博客。“今年,在Pixel 3上,我们转向机器学习以改进深度估算,以产生更好的肖像模式效果。”
在摄影和数码摄影中,肖像模式是数码相机的一项功能,用于拍摄单个拍摄对象时的照片。在纵向拍摄模式时,数码相机会自动使用大光圈来保持背景通过使用狭窄的景深使焦点失焦,因此拍摄的主体是唯一关注的焦点。“
不仅是单个主题而且更多:“不仅肖像中的人物会聚焦,同一焦点平面附近的物品也会更清晰,当物体进一步位于该平面的前方和后方时,模糊的实际增加, “ Android警察局的 Ryne Hager说道。
了解?背景故意失焦; 该主题具有最大的影响力。如果经常在广告和促销信息中使用此技术,则通过模糊背景来最大限度地关注脸部。
谷歌需要一些照片来训练人工智能。输入5-phone clump-ok,更礼貌地陈述,组合五部手机。他们谈到了深度图,训练数据和这个组合,“Frankenphone”,一个带有5部手机的平台,所有Pixel 3和基于Wi-Fi的解决方案。
CNET描述了Frankenphone。“五重奏的手机夹在一起产生了数据,以训练Pixel 3判断深度。” 斯蒂芬·尚克兰(Stephen Shankland)描述了一个“ 用五块手机组成的混乱团块,以改善今年Pixel 3中该功能的工作方式。”
他们使用TensorFlow Lite,一种用于在移动和嵌入式设备上运行机器学习模型的跨平台解决方案,以及Pixel 3的GPU,可以快速计算深度。然后,他们将得到的深度估计与他们的“人物分割神经网络中的掩模相结合,以产生美丽的肖像模式结果”。
为什么这很重要不需要太多分析:更好看的肖像模式镜头。
在更全面的拍照智能手机中,供应商认为他们的销售宣传最好包括诱人的相机功能。谷歌的计算摄影方法可以为Pixel带来真正的优势。“智能手机拥有小型图像传感器,无法与传统相机竞争图像质量,但谷歌在计算摄影方法方面处于领先地位,可以实现模糊背景,提高分辨率,调整曝光,改善阴影细节和拍摄照片等功能。黑暗,“CNET的Stephen Shankland说。