Google Pixel背后故事:如何做出手机中最好的相机

2017年04月15日 07:51 极客公园
微博 微信 空间 分享 添加喜爱

  一年前,提起拍照好的智能手机,大家可能会首先想到的是iPhone和Galaxy(或许还有遗忘在历史长河中的Lumia)。不过从去年年底开始,在这个名单中还得再加上一个名字:Google Pixel。

  Google Pixel的相机到底有多好呢?在法国著名影像实验室DxO旗下的DxOMark评分中,Google Pixel得到了89的高分,这是智能手机在DxOMark中得到的最高分数,并且直到现在也没有手机可以超越。  

  在Google Pixel优秀的成像品质背后,有三个地方值得关注。

  第一是它采用的索尼 IMX378 传感器,高达1/2.3英寸的尺寸和1.55微米的大像素为成像提供了优秀的硬件基础。 

  第二是骁龙821内置的ISP和DSP,相比上一代骁龙810有了长足的进步。 

  第三是HDR+功能,这也是Pixel拍照“魔法”的核心,毕竟用IMX378和骁龙821的不是只有Pixel,却没有手机可以拍得Pixel一样好。不过有趣的是,HDR+这个在手机上大放异彩的功能,最初居然是为Google Glass而研发的。 

  以下内容编译自The Team at X。

  有些时候,Google X的团队决定去做一件事件,不过后来发现这些技术的应用场景远超过了他们最初尝试去解决的问题,Gcam就是一个这样的例子。

  Gcam成立于2011年,那时候Google X的负责人Sebastian Thrun正在寻找可以放在Google Glass的相机解决方案。Google Glass可以让佩戴者无需拿出相机就能以第一视角来拍摄并分享照片,不过为了让消费者愿意来使用这项功能,Google Glass的拍照能力至少得要达到同时期智能手机相机的水准才行。

由Google Glass拍摄由Google Glass拍摄

  不过受限于Google Glass的产品形态,只能为其配备很小的传感器(具体和智能手机差不多)和镜头模组,这让Google Glass的相机在弱光或者明暗反差较大的场景时的成像质量很差。

一个早期的Google Glass原型机一个早期的Google Glass原型机

  由于Google Glass必须得做得足够轻并且方便佩戴,设计师无法简单通过配备一个更大、品质更好地相机模组来解决这个问题。面对这个“鱼和熊掌”的问题,Google X团队开始尝试用另外一种思路来解决问题:与其尝试用更先进的硬件来解决问题,我们能不能用更加智能的软件处理来解决它? 

  Marc Levoy是斯坦福大学的一名教职员工,同时也是一位计算摄影领域(基于软件的图像捕捉和处理技术)的专家。

  2011年,Marc在Google X中组建了后来被称作Gcam的团队,这个团队的任务是在移动设备上通过计算摄影技术来提高成像质量。在Gcam试图提高Google Glass成像品质的过程中,他们采用了一种叫做图像融合的方法,这种方法的原理是使用相机连续快速拍摄多张照片,然后合成为一张品质更好地照片,从而让相机可以在弱光下拍出拥有足够多细节、在明暗反差较大的场景拍出更加清晰的照片。 

  这种图像融合技术于2013年首次在Google Glass上亮相,不过,很明显这项技术的应用场景将远远不止Google Glass。

  越来越多的消费者选择使用智能手机来取代传统的相机,消费者希望他们手上的智能手机在任何场景和光线下都能拍出优秀的照片。在这个背景下,Gcam的下一代图像融合技术不再局限于Google Glass,而是直接内置在了2013年10月发布的Nexus 5和后一年的Nexus 6的相机App中,这就是大家熟悉的HDR+。

  (编者注:HDR+的原理是通过连续拍摄多张RAW文件,通过多张合成的方式来获得一张品质更好的JPEG文件,这和其他手机的HDR功能有所不同,后者的原理通过拍摄三张左右曝光不同的照片来合成一张宽容度更好的JPEG文件,HDR的重点在于合成用的照片曝光是不一样的,应用场景也主要局限在明暗反差较大的场景。)

Marc Levoy使用Google Pixel拍摄Marc Levoy使用Google Pixel拍摄

  现在,Gcam的技术已经被应用在Alphabet旗下的一系列的App和产品中。2015年,Gcam从Google X正式毕业,随后加入到Google Research中,现在Gcam正在参与一系列技术的研发,包括Android、YouTube、Google Photos和360度VR相机Jump。此外,Gcam团队的部分成员还参与到了Google相机App的Lens Blur功能(可以理解为Google的“先拍照后对焦”功能)以及Jump拍摄的360度VR视频的拼接处理中。

Marc Levoy使用Google Pixel拍摄Marc Levoy使用Google Pixel拍摄

  在Google新推出的Pixel手机中,Gcam开发的HDR+功能被设为了相机的默认模式。

  有了这项技术的加持,Pixel的相机获得了无数的赞誉,有相机评分行业标准之称的DxOMark在2016年将Google Pixel评为“智能手机上有史以来最好的相机”。回顾这段历程,Marc说:“我们花了5年时间才把事情做对……我们非常感谢Google X让我们的团队可以不拘泥于眼前的利益,并且给予我们充足的自由,从而做成了这些。”

  (编者注:HDR+对数据处理能力的要求很高,在Nexus 5、Nexus 6、Nexus 5X和6P这三代产品上,HDR+都只是一个专门的拍照模式,不过在Pixel上,随着骁龙821内置的ISP和DSP性能的大幅跃进,相机App的 HDR+默认就处于“自动启用”的状态。在DxoMark的测试中,打开HDR+后每3秒拍一张照片,上一代产品Nexus 6P拍到第4张相机App就会自动关掉HDR+功能,而Pixel可以一直拍下去。打开HDR+后每1秒拍一张照片,Nexus 6P的HDR+已经无法启用了,Pixel也可以连续以 HDR+模式拍上9张,然后HDR+功能才会被关掉。)

  Gcam的下一步是什么呢?Marc对Gcam的未来感到非常兴奋。

  “机器学习是我们正在推动的一个方向”,Marc解释说,“在现有的基础上,我们依然可以相机上做出很多有创意的东西,比如创造一个训练体系来让照片获得更好的白平衡效果,再比如说对照片背景的处理,我们是应该把它变得模糊,还是把颜色调深或者做其它特别的处理。我们在机器学习领域处于领先的地位,将现实世界和计算摄影世界创造性地融合是一个非常大的机会。”

推荐阅读
聚焦
关闭评论
文章推荐
热门新机
  • 华为 P10

    华为 P10

    参考价格3788元

    • 新配色
    • 升级徕卡镜头
    • 前置莱卡
    • 指纹前置
    • 国内价格未定
  • 小米 5c

    小米 5c

    参考价格1499元

    • 自主芯片
    • 颜值较高
    • 机身轻薄
    • 仅支持移动4G
  • 美图 T8

    美图 T8

    参考价格3299元

    • 外形奇特
    • 自带美颜
    • 拍照不错
    • 需要抢购
  • 荣耀V9 高配版

    荣耀V9 高配版

    参考价格2999元

    • 后置双摄
    • 2K屏幕
    • 麒麟960
    • 手感好
    • 低配版买不到
热门文章
高清美图
策划