Deep Fusion是苹果在上个月的iPhone 11系列发布会上面重点提及的一项功能,当时给出的时间是10月末上线,现在,这项功能已经随着最新的iOS 13.2测试版来到了用户身边。
北京时间今天凌晨,苹果向开发者推送了最新的iOS 13.2 beta 1,其中已经提供了Deep Fusion功能。不同于夜景模式,这项功能目前没有开关,对于用户来说它是隐形的。
Deep Fusion是苹果为iPhone 11系列上面的多摄像头所准备的智能合成照片功能,它在被触发的时候会拍摄多帧照片,从中选择合适的来进行自动的合成输出。Phil Schiller在发布会上形容它是“计算机摄影的疯狂科学”。当然在后期处理的时候使用算法来提升影像质量早就不是什么新鲜的事情了,之前的HDR其实就是类似的原理,不过在苹果的宣传中,Deep Fusion这项技术中使用到了人工智能。而具体的后期处理方式与HDR有很大的不同(来自苹果告知The Verge的信息):
1. 在按快门时,相机会用高速快门快速抓取4帧当前的影像以冻结运动动作,这4帧都是标准的影像,同时,还会得到一张曝光时间稍长的照片来获取细节
2. 这3张(原文如此)常规照片和稍长曝光的照片将被合并成一张被称为"synthetic long"的图像,这是Deep Fusion与智能HDR的主要区别所在
3. Deep Fusion将会选择短曝光照片中细节最为丰富的那一帧,将其与之前已经合并过一次的synthetic long影像再次合并。不像是智能HDR,Deep Fusion将只合并这两张,而不是更多——虽然之前在生成synthetic long的时候已经合并过一次了。当然,所有的帧处理方式也与智能HDR不同
4. 然后图像继续通过四个细节调整步骤对每一像素进行调节,每个步骤都会增加细节——天空和墙壁是最低优先级的,而皮肤、头发和织物等是最高优先级。这会产生一系列的权重来决定两张图像的合并方式,从一张上面提取细节,另一张上面提取色调、亮度等。
5. 输出最终图像
Deep Fusion对于中等光线条件下面的成像质量将会非常有帮助,在iPhone 11系列上面将会有三(两)种不同的模式,根据目前使用的主镜头和光线条件由系统自动来决定使用的模式。
· 当使用标准广角镜头时,在中等光照条件下会使用苹果的增强型智能HDR技术,而在弱光~中等光照间,Deep Fusion将开启,更暗的条件下,会进入夜景模式。
· 当使用长焦镜头时,Deep Fusion模式将会在多数情况下开启,而智能HDR只会在光照条件非常好的情况下使用,夜景模式是非常暗的环境中会自动打开
· 当使用超广角镜头时,智能HDR将总是被使用,而Deep Fusion和夜景模式都不被支持