手机拍照能力经过多年的发展后|为什么第二代骁龙8能够实现语义分割技术？手机拍照能力经过多年的发展

手机拍照能力经过多年的发展后，已经与智能手机初期的拍照是两回事了。消费者对手机拍照能力的衡量因素也在变化，像素数、传感器、镜头数量、厂商合作等因素都曾经被十分看重，这些其实都是以光学层面为主导的。
实际上现在手机成像能力的主要衡量因素，应该是以芯片算力、算法为主导的计算摄影层面。手机芯片的算力发展速度明显领先手机镜头模组，很多拍照功能在芯片技术支持下很轻松就能实现。曾经手机双摄的人像大光圈虚化功能，目前任意手机几乎都能使用单摄通过算法来实现。场景识别、多帧合成等底层技术，更是近些年手机拍照的基础。

文章图片
第二代骁龙8让手机理解世界
高通在11月发布了第二代骁龙8移动平台，其在影像方面有了更进一步的发展，首次打造了Cognitive-ISP ，也就是“认知ISP” ，它相比之前的ISP ，把AI引入到更多的处理环节，最终可以让手机通过多个层面看见并理解世界，进而获得更优秀的拍照效果。
在认知ISP的支持下，第二代骁龙8实现了拍照中的“语义分割”技术，这种技术会将场景中的各个部分进行精准识别，比如在人像拍照中，就能把人物、面部、蓝天、绿植、建筑等部分进行准确识别，之后将各个部分进行单独处理，再合成为一张照片。以修图来类比的话，拥有语义分割技术就好比使用多个图层进行修图，而没有的话就是在单独的背景中进行修图，孰强孰弱一目了然。

文章图片
能够在ISP中实现语义分割技术，关键因素是骁龙在AI方面的技术进步，高通在Hexagon处理器和SpectraISP之间，增加了一个名为“Hexagon直连”的物理连接，在两者之间创建直接通道，从而在影像算法的处理上都能在ISP内部完成，让AI在影像中的运算效率大幅提高，使每个被分割的细节都能得到有针对性的专业优化。
第二代骁龙8的这种新设计，不仅能够提升最终拍摄效果，而且能够显著加快拍照处理速度。现在很多手机在拍照夜景照片后，需要较长时间进行算法处理，用户无法获得实时预览效果，这些在第二代骁龙8手机中，肯定会得到改善。
【手机拍照能力经过多年的发展后|为什么第二代骁龙8能够实现语义分割技术？】从专用性走向泛用性
可能有人会说了，语义分割这个词听着耳熟，刚发布的Reno9系列不就有这个，而且功能上与第二代骁龙8完全一样啊。

文章图片
事实上Reno9系列确实提供了语义分割功能，但它实现的方式与第二代骁龙8是截然不同的。其通过内置的专用NPU来实现语义分割，如果离开这颗NPU芯片的话，那么就不具备语义分割能力了。因此是一种专用性的策略，不具备泛用性。
第二代骁龙8的语义分割则不然，其直接在SOC内部实现，只要是搭载第二代骁龙8移动平台的手机，就能通过语义分割来提升拍照效果。
第二代骁龙8肯定是2023年旗舰手机市场的标配，同时其还会运用在高性能定位的高性价比机型中，这些手机全都能具备语义分割的拍照能力，拍照体验会有质的飞跃。在目前的手机市场则不然，并非所有旗舰手机都会配备专用的NPU芯片，语义分割的功能只属于少数机型。
第二代骁龙8对手机市场的最大贡献，就是在于让更多的用户获得基础体验的升级。手机夜景拍照就是如此一路走来的，早期手机的夜景拍照，曝光不够、高光压不住、噪点多，在高通多帧降噪技术普及过后，手机夜景能力越来越强。语义分割亦是如此，运用这种技术，无论是拍人或是拍景，乃至视频拍摄上，都能显著提升拍照效果；基于SOC的语义分割能力，普及也只是时间问题。