华为|这次全新一代骁龙8影像能力的提升,可以用“恐怖”来形容( 二 )


手机拍照与相机拍照最大的不同 , 就是手机按一次拍照按钮 , 并非只拍了一张照片 , 而是同时记录了不同曝光条件下的多张照片 , 最终通过算法合成为一张照片来提高单张照片的质量 。 所谓的夜景模式 , 也是通过这种方式实现 。
过去 , 高通的低光多帧引擎能够拍摄六张画面合成为一张画面明亮无噪点的照片 。 而这次18-bit ISP将多帧引擎升级为“超级多帧引擎” , 能够捕获30张画面进行合成 。 未来安卓手机的夜景模式也会得到巨幅的提升 。
同时 , 超低光环境的适应性增强后 , 更能够自如的拍摄暗光环境下有运动物体的场景 。 Spectra ISP可以通过超级多帧引擎获取的30张画面追踪运动物体计算其运动轨迹 , 以实现清晰的画面
值得一提的是 , 18bit ISP也将支持18-bit RAW文件的导出 , 后期调色空间将更加丰富 , 种种改善都在预示着 , 高通正在将手机影像系统朝着专业级别的方向打造 。
除了拍照能力的增强外 , 18bit ISP也让视频拍摄能力得到大幅度的提升 。
之前14bit ISP已经能够实现每秒捕捉27亿像素能力 , 而18bit ISP可做到每秒捕捉32亿像素 , 速度同比提升19% 。 每帧8K视频的像素数量约为3300万 , 而每秒32亿像素意味着单颗摄像头可以支持30fps捕获1.08亿像素的画面 , 或是支持三颗摄像头每颗分别以30FPS捕获3600万像素的画面 。
新的Spectra ISP在实际上已经可以处理高于8K的数据流 。
这些多出来的数据并非是浪费掉的性能 。 在进行8K视频拍摄的时候 , 如果画面出现抖动 , 这些“多余”出来的画面数据 , 将被裁剪掉 , 来保证8K视频本身画面的稳定 。 18-bit ISP的超大带宽支持用同一图像传感器同时拍摄每帧3300万像素的8K视频和拍摄6400万像素的照片 。 这样 , 当用户拍摄精彩瞬间时 , 不必在8K高清视频和6400万像素高清照片之间进行选择 。
为了使Sensor和ISP能够更好的协调合作达到专业级标准 , 高通与作为全球主要的手机Sensor制造商之一的索尼成立了联合实验室 。 除了更加完善骁龙8平台的影像技术之外 , 还有两个非常值得期待的动作:打造联合原型产品、开发针对骁龙平台优化的Sensor 。
在与高通深度合作的前提下 , 本就以顶级拍照体验为卖点的索尼Xperia系列手机或将向着更专业的级别靠近 , 而非只是 “微单”的水平 。
用AI“超越”单反相机
对于ISP来说 , 要做的事情有很多 。 从Sensor接收到的数据后 , ISP要完成镜头矫正、坏像素矫正、颜色插值、Bayer 噪声去除、 白平衡矫正、 色彩矫正等等一系列步骤 , 这是大部分相机ISP的固定流程 。
而对于采用高通芯片的手机来说 , 不仅ISP要对影像数据进行处理 , AI引擎也在其中发挥着不可忽视的重要作用 , 每一次人脸检测、相机拍照、摄影 , 都几乎调动了整个SoC 。
高通的AI引擎由Adreno GPU、Hexagon处理器、Kryo CPU和传感器中枢共同构成 , 定义为一整套处理器协作系统 , 并非某一个单独的芯片来完成AI的工作 。 Hexagon张量运算处理器作为重要组成部分 , 它的性能在这次得到了巨幅的增强 , 配合共享内存的提升 , 让第7代的AI引擎实现400%的同比提升 。
Coms作为模拟信号设备 , 很难采用更高精细度的工艺 。 我们常说“底大一级压死人” , 现在一些1英寸(12.8 x 9.6 mm)的“大底”似乎让手机能接近相机 , 毕竟像是索尼黑卡或是尼康G9X这样的卡片机也是1英寸的Coms 。 但能称之为“专业”的相机 , 至少也是APS-C画幅起步 , Coms的面积是1英寸的4倍 , 更别说专业相机标配的全画幅(36 x 24 mm)Coms了 。