华为|这次全新一代骁龙8影像能力的提升,可以用“恐怖”来形容( 三 )


摄影是光的艺术 。 除了Coms的尺寸之外 , 镜头也是限制手机成像的重要因素 。 而AI的加入 , 正是手机与相机最大的区别 , 也是手机能在最终成像效果上接近或超越相机的唯一出路 。
随着新18bit ISP的推出 , 高通也重构了摄影算法 , 让AI成为了手机摄影的底座 。
新的骁龙8利用AI实现了实时人脸识别 , 让人脸识别变得更加精准 。 更精确的人脸识别 , 也驱动了曝光、对焦和白平衡的准确 , 因此在更复杂的照明条件下 , 用户都能更准确地对焦 , 获得更好的对比度和更准确的肤色 。
为了让面部细节更加丰富 , 新Spectra ISP的人脸特征引擎可检测到300个特征点 , 同时利用神经网络对眉毛、嘴唇、下颌线等更多的人脸特征进行训练 , 让手机镜头能理解用户的情绪 , 产生更多玩法 。
目前被广泛使用的超广角其实是实现精准人脸识别的一个阻碍 , 因为通过超广角镜头拍摄人像时 , 发生的畸变会导致人脸变小 。 新Spectra ISP在之前超广角矫正畸变的基础上 , 加入了色差矫正的功能 。 色差是镜头边角处颜色的畸变 。 它会给拍摄对象一个虚假的色彩轮廓 , 并破坏锐度和边缘细节 。
而AI加入后对超广角的优化 , 也产生了很多有意思的新功能 。 高通的研发团队开发了一套新的摄像头解决方案 , 能够拍摄类似全景图像的画面 , 即拍摄一次无需等待照片拼接便可获得无畸变且达到极宽的140度视场的照片 , 而超广角镜头普遍只有120度左右的视场 。 避免了此前拍摄全景照片时手持摄像头进行横向移动并且等待应用程序拼接图像 , 一不留神还会造成图片出现断层的尴尬场面 。
对于人脸识别 , 这次高通拿出来了一个新的解决方案 , 也就是第四颗ISP芯片 。 特殊的是 , 这颗ISP芯片在架构中并未与其他三颗ISP处于同一模块中 , 而是隐藏于传感中枢 , 作为独立的ISP存在 。 这颗ISP是一颗低功耗智慧感知ISP , 将处于始终开启的状态 , 以做到当手机在身边时 , 不间断的为我们提供服务 , 而当感知到我们离开手机的时候 , 才进行锁屏保护隐私安全 。
目前的智能手机在解锁后会停止面部搜索 。 但有了低功耗智慧感知摄像头 , 可以一直进行面部搜索 。 这样 , 当用户不在手机前时 , 它就会自动锁定 。 在高通的设计中 , 这颗芯片之所以独立存在 , 也是为了保证足够的安全性 。
其可应用的场景还有很多 , 比如在有人越过用户的肩膀看屏幕 , 那屏幕就会显示黑屏;有时用户只想分享屏幕当前显示的内容 , 如果有其他人和用户一起看显示屏时 , 低功耗智慧感知摄像头可以使你的手机隐藏通知和其他弹出窗口等等 。
这颗新的ISP或许性能没有此前的三颗ISP强大 , 但是提供了低功耗智慧感知和保护个人隐私安全的思路 。
在视频拍摄方面 , Spectra还支持升级的计算HDR视频拍摄 。 全新三星单帧逐行HDR图像传感器和索尼数字重叠传感器与Qualcomm Spectra协同工作 , 支持计算HDR的视频拍摄 。 视频中的每帧画面都是双重曝光的组合 。 Spectra 8的18-bit三ISP比以往更快 , 现能处理每帧三重曝光 , 因此计算HDR视频拍摄可支持更大的动态范围 。
得益于18bit ISP的特性 , 可实现同时处理两个单帧逐行或数字重叠的HDR传感器 。 因此 , 现在可以在Sensor之间平稳过渡 。
这次Spectra ISP加入了实现视频背景虚化的专用引擎 , 可实时生成背景虚化 。
AI其实很早就已经融入进了手机摄影当中 , 高通只是在之前的基础上利用AI让手机摄影更接近了专业相机一步 。 AI的加入 , 让一部手机可以拥有相机都难以实现的效果 。 比如高通和徕卡的合作 , 实现了徕卡Leitz风格;或是与Hugging Face合作实现基于情感分析的通知整理等等 。 相机镜头 , 只是捕捉现实色彩的一个工具 , 而手机摄像头加上AI , 则是成为了人类身体外延之外、获取世界信息的眼睛 。