高通骁龙|手机影像,还得看骁龙( 二 )


在AI影像技术方面 , 骁龙也是奠基者之一 。 2018年 , 高通发布了骁龙855移动平台 。 该平台支持全球首个支持计算机视觉(CV-ISP)的ISP:Spectra 380 , 通过集成大量支持硬件加速的计算机视觉能力 , 与高通AI引擎相结合 , 带来了手机影像能力的再一次突破 。
简单来说 , 骁龙855能够实现对于画面的理解和处理 。 借助AI引擎的强大能力 , 手机在拍摄更高精度的图片和视频的同时能够画面上的物体进行识别、分类 , 进而实现替换背景、替换主体对象等应用 。

到了后来的骁龙865、骁龙888以及新的骁龙8时代 , 骁龙对于AI在影像技术方面的应用就更加深入和普及了 , 高通也在每一代的移动平台上大幅度升级AI性能 。 借助强大的AI影像能力 , 骁龙旗舰手机不仅拥有了更丰富的影像功能 , 还实现了画质表现的全面突破 。 例如借助多帧合成算法和智能HDR能力 , 很多手机都能够做到远超人眼视觉识别极限的夜景成像能力 , 这样的画质突破在之前的手机设备 , 甚至是专业相机上都是根本不敢想象的 。
这里也能够看到 , 骁龙一开始就认识到了手机影像技术的独特性 。 出于设备尺寸、光学特性、成本考量等因素 , 手机影像技术的发展不可能完全依靠硬件性能的扩充 , 而AI影像的另辟蹊径给手机影像技术带来了新的可能 , 其在应用和能力上的突破还逐渐演变成为一个新的影像技术发展分支 。 甚至我们还可以看到 , 当前手机AI影像技术已经给整个影像行业的技术发展提供了更多的借鉴和参考 , 对整个行业都产生了赋能作用 。

到了最新的第二代骁龙8移动平台上 , 骁龙更将手机影像技术推向了一个全新的高度:第二代骁龙8的三核18-bit ISP可同时处理三个3600万像素的摄像头30fps数据 , 对单个摄像头的像素支持最高可达200MP , 同时支持快门滞后为零的108MP的传感器 。 能够以30Fps 拍摄 8K HDR 画面(并同时拍摄 6400 万像素的照片) , 以 120fps 的拍摄 4K 画面 , 也支持慢动作视频(960Fps 的 720p) 。 支持多种 HDR 格式 , 包括 HDR10+、HLG 和 Dolby Vision 。

第二代骁龙8移动平台还搭载了全新的“认知ISP” 。 它大幅提升识别和认知能力支持实时语义分割实现照片和视频的自动增强 , 还可利用AI神经网络让摄像头感知人脸、面部特征、头发、衣服和天空等 , 并能对这些细节进行独立优化专业图像调优 。
无论是影像性能还是AI能力 , 当前的第二代骁龙8移动平台都是整个行业最强的代表 。
多方合作 , 共同赋能手机影像 我们也知道手机影像能力的提升是一个系统工程 。 它不仅仅需要芯片厂商的底层支持 , 也需要终端厂商的优化 , 也离不开CMOS厂商的适配 , 还包括应用、服务层面的更新和迭代 。 要真正做到手机影像技术的全面提升 , 这些因素缺一不可 。
在这些方面 , 骁龙其实也做了不少的工作 。
比如今年小米12S Ultra和徕卡合作的影像方案大受好评 , 但很多人不知道的是 , 去年的骁龙峰会上 , 高通就与徕卡的Ernst Leitz实验室进行了影像层面的合作 , 骁龙移动平台能够支持由高通AI引擎赋能的Leitz Looks模式 , 带来多款传统徕卡镜头带来的经典徕卡风格滤镜模式 。
这个月刚推出的第二代骁龙 8 移动平台上 , 骁龙更是强调了跟CMOS厂商之间的深度合作 。 目前骁龙 8 Gen 2 已对支持 Digital Overla HDR(DOL-HDR)的索尼传感器和三星的 2 亿像素 HP3 传感器进行优化 , 可以与骁龙 ISP 协同工作 。

具体来说 , 第二代骁龙 8 支持三星 HP3 全部拍照合并模式 , 包括 2 亿像素模式、5000 万像素或 1250 万像素、单帧逐行 HDR 模式和 8K 视频模式等 。 而高通和索尼合作开发的 IMX800 和一英寸的 IMX989 图像传感器 , 支持 QDOL4 四重曝光技术 , 拍摄视频的每一帧都进行 4 次曝光算法计算 , 带来更真实 , 更具质感的 HDR 视频效果 。