高通|为了让你拍出更美的视频,他们费尽了“芯”机( 二 )


那么,高通AIE具体都包含哪些关键组件呢?首先,硬件方面,高通AIE采用异构运算,内部包含Hexagon 处理器、Adreno GPU 和 Kryo CPU 的人工智能优化组合。其中,Hexagon 处理器擅长处理涉及向量数学的应用工作负载;Adreno GPU擅长处理精度较高的数据运算,比如图像和视频等等;Kryo CPU则更加擅长对常规数据的运算与处理。
如果你对这些专业词汇感到陌生,没关系,你可以把它们想象成一个工厂里的三条生产线,分别擅长生产不同的产品。在异构运算的条件,工厂接到生产任务后会首先分析该任务究竟是哪条生产线更擅长的,并进行相应的分配,从而让整个工厂处于最高的生产效率。
同时在软件层面,高通AIE包含了骁龙神经处理 SDK、Android NN 和 Hexagon NN。软件配套组件的主要作用在于让开发者和OEM厂商可以更加容易地应用高通AIE人工智能引擎,以便在最短的产品研发周期中,第一时间推出自家定制化、个性化的AI智能终端产品。对于开发者与OEM厂商而言,一套解决方案最为重要的除了强大的功能外,易用性则是第二考虑因素。很显然,高通AIE人工智能引擎很好地兼顾了这两点。
除了在产品设计之初就将易用性刻入高通AIE的基因,高通还和下游厂商进行了大量的共创工作,以帮助后者最大限度发挥高通AIE的巨大潜力。比如,为了给快手的“手绘滤镜”功能提供算力支撑,高通技术公司和快手从骁龙765移动平台推出时就展开合作。骁龙765首次释放了CPU的工作负载,并通过Hexagon处理器来完成相应工作,这使得手绘滤镜的帧率(FPS)提升了56%,并且功耗降低32%(降低显示功率),从而带来无缝的视频拍摄体验。
而且,高通技术公司和快手工程师通力合作,针对快手对于未来移动平台在性能、功耗、扩展性和兼容性方面的需求进行分析。高通神经网络处理SDK能够以软件的方式提供支持,而Hexagon处理器则是作为AI加速器提供支持。并且,双方针对量化开展的联合工作对于此次合作的成功发挥了关键作用,因为其能够在提升性能和能效的同时,确保处理的精确度。
基于此,高通还正在推动双方合作更进一步,确保快手所需的各种特性能够面向最新一代骁龙778G平台及时进行优化,满足骁龙778G终端的商用需求。
高通AIE的发展史也是手机AI的普及史高通AIE首次被国内用户所熟悉要追溯到2018年3月,当时vivo发布最新一代旗舰手机vivo X21,搭载了骁龙660AIE。
如今,高通旗下的骁龙845、骁龙835、骁龙820、骁龙821、骁龙700系列等均已支持高通AIE人工智能引擎。此外,在物联网领域的Qualcomm视觉智能平台体系中,QCS605与QCS603也同样支持高通AIE人工智能引擎。
随着“家族”不断壮大,高通AIE的性能也在不断提升。在骁龙888移动平台中,高通最新推出了第六代高通AIE。作为一整套处理器协作系统,这代AI引擎包含了重新设计的Hexagon 780处理器,不仅使标量、张量和向量加速器之间的物理距离几乎消失,还在这三个不同的加速器之间添加了一个共享内存,实现了更快和更高效的数据移动和共享。在某些用例下,数据交互时效实现了千倍提升。不仅如此,加速器本身也实现了提升,其中标量加速器性能提升50%,张量加速器的矩阵处理速度提升了2倍。基于全新的架构设计,Hexagon每瓦特性能较前代平台提升高达3倍,并实现了每秒26万亿次运算(26 TOPS)的惊人算力。
基于强大的算力,高通AIE正在为越来越多的终端应用提供可靠支撑。除了前面提到的视频滤镜还包括AI刷脸、拍照翻译、3D Animoji等等。不过,对于绝大多数用户而言,AIE带来的最直观变化还是拍照体验的提升。得益于专属AI处理和加速,国产安卓旗舰在无需堆叠硬件传感器的前提下,通过软件算法等就能实现更加出色的拍照效果。