芯片|自研芯片V2来了 vivo:没人比我更懂计算摄影

芯片|自研芯片V2来了 vivo:没人比我更懂计算摄影

文章图片

芯片|自研芯片V2来了 vivo:没人比我更懂计算摄影

文章图片

芯片|自研芯片V2来了 vivo:没人比我更懂计算摄影

文章图片

芯片|自研芯片V2来了 vivo:没人比我更懂计算摄影

文章图片

芯片|自研芯片V2来了 vivo:没人比我更懂计算摄影

当某厂把相机镜头塞到手机上时 , 不知道有多少人和我们有一样的想法:
“手机摄影硬件走到头了 。 ”

极致的硬件堆料 , 是手机厂商在影像画质竞争中的首选项 。 从“底大一级压死人”到把潜望镜/相机镜头搬上手机 , 手机厂商在物理上提升光学性能的手段几乎使了个遍 。 如何能在光学硬件堆到极致的情况下再进一步?这个答案可能要给到——计算摄影 。
是SoC还是ISP?没有对错的路线之分无论是引发争议的华为“月亮模式”还是今天发布的vivo自研芯片V2、各大手机厂商都开始深耕计算摄影的潜力 , 计算摄影已经成为手机行业下一个突破口 。

计算摄影听起来高级 , 实际就是在镜头和传感器光学性能之外 , 对采集到的画面信息进行优化 , 输出更高质量或更符合需求的画面 。 所以严格来讲 , 早期的美颜滤镜和HDR都是计算摄影的一部分 。 我们对计算摄影并不陌生 。 但想要用计算摄影做更多的事 , 额外的画面处理会带来对硬件计算性能成倍增长的需求 。
苹果很早就意识到这个问题 。 他们选择自研SoC , 并参考具体应用的性能需求与功耗来对自研SoC进行调整优化 。 iPhone 13上惊艳的电影模式 , 也是基于AI分析画面中人物关系 , 录制浅景深视频并柔顺地转换焦点 , 从而让视频呈现出电影般的质感 。
依靠自研SoC解决计算摄影软硬件配套 。 这个思路很棒 , 但SoC行业太卷 。
SoC芯片行业研究》中就表明 , 国内集成电路设计企业所需的IP核大多来自境外供应商 , 每年进口金额10亿美元以上 , 占全球市场的1/3左右 。
产业链下游的晶圆制造环节也呈现非常明显的头部效应 , 根据IC Insights的数据显示 , 在全球前十大代工厂商中 , 台积电一家占据了超过一半的市场份额 , 前八家市场份额接近90% 。
与手机厂商关系最密切的产业链中游 , 因为手机对制程与性能的极致需求、只有高通、三星、联发科仍在对外提供手机旗舰处理器 , 近期三星也传出下代旗舰上放弃使用自家猎户座处理器 , 全面转向高通 。
如果只需要一个轮子 , 就不要去再造一辆车 。 特斯拉智能驾驶芯片负责人Peter Bannon在接受采访时就表示 , “特斯拉开始研发FSD(特斯拉智能驾驶芯片)的初衷是 , 我们发现市场上没有一种芯片是从底层出发为自动驾驶和深度神经网络算法设计的 。 ”对于提升计算摄影性能 , 自研SoC并不是唯一道路 , 手机拍摄会经过镜组-传感器-ADC(模数转换器)-ISP(图像信号处理)-CPU这个工作流程 , 在计算摄影中 , 主要负责图像处理的ISP才是流程中的“瓶颈工序” 。 针对计算摄影需求开发 , 专用性更强的定制化ISP在计算摄影应用中会更得心应手 。

vivo刚发布的自研芯片V2 , 就是一颗AI-ISP架构的低功耗AI加速芯片
深入芯片 , 是什么为计算摄影提供动力?Mobileye创始人兼CEO AnnonShashua曾表示 , “只有深入了解软硬件之间的相互作用是什么 , 才能清楚到底应该用什么样的芯片去支持什么样的算法 。 ”