OPPO|算力超苹果A15！OPPO首款自研芯片发布：四大核心问题揭秘( 六 ) ISP|算力超苹果A15！OPPO首款自研

5、RGBW传感器能力全面释放
对于智能手机来说，暗光拍摄效果的提升一直是一个难点，虽然可以通过采用更大光圈、更大尺寸的传感器来有效提升进光量，从而提升暗光拍摄表现，但是由于手机内部空间及厚度的限制，使得这方面的提升也受到了限制。
于是乎，通过从底层改变传感器排列，进而提升进光量的方法也成为了另外一个方向。比如RGBW传感器的像素阵列，就是通过引入对光线更加敏感的白色子像素（W）显著提升感光能力，从而在暗光环境下拍摄出更亮的照片。
2019年，OPPO研发团队受到当时流行的像素聚合技术的启发，又创造性地提出了四合一像素聚合技术与RGBW技术相结合，即全新RGBW传感器在每组4个子像素中引入2个W像素，从而让每个像素都能具备R（红）、G（绿）、B（蓝）和W（白）信号的识别能力。这也就是今年8月发布的新一代RGBW捕光传感器IMX709 。

文章图片

但是，由于OPPO与索尼联合定制的RGBW传感器属于新的传感器，并且应用量也相对有限，所以目前通用的手机SoC并不能很好地发挥出OPPO定制的RGBW传感器的最大能力。
“如果想要用上RGBW传感器，第一步要做的就是在传感器端把RGBW做一个remosaic，变成传统的RGGB信息，再传送给SoC处理。实际上这个处理过程中，已经丢失了一些有用的信息。虽然，我们希望让RGBW sensor pattern（传感器像素排列）发挥最大价值，但为了与通用的SoC配合，我们必须要做一些妥协和损耗，才能达到可以用上RGBW 。”姜波解释道。
为了更好发挥出OPPO定制的RGBW传感器的能力，MariSilicon X在设计时就充分考虑了这一点，将MariSilicon X与RGBW传感器进行了紧密的耦合和最大限度的优化。
比如，在设计图像处理pipeline的时候，OPPO做了两条链路，一路是做RGGB信号处理，同时有一路是做White信号处理，这两路都是进行RAW计算，所以对于处理能力的要求也要增加数倍。
根据OPPO公布的实测数据显示，相比一路pipeline效果，通过MariSilicon X进行两路pipeline的处理，可以得到8.6dB的信噪比提升。同时，在纹理细节上，通过两路pipeline的超采样，可以到1.7倍的解析力的增强。

文章图片

姜波自豪地说到：“我们通过自研芯片和定制化sensor相互的化学反应和相互耦合，真正将sensor在最初设计时候的最大能力充分发挥。”
小结：
通过上面的介绍及官方公布的相关参数，我们不难看出，MariSilicon X这款影像NPU确实非常的强大。虽然，OPPO在MariSilicon X的研发当中也是获得了很多合作伙伴的帮助，但是核心IP基本都是OPPO自研的，这也主要得益于OPPO强大的芯片研发团队的自研能力。

文章图片

据芯智讯了解，OPPO是2019年开始研发芯片的，为了开发MariSilicon X，OPPO组建的芯片研发团队高达2000人（不排除同时有研发其他芯片），其中很多核心人员都是来自于一线的半导体大厂，比如OPPO芯片产品高级总监姜波就来自于高通。
作为对比，vivo自研的ISP芯片V1，300人研发团队，历时2年时间研发完成。不过，这里需要补充的是，根据网上的爆料显示，vivo V1并不是由vivo独立完成的，而是与联咏合作设计的，采用了很多第三方的IP 。