江苏龙网

  1. 首页 > 人文 > >

OPPO|算力超苹果A15！OPPO首款自研芯片发布：四大核心问题揭秘( 五 )


5、RGBW传感器能力全面释放
对于智能手机来说，暗光拍摄效果的提升一直是一个难点，虽然可以通过采用更大光圈、更大尺寸的传感器来有效提升进光量，从而提升暗光拍摄表现，但是由于手机内部空间及厚度的限制，使得这方面的提升也受到了限制 。
于是乎，通过从底层改变传感器排列，进而提升进光量的方法也成为了另外一个方向 。比如RGBW传感器的像素阵列，就是通过引入对光线更加敏感的白色子像素（W）显著提升感光能力，从而在暗光环境下拍摄出更亮的照片 。
2019年，OPPO研发团队受到当时流行的像素聚合技术的启发，又创造性地提出了四合一像素聚合技术与RGBW技术相结合，即全新RGBW传感器在每组4个子像素中引入2个W像素，从而让每个像素都能具备R（红）、G（绿）、B（蓝）和W（白）信号的识别能力 。这也就是今年8月发布的新一代RGBW捕光传感器IMX709 。

OPPO|算力超苹果A15！OPPO首款自研芯片发布：四大核心问题揭秘
文章图片

但是，由于OPPO与索尼联合定制的RGBW传感器属于新的传感器，并且应用量也相对有限，所以目前通用的手机SoC并不能很好地发挥出OPPO定制的RGBW传感器的最大能力 。
“如果想要用上RGBW传感器，第一步要做的就是在传感器端把RGBW做一个remosaic，变成传统的RGGB信息，再传送给SoC处理 。实际上这个处理过程中，已经丢失了一些有用的信息 。虽然，我们希望让RGBW sensor pattern（传感器像素排列）发挥最大价值，但为了与通用的SoC配合，我们必须要做一些妥协和损耗，才能达到可以用上RGBW 。”姜波解释道 。
为了更好发挥出OPPO定制的RGBW传感器的能力，MariSilicon X在设计时就充分考虑了这一点，将MariSilicon X与RGBW传感器进行了紧密的耦合和最大限度的优化 。
比如，在设计图像处理pipeline的时候，OPPO做了两条链路，一路是做RGGB信号处理，同时有一路是做White信号处理，这两路都是进行RAW计算，所以对于处理能力的要求也要增加数倍 。
根据OPPO公布的实测数据显示，相比一路pipeline效果，通过MariSilicon X进行两路pipeline的处理，可以得到8.6dB的信噪比提升 。同时，在纹理细节上，通过两路pipeline的超采样，可以到1.7倍的解析力的增强 。

OPPO|算力超苹果A15！OPPO首款自研芯片发布：四大核心问题揭秘
文章图片

姜波自豪地说到：“我们通过自研芯片和定制化sensor相互的化学反应和相互耦合，真正将sensor在最初设计时候的最大能力充分发挥 。”
小结：
通过上面的介绍及官方公布的相关参数，我们不难看出，MariSilicon X这款影像NPU确实非常的强大 。虽然，OPPO在MariSilicon X的研发当中也是获得了很多合作伙伴的帮助，但是核心IP基本都是OPPO自研的，这也主要得益于OPPO强大的芯片研发团队的自研能力 。

OPPO|算力超苹果A15！OPPO首款自研芯片发布：四大核心问题揭秘
文章图片

据芯智讯了解，OPPO是2019年开始研发芯片的，为了开发MariSilicon X，OPPO组建的芯片研发团队高达2000人（不排除同时有研发其他芯片），其中很多核心人员都是来自于一线的半导体大厂，比如OPPO芯片产品高级总监姜波就来自于高通 。
作为对比，vivo自研的ISP芯片V1，300人研发团队，历时2年时间研发完成 。不过，这里需要补充的是，根据网上的爆料显示，vivo V1并不是由vivo独立完成的，而是与联咏合作设计的，采用了很多第三方的IP 。
另外，比起其他综合型的NPU，MariSilicon X专注在影像上的设计也实现了更强的视频性能 。
不过，姜波也坦言：“虽然如语音识别等AI算法也可以在MariSilicon X的NPU上来跑，但是肯定不会像影像AI算法跑得那么好 。“因为在设计这款芯片时，我们就已经有所取舍，我们在影像上，尤其是针对视频上，要做很大的优化和投入，所以针对视频和照片相关的影像处理，它是拥有极佳功耗的性能的NPU 。反过来，像语音这种，它就不是最佳的，所以它的灵活性也是有一定限制的 。”
总结来说，MariSilicon X是一款性能强大且拥有极致能效比的影像专用NPU 。并且MariSilicon X还首次将20bit RAW计算、Ultra HDR、4K AI HDR视频降噪集成在一起，使得不论是拍照还是视频录制体验都能够带来显著的提升 。
“马里亚纳MariSilicon X是 OPPO未来十年影像的开篇之作，它的问世标志着OPPO在计算影像领域首次实现了全链路垂直整合，将完全服务于OPPO定制化的计算影像需求 。 随着明年一季度搭载MariSilicon X的全新Find系列旗舰推出，将推动安卓终端第一次实现计算摄影的里程碑式跃迁，这将为整个行业的计算影像提供一个新的标杆，相信未来整个行业都会朝着这个方向发展 。”姜波总结道 。


推荐阅读


上一篇：大学生|残酷底层物语：一位工地大学生的牛马生活

下一篇：希捷|希捷存储服务器首次用上AMD霄龙：最多1344TB硬盘