麒麟9000全球首创ISP NPU融合架构强在哪儿？超越极限的“慧眼”(4)

说了这么多，其实无论插值算法还是AWB、CCM，都需要一颗强大、优秀的ISP，才能越做越好，让最终呈现的色彩更贴近大自然，或者看起来更养眼。
【麒麟990系列：ISP NPU初步联手、RYYB物尽其用】
多年来，华为一直在全力提升手机的影像水平，尤其是近几年始终处于行业最前列，这其中不仅有摄像头的贡献，更有ISP层面的创新。
2015年，华为第一次完成自研ISP，应用于麒麟950，此后每一代都经历一次蜕变，逐渐成为华为手机拍照登顶世界的根基。
到了麒麟990系列，已经内置全新ISP 5.0，吞吐率提升15％，能效提升15％，照片和视频降噪能力提升30％、20％，手机端首发单反级降噪技术BM3D，全球首发双域联合视频降噪技术。
同时还有创新的华为自研达芬奇架构NPU(神经处理单元)，两个大核加一个微核的特殊架构，兼顾高性能与高能效，并且ISP、NPU已经开始初步联合，探索全新的AI摄影。
而基于麒麟990 5G的华为P30系列创新引入了RYYB CFA超感光图像传感器，其中Y代表黄色，取代传统的RGGB格式中的G绿色，光谱响应更宽、光谱覆盖更广、能感应更多光子，总体进光量因此提升了30-40％，暗光场景信噪比更佳，夜拍效果更上一层楼。

不过，RYYB作为新生事物并不容易驾驭，传统ISP的插值算法、AWB、CCM很难处理Y黄色像素的丰富色彩信息，精准还原难度非常大。
为此，华为一方面在后续的Mate 30系列上采用了RYYB、RGGB相搭配平衡的设计，另一方面引入基于AI神经网络的插值算法、AWB、CCM，并整合在麒麟990 ISP流水线的图像处理过程中，为传统ISP流程增加了计算摄影处理，再经过大量的RYYB传感器RAW数据训练之后，可以有效找到物体细节、色彩分量之间的复杂映射关系。