麒麟9000全球首创ISP NPU融合架构强在哪儿？超越极限的“慧眼”(2)

【低调的劳模：ISP要干的事儿太多了】
要想理解麒麟9000 ISP NPU融合架构的精妙之处，我们需要把时钟往回拨一下，先了解几个基本概念术语，看看ISP是多么不容易。
众所周知，图像传感器(Image Sensor)是数码相机、智能手机拍照、拍视频的“眼睛”(相机里是CCD/手机里是CMOS)，最终呈现的色彩、细节都取决于它，其原理是通过一个一个的感光点，对光进行采样和量化。
但很多人可能并不知道，图像传感器其实是“色盲”，如果只用它拍出来的照片就是黑白的，需要搭配色彩滤波器(CFA)才能获得色彩信息。

1976年，柯达的拜耳发明了RGB CFA，也就是色彩滤波器 ，如上图可理解为双层结构：上层红(R)绿(G)蓝(B)三色的色块就是色彩滤波器，白光透过滤波器后分离出红绿蓝三原色；下层灰色的色块则是感光光电二极管(PD)部分，负责将滤波器送来的光信号转换为电信号，再由后续各种算法进一步处理，并最终成像。
可以说，滤波器的表现如何，是照片、视频色彩、细节还原的基础。
当然，从滤波器滤出的RGB色彩，到最终照片上的精彩，需要经过各种复杂算法、技术的处理，这其中有三个是起着决定性因素的。
一是Demosaic插值算法。