麒麟9000全球首创ISP NPU融合架构强在哪儿?超越极限的“慧眼”(6)
2023-05-01 来源:飞速影视
麒麟9000改变了这一切,不但集成最新的ISP 6.0,还支持四流水线并行,吞吐量提升50%,视频降噪能力提升48%,3A(自动对焦/自动曝光/自动白平衡)处理能力提升100%,而最大亮点当属首创了ISP NPU融合架构。
ISP NPU融合后,直接将数据、信息完全打通,使用硬件直连的方式,将原本独立的NPU计算直接融合ISP的处理流水线中,再结合大容量、高带宽的智能缓存SmartCache 2.0,使得输入数据流、输出数据流都连续不断,整个过程中没有任何停顿和等待,数据可以无缝缓冲、实时处理,效率提高了不止一个档次。
同时,ISP NPU融合架构改变了逐帧排队处理的传统方式,对每一帧进行切片(Slice),也就是拆分成更小的单元,处理的基本单元不再是一整帧,而是一个个小的切片,从而将每一帧内部、不同帧之间完全打通,加速数据的传输与处理。
这样一来,ISP NPU联合就实现了基于帧内分块的视频流智能处理。
如上图,假设每个视频帧都拆分成四个切片,ISP可以先处理其中两个切片,快速处理完之后交给NPU进一步加工,此时ISP就可以同时处理该帧的剩余两个切片,以及下一帧的头两个切片,如此往复循环,从而大大缩短等待时间,提高处理效率。
当然,每个视频帧拆分成几个切片、NPU/ISP每次处理几个切片,都是极其灵活的,可以根据每一帧的不同数据量、处理难度来智能切割,还可以在同一帧内应用多种不同算法,流水线效率不可同日而语的同时,还可以得到更丰富的处理效果。
本站仅为学习交流之用,所有视频和图片均来自互联网收集而来,版权归原创者所有,本网站只提供web页面服务,并不提供资源存储,也不参与录制、上传
若本站收录的节目无意侵犯了贵司版权,请发邮件(我们会在3个工作日内删除侵权内容,谢谢。)
www.fs94.org-飞速影视 粤ICP备74369512号