图像isp 详解_首创ISP+NPU融合架构，详解华为摄影在算法以及硬件方面的创新

本文从芯片以及算法层面科普华为在摄影方面的创新。

内容极为硬核

麒麟9000作为全球首款5nm 5G SoC，在影像领域的技术创新堪称跨越式升级，麒麟9000作为全球首款5nm 5G SoC，在影像领域的技术创新堪称跨越式升级，助力华为Mate 40系列手机一举霸榜DXO排行榜NO.1。

此次影像系统升级主要包含两个方面

1.首先麒麟9000内置了华为最先进的ISP 6.0，实现了50%的吞吐率提升，48%的噪声消除提升，图像处理能力更强。

2.麒麟9000业界首次实现了ISP+NPU融合架构，将超强的细节还原、降噪能力带入视频领域，暗光环境下拍摄的视频更加清晰、细节展现淋漓尽致，再次突破了手机影像能力的边界。

ISP+NPU融合架构是如何赋能手机影像系统的？

我们来剖析一下背后的技术原理：

1

搭档RYYB CFA，助力实现更强夜摄效果与色彩还原

数字影像时代，图像传感器成为代替胶卷的感光材料，让手机等轻薄设备也能拥有不凡画质。图像传感器(image sensor)常常与色彩一同被提及，但是事实上图像传感器是位“色盲”，拍出来的照片是黑白的，需要色彩滤波器(CFA，Color Filter Array)的帮助才能获得色彩信息。拜耳阵列RGB色彩滤波器

上图是典型的RGB CFA，1976年由柯达的拜耳发明。下面灰色的色块是一个个感光PD部分，光子在这里转换成电信号；上面R/G/B(红/绿/蓝)三种颜色的色块是色彩滤波器，白光透过RGB颜色滤波器后，分别滤出红/绿/蓝光，在灰色PD部分被吸收。

认识了Sencor和RGB CFA之后，再来了解手机拍照中的三个重要模块：

三个重要的模块决定了照片的颜色还原和细节还原

首先，不同于胶卷相机通过物理方式成像，数码相机在直出图片时需要经过多重算法支持，深度处理Sencor和滤波器获得的信息。这一流程中，最