isp是什么(npu和isp有什么不同?)

2023-03-16T11:24:17

文/磐石之心

12月14日下午,OPPO发布马里亚纳Marisilicon X芯片,这是一颗6nm的NPU芯片,主要作用是增强手机的影像能力。

在发布会现场,OPPO CEO陈明永称, 一个科技公司,如果没有底层核心技术,就不可能有未来。

最近2年来,OPPO一直强调自己在底层技术上的研发投入,并把Find系列旗舰重新拾起来。想要搞旗舰机,就必须拥有技术。华为之所以能在高端市场挑战苹果和三星,并不是外界说的爱国营销,更是源自于华为在芯片、通信和软件等多方面的核心技术突破。

目前,高端机市场基本被苹果控制,苹果成了一家躺赢的公司。诱人的高端机市场上,华为因众所周知的原因被生生打压下来。谁来接棒华为?

谁都想接棒。荣耀带着华为的基因,一直深耕底层技术。OPPO也同样发现了技术的重要性。这块NPU芯片是OPPO在底层技术上做研究的开始,同时也体现了这家公司的态度——决战高端市场。

即使是小米公司,也把扔掉许久的澎湃芯片业务拾了起来,推出一款ISP芯片。vivo同样的路子,也是在前不久推出了ISP芯片。

那么,OPPO这颗NPU和ISP芯片有什么不同呢? ISP,即“Image Signal Processor”( 图像信号处理器 )的缩写,是用来对前端图像传感器输出信号进行处理的单元。

根据专业人士的介绍,ISP的具体处理流程是这样:Lens 将光信号投射到sensor 的感光区域后,sensor经过光电转换,将Bayer 格式的原始图像送给ISP,ISP经过算法处理,输出RGB空间域的图像给后端的视频采集单元。

而NPU是 嵌入式神经网络处理器,相比ISP对光电信号转换和处理,这个NPU芯片具备 深度学习能力,比如,可以根据拍摄场景的不同而进行精准的优化,通过自学习,可以让其优化能力持续提升。

因此NPU芯片相比ISP芯片更高级一些。此前,华为曾在 麒麟970 上搭载了NPU处理单元,大大提升了华为手机的拍照能力。同样,在高通骁龙系列、联发科的芯片中也已经加入了NPU处理单元。

OPPO称自己研发的马里亚纳海沟NPU芯片会在2022年第一季度发布的Find X旗舰机上应用,到时候将成为首款搭载双NPU芯片的手机,另一个NPU则是SoC自带的。(OPPO新闻中这样写道: 未来,马里亚纳MariSilicon X 将和通用平台一起构成手机核心运算的左右大脑,正式开启‘一机双芯’时代。”

一个比拼底层技术创新的时代来了,手机企业纷纷推出自己的芯片。此外,在软件方面的创新也在不断推进,比如,华为的鸿蒙、荣耀的融合摄影技术、OPPO Color OS的泛在服务等。

国产手机终于意识到技术创新的重要性,这值得对他们有更多期待。