OPPO首款自研芯片揭秘：超苹果A15的算力是怎么做到的？

OPPO首款自研芯片揭秘：超苹果A15的算力是怎么做到的？泸定桥在哪里 12月14日，OPPO在本届未来科技大会上发布了旗下首款自研芯片——马里亚纳MariSilicon X。 这款芯片是OPPO首款自主设计，自主研发的影像专用NPU芯片，采用台积电6nm制程工艺。AI

12月14日，OPPO在本届未来科技大会上发布了旗下首款自研芯片——马里亚纳MariSilicon X。

这款芯片是OPPO首款自主设计，自主研发的影像专用NPU芯片，采用台积电6nm制程工艺。AI算力最高可以达到每秒18万亿次AI计算。真实应用场景下，它的每瓦性能也能达到每秒11.6万亿次，是全球迄今算力最强的 NPU 芯片，官方表示这颗芯片的AI算力强于iPhone 13 Pro Max。除此之外，OPPO还发布了第三代智能眼镜——OPPO Air Glass。

在发布会后，OPPO芯片产品高级总监姜波和OPPO XR技术总监徐毅接受了我们的采访，讲述产品诞生背后的故事。

6nm流片一次成功

马里亚纳MariSilicon X采用的是6nm EUV工艺，成本相当之高，仅这一枚芯片的交付成本就和半套中端手机SoC相当。由于采用如此先进的工艺，第三方没有对应的成熟IP，这就意味着OPPO只能自研，而自研+6nm将会面临很高的失败风险。每一次流片失败都代表着千万级别人民币的投入打了水漂，而就算是流片成功，芯片也会有概率不达预期，

但是OPPO这款芯片一次就流片成功，而且性能符合预期，这是一件很幸运的事情。

对于这点，姜波回答称：“不光我们比较惊讶，连我们的合作伙伴都比较惊讶，说OPPO真的就不改了吗？我说不改了，一次直接硬件就量产，软件再修再调。您觉得时长这个方面我觉得专家的经验很重要。包括对时长的估计、排布，我们基本上都是按照整个流程按照天来算，每天哪个团队应该做什么，其实蛮极致的一个例子，应该说也比较幸运。”

同时他在采访中指出，芯片意味着拥有最底层的基础能力，很多能力的建设都是在这个基础能力之上，我们现在谈到什么叫好的用户体验，好的用户体验意味着软件和硬件的深度整合，包括算法和硬件的深度耦合，你这些做好之后自然会给你从消费者层面带来一些更有价值的点，这些价值点逐渐增多之后，我相信对高端，给用户带来价值这一点来讲肯定是有所帮助的。

而对于产能问题，姜波表示，我们产品有系统化的规划，会进行一些预测，这些预测我们也通过我们的消化和理解，准确及时地跟上游的供应商非常好的协调。

马里亚纳MariSilicon X是一款专攻于影像的NPU，当问及是否会有其他用途时，姜波回答称：“是个完全专注在影像处理的专用NPU，所以它其实并没有考虑其他应用场景，基于这个应用场景下是不是还有一些拓展一些基于影像的专用的场景，这个我觉得是我们也会考虑的一些方向，但目前马里亚纳 X是聚焦在影像方面。”

至于这款芯片是否会用在其他终端产品上，目前马里亚纳MariSilicon X依然聚焦在手机上。当有一个好的NPU时，应该把它用在其他领域，但这很大程度取决于OPPO终端团队将来的产品规划，现在还是先聚焦与手机影像上。

如何协同不同的处理器平台？

马里亚纳MariSilicon X虽然是OPPO自研的NPU，但是CPU、GPU依然采用其他平台，因此该如何协调？是否会不兼容？对于类似问题，OPPO方面也进行了回答。

姜波认为，首先NPU应该去做特别重要的事情，在手机上应该用来完成计算影像的处理，因为计算影像其实是对算力在各种应用下算力要求最高的一部分，所以专芯专用或者优化应该是这个方向，这是我们提出来的一个观点。

其次NPU应该根据应用场景真正把它的有效算力释放出来，做一个通用型的NPU，其实它很难聚焦某一个应用场景，但是OPPO是终端厂商，更明白用户痛点在哪，用户场景的价值点在哪。所以我们会根据这个应用场景去相应的设计我们的硬件架构，去提升它的相应的能效比，提升有效算力。

另外一个问题是如何协同SoC。马里亚纳MariSilicon X是影像专用NPU，它是要跟SoC的主平台去协同的。非常简单一个原理，我从相机传感器进来最原始的数据，通过马里亚纳MariSilicon X处理，在处理完之后，再把处理过的数据送给SoC。有了NPU之后例如降噪、HDR等，都不需要SoC主芯片去做了。从整个影像的链路来讲，通用平台整体的影像质量提升才是我们的目的。另外，马里亚纳MariSilicon X在设计时也考虑到了第三方应用。

至于专注影像的NPU与传统ISP有何区别时，姜波回答称：“马里亚纳MariSilicon X聚焦在一个通过NPU去解决释放计算影像的潜力的问题，这是我们的焦点。我们认为整个影像的发展往后来看，其实聚焦在计算影像上。而计算影像又是AI真正能逐渐提高它的上限，这块在照片的表现上来说，各种芯片都做得很不错。但是正是因为AI算力或者针对影像的专用设计性各家差距很大，所以导致它在处理包括视频处理，甚至来讲"所见即所得"的体验，因为视频和拍照的这种差距，导致用户体验不够好。我们也是希望向这个方向去努力，去弥补拍照和视频之间的距离。当然拍照有了更强算力之后，ISP一样可以做得更好，这是一个基本点。

刚才谈到ISP和NPU有什么不同，因为ISP我很难评价，因为ISP其实是整个影像处理链路中的一部分。在马里亚纳MariSilicon X里，也有影像处理链路相应的，其实里面还有其他的block我们并没有提到，相应的其实都是影像处理单元。但是我们做的影像处理单元，尤其最终目的要把AI的极致能力发挥出来，这是我们的焦点，也是为什么我们把它定位成一个影像专用的NPU的原因所在。”

值得注意的是，姜波提到，马里亚纳MariSilicon X是第一个芯片产品，后续产品会在合适的时机再跟大家分享。

智能眼镜的难点是什么？

徐毅认为AR眼镜得最大的难点还是在于应用的生态，缺少杀手级的应用，我觉得这是整个行业面临的问题。当然这里面也是因为我们的硬件不够成熟，整体来讲光学、硬件、感知交互的算法，这些都不够成熟。

他还说：“当这个成熟之后，我觉得我们会慢慢浮现出一些杀手级的应用，我们比较看好当我们未来有一个真正的全世界虚拟地图，我们是可以去打开很多的应用，我现在走在马路上我看到餐厅我现在也要掏出手机打开APP输入餐厅的名字去获取信息，未来我带着我的眼镜当它足够强大之后，它一看到那个餐厅自动把这些信息推送到我的眼前，是我想要的信息，包括我喜欢吃什么菜，包括我有没有吃饭这些信息它都可以跟我分析之后给我推送一些有用的信息。我觉得未来这些可能是其中的一项杀手级应用，目前来讲我们觉得还不到那个程度。”

“但是我们非常愿意在这里往前，我们愿意在这个时间点推出这样一个产品，我们在一些应用上我们做了很多的尝试，我们觉得有些应用确实能够帮助大家，比方说导航，比方说提词器可能对高端商务确实有这样的需求，我们希望通过这样的举措也是来去培养用户习惯也好，去教育用户也好，希望大家一起来把这个行业做好。”

“至于有没有可能往B端发展，我们这个公司是比较注重在消费电子，我们整个从设计这款产品的理念都是把它从它的设计的轻薄，易佩戴性，佩戴的舒适性当作我们非常重要的指标来做，可以看到我们最后把它的重量做到30克，其实是非常轻的一个重量，戴上去确实不会特别累。为了达到这个重量我们做了很多工作，包括自研了光机，因为目前来讲公版来讲可能不能满足我们的需求，所以我们花了很多研发精力去做这个事情，聚焦在这样一个消费级的XR的产品上。”

“所以要真正爆发，还是需要杀手级应用。至于如何达成这个杀手级应用？我们觉得是从硬件，硬件光学它可能要更轻薄，能够真正支持这幅眼镜变得非常轻薄，就像一个普通的眼镜一样，也要能支持屈光度的调节，这样让有视力障碍的用户也能使用，像一些感知交互的算法也能够更准，范围能够更广，我们还需要有些基础设施，以前我们称其为AR云，现在管它叫元宇宙，目前它还有很好的定义，但是未来会有这样一个基础设施来支撑这些杀手级，有了这些之后我觉得AR会真正像VR那样真正能够大规模的商用。”

包布和 http://www.xinzhiliao.com/bj/shiliao/437.html