#QNEWS# OPPO / MariSilicon X / 自研芯片
OPPO INNO DAY期间,OPPO正式发布首款自研NPU芯片——马里亚纳MariSilicon X。作为首个专为影像而生的NPU芯片,马里亚纳 MariSilicon X基于面向未来AI时代的DSA新黄金架构理念,通过自主创新的IP设计以及6nm先进制程,带来空前强大的实时AI计算能效,领先行业的Ultra HDR能力,无损的实时RAW计算,以及最大化传感器能力的RGBW Pro,以芯片级技术突破成就计算影像的新标准。
OPPO芯片产品高级总监姜波表示:“马里亚纳 MariSilicon X是 OPPO未来十年影像的开篇之作,它的问世标志着OPPO在计算影像领域首次实现了全链路垂直整合,将完全服务于OPPO定制化的计算影像需求。未来,马里亚纳MariSilicon X 将和通用平台一起构成了手机核心运算的左右大脑,正式开启‘一机双芯’时代。”
马里亚纳 MariSilicon X集成了自研的MariNeuro®️ AI计算单元,提供高达18TOPS的最大有效算力,以及业界领先的11.6TOPS/W的能效表现,面向OPPO自研AI算法,实现最高效的计算加速和功耗优化。
例如在运行OPPO自研的AI降噪算法时,马里亚纳MariSilicon X能够以4K的规格,实现40fps的处理速度,相比于此前Find X3 Pro通用NPU支持的2fps速度,实现了20倍的性能跃升,同时功耗降低超过50%,体现了越专用越高效的显著优势。
马里亚纳MariSilicon X还采用了创新的双层存储架构,为AI计算的卓越能效和实时性提供有力的支持。其中,马里亚纳MariSilicon X集成了片上的内存子系统,可提供高达每秒万亿比特的超大吞吐量,保障海量的AI数据在计算时无需离开AI计算单元,避免内外部数据交换带来的读写功耗。此外,马里亚纳 MariSilicon X还配备了独立DDR带宽,传输速度高达8.5GB/秒,为芯片内各个计算单元提供独立带宽,让超强算力不会被读写速度所限制。独立DDR带宽的加入,也为手机系统总带宽带来了17%的增量。
马里亚纳 MariSilicon X还集成了自研的MariLumi®️ 影像处理单元,并实现了HDR性能的新突破。
MariLumi影像处理单元支持最高20bit的处理位宽,并支持惊人的20bit Ultra HDR,是目前旗舰平台HDR能力的4倍。在即时呈现出的画面中,最亮与最暗之处的亮度对比极值达到100万比1,几乎与人眼真实的感受无异。
马里亚纳 MariSilicon X的强大性能帮助OPPO重塑无损影像链路,将传统链路只能在后端完成的AI计算推向了拥有最多原始信息的最前端——RAW域,为计算摄影的未来发展带来革新。
传统计算摄影的视频处理基本是在影像链路的最末端,即YUV域执行,但链路中的多次转换会导致图像数据丢失了大量的信息和细节,这也导致传统计算摄影只能对有损的信息进行处理,无法实现最佳的效果。
马里亚纳MariSilicon X引领性地将复杂的AI算法以及20bit HDR融合全部前置到RAW域进行,让AI计算不再受限于信息量的损耗,为整个影像链路输出高质量的图像数据。与传统后端计算相比,马里亚纳 MariSilicon X的实时RAW计算能够带来8dB的图像信噪比提升。
拥有马里亚纳 MariSilicon X之后,OPPO第一次完成了影像垂直链路整合,RGBW Pro模式就是最好的例证。通过双通路设计,马里亚纳MariSilicon X首次实现了对RGB和W像素的分隔处理,最大化利用每一种像素特性,释放出RGBW阵列的全部潜力。马里亚纳 MariSilicon X的RGBW Pro模式带来了8.6dB的信噪比提升,以及1.7倍的解析力提升,在传感器尺寸规格都没有变化的前提下实现大幅的影像效果增强。
在四项前沿技术突破的加持下,马里亚纳 MariSilicon X以同时支持4K+20bit RAW计算+AI+Ultra HDR的全新规格,为计算影像树立了全新标准,让安卓AI视频,首次拥有了4K表现;也让4K视频,第一次拥有了AI能力。
马里亚纳 MariSilicon X将于2022年第一季度在OPPO高端旗舰Find X系列新品首发搭载,以双芯时代正式开启面向未来十年的计算影像新篇章。
OPPO INNO DAY期间,OPPO正式发布首款自研NPU芯片——马里亚纳MariSilicon X。作为首个专为影像而生的NPU芯片,马里亚纳 MariSilicon X基于面向未来AI时代的DSA新黄金架构理念,通过自主创新的IP设计以及6nm先进制程,带来空前强大的实时AI计算能效,领先行业的Ultra HDR能力,无损的实时RAW计算,以及最大化传感器能力的RGBW Pro,以芯片级技术突破成就计算影像的新标准。
OPPO芯片产品高级总监姜波表示:“马里亚纳 MariSilicon X是 OPPO未来十年影像的开篇之作,它的问世标志着OPPO在计算影像领域首次实现了全链路垂直整合,将完全服务于OPPO定制化的计算影像需求。未来,马里亚纳MariSilicon X 将和通用平台一起构成了手机核心运算的左右大脑,正式开启‘一机双芯’时代。”
马里亚纳 MariSilicon X集成了自研的MariNeuro®️ AI计算单元,提供高达18TOPS的最大有效算力,以及业界领先的11.6TOPS/W的能效表现,面向OPPO自研AI算法,实现最高效的计算加速和功耗优化。
例如在运行OPPO自研的AI降噪算法时,马里亚纳MariSilicon X能够以4K的规格,实现40fps的处理速度,相比于此前Find X3 Pro通用NPU支持的2fps速度,实现了20倍的性能跃升,同时功耗降低超过50%,体现了越专用越高效的显著优势。
马里亚纳MariSilicon X还采用了创新的双层存储架构,为AI计算的卓越能效和实时性提供有力的支持。其中,马里亚纳MariSilicon X集成了片上的内存子系统,可提供高达每秒万亿比特的超大吞吐量,保障海量的AI数据在计算时无需离开AI计算单元,避免内外部数据交换带来的读写功耗。此外,马里亚纳 MariSilicon X还配备了独立DDR带宽,传输速度高达8.5GB/秒,为芯片内各个计算单元提供独立带宽,让超强算力不会被读写速度所限制。独立DDR带宽的加入,也为手机系统总带宽带来了17%的增量。
马里亚纳 MariSilicon X还集成了自研的MariLumi®️ 影像处理单元,并实现了HDR性能的新突破。
MariLumi影像处理单元支持最高20bit的处理位宽,并支持惊人的20bit Ultra HDR,是目前旗舰平台HDR能力的4倍。在即时呈现出的画面中,最亮与最暗之处的亮度对比极值达到100万比1,几乎与人眼真实的感受无异。
马里亚纳 MariSilicon X的强大性能帮助OPPO重塑无损影像链路,将传统链路只能在后端完成的AI计算推向了拥有最多原始信息的最前端——RAW域,为计算摄影的未来发展带来革新。
传统计算摄影的视频处理基本是在影像链路的最末端,即YUV域执行,但链路中的多次转换会导致图像数据丢失了大量的信息和细节,这也导致传统计算摄影只能对有损的信息进行处理,无法实现最佳的效果。
马里亚纳MariSilicon X引领性地将复杂的AI算法以及20bit HDR融合全部前置到RAW域进行,让AI计算不再受限于信息量的损耗,为整个影像链路输出高质量的图像数据。与传统后端计算相比,马里亚纳 MariSilicon X的实时RAW计算能够带来8dB的图像信噪比提升。
拥有马里亚纳 MariSilicon X之后,OPPO第一次完成了影像垂直链路整合,RGBW Pro模式就是最好的例证。通过双通路设计,马里亚纳MariSilicon X首次实现了对RGB和W像素的分隔处理,最大化利用每一种像素特性,释放出RGBW阵列的全部潜力。马里亚纳 MariSilicon X的RGBW Pro模式带来了8.6dB的信噪比提升,以及1.7倍的解析力提升,在传感器尺寸规格都没有变化的前提下实现大幅的影像效果增强。
在四项前沿技术突破的加持下,马里亚纳 MariSilicon X以同时支持4K+20bit RAW计算+AI+Ultra HDR的全新规格,为计算影像树立了全新标准,让安卓AI视频,首次拥有了4K表现;也让4K视频,第一次拥有了AI能力。
马里亚纳 MariSilicon X将于2022年第一季度在OPPO高端旗舰Find X系列新品首发搭载,以双芯时代正式开启面向未来十年的计算影像新篇章。
OPPO INNO DAY 2021上,陈明永宣布绿厂也加入自研芯片的队伍了。首款OPPO自主设计、自主研发的影像专用NPU芯片被命名为“马里亚纳 MariSilicon X”。
正如陈明永所说有底层核心技术,才可能有未来。尤其是高端旗舰产品,更要有底层核心技术。这一点老大哥华为给我们树立了很好的榜样。
OPPO第一颗自主设计,自主研发的是影像专用NPU芯片。采用台积电6nm工艺制程,耗时三年,算力高达18TOPS,领先于iPhone A15。能够实现行业首个4K AI 夜景视频。大幅提升影像能力。
有趣的是马里亚纳是世界最深的海沟,也称世界第四极,OPPO起这名的意思也很明显,自研芯片耗资耗时巨大,但OPPO未来会持续投入资源,以几千人的芯片研发团队继续布局自研芯片业务。
你看好OPPO自研芯片吗?#oppo首颗自研芯片#
正如陈明永所说有底层核心技术,才可能有未来。尤其是高端旗舰产品,更要有底层核心技术。这一点老大哥华为给我们树立了很好的榜样。
OPPO第一颗自主设计,自主研发的是影像专用NPU芯片。采用台积电6nm工艺制程,耗时三年,算力高达18TOPS,领先于iPhone A15。能够实现行业首个4K AI 夜景视频。大幅提升影像能力。
有趣的是马里亚纳是世界最深的海沟,也称世界第四极,OPPO起这名的意思也很明显,自研芯片耗资耗时巨大,但OPPO未来会持续投入资源,以几千人的芯片研发团队继续布局自研芯片业务。
你看好OPPO自研芯片吗?#oppo首颗自研芯片#
OPPO INNO DAY 2021 首日,#OPPO发布首个自研芯片# MariSillicon X 也就是马里亚纳,影像专用的 NPU。同日发布的还有 OPPO Air Glass 第三代智能眼镜。与此前有所不同的,是这两款产品均将于 2022 年进入商用。
发布会后专访 OPPO 芯片产品高级总监 姜波、XR 技术总监 徐毅,与此前相同,以下 QA 内容均经过简化、浓缩、筛选,可能会出现部分词不达意的情况,以下内容仅供参考,并不完全代表官方口径:
Q:马里亚纳这颗 OPPO 自研芯片怎么和骁龙、天玑等处理器平台进行配合工作?
A:NPU 在市面上有两个问题,一个是用来干什么,一个是怎么做。OPPO 认为在手机上面是用来做影像,第二个问题就是能效和应用场景是相关的,OPPO 是比较明白用户的痛点和使用需要,所以自研就能够针对性去设计这颗芯片。其实要做到高算力相对比较简单,做大 die 就好了, 可是要做到 MariSillicon X 这么高的能效是困难的。MariSillicon X 和其他处理器平台的协同工作不用担心。
Q:芯片更新是一年一迭代么?
A:今天先聚焦在 MariSillicon X。
Q:OPPO Air Glass 未来是否会有专门的生态?
A:目前 AR 到大规模的消费还不到时候,并且现阶段在硬件层面以及软件算法等方面都需要好好的改进,特别是生态谈不上存在。现阶段就要给用户带来可以用的,所以 OPPO Air Glass 做了些取舍,在现阶段这个形态就能够做到消费级的 aR 辅助现实。
Q:OPPO 成立自研芯片就是三年时间,就能够做到自研 IP 和 6nm 这样的制程,有什么具体的时间节点或者细节可以分享的么?是否在为做其他类型的芯片做准备。
A:姜波在 2019 年加入马里亚纳计划,整个项目都是为了追求极致,所以整个项目进展比较快,因为同事们都很抓紧和追求极致。再就是非常幸运的,一次性实现了 6nm 流片成功。
Q:在芯片荒的情况下,MariSillicon X 大规模商用也就是量产是否会存在问题?
A:已经有系统化规划和准备。
Q:MariSillicon X 是否有为 XR 做准备?未来的规划?
A:目前没有,规划暂不方便透露,今天专注于 MariSillicon X 。
Q:NPU 的用途是非常广泛的,健康、车等都可以用到 NPU,是不是 MariSillicon X 有为这些使用场景做准备,未来是不是会应用在手机以外的设备形态。
A:MariSillicon X 是专注在影像用的 NPU,所以没有注意到其他场景的使用。确实有一个好的 NPU 确实可以用在别的场景,特别是 MariSillicon X 专注的泛影像方面的,也许可能未来会这些新的用途出现可以用到。
Q:OPPO Air Glass 现在展示的是单绿色,用 RGB 显示会掉分辨率么?
A:我们是权衡了各方面,比如佩戴、场景、使用方式等等。确实使用 RGB 显示会有更好的视觉效果,但会影响到产品的重量、设计等等,在现阶段已经足够将信息带到用户面前。
发布会后专访 OPPO 芯片产品高级总监 姜波、XR 技术总监 徐毅,与此前相同,以下 QA 内容均经过简化、浓缩、筛选,可能会出现部分词不达意的情况,以下内容仅供参考,并不完全代表官方口径:
Q:马里亚纳这颗 OPPO 自研芯片怎么和骁龙、天玑等处理器平台进行配合工作?
A:NPU 在市面上有两个问题,一个是用来干什么,一个是怎么做。OPPO 认为在手机上面是用来做影像,第二个问题就是能效和应用场景是相关的,OPPO 是比较明白用户的痛点和使用需要,所以自研就能够针对性去设计这颗芯片。其实要做到高算力相对比较简单,做大 die 就好了, 可是要做到 MariSillicon X 这么高的能效是困难的。MariSillicon X 和其他处理器平台的协同工作不用担心。
Q:芯片更新是一年一迭代么?
A:今天先聚焦在 MariSillicon X。
Q:OPPO Air Glass 未来是否会有专门的生态?
A:目前 AR 到大规模的消费还不到时候,并且现阶段在硬件层面以及软件算法等方面都需要好好的改进,特别是生态谈不上存在。现阶段就要给用户带来可以用的,所以 OPPO Air Glass 做了些取舍,在现阶段这个形态就能够做到消费级的 aR 辅助现实。
Q:OPPO 成立自研芯片就是三年时间,就能够做到自研 IP 和 6nm 这样的制程,有什么具体的时间节点或者细节可以分享的么?是否在为做其他类型的芯片做准备。
A:姜波在 2019 年加入马里亚纳计划,整个项目都是为了追求极致,所以整个项目进展比较快,因为同事们都很抓紧和追求极致。再就是非常幸运的,一次性实现了 6nm 流片成功。
Q:在芯片荒的情况下,MariSillicon X 大规模商用也就是量产是否会存在问题?
A:已经有系统化规划和准备。
Q:MariSillicon X 是否有为 XR 做准备?未来的规划?
A:目前没有,规划暂不方便透露,今天专注于 MariSillicon X 。
Q:NPU 的用途是非常广泛的,健康、车等都可以用到 NPU,是不是 MariSillicon X 有为这些使用场景做准备,未来是不是会应用在手机以外的设备形态。
A:MariSillicon X 是专注在影像用的 NPU,所以没有注意到其他场景的使用。确实有一个好的 NPU 确实可以用在别的场景,特别是 MariSillicon X 专注的泛影像方面的,也许可能未来会这些新的用途出现可以用到。
Q:OPPO Air Glass 现在展示的是单绿色,用 RGB 显示会掉分辨率么?
A:我们是权衡了各方面,比如佩戴、场景、使用方式等等。确实使用 RGB 显示会有更好的视觉效果,但会影响到产品的重量、设计等等,在现阶段已经足够将信息带到用户面前。
✋热门推荐