XR(扩展现实)市场可穿戴设备的整体计算解决方案

最新更新时间:2022-04-26来源: elecfans关键字:扩展现实  可穿戴设备 手机看文章 扫描二维码
随时随地手机看文章

Arm 推出首个全面计算解决方案后,我们正在探索如何将不同的高级、性能和效率解决方案应用于不同的消费类设备细分市场。我们已经探索了智能手机、笔记本电脑和家用设备细分市场,但在本博客中,我们将概述XR(扩展现实)可穿戴设备市场可能存在的不同 Total Compute 解决方案。


XR市场

最近与 XR 市场相关的最大发展是元界的引入。被描述为“互联网的下一次发展”,元宇宙将把真实、数字和虚拟世界融合到新的现实中,人们几乎可以做任何事情:与朋友和家人聚会、学习、工作、商务会议、购物、创造、游戏和全新的体验还有待想象。


如本蓝图文章中所述,Arm 是通往元界的门户。XR 通过 Arm 驱动的网关消费设备,如独立的 XR 可穿戴设备——无论是 VR 耳机还是未来的 AR 智能眼镜——将促进元界中非凡的新体验。


XR包括增强现实(AR)、虚拟现实(VR)和混合现实(MR)。虽然所有三个“现实”都有共同的重叠特征和要求,但每个都有不同的目的和底层技术。


AR 通过将我们看到的内容与计算机生成的信息相叠加,增强了用户对现实世界的看法。未来,整体 AR 体验将通过可穿戴智能眼镜提供。这些设备必须将超低功耗处理器与包括深度感知和跟踪在内的多个传感器相结合,所有这些都在一个轻巧舒适的外形尺寸内,足以长时间佩戴。我们已经看到几款新的智能眼镜型号将于 2021 年问世,包括 Snap、Meta Ray-Ban、联想 ThinkReality A3 和 Vuzix 的下一代智能眼镜的 Spectacle 智能眼镜。


VR 完全取代了用户的视野,让他们沉浸在计算机生成的虚拟环境中。VR 头戴式可穿戴设备,如Arm 驱动的 Oculus Quest和 Quest 2,在过去五年中已经上市。这些设备通常用于娱乐体验,例如游戏、音乐会、电影或运动,但也正在进入社交领域,例如虚拟聚会,如下所示的 RecRoom VR 平台所示。


MR 介于 AR 和 VR 之间,因为它通过将虚拟对象、角色或指令叠加到现实世界环境中来融合现实世界和虚拟世界,反之亦然。最著名的 MR 可穿戴设备是Arm 驱动的 Microsoft HoloLens 2。虚拟指令集和图形叠加到用户视图中,以协助企业和工业应用。


XR 可穿戴设备的计算性能和效率水平将根据 XR 可穿戴设备的类型及其设计支持的用例的复杂性而有所不同。现代独立 VR 耳机将需要高性能计算,主要用于高端游戏体验,如 Oculus Quest 设备,而更小、更轻的设备(如 AR 智能眼镜)则需要高效率。同时,还有一些设备介于这两种性能和效率之间,例如 HoloLens 2 等 MR 头戴式设备,以及 HP Reverb G2 等面向消费市场的系留 VR 设备。因此,片上系统 (SoC) 解决方案需要能够扩展以适应不同的用例、工作负载和外形尺寸。这就是 Arm Total Compute 解决方案可以提供帮助的地方。


XR 可穿戴设备的整体计算解决方案

Arm 的 Total Compute 解决方案提供一整套可扩展的硬件 IP(包括最新的Armv9 CPU、Mali GPU和系统 IP)、物理 IP、软件、工具和标准,以构建跨不同消费设备市场的最佳 SoC。这些解决方案为各种 XR 可穿戴设备所需的特殊计算要求提供不同的配置,从高性能 VR 和 MR 耳机到超高效的 AR 智能眼镜。


高性能 VR 和 MR 耳机的配置代表了我们的“高性能”全面计算解决方案。这里有两种可能的配置。首先,1x Arm Cortex -X2、3x Arm Cortex-A710和 4x Arm Cortex-A510的 1+3+4 CPU 配置以实现高性能。对于性能稍低但效率更高的情况,有 4x Cortex-A710 和 4x Cortex-A510 的 4+4 CPU 配置。两种解决方案都可以利用高级Arm Mali-G710 GPU或主流Arm Mali-G510 GPU来获得高质量图形。

同时,轻量级 AR 智能眼镜的“效率”Total Compute 解决方案可以利用 2x Cortex-A710 和 6x Cortex-A510 的 2+6 CPU 配置,甚至可以利用 4x Cortex-A510 来实现超效率。超高效的Arm Mali-G310 GPU可以支持这些解决方案。


与所有全面计算解决方案一样,我们用于 XR 可穿戴设备的全面计算解决方案中的 CPU 和 GPU 是我们的系统 IP – CoreLink Interconnect CI-700 和 NI-700 的基础。这两种互连技术都提供了更高的能源效率和系统性能,从而进一步改进了任何整体计算解决方案。我们的 Total Compute 解决方案中的所有 CPU 配置都由 Arm 的 DSU-110 绑定在一起,这是这些基于 Armv9 的 Cortex CPU 集群的支柱。这使我们的合作伙伴能够处理不同类型的基于 Arm 的 XR 可穿戴设备,并在性能和效率方面进行不同的权衡。


CPU

高性能 VR 和 MR 头戴式设备可以将至少一个 Cortex-X2 集成到 Total Compute 解决方案中。我们的 Cortex-X CPU 确实推动了峰值性能要求,这对于 VR 和 MR 耳机上的游戏和其他娱乐体验等计算密集型 XR 工作负载非常重要。Cortex-A710 的能效改进补充了这种对峰值性能的驱动,它可以实现持续的性能,从而最大限度地延长所有 XR 可穿戴设备的电池寿命。对于 XR 可穿戴设备而言,这是一个非常重要的考虑因素,这些设备越来越不受束缚,以实现更大的用户移动性。Cortex-A510 进一步支持了这种对能源效率的推动,可实现更长的播放体验。


对于效率至关重要的 XR 可穿戴设备(例如 AR 智能眼镜),Cortex-A710 和 Cortex-A510 CPU 将仅用于基于效率的整体计算解决方案。Cortex-A510 不仅通过 3 宽有序设计将电源效率提高了 20%,而且还提供了行业领先的面积效率。这对于面积很重要的小型、轻便的 XR 可穿戴设备来说非常重要!


使这成为可能的一项创新是合并的核心微架构。这允许将两个 Cortex-A510 CPU 组合成一个复合体,每个 CPU 集群有多个复合体。结果是在更高的性能点上增加了面积效率。这种对性能的追求与高面积效率相结合,非常适合轻量级 AR 智能眼镜。


GPU

不同的 XR 可穿戴设备由不同的 GPU 支持。高级 Mali-G710 可以整合到高性能 XR 耳机的 Total Compute 解决方案中。它提高了索引驱动顶点着色 (IDVS) 的特征覆盖率,这是 XR 用例中常用的一种功能,因为它可以渲染每个眼睛视图,每个视图的对象位置略有不同。


Mali-G510 还可以集成到高性能 XR 可穿戴设备中,提供性能和效率的完美平衡。与上一代Arm Mali-G57 GPU相比,它提供了 100% 的性能提升和 22% 的节能,从而延长了电池寿命。


与 Mali-G710 的 7 到 16 个可配置着色器内核相比,Mali-G510 能够支持 2 到 6 个。但是,它仍然融合了 Mali-G710 的许多高级功能,例如命令流前端 (CSF)、重新设计的附加执行引擎和重新设计的纹理单元,以提供高质量的图形体验。然后,最重要的是,它提供了更好的 HDR 支持格式、Arm 帧缓冲区压缩 (AFBC) 未压缩缓冲区和新的 Arm 固定速率压缩 (AFRC) 以减少带宽。AFRC 是 XR 可穿戴设备的一个特别简洁的功能,因为它保证以最小的面积成本减少带宽和内存占用。这转化为性能提升和节能。


AFRC

Mali-G310 旨在以最小的面积成本提供尽可能高的性能,非常适合针对 AR 智能眼镜的全面计算解决方案。它是我们有史以来性能最高的超高效 GPU,与上一代 Arm Mali-G31 GPU 相比,在三个性能领域——纹理性能 (6x)、Vulkan 性能 (4.5x) 和 Android UI 内容 (2x) 具有巨大的性能提升。与 Mali-G510 一样,Mali-G310 也提供更好的 HDR 支持格式和 AFBC 未压缩缓冲区,但 AFRC 只是可选的。然而,GPU 确实提供了中心点渲染——一种使用与 XR 可穿戴设备集成的眼动追踪器来减少渲染工作量的渲染技术——用于增强 AR 和 VR。

关键字:扩展现实  可穿戴设备 编辑:什么鱼 引用地址:http://news.eeworld.com.cn/qrs/ic567819.html

上一篇:村田量产小型功率电感器,ROHM推出播放高分辨率音源转换器IC
下一篇:中国首个激光电视标准将正式实施,海信L5G系列价格设定在7999元

推荐阅读

中赫集团、中国移动和高通计划利用5G赋能无界XR
中赫集团、中国移动和高通计划利用5G赋能无界XR,共同探索“智慧工体”建设新路径2022年7月6日,北京——中赫集团“工体元宇宙GTVerse”发布会在京举行,中赫集团联合科技领域领军企业共同开启了工体元宇宙生态联盟。该联盟通过凝聚行业力量、提前布局,将赋能新工体成为首家以“数字和实体融合体验消费”为核心竞争力的特大型城市公园综合体。在发布会上,中赫集团、中国移动和高通技术公司联合宣布,计划基于“5G+XR”赋能的5G无界XR赛事体验方案,探索提升广大体育爱好者体验的新路径。5G无界XR赛事体验方案基于5G切片提供的高速率低时延传输,在XR头显设备与边缘云之间协同实现分离式渲染,面向大型负载场景为XR用户打造不受线缆束缚的沉浸式体验
发表于 2022-07-06
中赫集团、中国移动和高通计划利用5G赋能无界<font color='red'>XR</font>
中国移动携手高通实现首次基于5G切片的端边协同分离渲染无界XR技术演示
中国移动携手高通实现业内首次基于5G切片的端边协同分离渲染无界XR技术演示— 展现5G端边协同分离渲染技术和5G切片技术领域的行业新突破 —2022年6月30日,北京——中国移动携手高通技术公司,成功实现并展示了业内首次基于5G切片的端边协同分离渲染(split-rendering)无界XR技术演示。此项演示为5G切片技术在XR领域的应用和创新开启了全新篇章。基于5G切片的端边协同分离渲染XR技术展示,是利用爱奇艺奇遇Dream Pro VR一体机(搭载骁龙® XR2平台)、采用中国移动终端切片解决方案的小米智能手机(搭载骁龙®移动平台)以及中国移动研究院联合共进、世炬研制的5G家庭小基站(基于高通® FSM100 5G RAN平台
发表于 2022-06-30
这些iOS 16新功能仅支持iPhone XR/XS至iPhone 13/Pro机型
苹果发布了 iOS 16、iPadOS 16、macOS Ventura 系统,并且已经发布了首个开发者预览版 Beta。  苹果 iOS 16 将支持 iPhone 8、iPhone X 或更新机型。即便如此,并非所有功能都适用于旧款 iPhone。考虑到这一点,9to5Mac 现在收集了至少需要 iPhone XR、iPhone XS 或更新版本的所有功能。  某些功能仅适用于配备 A12 仿生芯片或更新版本的 iPhone,即 iPhone XR、iPhone XS、iPhone 11、iPhone 11 Pro、iPhone SE(第二代)、iPhone 12、iPhone 12 Pro、iPhone 13、iPhone 1
发表于 2022-06-08
这些iOS 16新功能仅支持iPhone <font color='red'>XR</font>/XS至iPhone 13/Pro机型
诺基亚 XR20 开始接收 Android 12 更新
看起来 HMD Global 已经准备好对 Android 12 进行另一次更新,这次是针对去年夏天推出的搭载 Android 11的诺基亚 XR20智能手机。芬兰用户在 Twitter 上开始发布报告,他们收到了令人垂涎的谷歌移动操作系统最新版本的更新。新版本被标记为 V2.300,它似乎至少已经在欧洲的某些地区推出。安装后,您的诺基亚 XR20 将运行具有 2022 年 3 月安全补丁级别的 Android 12,该级别仍将持续几天。除此之外,您应该会看到谷歌去年在 Android 12 中加入的所有新功能。像往常一样,请记住,这可能是分阶段推出,因此通知可能需要几天(甚至几周)才能在野外的所有诺基亚 XR20 设备上弹出。如果
发表于 2022-03-29
vivo招聘相关人力,布局XR芯片
某招聘平台信息显示,vivo(维沃移动通信有限公司)日前发布XR(VR、AR、MR)芯片技术规划岗位招聘需求,表明vivo对XR芯片领域正加以布局。根据职位描述,该岗位将结合技术团队、用户与业务需求,牵引所属领域技术规划路径,构建负责领域内2-5年的技术路线图。据了解,vivo此前已发布大量芯片相关职位需求,其首款自研ISP芯片 vivo v1 已经于去年 X70 系列发布会上正式亮相。
发表于 2022-03-17
vivo招聘相关人力,布局<font color='red'>XR</font>芯片
xMEMS推出适用于智能眼镜和扩展现实(xR)头戴式耳机
xMEMS推出适用于智能眼镜和扩展现实(xR)头戴式耳机应用的单芯片MEMS高频扬声器Tomales中国,北京-2021年12月8日-xMEMS Labs(美商知微电子)今日推出首款单芯片MEMS高音单体扬声器Tomales。Tomales的上发音及侧发音封装选项和1mm薄的厚度简化了扬声器的装配与摆放位置,在智能眼镜和扩展现实(xR)头戴式耳机应用中可直接将音频传导入耳。在3cm的开放音场(free-air)中,Tomales在2kHz可达75dB SPL(声压级),在4kHz达90dB,在10kHz则是超过108dB。Tomales采用xMEMS第二代M2扬声器单元架构,在SPL/mm2上所带来的改善使其能在较小的外形中增加响度
发表于 2021-12-08
xMEMS推出适用于智能眼镜和<font color='red'>扩展</font><font color='red'>现实</font>(xR)头戴式耳机

推荐帖子

1602LCD液晶显示器地址问题
我在用1602LCD液晶时,它要求在30H-33H输出一组数据,34H-35H输出一组数据,这个地址是怎么回事?这个地址是连续的可输出的时候中间还有一段字符是怎么输出的。请教高手,谢谢1602LCD液晶显示器地址问题
huhaipeng 嵌入式系统
IVR故障,帮忙解决,给奖金人民币2000元
IVR外呼作业启动后,CPU负荷达到100%,电话接通后听不到录音,一分半钟后拆线!请帮忙解决!解决后肯定给MONEY! 在江苏常州,最好可以周边的人可以来现场解决问题,解决问题后绝对不食言! 联系QQ:50497406!IVR故障,帮忙解决,给奖金人民币2000元
wangbaogang 嵌入式系统
EDA实验与实践 dds_test
moduledds_test(clock,key,fword,seg,dig); inputclock;//系统时钟(48MHz) input[7:0]key;//按键输入(KEY1~KEY5) output[31:0]fword;//要发送的数据 output[7:0]seg;//数码管段码输出 output[7:0]dig;//数码管位码输出 //I/O寄存器 reg[31:0
白丁 FPGA/CPLD
求evc3.0
请问谁知道哪里可以下载embeddedvisualc++3.0,请告诉我下载地址,多谢了! 微软网站上没有。 求evc3.0
fanxuxu 嵌入式系统
8962安装嵌入式系统的问题
8962可以安装哪些操作系统?是否有相关资料可以参考?8962安装嵌入式系统的问题
莫妮卡 微控制器 MCU
如何实现0.125ns的动态延时
动态调节延时每次步进0.125ns 如何实现0.125ns的动态延时
小白111 EE_FPGA学习乐园
小广播
何立民专栏 单片机及嵌入式宝典

北京航空航天大学教授,20余年来致力于单片机与嵌入式系统推广工作。

换一换 更多 相关热搜器件
电子工程世界版权所有 京B2-20211791 京ICP备10001474号-1 电信业务审批[2006]字第258号函 京公网安备 11010802033920号 Copyright © 2005-2022 EEWORLD.com.cn, Inc. All rights reserved