VR设备的GPU不够好?Nvidia:看我哒

发布者:zcyzwj最新更新时间:2016-05-04 来源: eefocus关键字:GPU  NVIDIA 手机看文章 扫描二维码
随时随地手机看文章
所谓虚拟现实,就是要欺骗人的眼睛和大脑,让虚拟世界感觉跟真实世界一样。目前好的VR产品已经在这方面做得相当不错了,但仍有进步空间。下面要说的就是一项可以让虚拟世界更好模拟真实世界的技术。


人眼看世界与VR渲染方式

人眼能看到的范围是有限的,因此产生了一个名词叫人眼视度。人眼视度指的是人不动头时的可视角度。我们身处一个360度环绕的世界,但任何时候我们只能查看120度视度范围内的事物,并且我们的双眼会聚焦在视野中一小块不超过6度的区域(中央凹+近中央凹视野),周围则是模糊的(周边视野),这就是我们看世界的方式。

顶级的VR头显(HTC Vive、Oculus Rift)的可视角度能达到110度左右(与眼睛和屏幕之间的距离有关),与人眼视度非常接近。我们在VR头显中看到的世界,也只是它的屏幕所显示内容的一部分,而真正聚焦的更是这一小部分中的一小块区域。但是VR设备在渲染画面时却是对整个视野进行渲染,不在人眼聚焦的画面一样在以相同的速度刷新。

由于VR设备的高分辨率和刷新率,这种渲染方式需要消耗大量的GPU资源,使得PC平台的头盔对显卡要求很高(通常在GTX 970以上),而移动VR则很难达到良好的体验。

不过,一些公司已经在着手解决问题,Nvidia推出了MRS(multi-resolution shading)技术,国内公司七鑫易维则希望在此基础上加入焦点渲染(Foveated rendering)技术。


分区渲染的MRS

去年5月,Nvidia在自家针对VR的开发者套件GameWorks VR中加入了MRS技术。这项技术使得针对VR的渲染不再是将整个画面以相同的分辨率进行渲染,而是分成了几个不同的区域。

 

 

画面的中央,也就是人眼在VR中看到的主要区域,也是画面没有畸变的地方,会以完整的高分辨率进行渲染;而画面的边缘则以更低质量进行渲染,再加上边缘的像素经过变形后的损失,可以节省25%-50%的像素,理论上可以提升一倍的渲染效果。

使用Nvidia Maxwell架构的显卡,包括GeForce Titan X和GTX 900系列,目前都支持这一技术。

在接受采访时,Nvidia全球副总裁、中国区总经理张建中也对这项技术进行了解释:

传统的眼镜都是鱼眼的,传统的GPU渲染的是长方形,长方形变成鱼眼,用传统的方法去渲染是不行的。所以我们想了一个比较聪明的方法,我们把视觉图形分成九块,用不同的方式去渲染,这样把效率提高大概50%左右。结果就相当于以前可能一秒钟渲染90帧,现在可以做到140帧左右,这样你就可以看到更高清晰度。

焦点渲染

国内创业公司七鑫易维目前正与Nvidia合作,在MRS技术的基础之上,使用眼球追踪技术进一步开发出焦点渲染技术(也叫注视点渲染),从而进一步缩小高清渲染画面的区域。

据七鑫易维CEO黄通兵介绍,焦点渲染通过近红外传感器对人的眼球进行追踪,判断人眼的注视点,只对注视点区域进行高清渲染,而且这个区域会随着注视点的变化而变化。
 

 

上图是记者在试用注视点渲染技术时电脑屏幕显示的画面,可以看到记者的视线焦点停留在小屋上时,画面中只有小屋是清晰的,而周围一大片区域则是模糊的。但是当你戴着头盔看时,几乎分辨不出和没有使用这项技术的画面的区别。

官方表示这个方案可以在保证用户体验的情况下,将渲染像素降低到MRS方案的10%左右,最终适配VR设备的PC比例可以提升至30%。

眼球追踪会对整个画面渲染带来延迟,黄通兵表示他们解决了这个问题,他表示目前追踪技术最高可以做到380Hz的刷新率,如果以通常提供的220Hz计算,会给渲染带来5ms的延时。但是,由于使用焦点渲染,GPU的负担减轻,使得其渲染延时可以降低至5ms,最终使得整体延时仍然低于20ms的坎。

这项技术也仍有一些问题需要解决,包括针对戴眼镜的用户,眼镜会影响眼球追踪的效果;还有HTC Vive这类产品使用的菲涅尔透镜,其同心圆也会干扰到信号。

国际上亦有厂商在开发类似的技术,包括Tobii、SMI、FOVE和Eyefluence,但是这个领域还没有形成标准。

目前七鑫易维除了跟Nvidia合作外,也在跟高通、HTC、Oculus以及国内VR头显厂商合作研究这项技术,具体的产品面世时间仍有待确定,但据悉高通的一体机方案会重点推这个技术,国内的大朋和3Glasses也很积极。

关键字:GPU  NVIDIA 引用地址:VR设备的GPU不够好?Nvidia:看我哒

上一篇:押宝VR一体机一定赢,高通有啥大招
下一篇:终于不再亏钱,看哪些产品在帮索尼赚钱

推荐阅读最新更新时间:2024-05-03 00:22

传联发科获 AMD GPU 授权
    据 Fudzilla 网站在 MWC 上获悉,联发科已获得 AMD 在影像处理晶片技术上的授权,双方将在 SoC的 GPU 上展会合作,未来联发科的处理器很有可能采用 AMD Radeon GPU。 AMD 公司在行动装置处理器市场发展得并不好,但是在影像处理器技术上还是深厚的技术积累。2009 年 AMD 对于行动装置晶片 GPU 市场并不看好,将这个业务作价 6,500 万美元卖给了高通公司,后者接下AMD 这个包袱后在此基础上开发了 Adreno GPU,应用晓龙处理器中大获成功。 目前行动装置 GPU 市场的业务模式主要分为两类,一是自行研发,包括高通和 NIVDIA,二是使用协力厂商公司的授权
[手机便携]
VR技术纳入助产士训练可降低孕妇和婴儿的死亡率
将VR纳入助产士训练可以降低孕妇和婴儿的死亡率,减少医疗事故发生率。根据约翰霍普金斯医学院提交给美国疾病预防控制中心的数据。下面就随医疗电子小编一起来了解一下相关内容吧。 产科学生可以在“安全、可重复的VR环境之下”,处理“生死攸关的任务”。 日前,医学院产科学生参加了澳大利亚纽卡斯尔大学举行的接生考试,而且是在虚拟现实中进行。 黑匣获悉,澳大利亚纽卡斯尔大学已开展一个VR项目——模拟真实产房。项目负责人之一JessicaWilliams表示,该项目可以在PC、iOS和安卓端上运行,使产科学生在“安全、可重复的VR环境之下”处理“生死攸关的任务”。 该项目旨在帮助毕业生适应从教育向真实工作环境转变的过渡,提高他们对工作的信心。目
[医疗电子]
<font color='red'>VR</font>技术纳入助产士训练可降低孕妇和婴儿的死亡率
Imagination全新BXS GPU助力德州仪器汽车处理器系列产品实现先进图形处理功能
英国伦敦,2020年11月4日– Imagination Technologies 宣布其 BXS-4-64 GPU 将用于 德州仪器 (TI)Jacinto™处理器系列产品中,以支持汽车应用。得益于针对汽车市场需求所进行的定制化设计,BXS可以助力环绕视图技术等汽车图形处理应用实现高达60%的性能提升。 IMG BXS是首款增加了安全功能且设计流程符合ISO 26262标准的XS GPU知识产权(IP) 产品,可以帮助客户获得ISO 26262认证。它采用了Imagination全新的B系列多核架构,具有更高的性能和安全功能。除了硬件虚拟化等现有功能外,该架构还包含了全新的功能和安全机制,例如分块区域保护(Tile Regi
[汽车电子]
NVIDIA Tegra 2芯片打造前所未有的超级电话
  2011年3月16日,英伟达™(NVIDIA®)公司在北京举办了一场小型媒体活动,介绍了英伟达™图睿™(NVIDIA® Tegra™)2芯片产品。这款被称为全球首款移动“超级芯片”的处理器拥有强劲的性能和,它能让智能手机拥有前所未有的多媒体体验。 英伟达图睿2引领超级电话风潮   英伟达将采用Tegra 2超级芯片的手机称为“超级电话”,由于采用性能强劲的多核CPU处理器以及处理速度如风驰电掣一般且功耗超低的GPU,这些“超级电话”可提供绝佳的视频与游戏体验,超越了现有的智能手机。 英伟达图睿2特性   根据英伟达介绍,Tegra 2芯片采用异构多核技术,双核Cortex-A9架构的CPU主频高达1GHz,而8
[手机便携]
英伟达跨界医疗AI 首先从医学及卫生保健领域入手
自家主流产品做得风生水起的 英伟达 目前打起了医疗 AI 的算盘,而面对似乎从人人都追的医疗AI风口退却的时候,英伟达仍然要去试试自己并不擅长的跨界领域,其目的究竟是要赶上风口的末班车,还是要利用自身的技术实力去真正撬动医疗领域呢? 1 从医学及卫生保健领域入手 芯片制造商英伟达针对特定的先进学习算法而开发的专用硬件目前正在驱动着人工智能的向前蓬勃地发展。 目前,它又锁定了下一个巨大市场——医学及卫生保健领域。 医学影像研究正在以让人惊讶的速度发展,英伟达在医院看到了很多的供应商,他们正在构想人工智能方面的新应用。 一种被称为“ 深度学习 ”的 机器学习 技术正在应用于医学影像和医疗数据的筛选。 而大概是受大脑中神经元工作机
[医疗电子]
<font color='red'>英伟达</font>跨界医疗AI 首先从医学及卫生保健领域入手
ARM联合创始人:若英伟达收购arm将会导致灾难性后果
ARM联合创始人Hermann Hauser对BBC表示,他认为英国政府应该进行干预,如果将ARM卖给英伟达将是灾难性的。 Hermann Hauser是CPU公司(Cambridge Processing Unit)的创始人之一,1979年,CPU公司改名为Acorn计算机公司。Acorn便是ARM的前身。 Hermann Hauser表示,英国政府应该帮助ARM重新成为一家独立的英国企业。 ARM突破性的IP商业模式,打造了一个基于ARM体系的全球生态链,几乎所有移动芯片均都依赖于ARM设计的架构。2016年,软银以320亿美元的价格收购了ARM,政府称这是对脱欧后的英国投下的信任票。 但Hauser博士
[嵌入式]
ARM联合创始人:若<font color='red'>英伟达</font>收购arm将会导致灾难性后果
英国监管机构就VR中的儿童安全问题质疑Meta
Meta在其儿童安全方面面临着更多的审查。英国信息专员办公室 (ICO) 在一份声明中告诉《卫报》,它正计划与Meta就Quest 2 VR头显是否符合最近制定的儿童守则进行进一步讨论。    英国监管机构希望确定Meta的头显和VR服务是否足以保护儿童的隐私和数据,担心孩子们能很容易登录 Meta的平台,并出现虐待、骚扰和露骨内容的风险。 据报道,Meta的平台需要Facebook帐户(用户至少13岁)才能使用,但这并不意味着合理的年龄检查,孩子们只需在“我已年满13岁”选项上打勾就可以进入。    IT之家了解到,Meta的一位发言人告诉《卫报》,该公司致力于构建尊重儿童的平台,并“相信”其VR硬件符合要求。该代表强调,
[物联网]
英国监管机构就<font color='red'>VR</font>中的儿童安全问题质疑Meta
国产GPU龙头宣布AI算力产品研发成功
3月12日晚间国内GPU厂商长沙景嘉微电子股份有限公司(以下简称“景嘉微”)发布公告,其面向 AI 训练、AI 推理、 科学计算等应用领域的景宏系列高性能智算模块及整机产品(以下简称“景宏系列”)研发成功,并将尽快面向市场推广。 13日开盘,景嘉微股价大涨,收盘报87.41元/股,涨12.24%。 公告显示,景宏系列是景嘉微公司推出的面向 AI 训练、AI 推理、科学计算等应用领域的高性能智算模块及整机产品,支持 INT8、FP16、FP32、FP64 等混合精度运算,支持全新的多卡互联技术进行算力扩展,适配国内外主流 CPU、操作系统及服务器 厂商,能够支持当前主流的计算生态、深度学习框架和算法模型库,大幅缩短用户适配验证周期。
[半导体设计/制造]
小广播
最新嵌入式文章
何立民专栏 单片机及嵌入式宝典

北京航空航天大学教授,20余年来致力于单片机与嵌入式系统推广工作。

换一换 更多 相关热搜器件
电子工程世界版权所有 京B2-20211791 京ICP备10001474号-1 电信业务审批[2006]字第258号函 京公网安备 11010802033920号 Copyright © 2005-2024 EEWORLD.com.cn, Inc. All rights reserved