虚拟世界的3D声音源

发布者:rockstar6最新更新时间:2022-11-16 来源: elecfans关键字:虚拟世界  3D  声音 手机看文章 扫描二维码
随时随地手机看文章

世界在不断变化。这种不断发展的状态意味着我们与世界、设备和 人们也在发生变化。除了利润动机之外,还有两股力量在支配这种变化。一是技术 正在推动我们前进,并通过必备的设备和应用程序吸引我们。另一个驱动力是 大流行驱动的对健康的关注。


随着人们有更多的时间去娱乐,沉浸式技术有机会取得进展。虚拟现实和增强现实耳机现在可从多家制造商处轻松获得。开发工具 让业余爱好者和专业人士渲染世界和场景景观。虽然视觉效果得到了所有的媒体,但音频是 也向前迈进。


在公认的五种感官中,声音可能是最受赞赏的。无论是来自大自然的丰富, 管弦乐队的饱满,或精神音乐的激荡,听起来与任何其他意义一样深刻 在情感和生理上影响我们。


到达这里

我们今天之所以存在,很大程度上是因为我们专注的倾听能力。例如,我们的祖先打猎 会使用声音来跟踪和寻找家庭或村庄的食物。使用声音定位潜在的致命来源 以3D,身临其境的方式使避免捕食者成为可能。我们可以感觉到某物在哪里,它有多远 是,以及它接近的速度有多快。


沉浸式音频是迄今为止最先进的音频处理和传输系统。要做到正确,需要音频 战略性地处理和一系列特征明确且经过校准的低音扬声器、扬声器和高音扬声器 放置以提供动态的全频谱聆听感觉。


尽管这样的实现已经超出了过去的普通发烧友,但电影院和 表演场所多年来一直在利用这项技术。像所有开创性技术一样,它 最终找到了通往世界其他地方的路。


现代娱乐系统利用许多专用过滤器和动态处理来创建经济实惠的产品 适合更多预算的实施。如今,家庭影院比以往任何时候都多,尤其是在大流行期间 世界,沉浸式音频肯定会出现在各地的游戏和家庭影院位置。


虽然立体声允许基本的环绕声功能,但最流行的环绕声和3D音频正在使用 今天是杜比数字 5.1 科技。这些系统被称为杜比 数字、杜比定向逻辑 II、DTS、SDDS 和 THX。它们都具有六扬声器配置(总共五个 带宽,一个低音炮)包围听者( 图1 )。这些环绕声 技术首先用于电影院,这有助于推进这些系统并使它们更多 具有成本效益,可供大众使用。

5.1 家庭影院设置。配有低音炮、中置扬声器、2 个前置扬声器和 2 个后置扬声器。

  • 图1: 环绕声 5.1 使用六个填充范围扬声器,放置在特定的 位置,以便音频处理工程师可以混合在空间上似乎在 听者。这里没有显示的是低音扬声器,因为它通常可以放置在任何地方。(来源:泽恩 Liew/Shutterstock.com)*

多个扬声器由独特的单个音频流驱动,以便虚拟声音的感知位置 环绕着听众。在这里,后左声道和右声道用于空间深度。左前方、右前方、 中置声道用于横向深度,单个低音炮分配低频低音 整个房间。


虽然非常适合位于收听区(或沙发)中央的单个听众,但每个听众都会 在其他任何地方体验细微的差异。相对均匀的声音会让大家在 聆听区体验动态音频。更重要的是,唱片艺术家正在宣传他们的最新 CD 作为 通过提供 5.1 环绕声轨道来沉浸式。


有趣的是,中前声道针对语音范围信号进行了优化。这有助于听众辨别 沉浸在 3D 声音中的对话。随着声音的带宽和饱满度变得流行,能够 区分语音变得更具挑战性,因此中置通道滤波和放大可以使对话 更容易理解。


增加一个后中央声道将规格提高到 6.1 环绕声( 图 2 ),7.1标准系统取消了后中央通道,但增加了左右中通道 ( 图3 )。

6.1 家庭影院设置。配备低音炮、中置扬声器、后置中置扬声器、2 个前置扬声器和 2 个侧扬声器。

  • 图2: 环绕声 6.1 提供横向扬声器以增强音频 随着音频对象从前移动到另一侧和向后移动而运动。同样,低音扬声器的位置是任意的。这里 这与低音无关。(来源:Zern Liew/Shutterstock.com)*

7.1环绕声技术增加了更多的扬声器和独特的声道。可以是 2.5-D 立方体或多边形 Create 可以扩展到战略位置的更多扬声器、高音扬声器和低音扬声器,让听众沉浸在 2D 中 和有限的 3D 音频( 图 3 )。直接在顶部或底部的东西可能有些 通过信号处理近似,但除非确认扬声器高于和 下面。

7.1 家庭影院设置。配有低音炮、中置扬声器、2 个前置扬声器、2 个侧扬声器和 2 个后置扬声器。

  • 图3: 以较小角度放置更多扬声器有助于消除音频 可能发生的热点,尤其是在轨道未正确混合或处理的情况下,或者如果音频 转换器无法正确处理环绕声。(来源:Zern Liew/Shutterstock.com)*

我们应该注意,来自立体声捕获的源转换器可以处理立体声音频信号以创建 合成多扬声器环绕声信号。这演示了数字信号处理如何分离 源位置主要来自立体声源。最好的解决方案是在3D麦克风中捕获声音 配置,然后以相同的 3D 扬声器配置播放。然而,这是繁琐和困难的, 当信号处理做出良好的近似时,大多数不会达到这些水平。


这始终是最好的方法吗?信号处理能否用更少的声音欺骗我们敏锐发展的听觉 扬声器,还是我们会继续创造声音的墙壁和天花板?

年轻的吉他手和扬声器3D背景

  • 图4: 越多越好。表演者习惯了过高的 扬声器和放大器。在大型户外环境中,这可能是必要的。但是你真的想要墙吗 声音?或者在某些时候,您是否意识到更好的声音比更大的声音更好?(资料来源: Tommistock/Shutterstock.com)*

面向对象的音频

沉浸式音频的最新实现来自杜比全景声(Dolby Atmos),专为剧院设计 应用。到目前为止,已经对近5,000个剧院进行了改造,以使用64个扬声器来利用这一点 最新的音频聆听体验。因此,它支持多达 128 个通道的广泛阵列,并且可以 配备全带宽、低频低音扬声器和低音炮,以及高频高音扬声器。


与常规音频不同,Atmos(以及竞争对手索尼) 360标准)使用音频对象的概念。视听接收器 (AVR) 将自动知道 扬声器的数量、类型和位置,并对每个音频对象的频谱进行处理 化妆、振幅位置、速度和方向。但是,它不仅仅是音频。对象包含元数据 这有助于对象音频呈现器 (OAR) 使对象处于运动状态。在 128 个通道中,有 10 个用于 环境词干和其他 118 个可用于音频对象。


并非每个通道都是扬声器。声道信息对应对象,对象音频可处理和 与其他对象音频组合,以适当的级别定向到每个扬声器。这取决于 AVR 使用元数据实时处理信号,以执行声音的实时混合和分配。


可以想象,它不像立体声,您只需放置几个扬声器,然后就可以 听。对于 Atmos 和许多环绕声和 3D 音响系统,必须放置扬声器,然后校准为 音景的准确部分。普通家庭不会使用所有128个频道。标准似乎是一个 用于家庭影院实施的 34 扬声器布置。


Atmos不是全新的。它于2012年在洛杉矶的一家剧院首次用于迪士尼电影首映式。 从那时起,大型剧院、IMAX、天文馆、音乐剧、戏剧和其他声音应用推动了它的发展。 成为用于为新电影和活动捕获音频的事实标准。Atmos还使用天花板扬声器来 创建完整的声音半球,使其更容易实时处理,同时提供来自上方的声音。


曾经,Atmos对于普通发烧友来说过于精致和昂贵,但现在它正在进入 对于有空间和预算让他们的朋友赞叹不已的爱好者来说,这是拥有的领域。它也相当高 在极客指数上。


如果您已经为其他环绕声技术咬紧牙关,则可以获得杜比全景声转换器 并仍然使用您现有的扬声器和放大器。但是,您将需要更多,包括天花板扬声器。 转换器将采用杜比 5.1 并通过 17 扬声器环绕声 7.4.1 实现进行转换。


值得注意的是,环绕扬声器的另一种方法是条形音箱。条形音箱技术 各种形式越来越受欢迎。降低成本、设置简单、功耗更低、 更少的电缆和更小的尺寸推动了这项技术的发展,即使我们向前发展也是如此。


相控阵垂直条形音箱已经证明了它们能够很好地模拟完整的音频频谱 清晰和分离。使用它们的音乐家会告诉您带有六英寸扬声器的条形音箱柱 为低音炮应用提供 18 英寸扬声器的声音清晰度。这应该引起一些人的注意。作为一个 因此,水平条形音箱和基于条形音箱的混合系统(包括远程扬声器)受到许多人的欢迎 家庭影院和工作室。


上下增强了这一点,侧向扬声器使声音反射到墙壁和天花板上 表面,似乎来自听众的上方或后面。现代特斯拉Model 3使用前部 条形音箱技术作为其 15 扬声器音频系统的一部分,以吹捧环绕声和身临其境的音频功能。转 关闭 Model 3 的后置扬声器,并通过信号处理和混响进入沉浸式音频模式,以显示其 能力。那些尝试过这种咒骂声音的人是从后面传来的。反馈好坏参半,很多人不喜欢 效果。评论家赞扬和批评这项技术,许多评论家提到不同的 音乐类型有效,不适用于条形音箱风格的沉浸式实现。这是有道理的,因为 再现的质量将取决于录音工程师的混音技术。这里的进步将意味着 精确的上下沉浸式声音技术几乎无需落地扬声器即可实现。


捕获与渲染

沉浸式视频体验(如游戏)在大多数情况下使用创建的环境。这些是 3D 结构 具有表面渲染和指定的物理属性。可以捕获和数字化的真实视频条带 拼接在一起以形成包含上方和下方图像的全景视图。


身临其境的体验(例如在国家公园中漫步)可以集成丰富的视觉效果,并且可以 通过预先录制的剪辑的组合合成或创建。它们可以以3D声音进行音频捕获 系统并用作沉浸式体验的一部分。就像由头部跟踪控制的视频一样,音频必须 也可以通过头部跟踪控制。例如,面对潺潺的小溪听起来与面对潺潺的小溪大不相同。 远离它,如果声音没有跟踪,就会缺乏身临其境的体验。


幸运的是,您不必发明自己的 3D 音频捕获来达到身临其境的目的。音频领导者喜欢 Sennheiser使用分段轴和数字工具捕捉专业真正的全向麦克风 高度定向的声音( 图5 )。AMBEO VR 麦克风包含多个易感宽带 环绕声配置中的麦克风元件。DearVR微处理软件可以渲染 定向音频以馈送标准环绕声配置。

年轻的吉他手和扬声器3D背景

  • 图5: 沉浸式音频捕捉技术,如Sennheiser AMBEO VR 麦克风允许数字音频引擎根据极坐标大小和方向呈现音景。 数字求和可以创建组合不同距离的多个声源的复合音频。 (来源:森海塞尔)*

为此,音频引擎需要知道您的头部方向和运动。使用耳机,这很容易 今天的标准。头部跟踪内置于视频渲染。但是如何创建一个身临其境的头部 使用仅限于两只耳朵的耳机的基于位置的音频系统?微型扬声器可以放置在 耳朵周围的耳机,模仿环绕声体验。对于大多数应用,立体声就足够了, 但它不会与真实的环绕声处于同一水平。

非娱乐应用

虽然大多数沉浸式音频和视频技术将用于娱乐,但也有专业的 使用。例如,产品设计工程可以从沉浸式技术(视频和音频)中受益。从 从视频角度来看,可以虚拟地构建、渲染和 检查。像喷气发动机这样的沉浸式生成组件可以被构造、推入和检查 查看齿轮和涡轮机是否对齐。世界另一端的维修技术人员可以通过 工厂专家沉浸在制造环境中。


即使是沉浸式音频在工程应用中也很有帮助。设计汽车的工程团队可以倾听 到发动机和变速箱噪声的渲染模拟。内部环境控制,如气流, 振动和振荡可以从虚拟设计中提取。窗户可以设计和测试为: 消除当我们以正确的方式摇下车窗时仍然发生在新车上的砰砰声振荡 以合适的速度定位。


在所有情况下,沉浸式体验都包括音频。但是,并非每种情况都需要环绕声,并且 模拟环绕声可能就足够了,至少在有人解决在 双耳耳机。


关键字:虚拟世界  3D  声音 引用地址:虚拟世界的3D声音源

上一篇:构建一个基于Arduino系统的吉他调音器
下一篇:如何构建一个10W的音频放大器

推荐阅读最新更新时间:2024-11-13 11:53

基于EFM32的主动快门式3D眼镜解决方案
3D电影的兴起、3D电视的热卖、央视3D试验频道的上线,进一步刺激了2012年3D产业链的集体勃发。作为观看立体影像的重要配件产品,3D眼镜也随之成为一块大蛋糕,引发了强劲的市场效应。 3D眼镜主要分为色差式、偏光式和主动式3种类型。其中主动快门式3D眼镜由于观看效果最为出色、容易实现全高清和蓝光3D片源资源多等特点,使其成为了市场首选。 目前主动快门式3D眼镜主要是通过红外信号实现和显示画面的同步,常用的接收红外信号的方法有: 1.一体化红外接收头 目前有很多厂家把光电二极管和滤波放大电路集成到一体化接收头中,这种接收头具有很小的体积,广泛应用于红外遥控器的接收电路中。但是由于其接收信号的时间分辨率很低,不能区分出红外信
[单片机]
基于EFM32的主动快门式<font color='red'>3D</font>眼镜解决方案
华晶科3D感测深度芯片CES亮相 搭上未来大趋势
台湾数碼影像方案专家华晶科(股票代號3059) 在今年CES消费性电子展发表最新3D感测深度芯片AL6100,展现深度运算技术实力,其高精确度、低耗电表现以及成本优势,吸引不少客户注目及洽谈合作。 ↑华晶科技于美国CES现场,展示3D感测技术,右图为实际影像,左图为现场侦测的景深图,可以清楚侦测人的外形、桌子的桌角,甚至小到手指头都可以实时侦测 华晶科表示,今年CES的焦点在人工智能(AI)、自驾车、智能家庭(如:智能助理、扫地机器人)、AR/VR几个领域,机器视觉则是不同产品项的共通技术趋势,在不同类型的产品里都加入了相机,相机的成像不再只是让人眼看,而是进一步让机器判读、增加智能。AL6100芯片提供了高分辨率实时(r
[家用电子]
面对大陆攻势 三星海力士强化3D NAND投资
    据韩国经济报导,大陆半导体产业在政府的强力支援下,清华紫光与武汉新芯采行攻击性投资策略,迫使南韩、日本、美国等主要半导体业者也纷纷强化投资。 市调业者DRAM eXchange表示,全球半导体市场中,NAND Flash事业从2011~2016年以年均复合成长率(CARG)47%的速度成长;清华紫光以新成立的长江存储进行武汉新芯的股权收购,成立长江存储科技有限责任公司,未来可能引发NAND Flash市场版图变化。 清华紫光拥有清华大学的人脉,在社会上拥有一定的影响力,武汉新芯拥有技术方面的竞争力,两者合并将为大陆记忆体产业发展开启新的局面,同时也会对全球记忆体市场带来莫大影响。 先前武汉新芯与美国材料半导体业者
[手机便携]
存储器大厂3D NAND良率升 NAND Flash恐过剩
  受到部份零组件缺货影响,ODM/OEM厂2017年第四季PC出货不如预期,导致固态硬碟(SSD)需求急降,价格也一路走跌,2018年上半年 NAND  Flash市场供过于求已难避免。市调机构集邦预期,三星、东芝等 存储器 大厂已拟定3D  NAND 扩产计画,新产能将在2019年后开出,届时 NAND  Flash市场将供过于求。下面就随网络通信小编一起来了解一下相关内容吧。   SSD价格在2017年11月开始走跌,原因在于市场需求明显转淡,2.5吋SATA 3介面120GB TLC SSD价格由40美元跌到年初的32美元,240GB TLC SSD价格则由70美元跌至60美元。但由市场供需来看,上半年一向是传统淡季,但
[网络通信]
汽车挡风玻璃的神奇变身:3D 显示屏黑科技来袭
据 The Verge 报道,Distance Technologies 发布了一款 3D 挡风玻璃抬头显示器原型机,此原型机可将汽车挡风玻璃化为全彩色 3D 抬头显示器。 该原型机借助带有视差障板的 LCD 面板,以高效且精准之法将清晰图像投射至挡风玻璃。这一独特技术,不但突破了传统抬头显示器显示区域的局限,还极大拓展了可视范围,为驾驶者呈上更宽广、清晰的视觉享受。 此外,此原型机在功能上亦有重大创新。除基础的图像投射功能外,还融入了先进的语音和手势操控技术。这意味着驾驶者于驾驶时,无需因操作复杂按键或触摸屏而分神,仅需简单的语音指令或自然的手势动作,便能轻松与显示器交互,获取所需信息或完成相应操作,进一步提高了驾驶的安
[汽车电子]
行业纵览 3D打印汽车时代还有多远
  大家还记得2014国际制造技术展上的那台Strati吗?作为全球首款3D打印汽车,Strati在当时可谓是赚足了眼球。当人们认为这只是好事者整出的模型噱头时,推出这款概念车的美国Local Motors公司又有消息透露:将在2016年正式销售3D打印汽车,而且许多信息还有鼻子有眼儿,全车75%的组件靠3D打印,而且采用了纯电动动力,起售价为5.3万美元……   这个消息不由得让人回想起当年的特斯拉,不也是在全球认为“纯电动还早着呢”的情况下大红大紫吗?这是不是意味着,3D打印汽车真的离我们不远了?   3D打印技术早已不再神秘。它最大的好处是可以快速成型——以电脑中的数字模型为依据,通过可粘合材料,通过逐层喷射(打印)的方式
[嵌入式]
科学家开发出治疗冠状动脉疾病的3D打印定制血管方法
  近日,底特律韦恩州立大学的研究人员开发出了一种用于创建可定制血管的 3D打印 方法。“环堆叠方法”是治疗冠状动脉疾病的新方法。下面就随医疗电子小编一起来了解一下相关内容吧。 科学家开发出治疗冠状动脉疾病的3D打印定制血管方法   据了解,在世界各地,心脏病是男性和女性死亡的主要原因。所以,针对心脏病的治疗和预防措施的发展是科学家的首要任务,而这对于科学家尝试如何实现这些目标几乎是没有任何限制的。例如,底特律韦恩州立大学开发的一种新的医疗技术,尝试以新的和不寻常的方式解决心脏病: 3D打印 机。   由Mai Lam博士领导的研究小组已经开发出一种使用 3D打印 机来设计可扩展和可定制的血管移植物的方法,这一突破可能导致
[医疗电子]
MIT携手斯坦福打造集成处理器和内存的3D芯片
为了追赶摩尔定律,麻省理工与斯坦福两所大学的计算机科学家和电气工程师们,携手开发出了一种集成了内存和处理器、并采用碳纳米管线来连接的 3D 计算芯片。该团队制造了一台小规模的碳纳米管(CNT)计算机,它能够运行程序、简单的多任务操作系统、以及执行 MIPS 指令。项目领导人 Max Shulaker 相信,该技术能够克服逻辑电路和内存之间的通讯瓶颈。 CNT 芯片渲染图,各层之间通过纳米导线来通讯。 当前工程师们所面临的一个问题,就是日益增长的处理器(或存储)性能、与不断往返的大量数据传输之间的矛盾。即使当前最快的 CPU 和 RAM,仍受制于传统的并行总线架构。 而斯坦福/麻省理工研究团队的 3D 芯片,则交错布置
[半导体设计/制造]
MIT携手斯坦福打造集成处理器和内存的<font color='red'>3D</font>芯片
小广播
最新嵌入式文章
何立民专栏 单片机及嵌入式宝典

北京航空航天大学教授,20余年来致力于单片机与嵌入式系统推广工作。

换一换 更多 相关热搜器件

 
EEWorld订阅号

 
EEWorld服务号

 
汽车开发圈

电子工程世界版权所有 京B2-20211791 京ICP备10001474号-1 电信业务审批[2006]字第258号函 京公网安备 11010802033920号 Copyright © 2005-2024 EEWORLD.com.cn, Inc. All rights reserved