谷歌正在使为虚拟现实制作3d音频变得更容易

谷歌宣布推出一款名为共振音频(resonanceaudio)的沉浸式音频软件开发工具包。共振音频是一种在360度视频、VR和AR中为高保真3D声音带来可扩展性能的工具,可在移动和桌面上使用,并兼容多种平台,从Unity等游戏引擎到web。它甚至可以作为一个独立的VST插件,这意味着它可以在多个音频创建程序中使用。...

谷歌宣布推出一款名为共振音频(resonanceaudio)的沉浸式音频软件开发工具包。共振音频是一种在360度视频、VR和AR中为高保真3D声音带来可扩展性能的工具,可在移动和桌面上使用,并兼容多种平台,从Unity等游戏引擎到web。它甚至可以作为一个独立的VST插件,这意味着它可以在多个音频创建程序中使用。

在过去,在虚拟现实中提供高质量的3D音频一直是一个挑战,因为音频是交互式的-基于对象的运动和用户的运动而变化。这对硬件来说是一个负担,需要大量的实时渲染,但谷歌表示,共振音频足够轻,即使在**上也可以通过虚拟现实提供高保真的3D音频。

当人们沉浸在虚拟世界中时,3D音频是一个重要的可信因素。想一想,即使是在你的街区散步,也会有数百种声音给你一种空间感:一只鸟在你头顶上唧唧喳喳地叫着,一辆汽车驶近,从你身边疾驰而过,然后在远处拖着走,当你踩到一根树枝时,从下面传来的裂缝,当风吹动树叶时,树叶在你腿上沙沙作响。如果所有这些噪音都是从左右耳水平向你袭来,那就太奇怪了,不是吗?这就是3D音频解决的问题。

为了做到这一点,谷歌的共振音频使用了一种称为环境声学的全球环绕声技术,并结合了与头部相关的传递函数(HTRFs),这是一种将传入的声音映射到头部的滤波器。它们一起欺骗你的大脑给声音分配位置和距离,即使戴着耳机之类的东西,耳机只有两个方向的音频输出。它通过复制我们大脑在现实生活中感知和放置声音的方法来做到这一点:声音到达左右耳所需的时间差,我们耳朵之间的音量差,以及我们耳朵之间声音频率的变化。所有这些左右耳听到声音的差异,让我们在现实生活中能够判断距离、高度以及声音的来源。

共振音频使用“高度优化的数字信号处理算法”基于环境声学,将允许数百个声音空间化,一次,而不损害质量。它用来实现这一点的一些技巧是在接近物体时自动渲染近场效果,并且在统一的情况下,预渲染与物体材料(例如大理石柱或木屋内部)声学特性相匹配的CPU重混响。

007Ys3FFgy1grqi1yredng60hs0b4n2n02 007Ys3FFgy1grqi4nn6h7g60hs0b4n2n02

谷歌表示,共振音频也比传统的3D空间化功能更强大,因为它不仅可以控制声音来自何处,还可以控制声音如何从原点传播出去。在下面的例子中,共振音频是调整吉他的声音方向,声音发出的形状,以及声音传播的宽度。这意味着如果吉他是弹的,如果你站在它前面或后面,如果你面对它或转过身去,它的声音应该是不同的。

007Ys3FFgy1grqi4q2zgmg60hs0a00xf02 007Ys3FFgy1grqi58vy12g60hs0a00xf02

如果共振音频被证明是处理器友好,因为它声称是,这可能意味着更广泛地采用三维音频去随着不断增长的虚拟现实和360度体验库。至少,从Android到iOS再到Linux,它可以在每一个平台上使用,这意味着它对游戏开发者、音频工程师、音乐家等都是一个很有吸引力的选择。如果你对自己的共振音频感兴趣,可以在谷歌的开发者网站上找到。

  • 发表于 2021-06-22 03:30
  • 阅读 ( 143 )
  • 分类:互联网

你可能感兴趣的文章

这个隐藏的Windows10功能可以给你虚拟环绕声

... 微软正在尝试,这总是一件好事。然而,通过WindowsSonic,我们又看到了微软试图将客厅控制台世界与Windows融合的另一个尝试。我认为,推动这一进程的任何努力都是朝着正确...

  • 发布于 2021-03-13 04:24
  • 阅读 ( 256 )

谷歌5大最佳替代产品

...。它提供了一个包含数千个3D对象的库的免费访问,用于虚拟现实和增强现实应用程序,自2017年成立以来一直很流行。 ...

  • 发布于 2021-03-28 14:18
  • 阅读 ( 235 )

如何将智能手机的虚拟现实体验投射到电视上

多亏了智能**,虚拟现实在过去一两年里取得了长足的进步。但虚拟现实真的只有在实际使用它的人才酷。想让你的朋友看到你看到的吗?你可以和周围的人分享你的屏幕,只要你有Chromecast(Android设备)或Apple TV(iOS设备)。 ...

  • 发布于 2021-04-08 08:18
  • 阅读 ( 210 )

试图在公共场所增强音频真实感的初创公司

...简单。最复杂的是产生所有音频的引擎。Spatial的目标是使为空间设计定制声音变得容易,并且使声音以生成的方式发生,而不是在环路或轨道上。它有三个主要部分。 首先,还有SpatialStudio,一个Mac应用程序,它是一种逻辑和虚...

  • 发布于 2021-04-16 04:44
  • 阅读 ( 131 )

3d音频可能是下一个大播客趋势

...来越多的是,音频本身,以及用来捕捉音频的录音技术,正在成为卖点。 今天,iHeart Media宣布,它正在投资双耳音频,也称为3D音频,它可以有效地将听众放在录音室中,让他们感觉周围发生了什么。听一个3D音频的...

  • 发布于 2021-04-16 08:47
  • 阅读 ( 150 )

谷歌的works with Carboard计划承诺为每个人提供“很棒的虚拟现实”

如今,谷歌对虚拟现实和自己的纸板平台越来越重视。在一篇博文中,该公司宣布推出“与谷歌纸板一起工作”的认证计划。它旨在保证越来越多的廉价虚拟现实耳机(模仿谷歌自己的)与谷歌Play中的虚拟现实应用程序之间的...

  • 发布于 2021-04-29 13:57
  • 阅读 ( 132 )

googlejump是一个虚拟现实电影制作的完整生态系统

...的一个摄像设备,但它远不止这些。Jump是一个用于创建虚拟现实视频的完整生态系统,它听起来像是一种可以帮助VR腾飞的东西,它使虚拟现实更易于创建和消费。
 正如谷歌产品副总裁克莱·巴沃尔(Clay Bavor)所说,详细介...

  • 发布于 2021-04-30 01:39
  • 阅读 ( 154 )

这家初创公司正在弥合当今网络和未来虚拟现实之间的鸿沟

...身于这群知名品牌的行列。”。这家年轻的公司希望能在虚拟现实和增强现实的热潮中脱颖而出,成为家喻户晓的品牌。
 
 
 微软并不是唯一一家使用Sketchfab技术将3D技术带给大众的公司。Facebook正在为自己的虚拟现实...

  • 发布于 2021-04-30 09:57
  • 阅读 ( 141 )

gopro现在正在出售其疯狂的16摄像头虚拟现实设备

...oPro在谷歌I/O大会上宣布的这款狂野、庞然大物的16摄像头虚拟现实装备正式命名为“奥德赛”,现在可以购买。但并不是每个人都适合。它的价格是15000美元,只有“专业内容创作者和**人”才能购买——在他们提交申请之后。&#...

  • 发布于 2021-05-01 07:19
  • 阅读 ( 124 )

谷歌探戈项目背后的革命性芯片制造商现在正在为dji的自主无人机提供动力

...了10年后,突然准备在几个主要市场(从无人机到**再到虚拟现实)的交汇处成为领导者,这些市场正在寻找实现廉价、省电的计算机视觉的方法。
 
 
 站在新计算范式的前沿
 “这家公司成立于2005年底,所以我们酝...

  • 发布于 2021-05-03 20:52
  • 阅读 ( 180 )
惰性释然
惰性释然

0 篇文章

相关推荐