您正在使用IE低版浏览器,为了您的雷峰网账号安全和更好的产品体验,强烈建议使用更快更安全的浏览器
此为临时链接,仅用于文章预览,将在时失效
新鲜 正文
发私信给亚萌
发送

2

为了让你在网页VR听得爽,谷歌又发布并开源新系统Omnitone

本文作者: 亚萌 2016-07-26 15:03
导语:等到VR应用的钟摆从专用App荡回网页系统时,谷歌那时就已经准备好了。

为了让你在网页VR听得爽,谷歌又发布并开源新系统Omnitone

美国太平洋时间7月25日,谷歌在其官方博客上公布了其网页VR音频系统Omnitone项目的技术细节。Omnitone项目是一个跨浏览器支持的开源空间音频渲染器。

谷歌这次解决的问题其实也是其他VR设备也要解决的,就是营造“全景音频”环境。

为了让你在网页VR听得爽,谷歌又发布并开源新系统Omnitone

如上图所示,随着用户佩戴的头显发生移动,声音的位置应该是不同的。用户听到来自后方的拍手声,于是应声转向身后,此时声音应该是变成从前方传来。VR体验需要在周围模拟一个全方位的声音环境,并且让声音在3D环境中随着你头部的运动而及时自动定位。谷歌在这里使用的是“头部相关函数”(Head-related Transfer Function,简称HRTF),这也是Oculus Rift等产品普遍使用的技术。

但谷歌Omnitoneo团队面临的主要挑战就是:在已有的浏览器里引进环绕立体声技术(Ambisonics),同时不能干扰浏览器本来的运行。他们想出的解决办法很聪明,而且单刀直入。

下面是Omnitone音频处理过程图解。

为了让你在网页VR听得爽,谷歌又发布并开源新系统Omnitone

图自:Google Open Source Blog

环绕立体声里包含四种声道,可以在任意一个扬声器设置里进行解码。Omnitone没有使用实体扬声器,而是基于HRTF设置用8个虚拟的扬声器来渲染最终的双耳音频流。双耳渲染音频仅通过耳机就可以营造一种空间感。

这个系统的关键之处就在于中间的声场转换(如图解里Rotator模块所示),把VR头显或者耳机里方向传感器的数据与Omnitone的解码器无缝衔接,从而流畅地将整个音场进行转换。

Omnitone已经在Github上开源并且有经过渲染的样本,感兴趣的朋友可以点击Github 代码音频样本到达展示页面。

等到VR应用的钟摆从专用App荡回网页系统时,谷歌那时就已经准备好了。

题图自:TC

Via TC&Google Open Source Blog

为了让你在网页VR听得爽,谷歌又发布并开源新系统Omnitone

雷峰网原创文章,未经授权禁止转载。详情见转载须知

分享:
相关文章

编辑

关注人工智能(AI)报道
当月热门文章
最新文章
请填写申请人资料
姓名
电话
邮箱
微信号
作品链接
个人简介
为了您的账户安全,请验证邮箱
您的邮箱还未验证,完成可获20积分哟!
请验证您的邮箱
立即验证
完善账号信息
您的账号已经绑定,现在您可以设置密码以方便用邮箱登录
立即设置 以后再说