百万发登入

斯坦福大学新模型算法可在数秒内为VR环境不同对象创建模拟声音

斯坦福大学的新模型算法可在几秒钟内为VR环境中的不同对象创建模拟声音Yingwei.com作者黄岩

在观看电影或玩游戏时,正确的声音有助于增强体验的沉浸感。例如,当一位白头发的赌徒在扑克桌上从左向右滚动筹码时,声音似乎从一只耳朵转移到另一只耳朵。为此,电影制作人可以通过拼接预先录制的声音来完成此操作。

但对于虚拟现实来说,这很难做到,因为VR不是一种脚本体验,用户可以自由地探索一个广阔的世界。为了改善VR声音的真实感,工程师必须创造出大量的“声音模型”。每个声音模型都可以支持VR系统在所需的时间合成特定的声音。以前,我们需要一组计算机来花费数小时来创建单个声音模型,并且由于不同的模型需要合成许多不同的潜在声音,因此在交互式环境中创建逼真的声音一直是难以实现的目标。

2e8e6d6e4e5b4771841987490c4b14a6.jpeg

现在,斯坦福大学的计算机科学家发明了一种算法,可以在几秒钟内创建声音模型,计算成本更低,可以模拟虚拟环境中不同对象的声音。当需要声音的场景出现时,这个新模型可以快速合成逼真的声音效果。计算机科学教授Doug James解释说:“通过简化模型创建,可以构建具有逼真音效的交互式环境。”

现有的用于创建声音模型的算法基于19世纪科学家Hermann von Helmholtz对声音传播的研究。基于这一理论基础,科学家们设计了算法来创建三维声音模型:软件程序可以合成近乎逼真的音频,因为声音的音量和方向可以根据场景相对于听者的位置而变化。到目前为止,创建3D声音模型的最佳算法依赖于边界元素方法(BEM),但对于常见用例来说,这是一个非常昂贵且耗时的过程。

詹姆斯和他的毕业生合作者王瑞贤开发了一种算法,通过避免亥姆霍兹方程和BEM,将计算声音模型的速度提高了数百甚至数千倍。他们的方法受到了20世纪奥地利作曲家弗里茨海因里希的启发

23: 10

来源:切割木材网

斯坦福大学的新模型算法可在几秒钟内为VR环境中的不同对象创建模拟声音Yingwei.com作者黄岩

在观看电影或玩游戏时,正确的声音有助于增强体验的沉浸感。例如,当一位白头发的赌徒在扑克桌上从左向右滚动筹码时,声音似乎从一只耳朵转移到另一只耳朵。为此,电影制作人可以通过拼接预先录制的声音来完成此操作。

但对于虚拟现实来说,这很难做到,因为VR不是一种脚本体验,用户可以自由地探索一个广阔的世界。为了改善VR声音的真实感,工程师必须创造出大量的“声音模型”。每个声音模型都可以支持VR系统在所需的时间合成特定的声音。以前,我们需要一组计算机来花费数小时来创建单个声音模型,并且由于不同的模型需要合成许多不同的潜在声音,因此在交互式环境中创建逼真的声音一直是难以实现的目标。

2e8e6d6e4e5b4771841987490c4b14a6.jpeg

现在,斯坦福大学的计算机科学家发明了一种算法,可以在几秒钟内创建声音模型,计算成本更低,可以模拟虚拟环境中不同对象的声音。当需要声音的场景出现时,这个新模型可以快速合成逼真的声音效果。计算机科学教授Doug James解释说:“通过简化模型创建,可以构建具有逼真音效的交互式环境。”

现有的用于创建声音模型的算法基于19世纪科学家Hermann von Helmholtz对声音传播的研究。基于这一理论基础,科学家们设计了算法来创建三维声音模型:软件程序可以合成近乎逼真的音频,因为声音的音量和方向可以根据场景相对于听者的位置而变化。到目前为止,创建3D声音模型的最佳算法依赖于边界元素方法(BEM),但对于常见用例来说,这是一个非常昂贵且耗时的过程。

詹姆斯和他的研究生合作者王瑞贤开发了一种算法,通过避免亥姆霍兹方程和BEM,将计算声音模型的速度提高了数百甚至数千倍。他们的方法受到了20世纪奥地利作曲家弗里茨海因里希的启发仅提供信息存储空间服务。

模型

算法

斯坦福大学

詹姆斯

阅读()