头相关函数的空间可视化SFRS及其在个体化应用

在简述头相关函数HRTF及其在虚拟声音空间感的应用后,重点介绍了HRTF的另一种可视化方法—空间频谱特性SFRS,并介绍了SFRS在提取听觉定位频谱信息SC、CPA轨迹以及在HRTF个体化技术中应用的优势。

头相关传输函数的研究进展(一)

综述了头相关传输函数(HRTF)的研究进展,主要包括HRTF的定义、获取方式以及各种分析、近似和评价方法。同时,还探讨了HRTF研究中存在的问题。

基于HRTF频谱特征优化MDCT域滤波

面向音频多声道虚拟环绕处理的应用,提出一种改进离散余弦变换(MDCT)域的头相关传输函数(HRTF)高效滤波算法.通过MDCT的多相滤波结构分解,得到MDCT域滤波矩阵,再根据矩阵稀疏表征的思想,以及HRTF的频谱动态范围大的特点,对MDCT滤波矩阵进行动态邻域优化,有效地提高了MDCT域滤波的效率.通过大量的实验对比表明:该方法较以往的MDCT域滤波方法大大降低了运算复杂度,且保持滤波结果的一致性;该动态邻域算法与传统时域?频域处理方法相比,主观质量差异较小;该方法大大降低了虚拟环绕处理的算法复杂度,尤其适合采用MDCT编码的压缩音频格式.

基于生理参数与角度的个性化HRTF深度学习重建方法

本文设计实现了一个深度神经网络模型,根据人体生理参数及角度信息重建个性化头相关传递函数(Head Related Transfer Function,HRTF),仅需一次训练即可得到全部方向的预测HRTFs。网络模型由将人体测量参数作为输入的深度神经网络、将角度信息作为输入的展开层以及将前两者的输出作为输入的深度神经网络组成。最后对所提出方法的整体性能进行了客观评价。

VR全景声场采集系统研究

虚拟现实(Virtual Reality)技术,即VR技术,以其交互性、沉浸性以及想象性三大特点,当前在工业、军事、医疗、教育等多种领域得到广泛的应用。VR的独特之处在于人—机—环境的多维信息交互,其中听觉信息起着重要的补充作用,VR要想获得最佳的体验必须结合VR全景语音,用户需要"真实"的声音。本文研究一种基于自适应波束形成和头相关传递函数(HRTF)联合的VR全景声场采集系统,初步设计具有阵列拾音器模块、波束形成和HRTF滤波模块、无线驱动和啸叫抑制模块及Web管理模块。

虚拟听觉环境实时绘制系统平台

报道了基于个人计算机和C++语言编程的虚拟听觉环境(VAE)系统平台的近期工作进展.系统实时跟踪倾听者头部的空间位置和方向,动态模拟声波从声源到双耳的传输,通过耳机重放能够产生自由场和反射声环境的逼真听觉感知.提出了一系列改善系统性能的方法,包括基于主成分分析(PCA)的近场虚拟声源合成,倾听者的6个自由度运动模拟等.特别是在虚拟多声源时,能明显减少运算量和数据量.实际测量表明,与现有系统相比,性能得到提升.在传统的工作模式下,系统可以同时合成280个虚拟声源(包括直达声源和反射虚声源);而在本文提出的PCA工作模式下,系统可以同时合成4500个虚拟声源.一组心理声学实验也证实了系统的实际感知性能,同时得出了一些双耳听觉的初步研究结果.随着其性能的扩展,系统可作为双耳听觉研究和虚拟现实应用的一个功能灵活且强大的平台.