CN105183421A - 一种虚拟现实三维音效的实现方法及系统 - Google Patents

一种虚拟现实三维音效的实现方法及系统 Download PDF

Info

Publication number
CN105183421A
CN105183421A CN201510490923.4A CN201510490923A CN105183421A CN 105183421 A CN105183421 A CN 105183421A CN 201510490923 A CN201510490923 A CN 201510490923A CN 105183421 A CN105183421 A CN 105183421A
Authority
CN
China
Prior art keywords
head
user
described user
xcos
impulse response
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201510490923.4A
Other languages
English (en)
Other versions
CN105183421B (zh
Inventor
林谋广
罗笑南
李占嵩
谭常健
王安正
庄秋雄
朱伟琦
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sun Yat Sen University
National Sun Yat Sen University
Original Assignee
National Sun Yat Sen University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by National Sun Yat Sen University filed Critical National Sun Yat Sen University
Priority to CN201510490923.4A priority Critical patent/CN105183421B/zh
Publication of CN105183421A publication Critical patent/CN105183421A/zh
Application granted granted Critical
Publication of CN105183421B publication Critical patent/CN105183421B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • Stereophonic System (AREA)
  • Processing Or Creating Images (AREA)

Abstract

本发明公开了一种虚拟现实三维音效的实现方法及系统,其中,该方法包括:获取用户的头部相对于竖直方向的偏转角度;判断用户的头部相对于竖直方向的偏转角度是否大于阈值;若是,则根据用户的头部相对于竖直方向的偏转角度对用户的头部在虚拟空间中的相对位置坐标进行更新,并根据更新结果对头部相关脉冲响应函数进行更新,采用更新后的头部相关脉冲响应函数对声音进行叠加,获取叠加组成的第一信号,将第一信号输出到用户的耳机上;若否,则采用头部相关脉冲响应函数对声音叠加组成,获取叠加组成的第二信号,将第二信号输出到用户的耳机上。实施本发明实施例,可以通过简单的头部动作控制实现虚拟现实三维音效效果,极大提高了用户的体验感。

Description

一种虚拟现实三维音效的实现方法及系统
技术领域
本发明涉及虚拟现实三维音效技术领域,尤其涉及一种虚拟现实三维音效的实现方法及系统。
背景技术
目前常见的立体声回放技术,环绕声效果,常见于商业影院以及家庭影院的音响系统。简单地讲,环绕声就是在人的不同方向放置发声装置,从而实现使得听者能够分辨来自各个方向的声音,增加声音的立体和真实感。和环绕声一样,虚拟三维音效也希望能够提高声音的立体感,但只需要使用两个声源,例如耳机的两个发声单元或者两个音箱。虚拟三维音效是利用对人类听觉空间定位,尝试还原人在自然环境中对声音的定位。由于人在声音定位时输入源只有左耳和右耳鼓膜的振动信息,因此我们理论上我们只需要两个声道即能模拟自然界中任意位置的外部声源。
但是很多的时候,只有单个声源的时候,人们也想体验立体三维音效,这时候,往往是不能得到满足的;或是听力出现障碍的人群,若是想享受一下立体三维音效的效果,那就是难上加难了;因此,用户急需一种在单个声源的情况下或在听力出现障碍的情况下,都能让用户体验到立体三维音效的效果的设备。
发明内容
本发明的目的是在于克服现有技术的不足,本发明提供了一种虚拟现实三维音效的实现方法及系统,以使用户得到更好的体验效果。
为了解决上述问题,本发明提出了一种虚拟现实三维音效的实现方法,所述方法包括:
获取用户的头部相对于竖直方向的偏转角度;
根据获取的所述用户的头部相对于竖直方向的偏转角度,判断所述头部相对于竖直方向的偏转角度是否大于阈值;
若是,则根据所述用户的头部相对于竖直方向的偏转角度对所述用户的头部在虚拟空间中的相对位置坐标进行更新,获取更新结果,根据所述更新结果对头部相关脉冲响应函数进行更新,利用更新后的头部相关脉冲响应函数对声音进行叠加,获取叠加组成的第一信号,将所述第一信号输出到所述用户的耳机上;
若否,采用头部相关脉冲响应函数对声音叠加组成,获取叠加组成的第二信号,将所述第二信号输出到所述用户的耳机上。
优选地,所述获取用户的头部相对于竖直方向的偏转角度包括:
采用结合加速仪和陀螺仪的卡尔曼滤波器获取用户的头部相对于竖直方向的偏转角度。
优选地,所述对所述用户的头部在虚拟空间中的相对位置坐标进行更新的步骤包括:
根据所述用户的头部相对于竖直方向的偏转角度,利用三角函数公式,获取所述用户的头部在虚拟空间中向竖直和水平方向移动的距离;
根据获取所述用户的头部在虚拟空间中向竖直和水平方向移动的距离,对所述用户在虚拟空间中的相对位置进行更新。
所述根据所述更新结果对头部相关脉冲响应函数进行更新的步骤包括:
所述更新结果为对所述用户的头部在虚拟空间中的相对位置坐标进行更新,获取更新后的所述用户的头部的左耳及右耳的三维坐标;
结合所述获取更新的所述用户的头部的左耳及右耳的三维坐标、头部相关脉冲响应数据库的数据,通过插值方式逐步更新头部相关脉冲响应函数,获取更新后的头部相关脉冲响应函数。
优选地,所述用户的头部的左耳及右耳的三维坐标的更新步骤包括:
判断用户的头部相对于竖直方向的偏转方向是向左偏转、向右偏转、向前偏转或向后偏转;
若所述用户的头部是向左偏转,则更新后的左耳A的坐标为(-x·cos(β-α),0,x·sin(β-α)),右耳B的坐标为(x·cos(β+α),0,x·sin(β+α));
若所述用户的头部是向右偏转,则更新后的左耳A的坐标为(-x·cos(β+α),0,x·sin(β-α)),右耳B的坐标为(x·cos(β-α),0,x·sin(β-α));
若所述用户的头部是向前偏转,则更新后的左耳A的坐标为(-x·cos(β),|x·cosβ-x·cos(β-α)|,x·sin(β-α)),右耳B的坐标为(x·cos(β),|x·cosβ-x·cos(β-α)|,x·sin(β-α));
若所述用户的头部是向后偏转,则更新后的左耳A的坐标为(-x·cos(β),-|x·cosβ-x·cos(β-α)|,x·sin(β-α)),右耳B的坐标为(x·cos(β),-|x·cosβ-x·cos(β-α)|,x·sin(β-α));
式中,x为左耳及右耳分别到坐标系原点的距离;β为左耳及右耳分别到坐标系的原点O的连线与X轴形成的夹角;α为用户头部相对竖直方向偏转的角度。
另外,本发明还提出了一种虚拟现实三维音效的实现系统,所述系统包括:
角度获取模块:用于获取用户的头部相对于竖直方向的偏转角度;
判断模块:用于判断所述获取用户的头部相对于竖直方向的偏转角度是否大于阈值;
更新模块:用于当判断模块判断为是时,则根据所述用户的头部相对于竖直方向的偏转角度对所述用户的头部在虚拟空间中的相对位置坐标进行更新,获取更新结果,根据所述更新结果对头部相关脉冲响应函数进行更新,获取更新后的头部相关脉冲响应函数;
声音叠加模块:用于根据所述更新后的头部相关脉冲响应函数对声音进行叠加,获取叠加组成的第一信号,或用于当判断模块判断为否时,则根据所述头部相关脉冲响应函数对声音进行叠加,获取叠加组成的第二信号;
信号输出模块:用于将获取的所述第一信号输出到所述用户的耳机上;或用于将获取的所述第二信号输出到所述用户的耳机上。
优选地,所述更新模块包括:
用户相对位置更新单元:用于根据所述用户的头部相对于竖直方向的偏转角度对所述用户的头部在虚拟空间中的相对位置坐标进行更新;
函数更新单元:用于根据更新后的所述用户的头部在虚拟空间中的相对位置坐标更新所述头部相关脉冲响应函数。
优选地,所述用户相对位置更新单元包括:
距离获取子单元:用于根据所述用户的头部相对于竖直方向的偏转角度,利用三角函数公式,获所述用户在虚拟空间中向竖直和水平方向移动的距离;
用户相对位置更新子单元:用于根据所述用户的头部在虚拟空间中向竖直和水平方向移动的距离,对所述用户的头部在虚拟空间中的相对位置坐标进行更新。
优选地,所述函数更新单元包括:
数据获取子单元:用于获取所述用户的头部的左右耳的三维坐标和头部相关脉冲响应数据库的数据;
函数更新子单元:用于根据获取所述用户的头部的左右耳的三维坐标和所述头部相关脉冲响应数据库的数据,通过插值方式逐步更新头部相关脉冲响应函数,获取更新后的头部相关脉冲响应函数。
优选地,所述声音叠加模块包括:
第一叠加单元:用于根据所述更新后的头部相关脉冲响应函数对声音进行叠加,获取叠加组成的所述第一信号;
第二叠加单元:用于当判断模块判断为否时,根据所述头部相关脉冲响应函数对声音叠加组成,获取叠加组成的所述第二信号。
在本发明实施例中,可以实现使用头部控制来获取虚拟三维音效的效果,操作简单,适合广大的人群使用,特别是仅仅依靠听觉的残疾人士,可以提高用户的使用体验感。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其它的附图。
图1是本发明实施例的虚拟现实三维音效的实现方法的流程示意图;
图2是本发明实施例的三维坐标系示意图;
图3是本发明实施例的虚拟现实三维音效的实现系统的结构组成示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
图1是本发明实施例的虚拟现实三维音效的实现方法的流程示意图,如图1所示,该方法包括:
S11:获取用户的头部相对于竖直方向的偏转角度;
S12:根据获取用户的头部相对于竖直方向的偏转角度,判断用户的头部相对于竖直方向的偏转角度是否大于阈值,若是,则进入S13,若否,则进入S17;
S13:若是,则根据用户的头部相对于竖直方向的偏转角度对用户的头部在虚拟空间中的相对位置坐标进行更新,获取更新结果;
S14:根据更新结果对头部相关脉冲响应函数进行更新;
S15:利用更新后的用户的头部相关脉冲响应函数对声音进行叠加,获取叠加组成的第一信号;
S16:将获取的第一信号输出到用户的耳机上;
S17:若否,则无需更新用户在虚拟空间中的相对位置,采用用户的头部相关脉冲响应函数对声音叠加组成,获取叠加组成的第二信号;
S18:将获取的第二信号输出到用户的耳机上。
其中,对S11作进一步说明:
构建三维坐标系,获取用户头部坐标及双耳的坐标,采用加速仪和陀螺仪并结合卡尔曼滤波器获取用户的头部相对于竖直方向的偏转角度,即可获取双耳相对于竖直方向的偏转角度;这样可以解决单一使用加速仪可能存在的不稳定性问题或单一使用陀螺仪可能存在的误差较大的问题。
其中,对S12作进一步说明:
在本实施例中,设置阈值为0.5度,当用户的头部相对于竖直方向偏转小于或等于0.5度时,判断为不需要更新用户在虚拟空间中的相对位置;当用户的头部相对于竖直方向偏转大于0.5度时,判断为需要更新用户在虚拟空间中的相对位置。
对S13作进一步说明:
根据用户的头部相对于竖直方向的偏转角度,利用三角函数公式,获取用户的头部在虚拟空间中向竖直和水平方向移动的距离。
根据获取的用户的头部在虚拟空间中向竖直和水平方向移动的距离,对用户的头部在虚拟空间中的相对位置坐标进行更新。
其中,以用户的双耳作为判别用户的相对虚拟空移动端的距离;如图2所示,使用用户的头部中心构建一个三维的坐标系,其中左耳A及右耳B分别到坐标系的原点O的连线与X轴形成的夹角为β,,且左耳A及右耳B分别到坐标系的原点O的连线长度为x,用户的头部相对于竖直方向的偏转角度为α,即用户的双耳相对于竖直方向的偏转角度也为α,左耳及右耳相对于坐标系原点的距离都为x,左耳向上下移动的距离为hl=|x·sinβ-x·sin(β±α)|,右耳向上下移动的距离为
用户的双耳相对于水平方向移动的距离,左耳向水平位置移动距离为sl=|x·cosβ-x·cos(β±α)|,右耳向水平位置移动距离为获取用户的头部竖直和水平方向移动的距离。
根据勾股定理即可得到左耳实际位移的距离为右耳实际位移的距离为即可根据位移的距离更新用户在虚拟空间中的相对位置,获取更新头部三维坐标和更新的左耳及右耳的三维坐标;
判断用户的头部相对于竖直方向的偏转方向是向左偏转、向右偏转、向前偏转或向后偏转;
若所述用户的头部是向左偏转,则更新后的左耳A的坐标为(-x·cos(β-α),0,x·sin(β-α)),右耳B的坐标为(x·cos(β+α),0,x·sin(β+α));
若所述用户的头部是向右偏转,则更新后的左耳A的坐标为(-x·cos(β+α),0,x·sin(β-α)),右耳B的坐标为(x·cos(β-α),0,x·sin(β-α));
若所述用户的头部是向前偏转,则更新后的左耳A的坐标为(-x·cos(β),|x·cosβ-x·cos(β-α)|,x·sin(β-α)),右耳B的坐标为(x·cos(β),|x·cosβ-x·cos(β-α)|,x·sin(β-α));
若所述用户的头部是向后偏转,则更新后的左耳A的坐标为(-x·cos(β),-|x·cosβ-x·cos(β-α)|,x·sin(β-α)),右耳B的坐标为(x·cos(β),-|x·cosβ-x·cos(β-α)|,x·sin(β-α))。
其中,对S14作进一步说明:
步骤S14中的更新结果为对用户的头部在虚拟空间中的相对位置坐标进行更新,获取更新后的用户的头部的左耳及右耳的三维坐标;
结合获取更新后的用户的头部的左耳及右耳的三维坐标、头部相关脉冲响应数据库的数据,通过插值方式逐步更新头部相关脉冲响应函数,获取更新后的头部相关脉冲响应函数。
其中,对S15或S17作进一步说明:
声音即为声源振动发出的声音信号;通过头部相关脉冲响应函数对声音信号进行叠加,获取第一信号或第二信号。
另外,本发明实施例还提供一种虚拟现实三维音效的实现系统,如图3所示,该系统包括:
角度获取模块31:用于获取用户的头部相对于竖直方向的偏转角度;
判断模块32:用于判断获取用户的头部相对于竖直方向的偏转角度是否大于阈值;
更新模块33:用于当判断模块判断为是时,则根据所述用户的头部相对于竖直方向的偏转角度对所述用户的头部在虚拟空间中的相对位置坐标进行更新,获取更新结果,根据所述更新结果对头部相关脉冲响应函数进行更新,获取更新后的头部相关脉冲响应函数;
声音叠加模块34:用于根据所述更新后的头部相关脉冲响应函数对声音进行叠加,获取叠加组成的第一信号,或用于当判断模块判断为否时,则根据所述头部相关脉冲响应函数对声音进行叠加,获取叠加组成的第二信号;
信号输出模块35:用于将获取的第一信号输出到用户的耳机上;或用于将获取的第二信号输出到用户的耳机上。
其中,更新模块33包括:
用户相对位置更新单元:用于根据用户的头部相对于竖直方向的偏转角度对用户的头部在虚拟空间中的相对位置坐标进行更新;
函数更新单元:用于根据更新后用户的头部在虚拟空间中的相对位置坐标更新头部相关脉冲响应函数。
其中,用户相对位置更新单元包括:
距离获取子单元:用于根据头部相对于竖直方向的偏转角度,利用三角函数公式,获取用户的头部在虚拟空间中向竖直和水平方向移动的距离;
其中,以用户的双耳作为判别用户的相对虚拟空移动端的距离;如图2所示,使用用户的头部中心构建一个三维的坐标系,其中左耳A及右耳B分别到坐标系的原点O的连线与X轴形成的夹角为β,且左耳A及右耳B分别到坐标系的原点O的连线长度为x,用户的头部相对于竖直方向的偏转角度为α,即用户的双耳相对于竖直方向的偏转角度也为α,左耳及右耳相对于坐标系原点的距离都为x,左耳向上下移动的距离为hl=|x·sinβ-x·sin(β±α)|,右耳向上下移动的距离为
用户的双耳相对于水平方向移动的距离,左耳向水平位置移动距离为sl=|x·cosβ-x·cos(β±α)|,右耳向水平位置移动距离为获取用户的头部竖直和水平方向移动的距离。
更新子单元:用于根据用户的头部在虚拟空间中向竖直和水平方向移动的距离,对用户的头部在虚拟空间中的相对位置坐标进行更新。
根据上述获取的左耳向上下移动的距离为hl、右耳向上下移动的距离为hr、左耳向水平位置移动距离为sl和左耳向水平位置移动距离为sr;采用勾股定理,即可得到左耳实际位移的距离右耳实际位移的距离即可根据位移的距离更新用户在虚拟空间中的相对位置,获取更新头部三维坐标和更新的左耳及右耳的三维坐标;
若所述用户的头部是向左偏转,则更新后的左耳A的坐标为(-x·cos(β-α),0,x·sin(β-α)),右耳B的坐标为(x·cos(β+α),0,x·sin(β+α));
若所述用户的头部是向右偏转,则更新后的左耳A的坐标为(-x·cos(β+α),0,x·sin(β-α)),右耳B的坐标为(x·cos(β-α),0,x·sin(β-α));
若所述用户的头部是向前偏转,则更新后的左耳A的坐标为(-x·cos(β),|x·cosβ-x·cos(β-α)|,x·sin(β-α)),右耳B的坐标为(x·cos(β),|x·cosβ-x·cos(β-α)|,x·sin(β-α));
若所述用户的头部是向后偏转,则更新后的左耳A的坐标为(-x·cos(β),-|x·cosβ-x·cos(β-α)|,x·sin(β-α)),右耳B的坐标为(x·cos(β),-|x·cosβ-x·cos(β-α)|,x·sin(β-α))。
其中,所述函数更新单元包括:
数据获取子单元:用于获取所述用户的头部的左右耳的三维坐标和头部相关脉冲响应数据库的数据;
函数更新子单元:用于根据获取所述用户的头部的左右耳的三维坐标和所述头部相关脉冲响应数据库的数据,通过插值方式逐步更新头部相关脉冲响应函数,获取更新后的头部相关脉冲响应函数。
其中,声音叠加模块34包括:
第一叠加单元:用于根据更新后的头部相关脉冲响应函数对声音进行叠加,获取叠加组成的第一信号;
第二叠加单元:用于当判断模块判断为否时,根据所述头部相关脉冲响应函数对声音叠加组成,获取叠加组成的所述第二信号。
在本发明实施例中,可以实现使用头部控制来获取虚拟三维音效的效果,操作简单,适合广大的人群使用,特别是仅仅依靠听觉的残疾人士,可以提高用户的使用体验感。
本领域普通技术人员可以理解上述实施例的各种方法中的全部或部分步骤是可以通过程序来指令相关的硬件来完成,该程序可以存储于一计算机可读存储介质中,存储介质可以包括:只读存储器(ROM,ReadOnlyMemory)、随机存取存储器(RAM,RandomAccessMemory)、磁盘或光盘等。
另外,以上对本发明实施例所提供的虚拟现实三维音效的实现方法及系统进行了详细介绍,本文中应用了具体个例对本发明的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本发明的方法及其核心思想;同时,对于本领域的一般技术人员,依据本发明的思想,在具体实施方式及应用范围上均会有改变之处,综上所述,本说明书内容不应理解为对本发明的限制。

Claims (10)

1.一种虚拟现实三维音效的实现方法,其特征在于,所述方法包括:
获取用户的头部相对于竖直方向的偏转角度;
根据获取的所述头部相对于竖直方向的偏转角度,判断所述用户的头部相对于竖直方向的偏转角度是否大于阈值;
若是,则根据所述用户的头部相对于竖直方向的偏转角度对所述用户的头部在虚拟空间中的相对位置坐标进行更新,获取更新结果,根据所述更新结果对头部相关脉冲响应函数进行更新,采用更新后的头部相关脉冲响应函数对声音进行叠加,获取叠加组成的第一信号,将所述第一信号输出到所述用户的耳机上;
若否,采用头部相关脉冲响应函数对声音叠加组成,获取叠加组成的第二信号,将所述第二信号输出到所述用户的耳机上。
2.根据权利要求1所述的虚拟现实三维音效的实现方法,其特征在于,所述获取用户的头部相对于竖直方向的偏转角度的步骤包括:
采用加速仪和陀螺仪结合卡尔曼滤波器获取用户的头部相对于竖直方向的偏转角度。
3.根据权利要求1所述的虚拟现实三维音效的实现方法,其特征在于,所述对所述用户的头部在虚拟空间中的相对位置坐标进行更新的步骤包括:
根据所述用户的头部相对于竖直方向的偏转角度,利用三角函数公式,获取所述用户的头部在虚拟空间中向竖直和水平方向移动的距离;
根据获取所述用户在虚拟空间中向竖直和水平方向移动的距离,对所述用户的头部在虚拟空间中的相对位置坐标进行更新。
4.根据权利要求1所述的虚拟现实三维音效的实现方法,其特征在于,所述根据所述更新结果对头部相关脉冲响应函数进行更新的步骤包括:
所述更新结果为对所述用户的头部在虚拟空间中的相对位置坐标进行更新,获取更新后的所述用户的头部的左耳及右耳的三维坐标;
结合所述获取更新后的所述用户的头部的左耳及右耳的三维坐标、头部相关脉冲响应数据库的数据,通过插值方式逐步更新头部相关脉冲响应函数,获取更新后的头部相关脉冲响应函数。
5.根据权利要求4所述的虚拟现实三维音效的实现方法,其特征在于,所述用户的头部的左耳及右耳的三维坐标的更新步骤包括:
判断用户的头部相对于竖直方向的偏转方向是向左偏转、向右偏转、向前偏转或向后偏转;
若所述用户的头部是向左偏转,则更新后的左耳A的坐标为(-x·cos(β-α),0,x·sin(β-α)),右耳B的坐标为(x·cos(β+α),0,x·sin(β+α));
若所述用户的头部是向右偏转,则更新后的左耳A的坐标为(-x·cos(β+α),0,x·sin(β-α)),右耳B的坐标为(x·cos(β-α),0,x·sin(β-α));
若所述用户的头部是向前偏转,则更新后的左耳A的坐标为(-x·cos(β),|x·cosβ-x·cos(β-α)|,x·sin(β-α)),右耳B的坐标为(x·cos(β),|x·cosβ-x·cos(β-α)|,x·sin(β-α));
若所述用户的头部是向后偏转,则更新后的左耳A的坐标为(-x·cos(β),-|x·cosβ-x·cos(β-α)|,x·sin(β-α)),右耳B的坐标为(x·cos(β),-|x·cosβ-x·cos(β-α)|,x·sin(β-α));
式中,x为左耳及右耳分别到坐标系原点O的距离;β为左耳及右耳分别到坐标系的原点O的连线与X轴形成的夹角;α为用户头部相对竖直方向偏转的角度。
6.一种虚拟现实三维音效的实现系统,其特征在于,所述系统包括:
角度获取模块:用于获取用户的头部相对于竖直方向的偏转角度;
判断模块:用于判断所述获取用户的头部相对于竖直方向的偏转角度是否大于阈值;
更新模块:用于当判断模块判断为是时,则根据所述用户的头部相对于竖直方向的偏转角度对所述用户的头部在虚拟空间中的相对位置坐标进行更新,获取更新结果,根据所述更新结果对头部相关脉冲响应函数进行更新,获取更新后的头部相关脉冲响应函数;
声音叠加模块:用于根据所述更新后的头部相关脉冲响应函数对声音进行叠加,获取叠加组成的第一信号;或用于当判断模块判断为否时,则根据所述头部相关脉冲响应函数对声音进行叠加,获取叠加组成的第二信号;
信号输出模块:用于将获取的所述第一信号输出到所述用户的耳机上;或用于将获取的所述第二信号输出到所述用户的耳机上。
7.根据权利要求6所述的虚拟现实三维音效的实现系统,其特征在于,所述更新模块包括:
用户相对位置更新单元:用于根据所述用户的头部相对于竖直方向的偏转角度对所述用户的头部在虚拟空间中的相对位置坐标进行更新;
函数更新单元:用于根据更新后的所述用户的头部在虚拟空间中的相对位置坐标更新所述头部相关脉冲响应函数。
8.根据权利要求6所述的虚拟现实三维音效的实现系统,其特征在于,所述用户相对位置更新单元包括:
距离获取子单元:用于根据所述头部相对于竖直方向的偏转角度,利用三角函数公式,获所述用户的头部在虚拟空间中向竖直和水平方向移动的距离;
用户相对位置更新子单元:用于根据所述用户在虚拟空间中向竖直和水平方向移动的距离,对所述用户的头部在虚拟空间中的相对位置坐标进行更新。
9.根据权利要求6所述的虚拟现实三维音效的实现系统,其特征在于,所述函数更新单元包括:
数据获取子单元:用于获取所述用户的头部的左右耳的三维坐标和头部相关脉冲响应数据库的数据;
函数更新子单元:用于根据获取所述用户的头部的左右耳的三维坐标和所述头部相关脉冲响应数据库的数据,通过插值方式逐步更新头部相关脉冲响应函数,获取更新后的头部相关脉冲响应函数。
10.根据权利要求4所述的虚拟现实三维音效的实现系统,其特征在于,所述声音叠加模块包括:
第一叠加单元:用于根据所述更新后的头部相关脉冲响应函数对声音进行叠加,获取叠加组成的所述第一信号;
第二叠加单元:用于当判断模块判断为否时,根据所述头部相关脉冲响应函数对声音叠加组成,获取叠加组成的所述第二信号。
CN201510490923.4A 2015-08-11 2015-08-11 一种虚拟现实三维音效的实现方法及系统 Active CN105183421B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201510490923.4A CN105183421B (zh) 2015-08-11 2015-08-11 一种虚拟现实三维音效的实现方法及系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201510490923.4A CN105183421B (zh) 2015-08-11 2015-08-11 一种虚拟现实三维音效的实现方法及系统

Publications (2)

Publication Number Publication Date
CN105183421A true CN105183421A (zh) 2015-12-23
CN105183421B CN105183421B (zh) 2018-09-28

Family

ID=54905528

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510490923.4A Active CN105183421B (zh) 2015-08-11 2015-08-11 一种虚拟现实三维音效的实现方法及系统

Country Status (1)

Country Link
CN (1) CN105183421B (zh)

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106648528A (zh) * 2016-11-11 2017-05-10 宇龙计算机通信科技(深圳)有限公司 虚拟现实设备的声音调整方法、装置及虚拟现实设备
CN107077318A (zh) * 2016-12-14 2017-08-18 深圳前海达闼云端智能科技有限公司 一种声音处理方法、装置、电子设备及计算机程序产品
CN108279860A (zh) * 2017-06-14 2018-07-13 深圳市佳创视讯技术股份有限公司 一种提升虚拟现实临场音效体验的方法及系统
CN109640243A (zh) * 2018-12-06 2019-04-16 广州番禺巨大汽车音响设备有限公司 基于dsp音效增强的虚拟三维声效处理方法及系统
CN111726732A (zh) * 2019-03-19 2020-09-29 宏达国际电子股份有限公司 高保真度环绕声格式的音效处理系统及音效处理方法
CN112071326A (zh) * 2020-09-07 2020-12-11 三星电子(中国)研发中心 音效处理方法和装置
CN112637755A (zh) * 2020-12-22 2021-04-09 广州番禺巨大汽车音响设备有限公司 一种基于无线连接的音频播放控制方法、装置及播放系统
CN112771893A (zh) * 2018-11-20 2021-05-07 深圳市欢太科技有限公司 3d音效实现方法、装置、存储介质及电子设备
CN113573203A (zh) * 2021-09-26 2021-10-29 广州朗国电子科技股份有限公司 一种非接触式耳机的控制方法、智能耳机及存储介质
CN114339582A (zh) * 2021-11-30 2022-04-12 北京小米移动软件有限公司 双通道音频处理、方向感滤波器生成方法、装置以及介质

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20060045294A1 (en) * 2004-09-01 2006-03-02 Smyth Stephen M Personalized headphone virtualization
CN101662720A (zh) * 2008-08-26 2010-03-03 索尼株式会社 声音处理装置、声像定位位置调节方法及视频处理装置
CN102572676A (zh) * 2012-01-16 2012-07-11 华南理工大学 一种虚拟听觉环境实时绘制方法
CN102595153A (zh) * 2011-01-13 2012-07-18 承景科技股份有限公司 可动态地提供三维音效的显示系统及相关方法
CN103702264A (zh) * 2012-09-27 2014-04-02 英特尔公司 相机驱动的音频空间化
CN104284291A (zh) * 2014-08-07 2015-01-14 华南理工大学 5.1通路环绕声的耳机动态虚拟重放方法及其实现装置
US20150124975A1 (en) * 2013-11-05 2015-05-07 Oticon A/S Binaural hearing assistance system comprising a database of head related transfer functions

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20060045294A1 (en) * 2004-09-01 2006-03-02 Smyth Stephen M Personalized headphone virtualization
CN101662720A (zh) * 2008-08-26 2010-03-03 索尼株式会社 声音处理装置、声像定位位置调节方法及视频处理装置
CN102595153A (zh) * 2011-01-13 2012-07-18 承景科技股份有限公司 可动态地提供三维音效的显示系统及相关方法
CN102572676A (zh) * 2012-01-16 2012-07-11 华南理工大学 一种虚拟听觉环境实时绘制方法
CN103702264A (zh) * 2012-09-27 2014-04-02 英特尔公司 相机驱动的音频空间化
US20150124975A1 (en) * 2013-11-05 2015-05-07 Oticon A/S Binaural hearing assistance system comprising a database of head related transfer functions
CN104618843A (zh) * 2013-11-05 2015-05-13 奥迪康有限公司 包括头部相关传递函数数据库的双耳助听系统
CN104284291A (zh) * 2014-08-07 2015-01-14 华南理工大学 5.1通路环绕声的耳机动态虚拟重放方法及其实现装置

Cited By (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106648528A (zh) * 2016-11-11 2017-05-10 宇龙计算机通信科技(深圳)有限公司 虚拟现实设备的声音调整方法、装置及虚拟现实设备
CN107077318A (zh) * 2016-12-14 2017-08-18 深圳前海达闼云端智能科技有限公司 一种声音处理方法、装置、电子设备及计算机程序产品
CN108279860B (zh) * 2017-06-14 2021-05-14 深圳市佳创视讯技术股份有限公司 一种提升虚拟现实临场音效体验的方法及系统
CN108279860A (zh) * 2017-06-14 2018-07-13 深圳市佳创视讯技术股份有限公司 一种提升虚拟现实临场音效体验的方法及系统
CN112771893A (zh) * 2018-11-20 2021-05-07 深圳市欢太科技有限公司 3d音效实现方法、装置、存储介质及电子设备
CN109640243A (zh) * 2018-12-06 2019-04-16 广州番禺巨大汽车音响设备有限公司 基于dsp音效增强的虚拟三维声效处理方法及系统
CN111726732A (zh) * 2019-03-19 2020-09-29 宏达国际电子股份有限公司 高保真度环绕声格式的音效处理系统及音效处理方法
CN112071326A (zh) * 2020-09-07 2020-12-11 三星电子(中国)研发中心 音效处理方法和装置
CN112637755A (zh) * 2020-12-22 2021-04-09 广州番禺巨大汽车音响设备有限公司 一种基于无线连接的音频播放控制方法、装置及播放系统
CN113573203A (zh) * 2021-09-26 2021-10-29 广州朗国电子科技股份有限公司 一种非接触式耳机的控制方法、智能耳机及存储介质
CN113573203B (zh) * 2021-09-26 2022-03-04 广州朗国电子科技股份有限公司 一种非接触式耳机的控制方法、智能耳机及存储介质
CN114339582A (zh) * 2021-11-30 2022-04-12 北京小米移动软件有限公司 双通道音频处理、方向感滤波器生成方法、装置以及介质
CN114339582B (zh) * 2021-11-30 2024-02-06 北京小米移动软件有限公司 双通道音频处理、方向感滤波器生成方法、装置以及介质

Also Published As

Publication number Publication date
CN105183421B (zh) 2018-09-28

Similar Documents

Publication Publication Date Title
CN105183421A (zh) 一种虚拟现实三维音效的实现方法及系统
US11622224B2 (en) Binaural sound in visual entertainment media
CN108141696B (zh) 用于空间音频调节的系统和方法
US11055057B2 (en) Apparatus and associated methods in the field of virtual reality
US11516616B2 (en) System for and method of generating an audio image
CN106664488A (zh) 根据所跟踪的用户位置来驱动参量扬声器
EP2741523B1 (en) Object based audio rendering using visual tracking of at least one listener
US9781538B2 (en) Multiuser, geofixed acoustic simulations
US20150189455A1 (en) Transformation of multiple sound fields to generate a transformed reproduced sound field including modified reproductions of the multiple sound fields
US11356795B2 (en) Spatialized audio relative to a peripheral device
JP2017153083A (ja) 自動車でオーディオ信号を再生する装置及び方法
US20190170533A1 (en) Navigation by spatial placement of sound
CN111512648A (zh) 启用空间音频内容的渲染以用于由用户消费
US20170272889A1 (en) Sound reproduction system
US20230247384A1 (en) Information processing device, output control method, and program
US11102604B2 (en) Apparatus, method, computer program or system for use in rendering audio
US20220279303A1 (en) Spatial audio for wearable devices
US10735885B1 (en) Managing image audio sources in a virtual acoustic environment
JP2014127967A (ja) 仮想空間中の音声再生装置及び方法、並びにプログラム
WO2022185725A1 (ja) 情報処理装置、情報処理方法、およびプログラム
WO2023164801A1 (en) Method and system of virtualized spatial audio
Rastogi et al. BiVR: A device comprising of Virtual reality and Binaural audio
JP2007318188A (ja) 音像提示方法および音像提示装置
JP2015192333A (ja) 対話用通信ユニット

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant