CN113365191A - 音乐播放的方法、装置、设备及存储介质 - Google Patents
音乐播放的方法、装置、设备及存储介质 Download PDFInfo
- Publication number
- CN113365191A CN113365191A CN202110625888.8A CN202110625888A CN113365191A CN 113365191 A CN113365191 A CN 113365191A CN 202110625888 A CN202110625888 A CN 202110625888A CN 113365191 A CN113365191 A CN 113365191A
- Authority
- CN
- China
- Prior art keywords
- distribution position
- virtual
- terminal
- sound
- music
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 49
- 238000009826 distribution Methods 0.000 claims abstract description 124
- 230000004044 response Effects 0.000 claims abstract description 9
- 230000006870 function Effects 0.000 claims description 100
- 238000012546 transfer Methods 0.000 claims description 81
- 210000005069 ears Anatomy 0.000 claims description 21
- 238000004590 computer program Methods 0.000 claims description 7
- 210000003128 head Anatomy 0.000 description 67
- 230000000694 effects Effects 0.000 description 12
- 210000000624 ear auricle Anatomy 0.000 description 9
- 230000008859 change Effects 0.000 description 8
- 238000012545 processing Methods 0.000 description 8
- 238000010586 diagram Methods 0.000 description 7
- 238000005516 engineering process Methods 0.000 description 7
- 238000001514 detection method Methods 0.000 description 6
- 230000001960 triggered effect Effects 0.000 description 5
- 238000010276 construction Methods 0.000 description 4
- 230000003287 optical effect Effects 0.000 description 4
- 239000007787 solid Substances 0.000 description 3
- 101100243951 Caenorhabditis elegans pie-1 gene Proteins 0.000 description 2
- 238000005314 correlation function Methods 0.000 description 2
- 230000003993 interaction Effects 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 230000005284 excitation Effects 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 230000004807 localization Effects 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000008569 process Effects 0.000 description 1
- 230000005855 radiation Effects 0.000 description 1
- 238000012360 testing method Methods 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R5/00—Stereophonic arrangements
- H04R5/02—Spatial or constructional arrangements of loudspeakers
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11C—STATIC STORES
- G11C7/00—Arrangements for writing information into, or reading information out from, a digital store
- G11C7/16—Storage of analogue signals in digital stores using an arrangement comprising analogue/digital [A/D] converters, digital memories and digital/analogue [D/A] converters
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04S—STEREOPHONIC SYSTEMS
- H04S7/00—Indicating arrangements; Control arrangements, e.g. balance control
- H04S7/30—Control circuits for electronic adaptation of the sound field
Landscapes
- Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- Acoustics & Sound (AREA)
- Signal Processing (AREA)
- Stereophonic System (AREA)
Abstract
本申请公开了一种音乐播放的方法、装置、设备及存储介质,属于音乐播放技术领域。该方法包括:响应于终端上的位置调整操作,确定终端的空间转动角度;基于空间转动角度将虚拟空间声场中至少一个虚拟音箱的第一分布位置调整为第二分布位置,虚拟音箱的分布位置是指虚拟空间声场中至少一个虚拟音箱环绕参考点分布的空间位置,第二分布位置不同于第一分布位置;将第一分布位置对应的第一播放方式切换为第二分布位置对应的第二播放方式,播放方式用于确定音乐播放时位于参考点处用户从至少一个虚拟音箱的声源接收到的声音;通过耳机以第二播放方式对音乐进行播放。该方法能够提升虚拟空间声场中音乐播放的真实感。
Description
技术领域
本申请涉及音乐播放技术领域,特别涉及一种音乐播放的方法、装置、设备及存储介质。
背景技术
现今,音乐软件中设计了多种音乐播放方式,同一首音乐采用不同的音乐播放方式,即能够展现出不同的听觉效果,满足了用户对听觉效果的多样化需求。
一般地,比如环绕立体声、超重低音、纯净人声、以及古风音效等音乐播放方式,是通过对音色和音质的调整,来达到改变听觉效果的目的。其中,存在一种音乐播放方式是模拟现实声场中音乐播放时的听觉效果,其假设了一个虚拟空间声场,在虚拟空间声场的几个固定位置上设置了虚拟音箱,模拟这一场景下音乐播放时用户的双耳能够接收到的声音来进行音乐播放。
但是,上述音乐播放方式忽略了现实声场中用户的双耳能够接收到的声音会随用户在声场中的位置而变化,因此也降低了用户在声场中移动时音乐播放的真实感。
发明内容
本申请实施例提供了一种音乐播放的方法、装置、设备及存储介质,该方法能够提升虚拟空间声场中音乐播放的真实感。所述技术方案如下:
根据本申请的一个方面,提供了一种音乐播放的方法,该方法包括:
响应于终端上的位置调整操作,确定终端的空间转动角度;
基于空间转动角度将虚拟空间声场中至少一个虚拟音箱的第一分布位置调整为第二分布位置,虚拟音箱的分布位置是指虚拟空间声场中至少一个虚拟音箱环绕参考点分布的空间位置,第二分布位置不同于第一分布位置;
将第一分布位置对应的第一播放方式切换为第二分布位置对应的第二播放方式,播放方式用于确定音乐播放时位于参考点处用户从至少一个虚拟音箱的声源接收到的声音;
通过耳机以第二播放方式对音乐进行播放。
根据本申请的另一个方面,提供了一种音乐播放的装置,该装置包括:
确定模块,用于响应于终端上的位置调整操作,确定终端的空间转动角度;
调整模块,用于基于空间转动角度将虚拟空间声场中至少一个虚拟音箱的第一分布位置调整为第二分布位置,虚拟音箱的分布位置是指虚拟空间声场中至少一个虚拟音箱环绕参考点分布的空间位置,第二分布位置不同于第一分布位置;
切换模块,用于将第一分布位置对应的第一播放方式切换为第二分布位置对应的第二播放方式,播放方式用于确定音乐播放时位于参考点处用户从至少一个虚拟音箱的声源接收到的声音;
播放模块,用于通过耳机以第二播放方式对音乐进行播放。
根据本申请的另一方面,提供了一种终端,上述终端包括:处理器和存储器,上述存储器存储有计算机程序,上述计算机程序由上述处理器加载并执行以实现如上所述的音乐播放的方法。
根据本申请的另一方面,提供了一种计算机可读存储介质,上述计算机可读存储介质中存储有计算机程序,上述计算机程序由处理器加载并执行以实现如上所述的音乐播放的方法。
根据本申请的另一个方面,提供了一种计算机程序产品,上述计算机程序产品包括计算机指令,上述计算机指令存储在计算机可读存储介质中。计算机设备的处理器从上述计算机可读存储介质读取上述计算机指令,上述处理器执行上述计算机指令,使得上述计算机设备执行如上所述的音乐播放的方法。
本申请实施例提供的技术方案带来的有益效果至少包括:
该音乐播放的方法,在终端的位置发生变化时,调整虚拟空间声场中至少一个虚拟音箱的分布位置,基于至少一个虚拟音箱的分布位置变化,调整音乐播放的声音,以模拟用户在真实声场中转动时,双耳接收到音乐的声音变化,提升虚拟空间声场中音乐播放的真实感,使用户通过耳机即能体验到在真实声场中转动时音乐声音的起伏变化,达到身临其境的听觉效果。
附图说明
为了更清楚地说明本申请实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1示出了本申请一个示例性实施例提供的终端的结构示意图;
图2示出了本申请一个示例性实施例提供的音乐播放的方法的流程图;
图3示出了本申请一个示例性实施例提供的虚拟空间声场的界面示意图;
图4示出了本申请一个示例性实施例提供函数构建方法的流程图;
图5示出了本申请一个示例性实施例提供的函数值设置的方法的流程图;
图6示出了本申请另一个示例性实施例提供的函数值设置的方法的流程图;
图7示出了本申请一个示例性实施例提供的音乐播放的装置的框图;
图8示出了本申请一个示例性实施例提供的计算机设备的结构示意图。
具体实施方式
为使本申请的目的、技术方案和优点更加清楚,下面将结合附图对本申请实施方式作进一步地详细描述。
首先对本申请涉及的几个名词进行介绍:
头部相关传输函数(Head Related Transfer Functions,HRTF),是一种声音定位算法,用于表征人耳从空间中的声源点接收声音的方式。每个人都有自己独特的HRTF,可以将HRTF视为一个人的听音指纹。
HRTF是构建虚拟听觉声像的基础。利用空间声技术或者双耳技术对HRTF进行处理,可以准确的构建出所需的双耳声压信号,通过耳机或扬声器等设备进行播放,可获得预期的声源位置信息。
其中,HRTF是声源传输到双耳的频域传输函数,自由声场情况下其定义为:
式中,PL和PR分别代表声源传输到左右耳处的复数声压;PO代表头部不存在时中心位置的复数声压;r代表头中心与声源的距离;θ、φ分别代表声源的水平角度和俯仰角(以球坐标系为例,头中心为坐标原点);f代表声源的激励函数。其中,当r>1.2米时,HRTF就成为与距离无关的函数。本申请中,不同的HRTF可以在音乐播放时为用户带来不同的听觉效果。
声场,是指媒介中有声波存在的区域。声源在均匀、各向同性的媒质中,边界的影响可以不计的声场,称为自由声场。在自由声场中,声波按声源的辐射特性向各个方向不受阻碍和干扰地传播。本申请中,虚拟空间声场是虚构的声场,比如,虚拟空间声场可以是虚构的自由声场,假设在这个虚拟空间声场中分布有至少一个虚拟音箱,从而可以模拟音乐播放时,用户在该虚拟空间声场中的一个位置上接收到的至少一个虚拟音箱播放音乐的声音,其中,上述虚拟音箱也是假设存在的。
但是,在采用虚拟空间声场来表现音乐播放时,容易忽视用户在真实声场中并非是停留在一个位置上不动的,因此降低了虚拟空间声场中音乐播放的真实感。为了解决这一技术问题,本申请提出了一种音乐播放的方法,该方法的详细描述如下实施例所示。
本申请提出的一种音乐播放的方法,可以应用于终端中,该终端可以是台式计算机、膝上型便携计算机、智能手机、平板电脑、电子书阅读器、电子游戏机、动态影像专家压缩标准音频层面3(Moving Picture Experts Group Audio Layer III,MP3)、动态影像专家压缩标准音频层面4(Moving Picture Experts Group Audio Layer IV,MP4)播放器、以及动态影像专家压缩标准音频层面5(Moving Picture Experts Group Audio Layer V,MP5)等等。
关于硬件结构,上述终端包括了压力触控屏120、存储器140和处理器160,请参考图1所示的终端的结构框图。
压力触控屏120可以是电容屏或者电阻屏。压力触控屏120用于实现终端与用户之间的交互。在本申请的实施例中,终端通过压力触控屏120获得用户触发的音乐播放的相关操作,比如,位置调整操作、参数设置操作、音乐播放操作、音乐停止播放操作等。
还存在一种情况,上述终端还包括物理按键,该物理按键也用于实现终端与用户之间的交互。在本申请的实施例中,终端也可以通过物理按键获得用户触发的音乐播放的相关操作。
存储器140可以包括一个或者多个计算机可读存储介质。上述计算机存储介质包括随机存取存储器(Random Access Memory,RAM)、只读存储器(Read Only Memory,ROM)、闪存(Flash)中的至少一种。存储器140中安装有操作系统12和应用程序14。
操作系统12是为应用程序14提供对计算机硬件的安全访问的基础软件。示例性的,操作系统12可以是安卓系统(Android)或者苹果系统(IOS)。应用程序14包括支持音乐播放功能的应用程序。
处理器160可以包括一个或者多个处理核心,比如4核心处理器、8核心处理器。示例性的,处理器160用于根据压力触控屏120上接收到的音乐播放的相关操作,执行不同操作对应的不同命令。
在一个可选地实施例中,终端上还设置有角运动检测装置,该角运动检测装置用于检测终端移动时的转动角度。示例性的,上述角运动检测装置包括陀螺仪、三轴陀螺仪、姿态传感器、电子罗盘等。
请参考图2,示出了本申请一个示例性实施例提供的音乐播放的方法的流程图,该方法应用于图1所示的终端中,该方法包括:
步骤201,响应于终端上的位置调整操作,确定终端的空间转动角度。
可选地,上述位置调整操作可以是终端自身的转动操作。示例性的,终端中设置有角运动检测装置;在终端中运行支持音乐播放的应用程序时,终端通过角运动检测装置对自身运动进行实时检测;当终端的发生转动时,即是发生了终端的位置调整操作,通过角运动检测装置确定终端的空间转动角度。示例性的,上述空间转动角度可以是终端在三维空间内的转动角度。
比如,在位置调整操作触发前,终端中设置的电子罗盘指向正北方向;在位置调整操作触发后,电子罗盘指向东北方向60°(也即60度),确定终端在一个水平面上从正北方向朝向东北方向转动了60°。
在终端上还可以显示应用程序的用户界面,该用户界面上显示有虚拟空间声场,该虚拟空间声场中包括至少一个虚拟音箱,该至少一个虚拟音箱环绕一个参考点分布在虚拟空间声场中。
在一个可选地实施例中,上述位置调整操作可以是终端上触发的对至少一个虚拟音箱的拖动操作,该拖动操作是指以参考点为轴,拖动虚拟空间声场中至少一个虚拟音箱转动的操作,也即是对虚拟空间声场中至少一个虚拟音箱的位置调整操作。终端响应于用户界面上对至少一个虚拟音箱的拖动操作,确定拖动操作产生的转动角度,以拖动操作产生的转动角度代替终端空间转动角度,来调整虚拟空间声场中至少一个虚拟音箱的分布位置。
步骤202,基于空间转动角度将虚拟空间声场中至少一个虚拟音箱的第一分布位置调整为第二分布位置。
其中,虚拟音箱的分布位置是指虚拟空间声场中至少一个虚拟音箱环绕参考点分布的空间位置,第二分布位置不同于第一分布位置。
终端以参考点为中心,按照空间转动角度将虚拟空间声场中的至少一个虚拟音箱从第一分布位置转动至第二分布位置。
可选地,至少一个虚拟音箱中包括目标虚拟音箱,该目标虚拟音箱是指虚拟空间声场中与参考点之间相对位置可调整的虚拟音箱;终端从至少一个虚拟音箱中确定出目标虚拟音箱;基于空间转动角度将目标虚拟音箱的第一分布位置调整为第二分布位置。
示例性的,空间转动角度包括水平面上顺时针转动指定角度;或者,空间转动角度包括水平面上逆时针转动指定角度;或者,空间转动角度包括在铅垂面上顺时针转动指定角度;或者,空间转动角度包括铅垂线上逆时针转动指定角度;其中,水平面是指与铅垂线垂直的平面,铅垂面是指铅垂线所在的平面;
终端以参考点所在铅垂线为轴,将目标虚拟音箱在水平面上顺时针转动指定角度,以从第一分布位置转动至第二分布位置;或者,以参考点所在铅垂线为轴,将目标虚拟音箱在水平面上逆时针转动指定角度,以从第一分布位置转动至第二分布位置;
或者,终端以参考点所在参考线为轴,将目标虚拟音箱在铅垂面上顺时针转动指定角度,以从第一分布位置转动至第二分布位置;或者,以参考点所在参考线为轴,将目标虚拟音箱在铅垂面上逆时针转动指定角度,以从第一分布位置转动至第二分布位置;其中,上述参考线是一个水平面上指定方向上的直线,比如,是一个水平面上南北方向的直线,又比如,是一个水平面上东西方向的直线。
存在一种情况,至少一个虚拟音箱中包括非目标虚拟音箱,该目标虚拟音箱是指虚拟空间声场中与参考点之间相对位置不可调整的虚拟音箱;终端确定不调整非目标虚拟音箱的分布位置。
示例性的,如图3,虚拟空间声场21与虚拟音箱22之间相对位置不变,虚拟空间声场21的参考点上显示有一个虚拟人物23;在终端转动之前,虚拟空间声场21、虚拟音箱22与虚拟人物23的相对位置如上图所示;在终端转动之后,空间转动角度为水平面上顺时针转动角度A,从二维水平面上来看,以虚拟人物23所在点(也即参考点)为中心,虚拟空间声场21和虚拟音箱22均顺时针转动了角度A,虚拟空间声场21、虚拟音箱22与虚拟人物23的相对位置如下图所示,也即,虚拟音箱从第一分布位置上转动至了第二分布位置上。在图3所示的场景下,是假设用户在虚拟空间声场中的位置不变、正脸朝向不变,通过虚拟音箱的分布位置的调整,来改变用户与虚拟音箱之间的相对位置。
步骤203,将第一分布位置对应的第一播放方式切换为第二分布位置对应的第二播放方式。
播放方式用于确定音乐播放时位于参考点处用户从至少一个虚拟音箱的声源接收到声音,也即播放方式是指模拟用户位于参考点时双耳从至少一个虚拟音箱处声源接收的声音,作为音乐播放的声音的方式。示例性的,该播放方式是采用耳机进行音乐播放时的方式。
由于至少一个虚拟音箱的分布位置发生了变化,所以音乐传递到用户双耳的声音也发生了变化,比如,左耳与右耳接收到的声音的音量大小明显不一致。播放方式可以是由头部相关传递函数表征的,以此来体现声音传递至用户双耳的声音变化;终端将第一播放方式对应的头部相关传递函数中的第一分布位置替换为第二分布位置,得到第二播放方式对应的头部相关传递函数。
在一种可选地实施例中,终端还可以基于至少一个虚拟音箱的第二分布位置、参考点的第三分布位置、头部相关传递函数值和音乐的声源频率,重新构建第二分布位置对应的头部相关传递函数。该头部相关传递函数值可以是预先设置的,或者是默认的。
步骤204,通过耳机以第二播放方式对音乐进行播放。
终端利用空间声技术或者双耳技术对第二播放方式对应的头部相关传递函数进行处理,在音乐播放时准确的构建出所需的双耳声压信号,然后通过耳机对双耳声压信号传递至用户的双耳,以对音乐进行播放。
示例性的,播放方式对应的头部传递相关函数是方程组;在这个方程组中包括了每一个虚拟音箱对应的一组头部传递相关函数,每一组头部传递相关函数又包括了左耳和右耳分布对应的函数。终端对至少一个音箱处声源所需传递的双耳声压信号进行叠加处理,然后通过耳机将双耳声压信号传递至用户双耳,实现对音乐的播放。
综上所述,本实施例提供的音乐播放的方法,在终端的位置发生变化时,调整虚拟空间声场中至少一个虚拟音箱的分布位置,基于至少一个虚拟音箱的分布位置变化,调整音乐播放的声音,以模拟用户在真实声场中转动时,双耳接收到音乐的声音变化,提升虚拟空间声场中音乐播放的真实感,使用户通过耳机即能体验到在真实声场中转动时音乐声音的起伏变化,达到身临其境的听觉效果。
在一个可选地实施例中,第一分布位置是虚拟空间声场开启时,至少一个虚拟音箱在虚拟空间声场中的分布位置,在这一场景下,终端音乐播放时,首先构建第一分布位置对应的头部相关传递函数,示例性的,如图4,示出了本申请一个示例性实施例提供的函数构建方法的流程图,步骤如下:
步骤301,响应于应用程序中的虚拟空间声场已开启,确定至少一个虚拟音箱的第一分布位置和参考点的第三分布位置;以及获取头部相关传递函数值和音乐的声源频率。
在应用程序中的虚拟空间声场已开启时,获取至少一个虚拟音箱中每一个虚拟音箱的第一分布位置作为声源位置,获取参考点的第三分布位置作为用户的头部位置,获取双耳的头部相关传递函数值,获取所需播放音乐的声源频率。
示例性的,参考点是一个三维虚拟空间中的坐标点,终端可以参考点的第三分布位置作为头部位置,以作为构建头部相关传递函数的构建参数。
可选地,上述头部相关传递函数值可以是默认的,终端从应用程序的设置参数中获取默认的头部相关传递函数值。或者,
上述头部相关传递函数值可以是由用户预先设置的,终端从应用程序的设置参数中获取预先设置的头部相关传递函数值;或者,应用程序中登录有用户帐号,终端获取与用户帐号对应的头部相关传递函数值,示例性的,头部相关传递函数值是与用户帐号对应存储在应用程序的后台服务器中的,则终端从后台服务器获取与用户帐号对应的头部相关传递函数值。
步骤302,基于第一分布位置、第三分布位置、头部相关传递函数值和声源频率,构建第一分布位置对应的头部相关传递函数。
示例性的,针对每一个虚拟音箱,终端基于第一分布位置和第三分布位置确定头中心与声源的距离、以及声源的水平角度和俯仰角;基于头中心与声源的距离、声源的水平角度和俯仰角、左耳的头部相关传递函数值和声源频率,构建自由声场中左耳的头部相关传递函数,以及基于头中心与声源的距离、声源的水平角度和俯仰角、右耳的头部相关传递函数值和声源频率,构建自由声场中右耳的头部相关传递函数。
综上所述,本实施例提供的函数构建方法,构建了双耳的头部相关传递函数,使终端可以准确地计算每一个虚拟音箱处声源传递至双耳时的声压信号,为虚拟空间声场中音乐播放时各类音效提供了实现基础。
示例性的,头部相关传递函数值的决定因素包括人的耳廓形状,因此,将耳廓形状划分类型,为不同类型的耳廓形状对应设置不同的头部相关传递函数值。如图5,在一些实施例中,头部相关传递函数值的设置步骤可以如下所示:
步骤401,在终端上显示应用程序的设置界面,设置界面上包括至少两个函数值选项。
在终端上打开应用程序的设置界面,该设置界面上包括至少两个函数值选项,每一个函数值选项对应双耳的一组头部相关传递函数值。
步骤402,响应于对函数值选项的选择操作,将选中的函数值选项对应的头部相关传递函数值与用户帐号对应存储。
示例性的,终端接收到对一个函数值选项的选择操作,比如,点击参数、滑动操作等,则响应于对函数值选项的选择操作,将选中的函数值选项对应的头部相关传递函数值与用户帐号对应存储。比如,将头部相关传递函数值与用户帐号对应存储至应用程序的后台服务器。
如图6,在另一些实施例中,头部相关传递函数值的设置步骤还可以如下所示:
步骤501,通过摄像头采集用户双耳的耳廓图像。
终端上设置有摄像头;终端可以通过摄像头采集用户双耳的耳廓图像。示例性的,终端可以通过摄像头采集用户一侧耳朵的耳廓图像,采集左耳的耳廓图像或者右耳的耳廓图像。
步骤502,将耳廓图像与至少两组耳廓参考图像进行匹配,得到至少两个匹配相似度。
终端将采集的一组耳廓图像与至少两组耳廓参考图像中的每一组耳廓参考图像进行匹配,计算出至少两个匹配相似度。
示例性的,终端还可以基于用户一侧耳朵的耳廓图像与每一组耳廓参考图像中双耳的耳廓参考图像分别进行匹配,得到至少四个匹配相似度。
示例性的,终端还可以基于用户左侧耳朵的耳廓图像与每一个耳廓参考图像进行匹配,得到至少四个第一匹配相似度;以及基于用户右侧耳朵的耳廓图像与每一个耳廓参考图像进行匹配,得到至少四个第二相似匹配度。
步骤503,确定出至少两个匹配相似度中最大匹配相似度对应的目标耳廓参考图像。
终端确定出至少两个匹配相似度中最大匹配相似度对应的一组目标耳廓参考图像。
示例性的,终端确定出至少四个匹配相似度中最大匹配相似度对应的一组目标耳廓参考图像。
示例性的,终端确定出至少四个第一匹配相似度中最大第一匹配相似度对应的第一目标耳廓参考图像;以及确定出至少四个第二匹配相似度中最大第二匹配相似度对应的第二目标耳廓参考图像,即得到一组目标耳廓参考图像。
步骤504,将目标耳廓参考图像对应的头部相关传递函数值与用户帐号对应存储。
应用程序中登录有用户帐号;终端将一组目标耳廓参考图像对应的一组头部相关传递函数值与用户帐号对应存储。示例性的,终端将目标耳廓参考图像对应的左右耳的头部相关传递函数值与用户帐号对应存储。
示例性的,终端中存储有图像标识与头部相关传递函数值的对应关系表;终端从对应关系表中查找目标耳廓参考图像的图像标识对应的左右耳的头部相关传递函数值,将上述左右耳的头部相关传递函数值与用户帐号对应存储。
示例性的,后台服务器中存储有图像标识与头部相关传递函数值的对应关系表;终端还可以将目标耳廓参考图像的图像标识发送至应用程序的后台服务器,由后台服务器从对应关系表中查找目标耳廓参考图像的图像标识对应的左右耳的头部相关传递函数值,将上述左右耳的头部相关传递函数值与用户帐号对应存储。
比如,参考表1,确定目标耳廓参考图像的图像标识pic_1对应的头部相关传递函数值(El_1,Er_1),其中,El表示左耳的头部相关传递函数值,Er表示左耳的头部相关传递函数值,将(El_1,Er_1)与用户标识对应存储。
表1
图像标识 | 头部相关传递函数值 |
pic_1 | (El_1,Er_1) |
pic_2 | (El_2,Er_2) |
示例性的,上述头部相关传递函数值是对人在真实声场中测试采集到的值。
综上所述,本实施例提供的函数值设置的方法,可以基于耳廓类型设置个性化的头部相关传递函数值,由于耳廓形状影响人接收声音的效果,设置不同的耳廓形状对应的头部相关传递函数值,能够为用户提供多种类型的音乐听觉效果,使用户可以选择适合自己的头部相关传递函数值,提升了用户的听音乐体验。
图7示出了本申请一个示例性实施例提供的音乐播放的装置的框图,该装置可以通过软件、硬件、或者二者结合实现成为终端的部分或者全部。该装置包括:
确定模块601,用于响应于终端上的位置调整操作,确定终端的空间转动角度;
调整模块602,用于基于空间转动角度将虚拟空间声场中至少一个虚拟音箱的第一分布位置调整为第二分布位置,虚拟音箱的分布位置是指虚拟空间声场中至少一个虚拟音箱环绕参考点分布的空间位置,第二分布位置不同于第一分布位置;
切换模块603,用于将第一分布位置对应的第一播放方式切换为第二分布位置对应的第二播放方式,播放方式用于确定音乐播放时位于参考点处用户从至少一个虚拟音箱的声源接收到的声音;
播放模块604,用于通过耳机以第二播放方式对音乐进行播放。
在一些实施例中,调整模块602,用于:
从至少一个虚拟音箱中确定出目标虚拟音箱,目标虚拟音箱是指虚拟空间声场中与参考点之间相对位置可调整的虚拟音箱;
基于空间转动角度将目标虚拟音箱的第一分布位置调整为第二分布位置。
在一些实施例中,空间转动角度包括在水平面上顺时针转动指定角度,水平面是指与铅垂线垂直的平面;或,空间转动角度包括在铅垂面上顺时针转动指定角度,铅垂面是指铅垂线所在的平面;调整模块602,用于:
以参考点所在铅垂线为轴,将目标虚拟音箱在水平面上顺时针转动指定角度,以从第一分布位置转动至第二分布位置;
或者,
以参考点所在铅垂线为轴,将目标虚拟音箱在水平面上逆时针转动指定角度,以从第一分布位置转动至第二分布位置。
在一些实施例中,播放方式是由头部相关传递函数表征的;切换模块603,用于:
将第一播放方式对应的头部相关传递函数中的第一分布位置替换为第二分布位置,得到第二播放方式对应的头部相关传递函数。
在一些实施例中,播放方式是由头部相关传递函数表征的;该装置还包括获取模块605和构建模块606;
确定模块601,用于响应于应用程序中的虚拟空间声场已开启,确定至少一个虚拟音箱的第一分布位置和参考点的第三分布位置;
获取模块605,用于获取头部相关传递函数值和音乐的声源频率;
构建模块606,用于基于第一分布位置、第三分布位置、头部相关传递函数值和声源频率,构建第一分布位置对应的头部相关传递函数。
在一些实施例中,应用程序中登录有用户帐号;获取模块605,用于:
获取与用户帐号对应的头部相关传递函数值。
在一些实施例中,该装置还包括显示模块607和存储模块608;
显示模块607,用于在终端上显示应用程序的设置界面,设置界面上包括至少两个函数值选项;
存储模块608,用于响应于对函数值选项的选择操作,将选中的函数值选项对应的头部相关传递函数值与用户帐号对应存储。
在一些实施例中,终端上设置有摄像头;该装置还包括采集模块609、匹配模块610和存储模块608;
采集模块609,用于通过摄像头采集用户双耳的耳廓图像;
匹配模块610,用于将耳廓图像与至少两组耳廓参考图像进行匹配,得到至少两个匹配相似度;
确定模块601,用于确定出至少两个匹配相似度中最大匹配相似度对应的目标耳廓参考图像;
存储模块608,用于将目标耳廓参考图像对应的头部相关传递函数值与用户帐号对应存储。
综上所述,本实施例提供的音乐播放的装置,在终端的位置发生变化时,调整虚拟空间声场中至少一个虚拟音箱的分布位置,基于至少一个虚拟音箱的分布位置变化,调整音乐播放的声音,以模拟用户在真实声场中转动时,双耳接收到音乐的声音变化,提升虚拟空间声场中音乐播放的真实感,使用户通过耳机即能体验到在真实声场中转动时音乐声音的起伏变化,达到身临其境的听觉效果。
图8示出了本申请一个示例性实施例提供的计算机设备的结构示意图。该计算机设备可以是执行如本申请提供的音乐播放的方法的终端。具体来讲:
计算机设备700包括中央处理单元(CPU,Central Processing Unit)701、包括随机存取存储器(RAM,Random Access Memory)702和只读存储器(ROM,Read Only Memory)703的系统存储器704,以及连接系统存储器704和中央处理单元701的系统总线705。计算机设备700还包括帮助计算机内的各个器件之间传输信息的基本输入/输出系统(I/O系统,Input Output System)706,和用于存储操作系统713、应用程序714和其他程序模块715的大容量存储设备707。
基本输入/输出系统706包括有用于显示信息的显示器708和用于用户输入信息的诸如鼠标、键盘之类的输入设备709。其中显示器708和输入设备709都通过连接到系统总线705的输入输出控制器710连接到中央处理单元701。基本输入/输出系统706还可以包括输入输出控制器710以用于接收和处理来自键盘、鼠标、或电子触控笔等多个其他设备的输入。类似地,输入输出控制器710还提供输出到显示屏、打印机或其他类型的输出设备。
大容量存储设备707通过连接到系统总线705的大容量存储控制器(未示出)连接到中央处理单元701。大容量存储设备707及其相关联的计算机可读介质为计算机设备700提供非易失性存储。也就是说,大容量存储设备707可以包括诸如硬盘或者紧凑型光盘只读存储器(CD-ROM,Compact Disc Read Only Memory)驱动器之类的计算机可读介质(未示出)。
计算机可读介质可以包括计算机存储介质和通信介质。计算机存储介质包括以用于存储诸如计算机可读指令、数据结构、程序模块或其他数据等信息的任何方法或技术实现的易失性和非易失性、可移动和不可移动介质。计算机存储介质包括RAM、ROM、可擦除可编程只读存储器(EPROM,Erasable Programmable Read Only Memory)、带电可擦可编程只读存储器(EEPROM,Electrically Erasable Programmable Read Only Memory)、闪存或其他固态存储其技术,CD-ROM、数字通用光盘(DVD,Digital Versatile Disc)或固态硬盘(SSD,Solid State Drives)、其他光学存储、磁带盒、磁带、磁盘存储或其他磁性存储设备。其中,随机存取记忆体可以包括电阻式随机存取记忆体(ReRAM,Resistance RandomAccess Memory)和动态随机存取存储器(DRAM,Dynamic Random Access Memory)。当然,本领域技术人员可知计算机存储介质不局限于上述几种。上述的系统存储器704和大容量存储设备707可以统称为存储器。
根据本申请的各种实施例,计算机设备700还可以通过诸如因特网等网络连接到网络上的远程计算机运行。也即计算机设备700可以通过连接在系统总线705上的网络接口单元711连接到网络712,或者说,也可以使用网络接口单元711来连接到其他类型的网络或远程计算机系统(未示出)。
上述存储器还包括一个或者一个以上的程序,一个或者一个以上程序存储于存储器中,被配置由CPU执行。
在一个可选的实施例中,提供了一种计算机设备,该计算机设备包括处理器和存储器,存储器中存储有至少一条指令、至少一段程序、代码集或指令集,至少一条指令、至少一段程序、代码集或指令集由处理器加载并执行以实现如上所述的音乐播放的方法。
在一个可选的实施例中,提供了一种计算机可读存储介质,该存储介质中存储有至少一条指令、至少一段程序、代码集或指令集,至少一条指令、至少一段程序、代码集或指令集由处理器加载并执行以实现如上所述的音乐播放的方法。
可选地,该计算机可读存储介质可以包括:只读存储器(ROM,Read Only Memory)、随机存取记忆体(RAM,Random Access Memory)、固态硬盘(SSD,Solid State Drives)或光盘等。其中,随机存取记忆体可以包括电阻式随机存取记忆体(ReRAM,Resistance RandomAccess Memory)和动态随机存取存储器(DRAM,Dynamic Random Access Memory)。上述本申请实施例序号仅仅为了描述,不代表实施例的优劣。
本领域普通技术人员可以理解实现上述实施例的全部或部分步骤可以通过硬件来完成,也可以通过程序来指令相关的硬件完成,所述的程序可以存储于一种计算机可读存储介质中,上述提到的存储介质可以是只读存储器,磁盘或光盘等。
本申请还提供一种计算机可读存储介质,该存储介质中存储有至少一条指令、至少一段程序、代码集或指令集,该至少一条指令、至少一段程序、代码集或指令集由处理器加载并执行以实现上述各方法实施例提供的音乐播放的方法。
本申请还提供了一种计算机程序产品,上述计算机程序产品包括计算机指令,上述计算机指令存储在计算机可读存储介质中。计算机设备的处理器从上述计算机可读存储介质读取上述计算机指令,上述处理器执行上述计算机指令,使得上述计算机设备执行如上所述的音乐播放的方法。
应当理解的是,在本文中提及的“多个”是指两个或两个以上。“和/或”,描述关联对象的关联关系,表示可以存在三种关系,例如,A和/或B,可以表示:单独存在A,同时存在A和B,单独存在B这三种情况。字符“/”一般表示前后关联对象是一种“或”的关系。
本领域普通技术人员可以理解实现上述实施例的全部或部分步骤可以通过硬件来完成,也可以通过程序来指令相关的硬件完成,所述的程序可以存储于一种计算机可读存储介质中,上述提到的存储介质可以是只读存储器,磁盘或光盘等。
以上所述仅为本申请的可选实施例,并不用以限制本申请,凡在本申请的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本申请的保护范围之内。
Claims (11)
1.一种音乐播放的方法,其特征在于,所述方法包括:
响应于终端上的位置调整操作,确定所述终端的空间转动角度;
基于所述空间转动角度将虚拟空间声场中至少一个虚拟音箱的第一分布位置调整为第二分布位置,所述虚拟音箱的分布位置是指所述虚拟空间声场中所述至少一个虚拟音箱环绕参考点分布的空间位置,所述第二分布位置不同于所述第一分布位置;
将所述第一分布位置对应的第一播放方式切换为所述第二分布位置对应的第二播放方式,所述播放方式用于确定音乐播放时位于所述参考点处用户从所述至少一个虚拟音箱的声源接收到的声音;
通过耳机以所述第二播放方式对音乐进行播放。
2.根据权利要求1所述的方法,其特征在于,所述基于所述空间转动角度将虚拟空间声场中至少一个虚拟音箱的第一分布位置调整为第二分布位置,包括:
从所述至少一个虚拟音箱中确定出目标虚拟音箱,所述目标虚拟音箱是指所述虚拟空间声场中与所述参考点之间相对位置可调整的虚拟音箱;
基于所述空间转动角度将所述目标虚拟音箱的所述第一分布位置调整为所述第二分布位置。
3.根据权利要求2所述的方法,其特征在于,所述空间转动角度包括在水平面上顺时针转动指定角度,所述水平面是指与铅垂线垂直的平面;或,所述空间转动角度包括在铅垂面上顺时针转动所述指定角度,所述铅垂面是指所述铅垂线所在的平面;
所述基于所述空间转动角度将所述目标虚拟音箱的所述第一分布位置调整为所述第二分布位置,包括:
以所述参考点所在铅垂线为轴,将所述目标虚拟音箱在所述水平面上顺时针转动所述指定角度,以从所述第一分布位置转动至所述第二分布位置;
或者,
以所述参考点所在铅垂线为轴,将所述目标虚拟音箱在所述水平面上逆时针转动所述指定角度,以从所述第一分布位置转动至所述第二分布位置。
4.根据权利要求1至3任一所述的方法,其特征在于,所述播放方式是由头部相关传递函数表征的;
所述将所述第一分布位置对应的第一播放方式切换为所述第二分布位置对应的第二播放方式,包括:
将所述第一播放方式对应的头部相关传递函数中的所述第一分布位置替换为所述第二分布位置,得到所述第二播放方式对应的头部相关传递函数。
5.根据权利要求1至3任一所述的方法,其特征在于,所述播放方式是由头部相关传递函数表征的;
所述响应于终端的位置调整操作,确定所述终端的空间转动角度之前,包括:
响应于应用程序中的所述虚拟空间声场已开启,确定所述至少一个虚拟音箱的所述第一分布位置和所述参考点的第三分布位置;以及
获取头部相关传递函数值和所述音乐的声源频率;
基于所述第一分布位置、所述第三分布位置、所述头部相关传递函数值和所述声源频率,构建所述第一分布位置对应的头部相关传递函数。
6.根据权利要求5所述的方法,其特征在于,所述应用程序中登录有用户帐号;
所述获取头部相关传递函数值,包括:
获取与所述用户帐号对应的所述头部相关传递函数值。
7.根据权利要求6所述的方法,其特征在于,所述获取与所述用户帐号对应的所述头部相关传递函数值之前,包括:
在所述终端上显示所述应用程序的设置界面,所述设置界面上包括至少两个函数值选项;
响应于对函数值选项的选择操作,将选中的函数值选项对应的头部相关传递函数值与所述用户帐号对应存储。
8.根据权利要求6所述的方法,其特征在于,所述终端上设置有摄像头;
所述获取与所述用户帐号对应的所述头部相关传递函数值之前,包括:
通过所述摄像头采集用户双耳的耳廓图像;
将所述耳廓图像与至少两组耳廓参考图像进行匹配,得到至少两个匹配相似度;
确定出所述至少两个匹配相似度中最大匹配相似度对应的目标耳廓参考图像;
将所述目标耳廓参考图像对应的头部相关传递函数值与所述用户帐号对应存储。
9.一种音乐播放的装置,其特征在于,所述装置包括:
确定模块,用于响应于终端上的位置调整操作,确定所述终端的空间转动角度;
调整模块,用于基于所述空间转动角度将虚拟空间声场中至少一个虚拟音箱的第一分布位置调整为第二分布位置,所述虚拟音箱的分布位置是指所述虚拟空间声场中所述至少一个虚拟音箱环绕参考点分布的空间位置,所述第二分布位置不同于所述第一分布位置;
切换模块,用于将所述第一分布位置对应的第一播放方式切换为所述第二分布位置对应的第二播放方式,所述播放方式用于确定音乐播放时位于所述参考点处用户从所述至少一个虚拟音箱的声源接收到的声音;
播放模块,用于通过耳机以所述第二播放方式对音乐进行播放。
10.一种终端,其特征在于,所述终端包括:处理器和存储器,所述存储器存储有计算机程序,所述计算机程序由所述处理器加载并执行以实现如权利要求1至8任一所述的音乐播放的方法。
11.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质中存储有计算机程序,所述计算机程序由处理器加载并执行以实现如权利要求1至8任一所述的音乐播放的方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110625888.8A CN113365191A (zh) | 2021-06-04 | 2021-06-04 | 音乐播放的方法、装置、设备及存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110625888.8A CN113365191A (zh) | 2021-06-04 | 2021-06-04 | 音乐播放的方法、装置、设备及存储介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN113365191A true CN113365191A (zh) | 2021-09-07 |
Family
ID=77532361
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202110625888.8A Pending CN113365191A (zh) | 2021-06-04 | 2021-06-04 | 音乐播放的方法、装置、设备及存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN113365191A (zh) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114390403A (zh) * | 2021-12-27 | 2022-04-22 | 达闼机器人有限公司 | 音频播放效果的展示方法及装置 |
WO2024088135A1 (zh) * | 2022-10-27 | 2024-05-02 | 安克创新科技股份有限公司 | 音频处理方法、音频播放设备及计算机可读存储介质 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104869524A (zh) * | 2014-02-26 | 2015-08-26 | 腾讯科技(深圳)有限公司 | 三维虚拟场景中的声音处理方法及装置 |
CN105027580A (zh) * | 2012-11-22 | 2015-11-04 | 雷蛇(亚太)私人有限公司 | 用于输出修改的音频信号的方法以及通过应用程序产生的图形用户界面 |
CN106572425A (zh) * | 2016-05-05 | 2017-04-19 | 王杰 | 音频处理装置及方法 |
US10206055B1 (en) * | 2017-12-28 | 2019-02-12 | Verizon Patent And Licensing Inc. | Methods and systems for generating spatialized audio during a virtual experience |
CN112037738A (zh) * | 2020-08-31 | 2020-12-04 | 腾讯音乐娱乐科技(深圳)有限公司 | 一种音乐数据的处理方法、装置及计算机存储介质 |
-
2021
- 2021-06-04 CN CN202110625888.8A patent/CN113365191A/zh active Pending
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105027580A (zh) * | 2012-11-22 | 2015-11-04 | 雷蛇(亚太)私人有限公司 | 用于输出修改的音频信号的方法以及通过应用程序产生的图形用户界面 |
CN104869524A (zh) * | 2014-02-26 | 2015-08-26 | 腾讯科技(深圳)有限公司 | 三维虚拟场景中的声音处理方法及装置 |
CN106572425A (zh) * | 2016-05-05 | 2017-04-19 | 王杰 | 音频处理装置及方法 |
US10206055B1 (en) * | 2017-12-28 | 2019-02-12 | Verizon Patent And Licensing Inc. | Methods and systems for generating spatialized audio during a virtual experience |
CN112037738A (zh) * | 2020-08-31 | 2020-12-04 | 腾讯音乐娱乐科技(深圳)有限公司 | 一种音乐数据的处理方法、装置及计算机存储介质 |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114390403A (zh) * | 2021-12-27 | 2022-04-22 | 达闼机器人有限公司 | 音频播放效果的展示方法及装置 |
WO2024088135A1 (zh) * | 2022-10-27 | 2024-05-02 | 安克创新科技股份有限公司 | 音频处理方法、音频播放设备及计算机可读存储介质 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11838707B2 (en) | Capturing sound | |
US9131305B2 (en) | Configurable three-dimensional sound system | |
WO2020148120A2 (en) | Processing audio signals | |
US20180310115A1 (en) | Collaborative personalization of head-related transfer function | |
CN107996028A (zh) | 校准听音装置 | |
CN111294724B (zh) | 多个音频流的空间重新定位 | |
US20140146984A1 (en) | Constrained dynamic amplitude panning in collaborative sound systems | |
WO2017051079A1 (en) | Differential headtracking apparatus | |
CN106576203A (zh) | 确定和使用房间优化传输函数 | |
JP2013250838A (ja) | 情報処理プログラム、情報処理装置、情報処理システム、および情報処理方法 | |
CN109086029B (zh) | 一种音频播放方法及vr设备 | |
CN101662720A (zh) | 声音处理装置、声像定位位置调节方法及视频处理装置 | |
CN113365191A (zh) | 音乐播放的方法、装置、设备及存储介质 | |
CN111050271B (zh) | 用于处理音频信号的方法和装置 | |
US10979846B2 (en) | Audio signal rendering | |
KR20200140252A (ko) | Mpeg-h 3d 오디오의 3 자유도(3dof+) 확장을 위한 방법, 장치 및 시스템 | |
US11418903B2 (en) | Spatial repositioning of multiple audio streams | |
CN113632505A (zh) | 装置、方法、声音系统 | |
CN108476365A (zh) | 音频处理装置和方法以及程序 | |
JP2022547253A (ja) | 不一致視聴覚捕捉システム | |
WO2019199536A1 (en) | Applying audio technologies for the interactive gaming environment | |
US10735885B1 (en) | Managing image audio sources in a virtual acoustic environment | |
CN111726732A (zh) | 高保真度环绕声格式的音效处理系统及音效处理方法 | |
KR20190081163A (ko) | 입체 음향 컨텐츠 저작 툴을 이용한 선택적 광고 제공 방법 및 이를 위한 어플리케이션 | |
CN113194400B (zh) | 音频信号的处理方法、装置、设备及存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20210907 |
|
RJ01 | Rejection of invention patent application after publication |