CN109413546A - 音频处理方法、装置、终端设备及存储介质 - Google Patents
音频处理方法、装置、终端设备及存储介质 Download PDFInfo
- Publication number
- CN109413546A CN109413546A CN201811273592.9A CN201811273592A CN109413546A CN 109413546 A CN109413546 A CN 109413546A CN 201811273592 A CN201811273592 A CN 201811273592A CN 109413546 A CN109413546 A CN 109413546A
- Authority
- CN
- China
- Prior art keywords
- audio
- data
- orientation angles
- sound source
- preset table
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R3/00—Circuits for transducers, loudspeakers or microphones
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
- G06F3/012—Head tracking input arrangements
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R2420/00—Details of connection covered by H04R, not provided for in its groups
- H04R2420/03—Connection circuits to selectively connect loudspeakers or headphones to amplifiers
Landscapes
- Engineering & Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Human Computer Interaction (AREA)
- General Physics & Mathematics (AREA)
- Acoustics & Sound (AREA)
- Signal Processing (AREA)
- Stereophonic System (AREA)
Abstract
本申请实施例公开了一种音频处理方法、装置、终端设备及存储介质,该方法包括确定音频声源相对于音频接收者的方位角度;如果所述方位角度未记录在预设表中,则依据所述预设表中记录的已存方位角度对应的已存函数数据计算所述方位角度对应的函数数据;将所述音频声源的音频数据和所述函数数据进行卷积运算得到处理后的音频数据,本方案降低了音频处理过程中需要的数据量,便于在终端设备中实施。
Description
技术领域
本申请实施例涉及计算机技术,尤其涉及一种音频处理方法、装置、终端设备及存储介质。
背景技术
随着终端设备多媒体技术的快速发展以及处理能力的日益强大,越来越多的用户使用终端设备进行音频和视频的播放。在某些非自然场景下,如虚拟现实技术中,立体视觉技术已经日臻成熟,可为用户提供身临其境的视觉体验,而其中的听感效果无法提供真实的全方位的空间感受。
现有技术中,通过HRTF(Head Related Transfer Function,人头传递函数)对音源信号直接进行处理,能够得到使用户感知到具有一定方位信息的音频信号,然而该种方式需要大量存储空间,存在缺陷,需要改进。
发明内容
本申请提供了一种音频处理方法、装置、终端设备及存储介质,降低了音频处理过程中需要的数据量,便于在终端设备中实施。
第一方面,本申请实施例提供了一种音频处理方法,包括:
确定音频声源相对于音频接收者的方位角度;
如果所述方位角度未记录在预设表中,则依据所述预设表中记录的已存方位角度对应的已存函数数据计算所述方位角度对应的函数数据;
将所述音频声源的音频数据和所述函数数据进行卷积运算得到处理后的音频数据。
第二方面,本申请实施例还提供了一种音频处理装置,包括:
方位角度确定模块,用于确定音频声源相对于音频接收者的方位角度;
数据计算模块,用于如果所述方位角度未记录在预设表中,则依据所述预设表中记录的已存方位角度对应的已存函数数据计算所述方位角度对应的函数数据;
音频数据生成模块,用于将所述音频声源的音频数据和所述函数数据进行卷积运算得到处理后的音频数据。
第三方面,本申请实施例还提供了一种终端设备,包括:处理器、存储器以及存储在存储器上并可在处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现如本申请实施例所述的音频处理方法。
第四方面,本申请实施例还提供了一种包含终端设备可执行指令的存储介质,所述终端设备可执行指令在由终端设备处理器执行时用于执行本申请实施例所述的音频处理方法。
本方案中,确定音频声源相对于音频接收者的方位角度;如果所述方位角度未记录在预设表中,则依据所述预设表中记录的已存方位角度对应的已存函数数据计算所述方位角度对应的函数数据;将所述音频声源的音频数据和所述函数数据进行卷积运算得到处理后的音频数据,降低了音频处理过程中需要的数据量,便于在终端设备中实施。
附图说明
通过阅读参照以下附图所作的对非限制性实施例所作的详细描述,本申请的其它特征、目的和优点将会变得更明显:
图1是本申请实施例提供的一种音频处理方法的流程图;
图1a是本申请实施例提供的一种音频声源和音频接收者相对位置的示意图;
图2是本申请实施例提供的另一种音频处理方法的流程图;
图3是本申请实施例提供的另一种音频处理方法的流程图;
图3a是本申请实施例提供的一种确定音频声源和音频接收者方位角度的界面示意图;
图4是本申请实施例提供的一种音频处理装置的结构框图;
图5是本申请实施例提供的一种终端设备的结构示意图。
具体实施方式
下面结合附图和实施例对本申请作进一步的详细说明。可以理解的是,此处所描述的具体实施例用于解释本申请,而非对本申请的限定。另外还需要说明的是,为了便于描述,附图中仅示出了与本申请相关的部分而非全部结构。
图1是本申请实施例提供的一种音频处理方法的流程图,可适用于终端设备生成立体音效,该方法可以由本申请实施例提供的终端设备来执行,该终端设备的音频处理装置可采用软件和/或硬件的方式实现,如图1所示,本实施例提供的具体方案如下:
步骤S101、确定音频声源相对于音频接收者的方位角度。
音频声源为发出音频声音的音源,示例性的,在虚拟现实场景中,用户置身在一个房间内,该音频声源可以是房间内不同方位布置的虚拟发声装置,还可以是用户周围的虚拟目标物体。
音频接收者为该音频声源发出的声音的接收者,可以是终端设备的使用者,即携带终端设备的用户,该终端设备可以是用户使用的智能手机,还可以是头戴虚拟设备,当终端设备为用户使用的智能手机时,该音频声源发出的音频信号可通过智能手机接收并通过和智能手机连接的耳机进行播放,该耳机可以是蓝牙耳机或有线耳机,用户通过佩戴该耳机来接收音频声源发出的声音。
其中,该方位角度表征了音频声源相对于音频接收者的方位位置。在一个实施例中,该方位角度可以是水平方位角度,即在水平面中音频声源相对于音频接收者的方位角度。如图1a所示,图1a是本申请实施例提供的一种音频声源和音频接收者相对位置的示意图,其中音频声源1011和音频接收者1012的方位角度为θ,其中该方位角度θ为音频声源1011所在位置点和音频接收者1012所在位置点的连线和音频接收者1012水平视线1013的夹角,需要说明的是,该方位角度θ的具体表征方式还可依据不同的参照物标准确定,并不限于上述表征方式。
在一个实施例中,以终端设备为智能手机为例,可通过智能手机中预先安装的应用程序来确定音频声源相对于音频接收者的方位角度,在另个一实施例中,还可以是通过实时定位方式确定音频接收者相对于音频声源的位置来确定音频声源相对于音频接收者的方位角度。
步骤S102、如果所述方位角度未记录在预设表中,则依据所述预设表中记录的已存方位角度对应的已存函数数据计算所述方位角度对应的函数数据。
其中,预设表可以是终端设备中预先存储的表格,通过该表格记录的数据对音频声源的音频数据进行处理以生成立体音效,该预设表中记录有不同的方位角度以及对应的函数数据。该预设表可以是HRTF表,HRTF全称为Head Related Transfer Function,其为一种声音定位处理技术,通过HRTF技术可以还原来自立体空间不同方位的音频信号,得到含有方位信息的音频数据,该具有方位信息的音频数据可通过双声道耳机播放给音频接收者使音频接收者感知立体音效。
在一个实施例中,在确定出音频声源相对于音频接收者的方位角度后,确定该方位角度是否记录在预设表中,如果未记录在预设表中,则依据预设表中记录的已存方位角度对应的已存函数数据计算方位角度对应的函数数据。示例性的,该预设表中记录有角度间隔20°的一组角度数据,该组角度数据总共18个(水平面总共360°,分辨率为20°的角度进行划分共计18个角度数据),以及和该角度数据对应的左冲击响应数据和右冲击响应数据,其中冲击响应数据为HRIR(Head Related Inpulse Response,头相关冲击响应),HRIR为HRTF数据对应的时域数据,该数据可通过研发人员预先测试得到,还可以使用现有的科研机构和高等院校测量得到的数据,如加州大学戴维斯分校图像处理和集成计算中心(CIPIC)公开测试数据。如果确定出的音频声源相对于音频接收者的方位角度未记录在预设表中,如预设表以0°为起始角度,每隔20°间隔进行角度数据的存储,该音频声源相对于音频接收者的方位角度为10°,则其被判定为该方位角度未记录在预设表中,则通过预设算法计算该方位角度10°对应的左右冲击响应数据。其中,该预设算法可以但不限于插值算法。
步骤S103、将所述音频声源的音频数据和所述函数数据进行卷积运算得到处理后的音频数据。
其中,该音频声源的音频数据为需要播放的供音频接收者接收感知的数据,该音频数据包括左右两个声道的数据,分别用R(右声道数据)和L(左声道数据)进行表示。该函数数据为步骤S102确定的对应该方位角度(10°)的左右冲击响应数据,左右冲击响应数据分别表示为HR(右冲击响应数据)和HF(左冲击响应数据)。具体的,处理后的左声道音频数据表示为YL,右声道音频数据为YR,则YL和YR的计算公式如下:
YL=GL×L*HL
YR=GR×R*HR
其中,L和R分别为原始的左声道数据和右声道数据,*表示卷积运算,GL和GR分别为人耳的左耳增益系数和右耳增益系数。
由上述内容可知,通过在预设表中存储分辨率间隔较大的角度值以及对应的HRTF数据,显著降低了数据存储量,针对未存储角度值且需要进行音频处理的音频数据采用计算方式得到,保证了音频接收者能够感知到立体音效。以现有的HRTF表为例,其为了保证音频接收者能够感知到各个空间方位的立体音效,需要每隔5°进行函数数据的存储,以冲击响应长度1024为例,其需要存储360/5*1024*2=147456个系数值,占用了终端设备大量存储空间。
在上述技术方案的基础上,如果所述方位角度记录在预设表中,则将所述预设表中记录的所述方位角度对应的函数数据和所述音频声源的音频数据进行卷积运算得到处理后的音频数据。
图2是本申请实施例提供的另一种音频处理方法的流程图,可选的,所述依据所述预设表中记录的已存方位角度对应的已存函数数据计算所述方位角度对应的函数数据包括:确定所述预设表中记录的和所述方位角度相邻的两个方位角度;根据所述相邻的两个方位角度以及对应的函数数据通过插值算法计算得到所述方位角度的函数数据。如图2所示,技术方案具体如下:
步骤S201、将预设水平角度的函数数据保存在预设表中。
步骤S202、确定音频声源相对于音频接收者的方位角度。
步骤S203、判断所述方位角度是否记录在预设表中,如果是,则执行步骤S204,否则执行步骤S205。
步骤S204、将所述预设表中记录的所述方位角度对应的函数数据和所述音频声源的音频数据进行卷积运算得到处理后的音频数据。
步骤S205、确定所述预设表中记录的和所述方位角度相邻的两个方位角度。
示例性的,当前确定出的方位角度假设为10°,相应的确定出预设表中记录的和10°相邻的两个方向角度分别为0°和20°。
步骤S206、根据所述相邻的两个方位角度以及对应的函数数据通过插值算法计算得到所述方位角度的函数数据,将所述函数数据和所述音频声源的音频数据进行卷积运算得到处理后的音频数据。
其中,该插值算法可以是线性差值算法或非线性差值算法,需要说明的是,本方案并不限定需要使用的算法为插值算法,其他本领域公知的算法也包括在内。示例性的,具体计算方式如下:
H(θ)=Ak+1H(θk+1)+AkH(θk)
其中,θ为当前确定出的音频声源相对于音频接收者的方位角度,H(θ)为该方位角度对应的HRTF数据,θk和θk+1分别为θ相邻的两个方向角度,其中,
Ak+1=(θ-θk)/(θk+1-θk),Ak=1-(θ-θk)/(θk+1-θk)
由上述可知,本方案仅需存储少量的HRTF参数数据,针对未记录的方位角度的HRTF数据,采用插值算法进行计算,并最终得到处理后的音频数据,显著降低了终端设备的数据存储量,便于部署在终端设备中。
图3是本申请实施例提供的另一种音频处理方法的流程图,可选的,所述确定音频声源相对于音频接收者的方位角度包括:在触摸显示屏中显示虚拟位置界面;根据接收到的屏幕点击指令确定对应的点击位置;依据所述点击位置确定音频声源相对于音频接收者的方位角度。如图3所示,技术方案具体如下:
步骤S301、将预设水平角度的函数数据保存在预设表中。
步骤S302、在触摸显示屏中显示虚拟位置界面,根据接收到的屏幕点击指令确定对应的点击位置,依据所述点击位置确定音频声源相对于音频接收者的方位角度。
在一个实施例中,如图3a所示,图3a是本申请实施例提供的一种确定音频声源和音频接收者方位角度的界面示意图,在该界面中显示有虚拟的音频接收者头像3011,用户可通过点击界面中的位置来标记音频声源的位置,进而确定该方位角度θ,在该实施例中,方位角度θ为音频声源3012所在位置点和音频接收者3011所在位置点的连线和音频接收者3011水平视线3033的夹角,需要说明的是,该方位角度θ的具体表征方式还可依据不同的参照物标准确定,并不限于上述表征方式。
步骤S303、判断所述方位角度是否记录在预设表中,如果是,则执行步骤S304,否则执行步骤S305。
步骤S304、将所述预设表中记录的所述方位角度对应的函数数据和所述音频声源的音频数据进行卷积运算得到处理后的音频数据。
步骤S305、确定所述预设表中记录的和所述方位角度相邻的两个方位角度。
步骤S306、根据所述相邻的两个方位角度以及对应的函数数据通过插值算法计算得到所述方位角度的函数数据,将所述函数数据和所述音频声源的音频数据进行卷积运算得到处理后的音频数据。
由上述可知,通过终端设备应用程序展示的界面实现确定音频声源相对于音频接收者的方位角度,可根据用户设置进行立体声效的展示,提升了用户体验,同时提高了立体声效的模拟效率。
在另一个实施例中,音频声源相对于音频接收者的方位角度可以通过虚拟室内定位技术确定音频接收者在虚拟空间的位置,并根据该位置以及音频声源的位置确定音频声源相对于音频接收者的方位角度。
图4是本申请实施例提供的一种音频处理装置的结构框图,该装置用于执行上述实施例提供的音频处理方法,具备执行方法相应的功能模块和有益效果。如图4所示,该装置具体包括:方位角度确定模块101、数据计算模块102和音频数据生成模块103,其中,
方位角度确定模块101,用于确定音频声源相对于音频接收者的方位角度。
音频声源为发出音频声音的音源,示例性的,在虚拟现实场景中,用户置身在一个房间内,该音频声源可以是房间内不同方位布置的虚拟发声装置,还可以是用户周围的虚拟目标物体。
音频接收者为该音频声源发出的声音的接收者,可以是终端设备的使用者,即携带终端设备的用户,该终端设备可以是用户使用的智能手机,还可以是头戴虚拟设备,当终端设备为用户使用的智能手机时,该音频声源发出的音频信号可通过智能手机接收并通过和智能手机连接的耳机进行播放,该耳机可以是蓝牙耳机或有线耳机,用户通过佩戴该耳机来接收音频声源发出的声音。
其中,该方位角度表征了音频声源相对于音频接收者的方位位置。在一个实施例中,该方位角度可以是水平方位角度,即在水平面中音频声源相对于音频接收者的方位角度。在一个实施例中,以终端设备为智能手机为例,可通过智能手机中预先安装的应用程序来确定音频声源相对于音频接收者的方位角度,在另个一实施例中,还可以是通过实时定位方式确定音频接收者相对于音频声源的位置来确定音频声源相对于音频接收者的方位角度。
数据计算模块102,用于如果所述方位角度未记录在预设表中,则依据所述预设表中记录的已存方位角度对应的已存函数数据计算所述方位角度对应的函数数据。
其中,预设表可以是终端设备中预先存储的表格,通过该表格记录的数据对音频声源的音频数据进行处理以生成立体音效,该预设表中记录有不同的方位角度以及对应的函数数据。该预设表可以是HRTF表,HRTF全称为Head Related Transfer Function,其为一种声音定位处理技术,通过HRTF技术可以还原来自立体空间不同方位的音频信号,得到含有方位信息的音频数据,该具有方位信息的音频数据可通过双声道耳机播放给音频接收者使音频接收者感知立体音效。
在一个实施例中,在确定出音频声源相对于音频接收者的方位角度后,确定该方位角度是否记录在预设表中,如果未记录在预设表中,则依据预设表中记录的已存方位角度对应的已存函数数据计算方位角度对应的函数数据。示例性的,该预设表中记录有角度间隔20°的一组角度数据,该组角度数据总共18个(水平面总共360°,分辨率为20°的角度进行划分共计18个角度数据),以及和该角度数据对应的左冲击响应数据和右冲击响应数据,其中冲击响应数据为HRIR(Head Related Inpulse Response,头相关冲击响应),HRIR为HRTF数据对应的时域数据,该数据可通过研发人员预先测试得到,还可以使用现有的科研机构和高等院校测量得到的数据,如加州大学戴维斯分校图像处理和集成计算中心(CIPIC)公开测试数据。如果确定出的音频声源相对于音频接收者的方位角度未记录在预设表中,如预设表以0°为起始角度,每隔20°间隔进行角度数据的存储,该音频声源相对于音频接收者的方位角度为10°,则其被判定为该方位角度未记录在预设表中,则通过预设算法计算该方位角度10°对应的左右冲击响应数据。其中,该预设算法可以但不限于插值算法。
音频数据生成模块103,用于将所述音频声源的音频数据和所述函数数据进行卷积运算得到处理后的音频数据。
其中,该音频声源的音频数据为需要播放的供音频接收者接收感知的数据,该音频数据包括左右两个声道的数据,分别用R(右声道数据)和L(左声道数据)进行表示。该函数数据为音频数据生成模块103确定的对应该方位角度(10°)的左右冲击响应数据,左右冲击响应数据分别表示为HR(右冲击响应数据)和HF(左冲击响应数据)。
由上述内容可知,通过在预设表中存储分辨率间隔较大的角度值以及对应的HRTF数据,显著降低了数据存储量,针对未存储角度值且需要进行音频处理的音频数据采用计算方式得到,保证了音频接收者能够感知到立体音效。以现有的HRTF表为例,其为了保证音频接收者能够感知到各个空间方位的立体音效,需要每隔5°进行函数数据的存储,以冲击响应长度1024为例,其需要存储360/5*1024*2=147456个系数值,占用了终端设备大量存储空间。
在一个可能的实施例中,所述方位角度包括水平方位角度,该装置还包括数据预存模块104,用于在所述确定音频声源相对于音频接收者的方位角度之前,将预设水平角度的函数数据保存在预设表中,其中,所述预设水平角度包括在水平方向上每隔20度划分的角度。
在一个可能的实施例中,所述音频数据生成模块103还用于:如果所述方位角度记录在预设表中,则将所述预设表中记录的所述方位角度对应的函数数据和所述音频声源的音频数据进行卷积运算得到处理后的音频数据。
在一个可能的实施例中,所述数据计算模块102具体用于:
确定所述预设表中记录的和所述方位角度相邻的两个方位角度;
根据所述相邻的两个方位角度以及对应的函数数据通过插值算法计算得到所述方位角度的函数数据。
在一个可能的实施例中,所述方位角度确定模块101具体用于:
在触摸显示屏中显示虚拟位置界面;
根据接收到的屏幕点击指令确定对应的点击位置;
依据所述点击位置确定音频声源相对于音频接收者的方位角度。
在一个可能的实施例中,所述预设表包括HRTF表,所述已存函数数据包括HRTF数据。
在一个可能的实施例中,所述音频数据生成模块103具体用于:
将所述音频声源的左声道数据和右声道数据分别和所述HRTF数据中的左冲击响应参数与右冲击响应参数进行卷积运算得到处理后的左声道数据和右声道数据。
本实施例在上述各实施例的基础上提供了一种终端设备,图5是本申请实施例提供的一种终端设备的结构示意图,如图5所示,该终端设备200包括:存储器201、处理器(Central Processing Unit,CPU)202、外设接口203、RF(Radio Frequency,射频)电路205、音频电路206、扬声器211、电源管理芯片208、输入/输出(I/O)子系统209、触摸屏212、Wifi模块213、其他输入/控制设备210以及外部端口204,这些部件通过一个或多个通信总线或信号线207来通信。
应该理解的是,图示终端设备200仅仅是终端设备的一个范例,并且终端设备200可以具有比图中所示出的更多的或者更少的部件,可以组合两个或更多的部件,或者可以具有不同的部件配置。图中所示出的各种部件可以在包括一个或多个信号处理和/或专用集成电路在内的硬件、软件、或硬件和软件的组合中实现。
下面就本实施例提供的用于音频处理的终端设备进行详细的描述,该终端设备以智能手机为例。
存储器201,所述存储器201可以被CPU202、外设接口203等访问,所述存储器201可以包括高速随机存取存储器,还可以包括非易失性存储器,例如一个或多个磁盘存储器件、闪存器件、或其他易失性固态存储器件。
外设接口203,所述外设接口203可以将设备的输入和输出外设连接到CPU202和存储器201。
I/O子系统209,所述I/O子系统209可以将设备上的输入输出外设,例如触摸屏212和其他输入/控制设备210,连接到外设接口203。I/O子系统209可以包括显示控制器2091和用于控制其他输入/控制设备210的一个或多个输入控制器2092。其中,一个或多个输入控制器2092从其他输入/控制设备210接收电信号或者向其他输入/控制设备210发送电信号,其他输入/控制设备210可以包括物理按钮(按压按钮、摇臂按钮等)、拨号盘、滑动开关、操纵杆、点击滚轮。值得说明的是,输入控制器2092可以与以下任一个连接:键盘、红外端口、USB接口以及诸如鼠标的指示设备。
触摸屏212,所述触摸屏212是用户终端与用户之间的输入接口和输出接口,将可视输出显示给用户,可视输出可以包括图形、文本、图标、视频等。
I/O子系统209中的显示控制器2091从触摸屏212接收电信号或者向触摸屏212发送电信号。触摸屏212检测触摸屏上的接触,显示控制器2091将检测到的接触转换为与显示在触摸屏212上的用户界面对象的交互,即实现人机交互,显示在触摸屏212上的用户界面对象可以是运行游戏的图标、联网到相应网络的图标等。值得说明的是,设备还可以包括光鼠,光鼠是不显示可视输出的触摸敏感表面,或者是由触摸屏形成的触摸敏感表面的延伸。
RF电路205,主要用于建立手机与无线网络(即网络侧)的通信,实现手机与无线网络的数据接收和发送。例如收发短信息、电子邮件等。具体地,RF电路205接收并发送RF信号,RF信号也称为电磁信号,RF电路205将电信号转换为电磁信号或将电磁信号转换为电信号,并且通过该电磁信号与通信网络以及其他设备进行通信。RF电路205可以包括用于执行这些功能的已知电路,其包括但不限于天线系统、RF收发机、一个或多个放大器、调谐器、一个或多个振荡器、数字信号处理器、CODEC(COder-DECoder,编译码器)芯片组、用户标识模块(Subscriber Identity Module,SIM)等等。
音频电路206,主要用于从外设接口203接收音频数据,将该音频数据转换为电信号,并且将该电信号发送给扬声器211。
扬声器211,用于将手机通过RF电路205从无线网络接收的语音信号,还原为声音并向用户播放该声音。
电源管理芯片208,用于为CPU202、I/O子系统及外设接口所连接的硬件进行供电及电源管理。
上述实施例中提供的终端设备的音频处理装置及终端设备可执行本申请任意实施例所提供的终端设备的音频处理方法,具备执行该方法相应的功能模块和有益效果。未在上述实施例中详尽描述的技术细节,可参见本申请任意实施例所提供的终端设备的音频处理方法。
本申请实施例还提供一种包含终端设备可执行指令的存储介质,所述终端设备可执行指令在由终端设备处理器执行时用于执行一种音频处理方法,该方法包括:
确定音频声源相对于音频接收者的方位角度;
如果所述方位角度未记录在预设表中,则依据所述预设表中记录的已存方位角度对应的已存函数数据计算所述方位角度对应的函数数据;
将所述音频声源的音频数据和所述函数数据进行卷积运算得到处理后的音频数据。
在一个可能的实施例中,所述方位角度包括水平方位角度,在所述确定音频声源相对于音频接收者的方位角度之前,还包括:
将预设水平角度的函数数据保存在预设表中,其中,所述预设水平角度包括在水平方向上每隔20度划分的角度。
在一个可能的实施例中,如果所述方位角度记录在预设表中,则将所述预设表中记录的所述方位角度对应的函数数据和所述音频声源的音频数据进行卷积运算得到处理后的音频数据。
在一个可能的实施例中,所述依据所述预设表中记录的已存方位角度对应的已存函数数据计算所述方位角度对应的函数数据包括:
确定所述预设表中记录的和所述方位角度相邻的两个方位角度;
根据所述相邻的两个方位角度以及对应的函数数据通过插值算法计算得到所述方位角度的函数数据。
在一个可能的实施例中,所述确定音频声源相对于音频接收者的方位角度包括:
在触摸显示屏中显示虚拟位置界面;
根据接收到的屏幕点击指令确定对应的点击位置;
依据所述点击位置确定音频声源相对于音频接收者的方位角度。
在一个可能的实施例中,所述预设表包括HRTF表,所述已存函数数据包括HRTF数据。
在一个可能的实施例中,所述将所述音频声源的音频数据和所述函数数据进行卷积运算得到处理后的音频数据包括:
将所述音频声源的左声道数据和右声道数据分别和所述HRTF数据中的左冲击响应参数与右冲击响应参数进行卷积运算得到处理后的左声道数据和右声道数据。
存储介质——任何的各种类型的存储器设备或存储设备。术语“存储介质”旨在包括:安装介质,例如CD-ROM、软盘或磁带装置;计算机系统存储器或随机存取存储器,诸如DRAM、DDR RAM、SRAM、EDO RAM,兰巴斯(Rambus)RAM等;非易失性存储器,诸如闪存、磁介质(例如硬盘或光存储);寄存器或其它相似类型的存储器元件等。存储介质可以还包括其它类型的存储器或其组合。另外,存储介质可以位于程序在其中被执行的第一计算机系统中,或者可以位于不同的第二计算机系统中,第二计算机系统通过网络(诸如因特网)连接到第一计算机系统。第二计算机系统可以提供程序指令给第一计算机用于执行。术语“存储介质”可以包括可以驻留在不同位置中(例如在通过网络连接的不同计算机系统中)的两个或更多存储介质。存储介质可以存储可由一个或多个处理器执行的程序指令(例如具体实现为计算机程序)。
当然,本申请实施例所提供的一种包含计算机可执行指令的存储介质,其计算机可执行指令不限于如上所述的音频处理方法操作,还可以执行本申请任意实施例所提供的音频处理方法中的相关操作。
注意,上述仅为本申请的较佳实施例及所运用技术原理。本领域技术人员会理解,本申请不限于这里所述的特定实施例,对本领域技术人员来说能够进行各种明显的变化、重新调整和替代而不会脱离本申请的保护范围。因此,虽然通过以上实施例对本申请进行了较为详细的说明,但是本申请不仅仅限于以上实施例,在不脱离本申请构思的情况下,还可以包括更多其他等效实施例,而本申请的范围由所附的权利要求范围决定。
Claims (10)
1.音频处理方法,其特征在于,包括:
确定音频声源相对于音频接收者的方位角度;
如果所述方位角度未记录在预设表中,则依据所述预设表中记录的已存方位角度对应的已存函数数据计算所述方位角度对应的函数数据;
将所述音频声源的音频数据和所述函数数据进行卷积运算得到处理后的音频数据。
2.根据权利要求1所述的方法,其特征在于,所述方位角度包括水平方位角度,在所述确定音频声源相对于音频接收者的方位角度之前,还包括:
将预设水平角度的函数数据保存在预设表中,其中,所述预设水平角度包括在水平方向上每隔20度划分的角度。
3.根据权利要求1所述的方法,其特征在于,如果所述方位角度记录在预设表中,则将所述预设表中记录的所述方位角度对应的函数数据和所述音频声源的音频数据进行卷积运算得到处理后的音频数据。
4.根据权利要求1所述的方法,其特征在于,所述依据所述预设表中记录的已存方位角度对应的已存函数数据计算所述方位角度对应的函数数据包括:
确定所述预设表中记录的和所述方位角度相邻的两个方位角度;
根据所述相邻的两个方位角度以及对应的函数数据通过插值算法计算得到所述方位角度的函数数据。
5.根据权利要求1-3中任一项所述的方法,其特征在于,所述确定音频声源相对于音频接收者的方位角度包括:
在触摸显示屏中显示虚拟位置界面;
根据接收到的屏幕点击指令确定对应的点击位置;
依据所述点击位置确定音频声源相对于音频接收者的方位角度。
6.根据权利要求1-3中任一项所述的方法,其特征在于,所述预设表包括HRTF表,所述已存函数数据包括HRTF数据。
7.根据权利要求6所述的方法,其特征在于,所述将所述音频声源的音频数据和所述函数数据进行卷积运算得到处理后的音频数据包括:
将所述音频声源的左声道数据和右声道数据分别和所述HRTF数据中的左冲击响应参数与右冲击响应参数进行卷积运算得到处理后的左声道数据和右声道数据。
8.音频处理装置,其特征在于,包括:
方位角度确定模块,用于确定音频声源相对于音频接收者的方位角度;
数据计算模块,用于如果所述方位角度未记录在预设表中,则依据所述预设表中记录的已存方位角度对应的已存函数数据计算所述方位角度对应的函数数据;
音频数据生成模块,用于将所述音频声源的音频数据和所述函数数据进行卷积运算得到处理后的音频数据。
9.一种终端设备,包括:处理器、存储器以及存储在存储器上并可在处理器上运行的计算机程序,其特征在于,所述处理器执行所述计算机程序时实现如权利要求1-7中任一项所述的音频处理方法。
10.一种包含终端设备可执行指令的存储介质,其特征在于,所述终端设备可执行指令在由终端设备处理器执行时用于执行如权利要求1-7中任一项所述的音频处理方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201811273592.9A CN109413546A (zh) | 2018-10-30 | 2018-10-30 | 音频处理方法、装置、终端设备及存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201811273592.9A CN109413546A (zh) | 2018-10-30 | 2018-10-30 | 音频处理方法、装置、终端设备及存储介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN109413546A true CN109413546A (zh) | 2019-03-01 |
Family
ID=65470370
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201811273592.9A Pending CN109413546A (zh) | 2018-10-30 | 2018-10-30 | 音频处理方法、装置、终端设备及存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN109413546A (zh) |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2009001277A1 (en) * | 2007-06-26 | 2008-12-31 | Koninklijke Philips Electronics N.V. | A binaural object-oriented audio decoder |
CN103563401A (zh) * | 2011-06-09 | 2014-02-05 | 索尼爱立信移动通讯有限公司 | 减少头部相关传递函数数据量 |
CN106200945A (zh) * | 2016-06-24 | 2016-12-07 | 王杰 | 内容重放装置、具有该重放装置的处理系统及方法 |
CN106658340A (zh) * | 2015-11-03 | 2017-05-10 | 杜比实验室特许公司 | 内容自适应的环绕声虚拟化 |
-
2018
- 2018-10-30 CN CN201811273592.9A patent/CN109413546A/zh active Pending
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2009001277A1 (en) * | 2007-06-26 | 2008-12-31 | Koninklijke Philips Electronics N.V. | A binaural object-oriented audio decoder |
CN103563401A (zh) * | 2011-06-09 | 2014-02-05 | 索尼爱立信移动通讯有限公司 | 减少头部相关传递函数数据量 |
CN106658340A (zh) * | 2015-11-03 | 2017-05-10 | 杜比实验室特许公司 | 内容自适应的环绕声虚拟化 |
CN106200945A (zh) * | 2016-06-24 | 2016-12-07 | 王杰 | 内容重放装置、具有该重放装置的处理系统及方法 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR102642275B1 (ko) | 증강 현실 헤드폰 환경 렌더링 | |
US10924877B2 (en) | Audio signal processing method, terminal and storage medium thereof | |
CN105487657A (zh) | 声音响度的确定方法及装置 | |
US11039261B2 (en) | Audio signal processing method, terminal and storage medium thereof | |
JP5882964B2 (ja) | カメラによるオーディオ空間化 | |
CN107637095A (zh) | 用于个人声音的保留隐私、能量高效的扬声器 | |
CN108028999B (zh) | 用于提供声音再现的装置、方法和计算机程序 | |
CN110049428B (zh) | 用于实现多声道环绕立体声播放的方法、播放设备及系统 | |
CN107040660A (zh) | 移动终端播放音量的控制方法、装置及移动终端 | |
US10750305B2 (en) | Method for processing VR audio and corresponding equipment | |
EP2693721A2 (en) | Mobile apparatus and control method thereof | |
CN107301028B (zh) | 一种基于多人远程通话的音频数据处理方法及装置 | |
CN106817667A (zh) | 一种实现立体声的方法、装置及移动终端 | |
CN107404587B (zh) | 音频播放控制方法、音频播放控制装置及移动终端 | |
CN108924705B (zh) | 3d音效处理方法及相关产品 | |
CN109121069B (zh) | 3d音效处理方法及相关产品 | |
CN113115175B (zh) | 3d音效处理方法及相关产品 | |
CN112840678B (zh) | 立体声播放方法、装置、存储介质及电子设备 | |
CN109413546A (zh) | 音频处理方法、装置、终端设备及存储介质 | |
CN114339582B (zh) | 双通道音频处理、方向感滤波器生成方法、装置以及介质 | |
CN112883222B (zh) | 歌曲的推荐播放方法、电子设备及计算机可读存储介质 | |
CN115705839A (zh) | 语音播放方法、装置、计算机设备和存储介质 | |
CN114630240B (zh) | 方向滤波器的生成方法、音频处理方法、装置及存储介质 | |
CN116347320B (zh) | 音频播放方法及电子设备 | |
WO2024027315A1 (zh) | 音频处理方法、装置、电子设备、存储介质和程序产品 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20190301 |