CN116036591A - 音效优化方法、装置、设备及存储介质 - Google Patents

Abstract

本申请提供了一种音效优化方法、装置、设备及存储介质，涉及音频技术领域，该方法包括：客户端获取在当前场景触发的音频信号，根据当前场景和客户端的音效优化策略，确定音频信号的目标优化策略，客户端的音效优化策略根据客户端的一个或多个预设场景和终端设备的硬件能力信息确定，终端设备的硬件能力信息通过客户端与终端设备的操作系统之间建立的数据通道获取，一个或多个预设场景包括当前场景，根据目标优化策略，通过终端设备的操作系统和终端设备中的音频处理组件对音频信号进行音效优化。可使得客户端优化时可结合终端设备的硬件能力进行针对性优化，可确保音频处理组件能够根据实际客户端的场景需求进行音效优化，提高音效优化的效果。

Description

音效优化方法、装置、设备及存储介质

技术领域

本申请实施例涉及音频技术领域，尤其涉及一种音效优化方法、装置、设备及存储介质。

背景技术

游戏音效是指电子游戏中发生特定行为或进行特定操作时播放的背景音乐，如开场主题曲、战斗背景、点击按钮、角色的各种声音、特效以及用户游戏过程中的语音对话等等。在用户使用终端设备安装的各类游戏应用进入游戏的过程中，效果良好的游戏音效可以提高用户的音频游戏体验。音效优化是指通过终端设备安装的音频处理组件(如音频处理芯片和扬声器等)完成对音乐、视频和游戏等相关音效的增强，如空间音效和高保真音效等，以完成对声音的强度和清晰度等的提高。

现有技术中，一般通过游戏应用根据游戏场景确定需要进行音效优化时，在游戏应用客户端进行音效优化。或者通过终端设备的音频处理组件直接进行音效优化。

然而，音频处理组件在播放游戏音效的过程中需要终端设备的硬件能力支持，由于游戏应用客户端不了解终端设备的硬件能力，无法针对终端设备的硬件能力进行针对性优化，会出现硬件能力不支持导致音效优化的效果不佳。而直接通过音频处理组件进行音效优化的方式中，由于没有实际的游戏场景信息，音效优化的效果也不佳。

发明内容

本申请提供一种音效优化方法、装置、设备及存储介质，以提高音效优化的效果。

第一方面，本申请提供一种音效优化方法，包括：

客户端获取在当前场景触发的音频信号；

根据所述当前场景和所述客户端的音效优化策略，确定所述音频信号的目标优化策略；所述客户端的音效优化策略根据所述客户端的一个或多个预设场景和终端设备的硬件能力信息确定，所述终端设备的硬件能力信息通过所述客户端与所述终端设备的操作系统之间建立的数据通道获取，所述一个或多个预设场景包括所述当前场景；

根据所述目标优化策略，通过所述终端设备的操作系统和所述终端设备中的音频处理组件对所述音频信号进行音效优化。

第二方面，本申请提供一种音效优化装置，包括：

获取模块，用于获取在当前场景触发的音频信号；

确定模块，用于根据所述当前场景和客户端的音效优化策略，确定所述音频信号的目标优化策略；所述客户端的音效优化策略根据所述客户端的一个或多个预设场景和终端设备的硬件能力信息确定，所述终端设备的硬件能力信息通过所述客户端与所述终端设备的操作系统之间建立的数据通道获取，所述一个或多个预设场景包括所述当前场景；

处理模块，用于根据所述目标优化策略，通过所述终端设备的操作系统和所述终端设备中的音频处理组件对所述音频信号进行音效优化。

第三方面，本申请提供一种终端设备，包括：处理器和存储器，该存储器用于存储计算机程序，该处理器用于调用并运行该存储器中存储的计算机程序，以执行第一方面的方法。

第四方面，本申请提供一种计算机可读存储介质，用于存储计算机程序，该计算机程序使得计算机执行第一方面的方法。

第五方面，本申请提供一种计算机程序产品，包括计算机程序，所述计算机程序被处理器执行时实现第一方面的方法。

综上，在本申请中，通过客户端建立客户端与终端设备的操作系统之间的数据通道，客户端可以通过该数据通道经操作系统获取到终端设备的硬件能力信息，客户端可根据客户端的一个或多个预设场景和终端设备的硬件能力信息确定出与终端设备的硬件能力匹配的音效优化策略，在当前场景触发音频信号时，可根据当前场景和该音效优化策略确定音频信号的目标优化策略，最后根据目标优化策略，通过终端设备的操作系统和终端设备中的音频处理组件对音频信号进行音效优化。从而，可使得客户端优化时可结合终端设备的硬件能力进行针对性优化，避免出现硬件能力不支持导致音效优化的效果不佳，可确保音频处理组件能够根据实际客户端的场景需求进行音效优化，提高音效优化的效果，实现了软硬件协同优化，使得音频体验更佳。

附图说明

为了更清楚地说明本申请实施例中的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1为本申请适用的终端设备的一种结构示意图；

图2为本申请实施例提供的一种音效优化方法的流程图；

图3为本申请实施例提供的一种音效优化方法的交互流程图；

图4为本申请实施例提供的一种音效优化装置的结构示意图；

图5为本申请实施例提供的一种音效优化装置的结构示意图；

图6为本申请实施例提供的一种音效优化系统结构示意图；

图7是本申请实施例提供的终端设备的示意性框图。

具体实施方式

下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例，都属于本申请保护的范围。

需要说明的是，本申请的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换，以便这里描述的本申请的实施例能够以除了在这里图示或描述的那些以外的顺序实施。此外，术语“包括”和“具有”以及他们的任何变形，意图在于覆盖不排他的包含，例如，包含了一系列步骤或单元的过程、方法、系统、产品或服务器不必限于清楚地列出的那些步骤或单元，而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。

示例性的，本申请中的终端设备可以为手机、平板电脑、个人计算机(personalcomputer，PC)、个人数字助理(personal digital assistant，PDA)、智能手表、上网本、可穿戴终端设备、智能电视、车载设备、智能汽车、智能音响、机器人等，本申请对该终端设备的具体形式不做特殊限制。

图1为本申请适用的终端设备的一种结构示意图，如图1所示，终端设备可以包括一个或多个如下部件：处理器110、存储器120、音频处理组件130和输入输出模块140。

可以理解的是，本实施例示意的结构并不构成对终端设备的具体限定。在本申请另一些实施例中，终端设备可以包括比图示更多或更少的部件，或者组合某些部件，或者拆分某些部件，或者不同的部件布置。图示的部件可以以硬件，软件，或软件和硬件的组合实现。

处理器110可以包括一个或多个处理单元，例如：处理器110可以包括应用处理器(application processor，AP)，调制解调处理器，图形处理器(graphics processingunit，GPU)，图像信号处理器(image signal processor，ISP)，控制器，视频编解码器，数字信号处理器(digital signal processor，DSP)，基带处理器，和/或神经网络处理器(neural-network processing unit，NPU)等。其中，不同的处理单元可以是独立的器件，也可以集成在一个或多个处理器中。在一些实施例中，终端设备也可以包括一个或多个处理器110。其中，控制器可以是终端设备的神经中枢和指挥中心。控制器可以根据指令操作码和时序信号，产生操作控制信号，完成取指令和执行指令的控制。

存储器120可以用于存储一个或多个计算机程序，该一个或多个计算机程序包括指令。处理器110可以通过运行存储在存储器120的上述指令，从而使得终端设备执行本申请实施例中所提供的音效优化方法，以及各种功能应用以及数据处理等。存储器120可以包括存储程序区和存储数据区。其中，存储程序区可存储操作系统；该存储程序区还可以存储一个或多个应用程序(比如图库、联系人等)等。存储数据区可存储终端设备使用过程中所创建的数据(比如照片，联系人等)等。此外，存储器120可以包括高速随机存取存储器，还可以包括非易失性存储器，例如至少一个磁盘存储器件，闪存器件，通用闪存存储器(universal flash storage，UFS)等。在一些实施例中，处理器110可以通过运行存储在存储器120的指令，和/或存储在设置于处理器110中的存储器的指令，来使得终端设备执行本申请实施例中所提供的音效优化方法，以及各种功能应用及数据处理。

终端设备可以通过音频处理组件130实现音频功能，例如音乐播放，录音等。音频处理组件130可以包括音频模块、扬声器、受话器、麦克风和耳机接口以及应用处理器等。其中，音频模块用于将数字音频信息转换成模拟音频信号输出，也用于将模拟音频输入转换为数字音频信号。音频模块还可以用于对音频信号编码和解码。在一些实施例中，音频模块可以设置于处理器110中，或将音频模块的部分功能模块设置于处理器110中。扬声器，也称“喇叭”，用于将音频电信号转换为声音信号。终端设备可以通过扬声器收听音乐，或收听免提通话。受话器，也称“听筒”，用于将音频电信号转换成声音信号。当终端设备接听电话或语音信息时，可以通过将受话器靠近人耳接听语音。麦克风，也称“话筒”，“传声器”，用于将声音信号转换为电信号。当拨打电话或发送语音信息时，用户可以通过人嘴靠近麦克风发声，将声音信号输入到麦克风。终端设备可以设置至少一个麦克风。在另一些实施例中，终端设备可以设置两个麦克风，除了采集声音信号，还可以实现降噪功能。在另一些实施例中，终端设备还可以设置三个，四个或更多麦克风，实现采集声音信号，降噪，还可以识别声音来源，实现定向录音功能等。耳机接口用于连接有线耳机。耳机接口可以是USB接口，也可以是其它类型的标准接口。

输入输出模块140可以包括显示屏(触摸或非触摸显示屏)，该显示屏用于接收用户的操作(如触摸操作或点击操作)，以及显示各个应用程序的用户界面。

音效优化是指通过终端设备安装的音频处理组件完成对音乐、视频和游戏等相关音效的增强，相关技术中，在游戏应用中，可通过游戏应用客户端进行音效优化(称为软件层优化)，或者通过终端设备的音频处理组件直接进行音效优化(称为硬件层优化)，软件层优化和硬件层优化分别单独进行优化，软件层优化时由于游戏应用客户端不了解终端设备的硬件能力，无法针对终端设备的硬件能力进行针对性优化，会出现硬件能力不支持导致音效优化的效果不佳。而直接通过音频处理组件进行音效优化的方式中，由于没有实际的游戏场景信息，音效优化的效果也不佳。

为了解决上述技术问题，本申请通过建立客户端与终端设备的操作系统之间的数据通道，客户端可以通过该数据通道经操作系统获取到终端设备的硬件能力信息，客户端可根据客户端的一个或多个预设场景和终端设备的硬件能力信息确定出与终端设备的硬件能力匹配的音效优化策略，在当前场景触发音频信号时，可根据当前场景和该音效优化策略确定音频信号的目标优化策略，最后根据目标优化策略，通过终端设备的操作系统和终端设备中的音频处理组件对音频信号进行音效优化。从而，可使得客户端优化时可结合终端设备的硬件能力进行针对性优化，避免出现硬件能力不支持导致音效优化的效果不佳，可确保音频处理组件能够根据实际客户端的场景需求进行音效优化，提高音效优化的效果，实现了软硬件协同优化，使得音频体验更佳。

下面将对本申请技术方案进行详细阐述：

图2为本申请实施例提供的一种音效优化方法的流程图，该方法的执行主体可以是一应用程序客户端，如图2所示，该方法可以包括：

S101、客户端获取在当前场景触发的音频信号。

具体地，客户端监听应用的音频触发，应用当前处于什么场景，客户端是可以直接获取到的，一应用中的音频文件是预先存储的。

S102、客户端根据当前场景和客户端的音效优化策略，确定音频信号的目标优化策略，客户端的音效优化策略根据客户端的一个或多个预设场景和终端设备的硬件能力信息确定，终端设备的硬件能力信息通过客户端与终端设备的操作系统之间建立的数据通道获取，一个或多个预设场景包括当前场景。

具体来说，客户端的音效优化策略根据客户端的一个或多个预设场景和终端设备的硬件能力信息确定，其中终端设备的硬件能力信息可以包括支持和/或不支持音频处理组件优化的指示信息，和/或可支持的音频处理组件优化的类型，即终端设备的硬件能力信息可以包括四种信息至少其中之一：一、不支持音频处理组件优化的指示信息；二、支持音频处理组件优化的指示信息；三、支持音频处理组件优化的指示信息和可支持的音频处理组件优化的类型；四、可支持的音频处理组件优化的类型。例如，可以用1位指示符指示是否支持音频处理组件优化以及可支持的音频处理组件优化的类型，如：“0”为不支持音频处理组件优化的指示信息，“1”为支持音频处理组件优化的指示信息，在该种方式下，“1”可以指示支持音频处理组件优化且支持音频处理组件优化的全部预设类型。又如：“0”为不支持音频处理组件优化的指示信息，“1”为可支持的音频处理组件优化的类型为方位音频优化，“2”为可支持的音频处理组件优化的类型为高保真音频优化，“3”为可支持的音频处理组件优化的类型为预设目标场景下的音频优化。又例如，可以用两位指示符指示是否支持音频处理组件优化以及可支持的音频处理组件优化的类型，如，“00”为不支持音频处理组件优化的指示信息，“01”为支持音频处理组件优化且可支持的音频处理组件优化的类型为方位音频优化，“10”为支持音频处理组件优化且可支持的音频处理组件优化的类型为高保真音频优化，“11”为支持音频处理组件优化且可支持的音频处理组件优化的类型为预设目标场景下的音频优化。可选的，音频处理组件优化的类型包括方位音频优化(也称为空间音频优化)、高保真音频优化和预设目标场景下的音频优化，其中预设目标场景下的音频优化例如可以为根据应用的场景需要特殊优化的场景，如突出重低音或突出重高音的场景。

可选的，在一种可实施的方式中，客户端的音效优化策略包括客户端的一个或多个预设场景和音效优化策略的对应关系，该对应关系中，例如可以是一个客户端的预设场景对应一种音效优化策略。相应地，S102中根据当前场景和客户端的音效优化策略，确定音频信号的目标优化策略，具体可以为：根据当前场景和对应关系，确定当前场景对应的音效优化策略。将当前场景对应的音效优化策略确定为音频信号的目标优化策略。

可选的，上述对应关系中，音效优化策略包括客户端优化、音频处理组件优化和混合优化中的至少一项，混合优化包括客户端优化和音频处理组件优化，即混合优化是指即做软件层优化也做硬件层优化。客户端优化可以是在不支持音频处理组件优化或者用户选择应用内优化的情况下，采用客户端优化，同时音频处理组件播放客户端端优化后的音频信号。混合优化可以是在部分场景下，需要客户端优化和音频处理组件优化一起配合进行音效的优化，需要先进行客户端优化，然后进行音频组件优化。

其中，音频处理组件优化的类型包括方位音频优化、高保真音频优化和预设目标场景下的音频优化。可以理解的是，上述对应关系中，音频处理组件优化可以是方位音频优化、高保真音频优化和预设目标场景下的音频优化中的任一种。以客户端为游戏应用客户端为例，其中，方位音频优化对应的场景可以是用户需要根据音频进行游戏内方位的辨识的场景，如射击位游戏中其他玩家的脚步声或枪声的方位需要通过音频进行准确标识，以便玩家进行准确的危险来源识别。高保真音频优化对应的场景可以是需要高度还原音频的原始信息的场景，如游戏内的过场音频、游戏CG音效等。混合优化对应的场景可以是用户有语音交流的场景，这时需要尽可能让用户语音清晰，压低或淡化游戏本身的音频。

可选的，若客户端为游戏应用客户端，客户端的预设场景至少包括游戏过场动画场景、游戏战斗准备场景、游戏战斗场景和游戏语音场景，以该四种场景为例，客户端的预设场景和音效优化策略的对应关系中，与游戏过场动画场景对应的音效优化策略为高保真音频优化，与游戏战斗准备场景对应的音效优化策略为方位音频优化，与游戏战斗场景对应的音效优化策略为音频处理组件优化，与游戏语音场景对应的音效优化策略为混合优化。

以如下表一描述客户端的预设场景和音效优化策略的对应关系示例：

表一

客户端的预设场景	对应的音效优化策略
		游戏过场动画场景	高保真音频优化
游戏战斗准备场景	方位音频优化
		游戏战斗场景	音频处理组件优化
游戏语音场景	混合优化

具体来说，游戏过场动画场景的场景特点是一般都有精美的画面配合沉浸式的音效，因此尽可能提供高保真的音效还原，采用高保真音频优化。游戏战斗准备场景的场景特点是已接近敌人，需要用方位音频快速定位敌人方位，因此采用方位音频优化，更加突出音频的方位感，方位音频优化支持的前提下优先采用方位音频优化。游戏战斗场景的场景特点是用户正在激烈战斗，应避免客户端优化影响游戏性能，因此应尽可能降低音频延时，只进行音频处理组件优化(可采用方位音频优化、高保真音频优化和预设目标场景下的音频优化中的任一种)，避免客户端优化带来的性能损耗。游戏语音场景的场景特点是用户通过语音进行交流，需要尽可能保证语音的清晰。因此应采用混合优化，即软硬件相结合的方式进行优化，比如游戏应用内进行背景音调小、语音适当增大的策略，降噪等提高音质的优化策略通过协议在音频处理组件实现，音频处理组件不支持的情况下，在游戏应用内实现。

本实施例中，可选的，若当前场景对应的音效优化策略至少包括音频处理组件优化，如当前场景对应的音效优化策略包括音频处理组件优化和客户端优化，或者，当前场景对应的音效优化策略包括音频处理组件优化和混合优化，或者，当前场景对应的音效优化策略包括音频处理组件优化、客户端优化和混合优化，则将音频处理组件优化确定为音频信号的目标优化策略。即优先使用音频处理组件优化。否则，若当前场景对应的音效优化策略不包括音频处理组件优化，则说明不支持硬件优化，因此需要选择客户端优化对音频信号进行音效优化，则将客户端优化确定为音频信号的目标优化策略。

S103、客户端根据目标优化策略，通过终端设备的操作系统和终端设备中的音频处理组件对音频信号进行音效优化。

具体来说，目标优化策略可以是客户端优化、音频处理组件优化和混合优化中的任一种，相应地，S103中根据目标优化策略，通过操作系统和终端设备中的音频处理组件对音频信号进行音效优化，具体可以为：

若目标优化策略为客户端优化，则对音频信号进行客户端优化，得到优化后的音频信号，将优化后的音频信号发送至操作系统，用于操作系统根据优化后的音频信号运行音频处理组件。具体可以是操作系统接收到以音频流的形式发送的优化后的音频信号，将优化后的音频信号下发给音频处理组件，音频处理组件接收到优化后的音频信号后驱动音频处理组件进行音频播放。

若目标优化策略为音频处理组件优化，则将音频信号和目标优化策略发送至操作系统，用于操作系统根据音频信号和目标优化策略运行音频处理组件。具体可以是操作系统接收到以音频流的形式发送的音频信号和以控制流的形式发送的目标优化策略，将音频信号和目标优化策略下发给音频处理组件，音频处理组件接收到音频信号和目标优化策略后驱动音频处理组件进行音频播放。

若目标优化策略为混合优化，则对音频信号进行客户端优化，将客户端优化后的音频信号和混合优化中的音频处理组件优化发送至操作系统，用于操作系统根据客户端优化后的音频信号和混合优化中的音频处理组件优化运行音频处理组件。具体可以是操作系统接收到以音频流的形式发送的客户端优化后的音频信号和以控制流的形式发送的音频处理组件优化，将客户端优化后的音频信号和音频处理组件优化下发给音频处理组件，音频处理组件接收到客户端优化后的音频信号和音频处理组件优化后驱动音频处理组件进行音频播放。

可选的，本实施例的方法还可以包括客户端确定客户端的音效优化策略的方式，在一种可实施的方式中，本实施的方法在S101之前，还可以包括：

S104、客户端通过数据通道，接收操作系统发送的终端设备的硬件能力信息。

S105、客户端根据终端设备的硬件能力信息确定终端设备是否支持音频处理组件优化。

S106、若终端设备支持音频处理组件优化，则获取终端设备可支持的音频处理组件优化的类型，以及获取客户端优化的类型；若终端设备不支持音频处理组件优化，则获取客户端优化的类型。

具体地，客户端可以预设客户端优化的类型，即客户端优化有不同的优化方式。可选的，具体可以根据终端设备的硬件能力信息中包括的终端设备可支持的音频处理组件优化的类型的指示或客户端优化的类型的指示分别获取终端设备可支持的音频处理组件优化的类型和客户端优化的类型。可选的，若终端设备的硬件能力信息包括不支持音频处理组件优化的指示信息，则终端设备的硬件能力信息还可以包括客户端优化的类型的指示，进而客户端可以根据客户端优化的类型的指示获取客户端优化的类型。

可选的，在S106之后，本实施例的方法还可以包括：

S107、确定客户端的一个或多个预设场景和音频处理组件优化的类型和/或客户端优化的类型的对应关系。

S108、根据对应关系，确认一个或多个预设场景对应的音效优化策略并存储。

可选的，硬件能力信息包括支持和/或不支持音频处理组件优化的指示信息，和/或可支持的音频处理组件优化的类型，即终端设备的硬件能力信息可以包括四种信息：一、不支持音频处理组件优化的指示信息；二、支持音频处理组件优化的指示信息；三、支持音频处理组件优化的指示信息和可支持的音频处理组件优化的类型；四、可支持的音频处理组件优化的类型。S105具体可以为：

若硬件能力信息包括不支持音频处理组件优化的指示信息，则确定终端设备不支持音频处理组件优化；

若硬件能力信息包括支持音频处理组件优化的指示信息或者可支持的音频处理组件优化的类型，则确定终端设备支持音频处理组件优化。

进一步地，本实施例中，数据通道为客户端与操作系统之间建立的连接，本实施例的方法可以是在S104之前，还可以包括：

S109、向操作系统发送连接建立请求，用于操作系统在接收到连接建立请求后获取终端设备的音频处理组件的音效优化能力和音效播放能力。

S110、接收操作系统发送的连接建立请求接收成功的信息，与操作系统建立连接。

上述S109-S110的过程为客户端与操作系统之间建立连接的过程，建立连接后，操作系统可通过建立的连接传输终端设备的硬件能力信息至客户端。

本实施例提供的音效优化方法，通过客户端建立客户端与终端设备的操作系统之间的数据通道，客户端可以通过该数据通道经操作系统获取到终端设备的硬件能力信息，客户端可根据客户端的一个或多个预设场景和终端设备的硬件能力信息确定出与终端设备的硬件能力匹配的音效优化策略，在当前场景触发音频信号时，可根据当前场景和该音效优化策略确定音频信号的目标优化策略，最后根据目标优化策略，通过操作系统和终端设备中的音频处理组件对音频信号进行音效优化。从而，可使得客户端优化时可结合终端设备的硬件能力进行针对性优化，避免出现硬件能力不支持导致音效优化的效果不佳，可确保音频处理组件能够根据实际客户端的场景需求进行音效优化，提高音效优化的效果，实现了软硬件协同优化，使得音频体验更佳。

本实施例中，实现了软硬件协同优化，可避免软硬件各自优化带来的交叉影响损失，使得音频体验更佳。

下面结合一个具体的实施例，对本申请提供的音效优化方法进行详细说明。

图3为本申请实施例提供的一种音效优化方法的交互流程图，如图3所示，本实施例的方法可以包括：

S201、客户端向操作系统发送连接建立请求。

具体地，可以是在一应用客户端初始化时，该应用客户端向操作系统发送连接建立请求。

S202、操作系统接收到客户端发送的连接建立请求后，若查询存在该客户端的音效接口，向终端设备的音频处理组件发送查询请求，该查询请求用于查询音频处理组件的音效优化能力和音效播放能力。

S203、终端设备的音频处理组件接收到查询请求后，向操作系统发送自身的音效优化能力和音效播放能力。

S204、操作系统接收到音频处理组件的音效优化能力和音效播放能力后，向客户端发送建立请求接收成功的信息，与客户端建立连接。

客户端接收到操作系统发送的连接建立请求接收成功的信息，与操作系统建立连接。

S205、客户端向操作系统发送用于查询终端设备的硬件能力信息的查询请求。

S206、操作系统向音频处理组件发送用于查询终端设备的硬件能力信息的查询请求。

S207、音频处理组件向操作系统发送终端设备的硬件能力信息。

S208、操作系统向客户端发送终端设备的硬件能力信息。

S209、客户端根据终端设备的硬件能力信息确定终端设备是否支持音频处理组件优化。

S210、若终端设备支持音频处理组件优化，则获取终端设备可支持的音频处理组件优化的类型，以及获取客户端优化的类型；若终端设备不支持音频处理组件优化，则获取客户端优化的类型。

S211、确定客户端的一个或多个预设场景和音频处理组件优化的类型和/或客户端优化的类型的对应关系。

S212、根据上述对应关系，确认客户端的一个或多个预设场景对应的音效优化策略并存储。

其中，确认一个或多个预设场景对应的音效优化策略，即得到客户端的音效优化策略。

具体地，硬件能力信息包括支持和/或不支持音频处理组件优化的指示信息，和/或可支持的音频处理组件优化的类型，S209具体可以为：

若硬件能力信息包括不支持音频处理组件优化的指示信息，则确定终端设备不支持音频处理组件优化；

若硬件能力信息包括支持音频处理组件优化的指示信息或者可支持的音频处理组件优化的类型，则确定终端设备支持音频处理组件优化。

S213、客户端获取客户端在当前场景触发的音频信号。

S214、客户端根据当前场景和客户端的音效优化策略，确定音频信号的目标优化策略。

具体地，客户端的音效优化策略包括客户端的一个或多个预设场景和音效优化策略的对应关系，其中，客户端的一个或多个预设场景包括当前场景，S214具体可以是：客户端根据当前场景和对应关系，确定当前场景对应的音效优化策略，将当前场景对应的音效优化策略确定为音频信号的目标优化策略。

可选的，上述对应关系中，音效优化策略包括客户端优化、音频处理组件优化和混合优化中的至少一项，混合优化包括客户端优化和音频处理组件优化，即混合优化是指既做软件层优化也做硬件层优化。

S215、客户端根据目标优化策略，通过终端设备的操作系统和终端设备中的音频处理组件对音频信号进行音效优化。

具体地，若目标优化策略为客户端优化，则对音频信号进行客户端优化，得到优化后的音频信号，将优化后的音频信号发送至操作系统，用于操作系统根据优化后的音频信号运行音频处理组件。具体可以是操作系统接收到以音频流的形式发送的优化后的音频信号，将优化后的音频信号下发给音频处理组件，音频处理组件接收到优化后的音频信号后驱动音频处理组件进行音频播放。

若目标优化策略为音频处理组件优化，则将音频信号和目标优化策略发送至操作系统，用于操作系统根据音频信号和目标优化策略运行音频处理组件。具体可以是操作系统接收到以音频流的形式发送的音频信号和以控制流的形式发送的目标优化策略，将音频信号和目标优化策略下发给音频处理组件，音频处理组件接收到音频信号和目标优化策略后驱动音频处理组件进行音频播放。

若目标优化策略为混合优化，则对音频信号进行客户端优化，将客户端优化后的音频信号和混合优化中的音频处理组件优化发送至操作系统，用于操作系统根据客户端优化后的音频信号和混合优化中的音频处理组件优化运行音频处理组件。具体可以是操作系统接收到以音频流的形式发送的客户端优化后的音频信号和以控制流的形式发送的音频处理组件优化，将客户端优化后的音频信号和音频处理组件优化下发给音频处理组件，音频处理组件接收到客户端优化后的音频信号和音频处理组件优化后驱动音频处理组件进行音频播放。

可选的，若目标优化策略为无需进行音效优化，则可直接驱动音频处理组件进行音频播放。

本实施例提供的音效优化方法，可以使得客户端优化时可结合终端设备的硬件能力进行针对性优化，避免出现硬件能力不支持导致音效优化的效果不佳，可确保音频处理组件能够根据实际客户端的一个或多个预设场景需求进行音效优化，提高音效优化的效果，实现了软硬件协同优化，可避免软硬件各自优化带来的交叉影响损失，使得音频体验更佳。

以下为本申请装置实施例，可以用于执行本申请上述方法实施例。对于本申请装置实施例中未披露的细节，可参考本申请上述方法实施例。

图4为本申请实施例提供的一种音效优化装置的结构示意图，如图4所示，本实施例的装置可以包括：获取模块11、确定模块12和处理模块13，其中，

获取模块11用于获取在当前场景触发的音频信号；

确定模块12用于根据当前场景和客户端的音效优化策略，确定音频信号的目标优化策略，客户端的音效优化策略根据客户端的一个或多个预设场景和终端设备的硬件能力信息确定，终端设备的硬件能力信息通过客户端与终端设备的操作系统之间建立的数据通道获取，一个或多个预设场景包括当前场景；

处理模块13用于根据目标优化策略，通过终端设备的操作系统和终端设备中的音频处理组件对音频信号进行音效优化。

可选的，客户端的音效优化策略包括客户端的一个或多个预设场景和音效优化策略的对应关系，确定模块12用于：根据当前场景和对应关系，确定当前场景对应的音效优化策略；

将当前场景对应的音效优化策略确定为音频信号的目标优化策略。

可选的，音效优化策略包括客户端优化、音频处理组件优化和混合优化中的至少一项，混合优化包括客户端优化和音频处理组件优化，音频处理组件优化的类型包括方位音频优化、高保真音频优化和预设目标场景下的音频优化。

可选的，处理模块13用于：

若目标优化策略为客户端优化，则对音频信号进行客户端优化，得到优化后的音频信号，将优化后的音频信号发送至操作系统，用于操作系统根据优化后的音频信号运行音频处理组件；

若目标优化策略为音频处理组件优化，则将音频信号和目标优化策略发送至操作系统，用于操作系统根据音频信号和目标优化策略运行音频处理组件；

若目标优化策略为混合优化，则对音频信号进行客户端优化，将客户端优化后的音频信号和混合优化中的音频处理组件优化发送至操作系统，用于操作系统根据客户端优化后的音频信号和混合优化中的音频处理组件优化运行音频处理组件。

可选的，客户端为游戏应用客户端，客户端的预设场景至少包括游戏过场动画场景、游戏战斗准备场景、游戏战斗场景和游戏语音场景；

对应关系中，与游戏过场动画场景对应的音效优化策略为高保真音频优化；

与游戏战斗准备场景对应的音效优化策略为方位音频优化；

与游戏战斗场景对应的音效优化策略为音频处理组件优化；

与游戏语音场景对应的音效优化策略为混合优化。

可选的，确定模块12用于：若当前场景对应的音效优化策略至少包括音频处理组件优化，则将音频处理组件优化确定为音频信号的目标优化策略。若当前场景对应的音效优化策略不包括音频处理组件优化，则将客户端优化确定为音频信号的目标优化策略。

可选的，获取模块11还用于通过数据通道，接收操作系统发送的终端设备的硬件能力信息；

确定模块12还用于根据终端设备的硬件能力信息确定终端设备是否支持音频处理组件优化。

获取模块11还用于：若终端设备支持音频处理组件优化，则获取终端设备可支持的音频处理组件优化的类型，以及获取客户端优化的类型；若终端设备不支持音频处理组件优化，则获取客户端优化的类型。

可选的，确定模块12还用于：

确定客户端的一个或多个预设场景和音频处理组件优化的类型和/或客户端优化的类型的对应关系；

根据对应关系，确认一个或多个预设场景对应的音效优化策略并存储。

可选的，硬件能力信息包括支持和/或不支持音频处理组件优化的指示信息，和/或可支持的音频处理组件优化的类型，确定模块12具体用于：

若硬件能力信息包括不支持音频处理组件优化的指示信息，则确定终端设备不支持音频处理组件优化；

若硬件能力信息包括支持音频处理组件优化的指示信息或者可支持的音频处理组件优化的类型，则确定终端设备支持音频处理组件优化。

可选的，数据通道为客户端与操作系统之间建立的连接。

本申请实施例提供的装置，可执行上述方法实施例，其具体实现原理和技术效果，可参见上述方法实施例，本实施例此处不再赘述。

图5为本申请实施例提供的一种音效优化装置的结构示意图，如图5所示，本实施例的装置在图4所示装置的基础上，进一步地，还可以包括：发送模块14，该发送模块14用于向操作系统发送连接建立请求，用于操作系统在接收到连接建立请求后获取终端设备的音频处理组件的音效优化能力和音效播放能力；获取模块11还用于接收操作系统发送的连接建立请求接收成功的信息，处理模块13还用于与操作系统建立连接。

本申请实施例提供的装置，可执行上述方法实施例，其具体实现原理和技术效果，可参见上述方法实施例，本实施例此处不再赘述。

图6为本申请实施例提供的一种音效优化系统结构示意图，如图6所示，本实施例中的音效优化系统包括客户端、操作系统和音频处理组件，客户端、操作系统和音频处理组件在同一终端设备中。客户端可以包括音效触发模块21、第一音效优化模块22和第一控制模块23，操作系统可以包括第二音效优化模块24和第二控制模块25，音频处理组件可以包括驱动模块26和播放模块27。

其中，音效触发模块21用于监听应用(例如游戏应用)的音频触发，获取客户端在当前场景触发的音频信号，通知第一控制模块23根据当前场景和客户端的音效优化策略，确定音频信号的目标优化策略。第一控制模块23用于通过操作系统获取终端设备的硬件能力信息，具体可以是通过客户端与终端设备的操作系统之间建立的数据通道获取终端设备的硬件能力信息。接着根据客户端的一个或多个预设场景和终端设备的硬件能力信息确定客户端的音效优化策略，并根据当前场景和客户端的音效优化策略，确定音频信号的目标优化策略。

第一音效优化模块22用于根据目标优化策略，通过操作系统和终端设备中的音频处理组件对音频信号进行音效优化。

可选地，第一音效优化模块22具体用于：若目标优化策略为客户端优化，则对音频信号进行客户端优化，得到优化后的音频信号，将优化后的音频信号发送至操作系统，用于操作系统根据优化后的音频信号运行音频处理组件；

若目标优化策略为音频处理组件优化，则将音频信号和目标优化策略发送至操作系统，用于操作系统根据音频信号和目标优化策略运行音频处理组件；

若目标优化策略为混合优化，则对音频信号进行客户端优化，将客户端优化后的音频信号和混合优化中的音频处理组件优化发送至操作系统，用于操作系统根据客户端优化后的音频信号和混合优化中的音频处理组件优化运行音频处理组件。

操作系统中的第二控制模块25用于与客户端和音频处理组件通讯，从音频处理组件接收终端设备的硬件能力信息，并将终端设备的硬件能力信息发送至客户端的第一控制模块23。第二控制模块25还用于接收客户端发送的目标优化策略，并向第二音效优化模块24发送携带目标优化策略的音效优化指令。第二音效优化模块24用于接收携带目标优化策略的音效优化指令，将携带目标优化策略的音效优化指令发送至音效处理组件的驱动模块26。

音效处理组件中的驱动模块26用于与操作系统的第二控制模块25通讯，向第二控制模块25发送终端设备的硬件能力信息，还用于接收第二音效优化模块24发送的携带目标优化策略的音效优化指令，根据携带目标优化策略的音效优化指令进行音效优化，驱动播放模块27进行音效优化后的音频播放。播放模块27用于接收驱动模块26的指令和音频信号，并进行音频的播放。

图7是本申请实施例提供的终端设备的示意性框图。

如图7所示，该终端设备700可包括：

存储器710和处理器720，该存储器710用于存储计算机程序，并将该程序代码传输给该处理器720。换言之，该处理器720可以从存储器710中调用并运行计算机程序，以实现本申请实施例中的方法。

例如，该处理器720可用于根据该计算机程序中的指令执行上述方法实施例。

在本申请的一些实施例中，该处理器720可以包括但不限于：

通用处理器、数字信号处理器(Digital Signal Processor，DSP)、专用集成电路(Application Specific Integrated Circuit，ASIC)、现场可编程门阵列(FieldProgrammable Gate Array，FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等等。

在本申请的一些实施例中，该存储器710包括但不限于：

易失性存储器和/或非易失性存储器。其中，非易失性存储器可以是只读存储器(Read-Only Memory，ROM)、可编程只读存储器(Programmable ROM，PROM)、可擦除可编程只读存储器(Erasable PROM，EPROM)、电可擦除可编程只读存储器(Electrically EPROM，EEPROM)或闪存。易失性存储器可以是随机存取存储器(Random Access Memory，RAM)，其用作外部高速缓存。通过示例性但不是限制性说明，许多形式的RAM可用，例如静态随机存取存储器(Static RAM，SRAM)、动态随机存取存储器(Dynamic RAM，DRAM)、同步动态随机存取存储器(Synchronous DRAM，SDRAM)、双倍数据速率同步动态随机存取存储器(Double DataRate SDRAM，DDR SDRAM)、增强型同步动态随机存取存储器(Enhanced SDRAM，ESDRAM)、同步连接动态随机存取存储器(synch link DRAM，SLDRAM)和直接内存总线随机存取存储器(Direct Rambus RAM，DR RAM)。

在本申请的一些实施例中，该计算机程序可以被分割成一个或多个模块，该一个或者多个模块被存储在该存储器710中，并由该处理器720执行，以完成本申请提供的方法。该一个或多个模块可以是能够完成特定功能的一系列计算机程序指令段，该指令段用于描述该计算机程序在该终端设备中的执行过程。

如图7所示，该终端设备还可包括：

收发器730，该收发器730可连接至该处理器720或存储器710。

其中，处理器720可以控制该收发器730与其他设备进行通信，具体地，可以向其他设备发送信息或数据，或接收其他设备发送的信息或数据。收发器730可以包括发射机和接收机。收发器730还可以进一步包括天线，天线的数量可以为一个或多个。

应当理解，该终端设备中的各个组件通过总线系统相连，其中，总线系统除包括数据总线之外，还包括电源总线、控制总线和状态信号总线。

本申请还提供了一种计算机存储介质，其上存储有计算机程序，该计算机程序被计算机执行时使得该计算机能够执行上述方法实施例的方法。或者说，本申请实施例还提供一种包含指令的计算机程序产品，该指令被计算机执行时使得计算机执行上述方法实施例的方法。

本申请还提供一种计算机程序产品，包括计算机程序，该计算机程序被处理器执行时实现如上实施例中的音效优化方法。

当使用软件实现时，可以全部或部分地以计算机程序产品的形式实现。该计算机程序产品包括一个或多个计算机指令。在计算机上加载和执行该计算机程序指令时，全部或部分地产生按照本申请实施例该的流程或功能。该计算机可以是通用计算机、专用计算机、计算机网络、或者其他可编程装置。该计算机指令可以存储在计算机可读存储介质中，或者从一个计算机可读存储介质向另一个计算机可读存储介质传输，例如，该计算机指令可以从一个网站站点、计算机、服务器或数据中心通过有线(例如同轴电缆、光纤、数字用户线(digital subscriber line，DSL))或无线(例如红外、无线、微波等)方式向另一个网站站点、计算机、服务器或数据中心进行传输。该计算机可读存储介质可以是计算机能够存取的任何可用介质或者是包含一个或多个可用介质集成的服务器、数据中心等数据存储设备。该可用介质可以是磁性介质(例如，软盘、硬盘、磁带)、光介质(例如数字视频光盘(digital video disc，DVD))、或者半导体介质(例如固态硬盘(solid state disk，SSD))等。

本领域普通技术人员可以意识到，结合本文中所公开的实施例描述的各示例的模块及算法步骤，能够以电子硬件、或者计算机软件和电子硬件的结合来实现。这些功能究竟以硬件还是软件方式来执行，取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能，但是这种实现不应认为超出本申请的范围。

在本申请所提供的几个实施例中，应该理解到，所揭露的系统、装置和方法，可以通过其它的方式实现。例如，以上所描述的装置实施例仅仅是示意性的，例如，该模块的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个模块或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口，装置或模块的间接耦合或通信连接，可以是电性，机械或其它的形式。

作为分离部件说明的模块可以是或者也可以不是物理上分开的，作为模块显示的部件可以是或者也可以不是物理模块，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。例如，在本申请各个实施例中的各功能模块可以集成在一个处理模块中，也可以是各个模块单独物理存在，也可以两个或两个以上模块集成在一个模块中。

以上该，仅为本申请的具体实施方式，但本申请的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本申请揭露的技术范围内，可轻易想到变化或替换，都应涵盖在本申请的保护范围之内。因此，本申请的保护范围应以该权利要求的保护范围为准。

Claims (14)

1.一种音效优化方法，其特征在于，所述方法包括：

客户端获取在当前场景触发的音频信号；

根据所述当前场景和所述客户端的音效优化策略，确定所述音频信号的目标优化策略；所述客户端的音效优化策略根据所述客户端的一个或多个预设场景和终端设备的硬件能力信息确定，所述终端设备的硬件能力信息通过所述客户端与所述终端设备的操作系统之间建立的数据通道获取，所述一个或多个预设场景包括所述当前场景；

根据所述目标优化策略，通过所述终端设备的操作系统和所述终端设备中的音频处理组件对所述音频信号进行音效优化。

2.根据权利要求1所述的方法，其特征在于，所述客户端的音效优化策略包括所述客户端的一个或多个预设场景和音效优化策略的对应关系；

所述根据所述当前场景和所述客户端的音效优化策略，确定所述音频信号的目标优化策略，包括：

根据所述当前场景和所述对应关系，确定所述当前场景对应的音效优化策略；

将所述当前场景对应的音效优化策略确定为所述音频信号的目标优化策略。

3.根据权利要求2所述的方法，其特征在于，所述音效优化策略包括客户端优化、音频处理组件优化和混合优化中的至少一项，所述混合优化包括所述客户端优化和所述音频处理组件优化，所述音频处理组件优化的类型包括方位音频优化、高保真音频优化和预设目标场景下的音频优化。

4.根据权利要求3所述的方法，其特征在于，所述根据所述目标优化策略，通过所述操作系统和所述终端设备中的音频处理组件对所述音频信号进行音效优化，包括：

若所述目标优化策略为所述客户端优化，则对所述音频信号进行客户端优化，得到优化后的音频信号，将所述优化后的音频信号发送至所述操作系统，用于所述操作系统根据所述优化后的音频信号运行所述音频处理组件；

若所述目标优化策略为所述音频处理组件优化，则将所述音频信号和所述目标优化策略发送至所述操作系统，用于所述操作系统根据所述音频信号和所述目标优化策略运行所述音频处理组件；

若所述目标优化策略为所述混合优化，则对所述音频信号进行客户端优化，将客户端优化后的音频信号和所述混合优化中的音频处理组件优化发送至所述操作系统，用于所述操作系统根据所述客户端优化后的音频信号和所述混合优化中的音频处理组件优化运行所述音频处理组件。

5.根据权利要求3所述的方法，其特征在于，所述客户端为游戏应用客户端，所述客户端的预设场景至少包括游戏过场动画场景、游戏战斗准备场景、游戏战斗场景和游戏语音场景；

所述对应关系中，与所述游戏过场动画场景对应的音效优化策略为所述高保真音频优化；

与所述游戏战斗准备场景对应的音效优化策略为所述方位音频优化；

与所述游戏战斗场景对应的音效优化策略为所述音频处理组件优化；

与所述游戏语音场景对应的音效优化策略为所述混合优化。

6.根据权利要求3所述的方法，其特征在于，所述将所述当前场景对应的音效优化策略确定为所述音频信号的目标优化策略，包括：

若所述当前场景对应的音效优化策略至少包括音频处理组件优化，则将音频处理组件优化确定为所述音频信号的目标优化策略；

若所述当前场景对应的音效优化策略不包括音频处理组件优化，则将客户端优化确定为所述音频信号的目标优化策略。

7.根据权利要求1-6任一项所述的方法，其特征在于，所述方法还包括：

通过所述数据通道，接收所述操作系统发送的所述终端设备的硬件能力信息；

根据所述终端设备的硬件能力信息确定所述终端设备是否支持音频处理组件优化；

若所述终端设备支持音频处理组件优化，则获取所述终端设备可支持的音频处理组件优化的类型，以及获取客户端优化的类型；若所述终端设备不支持音频处理组件优化，则获取客户端优化的类型。

8.根据权利要求7所述的方法，其特征在于，所述方法还包括：

确定所述客户端的一个或多个预设场景和所述音频处理组件优化的类型和/或所述客户端优化的类型的对应关系；

根据所述对应关系，确认所述一个或多个预设场景对应的音效优化策略并存储。

9.根据权利要求7所述的方法，其特征在于，所述硬件能力信息包括支持和/或不支持音频处理组件优化的指示信息，和/或可支持的音频处理组件优化的类型，所述根据所述终端设备的硬件能力信息确定所述终端设备是否支持音频处理组件优化，包括：

若所述硬件能力信息包括所述不支持音频处理组件优化的指示信息，则确定所述终端设备不支持音频处理组件优化；

若所述硬件能力信息包括所述支持音频处理组件优化的指示信息或者可支持的音频处理组件优化的类型，则确定所述终端设备支持音频处理组件优化。

10.根据权利要求1-6任一项所述的方法，其特征在于，所述数据通道为所述客户端与所述操作系统之间建立的连接，所述方法还包括：

向所述操作系统发送连接建立请求，用于所述操作系统在接收到所述连接建立请求后获取所述终端设备的音频处理组件的音效优化能力和音效播放能力；

接收所述操作系统发送的连接建立请求接收成功的信息，与所述操作系统建立连接。

11.一种音效优化装置，其特征在于，包括：

获取模块，用于获取在当前场景触发的音频信号；

确定模块，用于根据所述当前场景和客户端的音效优化策略，确定所述音频信号的目标优化策略；所述客户端的音效优化策略根据所述客户端的一个或多个预设场景和终端设备的硬件能力信息确定，所述终端设备的硬件能力信息通过所述客户端与所述终端设备的操作系统之间建立的数据通道获取，所述一个或多个预设场景包括所述当前场景；

处理模块，用于根据所述目标优化策略，通过所述终端设备的操作系统和所述终端设备中的音频处理组件对所述音频信号进行音效优化。

12.一种终端设备，其特征在于，包括：

处理器和存储器，所述存储器用于存储计算机程序，所述处理器用于调用并运行所述存储器中存储的计算机程序，以执行权利要求1至10中任一项所述的方法。

13.一种计算机可读存储介质，其特征在于，用于存储计算机程序，所述计算机程序使得计算机执行如权利要求1至10中任一项所述的方法。

14.一种计算机程序产品，包括计算机程序，其特征在于，所述计算机程序被处理器执行时实现权利要求1至10中任一项所述方法的步骤。

Images