CN112954563B - 信号处理方法、电子设备、装置及存储介质 - Google Patents

Abstract

本申请实施例公开了一种信号处理方法、电子设备、装置及存储介质，其中，所述方法包括：获取第一语音信号；确定所述第一语音信号的目标来源；确定与所述目标来源对应的目标听力补偿参数；依据所述目标听力补偿参数对所述第一语音信号进行听力补偿，得到第二语音信号。采用本申请实施例能够针对语音信号的来源，针对性地对语音信号进行补偿，有助于提升语音信号的补偿效率。

Description

信号处理方法、电子设备、装置及存储介质

技术领域

本申请涉及信号处理领域，尤其涉及一种信号处理方法、电子设备、装置及存储介质。

背景技术

随着移动通信技术的进步，现代人使用电子设备(如手机、平板电脑等等)的频次大幅提高。长时间使用电子设备以较大音量或在嘈杂环境中打电话及听音乐等可能成为听力障碍发生的诱发因素。对于听力障碍已经发生的电子设备用户，由于听力水平的下降，会不自觉的增大设备音量甚至换用更大音量的电子设备，导致听力水平进一步恶化。针对这一现象，一些电子设备会在音量超出某个限制时以文字或提示音的方式提醒用户，避免过大音量损伤用户听力。对于听力已经受损的用户，电子设备可以提供有限的声音放大功能，其效果等同于之前提到的线性放大助听器，因此，如何提升对语音信号的补偿效果的问题亟待解决。

发明内容

本申请实施例提供了一种信号处理方法、电子设备、装置及存储介质，能够针对语音信号的来源，针对性地对语音信号进行补偿，有助于提升语音信号的补偿效率。

第一方面，本申请实施例提供了一种信号处理方法，所述方法包括：

获取第一语音信号；

确定所述第一语音信号的目标来源；

确定与所述目标来源对应的目标听力补偿参数；

依据所述目标听力补偿参数对所述第一语音信号进行听力补偿，得到第二语音信号。

第二方面，本申请实施例提供了一种信号处理装置，所述装置包括：

第一获取单元，用于获取第一语音信号；

第一确定单元，用于确定所述第一语音信号的目标来源；

第二确定单元，用于确定与所述目标来源对应的目标听力补偿参数；

补偿单元，用于依据所述目标听力补偿参数对所述第一语音信号进行听力补偿，得到第二语音信号。

第三方面，本申请实施例提供了一种电子设备，包括处理器、存储器、通信接口以及一个或多个程序，其中，上述一个或多个程序被存储在上述存储器中，并且被配置由上述处理器执行，上述程序包括用于执行本申请实施例第一方面中的步骤的指令。

第四方面，本申请实施例提供了一种计算机可读存储介质，其中，上述计算机可读存储介质存储用于电子数据交换的计算机程序，其中，上述计算机程序使得计算机执行如本申请实施例第一方面中所描述的部分或全部步骤。

第五方面，本申请实施例提供了一种计算机程序产品，其中，上述计算机程序产品包括存储了计算机程序的非瞬时性计算机可读存储介质，上述计算机程序可操作来使计算机执行如本申请实施例第一方面中所描述的部分或全部步骤。该计算机程序产品可以为一个软件安装包。

实施本申请实施例，具备如下有益效果：

可以看出，本申请实施例中所描述的信号处理方法、电子设备、装置及存储介质，获取第一语音信号，确定第一语音信号的目标来源，确定与目标来源对应的目标听力补偿参数，依据目标听力补偿参数对第一语音信号进行听力补偿，得到第二语音信号，能够针对语音信号的来源，针对性地对语音信号进行补偿，有助于提升语音信号的补偿效率。

附图说明

为了更清楚地说明本申请实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1A是本申请实施例提供的一种信号处理方法的流程示意图；

图1B是本申请实施例提供的测听流程的演示示意图；

图1C是本申请实施例提供的测试程序的界面演示示意图；

图1D是本申请实施例提供的另一种信号处理方法的流程示意图；

图2是本申请实施例提供的另一种信号处理方法的流程示意图；

图3是本申请实施例提供的一种电子设备的结构示意图；

图4A是本申请实施例提供的一种信号处理装置的功能单元组成框图；

图4B是本申请实施例提供的另一种信号处理装置的功能单元组成框图；

图4C是本申请实施例提供的另一种信号处理装置的功能单元组成框图。

具体实施方式

本申请的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别不同对象，而不是用于描述特定顺序。此外，术语“包括”和“具有”以及它们任何变形，意图在于覆盖不排他的包含。例如包含了一系列步骤或单元的过程、方法、系统、产品或设备没有限定于已列出的步骤或单元，而是可选地还包括没有列出的步骤或单元，或可选地还包括对于这些过程、方法、产品或设备固有的其他步骤或单元。

在本文中提及“实施例”意味着，结合实施例描述的特定特征、结构或特性可以包含在本申请的至少一个实施例中。在说明书中的各个位置出现该短语并不一定均是指相同的实施例，也不是与其它实施例互斥的独立的或备选的实施例。本领域技术人员显式地和隐式地理解的是，本文所描述的实施例可以与其它实施例相结合。

为了使本技术领域的人员更好地理解本申请方案，下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。

本申请实施例所涉及到的电子设备可以包括各种具有无线通信功能的手持设备(如智能手机、平板电脑等)、车载设备、可穿戴设备(智能手表、智能手环、无线耳机、增强现实/虚拟现实设备、智能眼镜)、计算设备或连接到无线调制解调器的其他处理设备，以及各种形式的用户设备(user equipment，UE)，移动台(mobile station，MS)，终端设备(terminal device)等等。为方便描述，上面提到的设备统称为电子设备。

下面对本申请实施例进行详细介绍。

请参阅图1A，图1A是本申请实施例提供的一种信号处理方法的流程示意图，如图所示，应用于电子设备，本信号处理方法包括：

101、获取第一语音信号。

其中，第一语音信号可以为歌曲、录音、网络声音等等，在此不做限定。第一语音信号可以预先保存在电子设备中，也可以为当前接收的语音信号。

102、确定所述第一语音信号的目标来源。

其中，目标来源可以包括本地来源或者非本地来源。本地来源可以为麦克风获取的语音信号，该语音信号不仅包括用户声音，还可以包括回声，或者，环境噪声。非本地来源可以为蓝牙语音信号，或者，打电话时候的语音信号，微信电话的语音信号，直播的语音信号或者其他网络语音信号。

103、确定与所述目标来源对应的目标听力补偿参数。

本申请实施例中，不同的来源可以对应不同的听力补偿参数，听力补偿参数可以为以下至少一种：补偿算法、补偿调节参数、补偿频段、补偿时长等等。例如，电子设备中可以预先存储语音信号的来源与听力补偿参数之间的映射关系，进而，可以依据该映射关系确定目标来源对应的目标听力补偿参数。

104、依据所述目标听力补偿参数对所述第一语音信号进行听力补偿，得到第二语音信号。

其中，本申请实施例中，语音信号其来源不同，则采用的补偿方式不一样，具体地，电子设备则可以依据目标听力补偿参数对第一语音信号进行听力补偿，得到补偿后的语音信号，即第二语音信号，如此，可以提升语音信号的补偿效率，提升用户体验。

在一个可能的示例中，在所述目标来源为本地输入时，上述步骤103，确定与所述目标来源对应的目标听力补偿参数，可以包括如下步骤：

A31、对所述第一语音信号进行回声消除处理，得到第三语音信号；

A32、对所述第一语音信号进行噪声检测，得到目标噪声参数；

A33、确定与所述目标噪声参数对应的所述目标听力补偿参数；

则，上述步骤104，依据所述目标听力补偿参数对所述第一语音信号进行听力补偿，得到第二语音信号，可以按照如下方式实施：

通过所述目标听力补偿参数对所述第三语音信号进行听力补偿，得到所述第二语音信号。

其中，在第一语音信号来源于本地输入时，第一语音信号可能含有回声以及环境噪声，则电子设备可以对第一语音信号进行回声消除处理，具体地，可以识别第一语音信号中的回声，并对回声进行滤波处理，得到第三语音信号。另外，电子识别还可以对第一语音信号进行噪声检测，得到目标噪声参数，本申请实施例中，噪声参数可以为以下至少一种：噪声强度、噪声对应的频谱、噪声的波形图等等，在此不做限定。电子设备中还可以预先存储预设的噪声参数与听力补偿参数之间的映射关系，进而，可以依据该映射关系确定目标噪声参数对应的目标听力补偿参数，接着，还可以通过目标听力补偿参数对第三语音信号进行听力补偿，得到第二语音信号，如此，可以消除语音中的噪声，并且只对无回声的语音信号，采取与环境相宜的补偿方式进行听力补偿，可以提升语音信号的补偿效率，便于用户更加方便听清楚语音信号。

在一个可能的示例中，上述步骤A32，对所述第一语音信号进行噪声检测，得到目标噪声参数，可以包括如下步骤：

A3211、将所述第一语音信号发送至服务器，由所述服务器对所述第一语音信号进行噪声检测，得到目标噪声参数；

A3212、接收由所述服务器发送的所述目标噪声参数。

其中，电子设备可以通过移动网络与服务器交互，获取环境噪声特征数据库，上传噪声暴露水平等，有助于提高测试及补偿的灵活性，进而，通过借助服务器的强大运算能力和数据存储能力，提高了环境噪声辨识的准确度。

在一个可能的示例中，上述步骤A32，对所述第一语音信号进行噪声检测，得到目标噪声参数，可以包括如下步骤：

A3221、通过与服务器进行交互，得到环境噪声特征数据库；

A3222、依据所述环境噪声特征数据库对所述第一语音信号进行噪声检测，得到所述目标噪声参数。

其中，电子设备可以通过移动网络与服务器交互，获取环境噪声特征数据库，进而，基于该环境噪声特征数据库对语音信号进行精准噪声检测，有助于提高测试及补偿的灵活性。

进一步地，在一个可能的示例中，上述步骤A31之后，还可以包括如下步骤：

对所述第三语音信号进行环境噪声消除处理，得到处理后的所述第三语音信号；

则步骤104，通过所述目标听力补偿参数对所述第三语音信号进行听力补偿，得到所述第二语音信号，可以按照如下方式实施：

通过所述目标听力补偿参数对处理后的所述第三语音信号进行听力补偿，得到所述第二语音信号。

其中，由于第三语音信号中可以还包括环境噪声，因此，电子设备可以对第三语音信号进行环境噪声消除处理，得到处理后的第三语音信号，并且通过目标听力补偿参数对处理后的第三语音信号进行听力补偿，得到第二语音信号，这样可以避免对回声以及噪声进行补偿，提升了语音补偿效率，也便于用户理解语音内容。

在一个可能的示例中，在所述目标来源为非本地输入时，上述步骤103，确定与所述目标来源对应的目标听力补偿参数，可以包括如下步骤：

B31、对所述第一语音信号进行丢包检测及修复处理，得到第四语音信号；

B32、获取所述第一语音信号对应的目标用户的听力损伤曲线；

B33、依据所述听力损伤曲线确定所述目标用户的目标损伤区间；

B34、按照预设的区间与听力补偿参数之间的映射关系，确定所述目标损伤区间对应的目标听力补偿参数。

其中，由于第一语音信号通过无线网络进行传输，在传输过程中，会出现或多或少的丢包情况，因此，可以对第一语音信号进行丢包检测以及修复处理，得到第四语音信号。不同的用户，听力状况不一样，因此，需要针对不同的人进行不同程度补偿。上述目标用户可以理解为需要收听第一语音信号的用户。电子设备中可以预先存储目标用户的听力损伤曲线，该听力损伤曲线的横轴可以为频率，纵轴可以为幅度，具体地，可根据用户在不同频段的听力损失情况绘制听力损伤曲线，并根据相应的正常人群参考曲线计算系统为了满足每个用户达到预设目标语言可懂度或响度正常化所需的输入/输出在频谱上的对应关系(目标频率响应函数)。

具体地，电子设备可以依据听力损伤曲线确定目标用户的目标损伤区间，即用户听力受限区域或者体验不好的区域，并按照预设的区间与听力补偿参数之间的映射关系，确定目标损伤区间对应的目标听力补偿参数。

进一步地，可以确定第四语音信号中与目标损伤区间对应的待补偿音语音信号，能够依据目标听力补偿参数对待补偿音频信号进行补偿，得到补偿后的语音信号，最终，将第四语音信号中未被补偿的语音信号和补偿后的语音信号确定为第二语音信号，如此，实现了对语音信号的针对性补偿，提高了针对无线传输的声音信号进行听力补偿的效果，提升了用户体验。

具体实现中，电子设备可以通过计算信号处理系统的目标频率响应函数(补偿参数)，如此，能够对输入语音信号进行相应处理，以满足用户收听的个性化需求，如针对各个不同频段的语音信号针对性补偿。例如，听力补偿参数可以为时域卷积函数，可以通过计算时域卷积函数，对时域信号进行卷积运算，又例如，听力补偿参数可以为滤波器组系数，通过该滤波器组系数实现补偿；又如，补偿参数可以为变换域系数增益值，可以对信号进行分帧，再通过变换算法将短时信号映射到变换域，对变换域系数进行增益或衰减(视具体实际情况而定)，再经过逆变换得到时域信号，再叠加分帧信号重新得到连续时域音频信号，如此，可以实现分帧补偿，提升补偿效率，当然，针对不同的帧，可以采用不同的线程或者进程进行补偿，有助于提升运算效率。

具体实现中，在第一语音信号为非本地输入时(例如蓝牙麦克风输入，通过移动通信网络或无线保真(wireless fidelity，Wi-Fi)进行通话)输入声音信号可以在进行听力补偿前通过丢包检测及修复算法模块，以对该语音信号进行丢包检测及修复，由于无线通信过程中不可避免地存在数据丢失现象，丢失或损坏的数据在声音信号上表现为随机不连续的信号输出，丢包检测及修复模块可以对输入信号的频谱结构及相位连续性进行检测，一旦发现信号出现数据丢失，可以使用修复算法对信号结构进行恢复，消除不连续性以提高信号质量。

在一个可能的示例中，本申请实施例在测听开始前会对电子设备进行校准，以保证测试结果的可靠性和可移植性，还可以包括如下步骤：

C1、使用预设测试软件在所述电子设备上播放指定声压级的不同频率测试音；

C2、将所述电子设备的耳机输出通过标准仿真耳耦合器耦合到声压测量设备上，测得实际输出声压级；

C3、将所述指定声压级减去所述实际输出声压级，得到目标偏差声压级，确定所述目标偏差声压级对应的目标修正参数；

C4将所述目标修正参数写入所述电子设备，完成校准过程。

具体地，本申请实施例中的测听流程如图1B所示，测试程序的界面可以参考如图1C所示，测试问题，选项和声音组合为测试单元并存储在数据库中，该测试数据库可以位于电子设备上，也可以存储在服务器上，由电子设备通过移动网络的数据传输业务实时存取。

当然，具体实现中，还可以对电子设备的麦克风进行测试(电子设备自带的麦克风或蓝牙麦克风)。具体测试步骤与耳机类似，针对麦克风测试，可以在消音室或隔音箱中使用麦克风录制标准仿真嘴的输出信号，将输出信号在各频段声压级减去录制到的信号声压级，得到麦克风的修正参数。该参数仅在使用麦克风采集本地声音播放时应用在补偿系统中。

测试开始前，测试程序会初始化助听参数以供测试过程中加载。助听参数可以包括各频段增益，动态范围压缩模块的压缩比，降噪模块的开启条件及与噪声环境对应的降噪系数等。

测试开始后，测试程序按特定顺序从数据库中抽取测试单元并解包。将测试问题和答案选项显示在屏幕上。随后一组助听参数将被加载到助听器各模块内，并将测试声音通过助听器模块处理后播放。用户根据主观感受到的测试声音的特征，从答案选项中选择一个或多个答案反馈给测试算法。测试算法根据用户反馈自动调整助听器各模块参数。该过程会重复进行直到所有助听参数都被调试完毕。

举例说明下，测听问题可以如下：

1、您是否有耳鸣？(基本信息搜集，不播放声音)

2、耳机中是否有声音播放？(同时播放纯音、啭音测听信号，用于判断听阈)

3、请选择听到的句子(同时播放朗读语句，用于测试语言可懂度)

4、请选择听到的句子(同时播放带噪的朗读语句，用于微调降噪模块参数)

5、现在播放的声音音量如何？(同时播放一些日常生活中常见的声音，选项为过大，正常或过小。用于微调动态范围压缩参数)

具体实现中，问卷测听的形式可以为播放测试声后引导用户调整滑动条或直接输入参数。另外，测听设备校准步骤可以通过声压计，纯音听力计，助听器测试仪或经过校准的电脑声卡，示波器等完成。当然，凡是经过校准的电声测试设备均可以用于听力测试设备校准。

上述噪声水平的测量，可以在时域(直接处理/上传声音波形或经过滤波后的声音波形)或频域(处理/上传傅里叶变换，离散余弦变换，离散小波变换或其他类似变换之后的输出值的全部或部分)进行。也可将采集到的波形经过压缩编码后处理/上传到服务器，由服务器完成测量。

综上所示，本申请实施例中的信号处理方法的具体流程图可以参见图1D。其中，回声消除单元可以包括回声消除算法，听力补偿单元可以包括设备输出声压级校准，针对用户听力损失的补偿，降噪以及动态范围压缩算法等等。除此之外，本地麦克风输入还可以被导入环境噪声检测模块(该模块可以位于移动通信终端，也可以设置在云服务器上，通过移动通信网络接收电子设备传来的麦克风数据)以计算用户日常生活中的噪声暴露水平，并根据听力衰退模型预测其听力受损速度，提供相应的补偿策略。补偿策略可以包括对用户发出警告，对听力补偿模块中的降噪算法参数进行调整，增强降噪效果，或限制助听器最大音量输出及用户的每日使用时长等。当然，具体实现中，麦克风在接听到某个声音时，也可以通过与该麦克风相应的频响曲线对声音进行补偿，扬声器在播放声音时，也可以通过与该扬声器相应的频响曲线对需要播放的声音进行补偿。

进一步地，具体实现中，电子设备可以使用标准仪器校准特定设备，保证测试结果的可靠性及可移植性，另外，改良的测听流程，使用动态更新的助听参数，以问卷形式获取用户反馈，达到或接近专业助听器验配师的人工验配效果，并且可以将环境噪声检测模块，噪声暴露统计模块与听力补偿相结合，防止强噪声暴露造成用户听力的进一步下降，还可以使用无线数据传输丢包补偿模块，提高了助听无线传入声音信号的质量，以及使用移动通信网络(5G等)与服务器交互，上传噪音暴露水平等数据以动态调整降噪算法参数及音量。

在一个可能的示例中，上述步骤104之后，还可以包括如下步骤：

D1、对所述第二语音信号进行动态音量压缩，得到压缩后的所述第二语音信号；

D2、对压缩后的所述第二语音信号进行校准，得到校准后的所述第二语音信号。

具体实现中，由于听损人群听域范围比一般人小，语音信号在不同声压级需要有不同程度的增益或削减，因此，需要对处理后的信号进行动态音量压缩。例如，压缩曲线中，低能量对应高增益，高能量对应低增益。在获取了用户的听阈与不舒适域后，也可根据所得听力数据来进行个性化的动态压缩。动态压缩可以在时域或任一变换域(例如：傅里叶变换，离散余弦变换，离散小波变换)进行处理。进一步地，电子设备可以对第二语音信号进行校准，得到校准后的第二音频信号，具体地，可以通过获取对处理后的语音信号的反馈来微调处理效果。该步骤在实际实现中可选择是否添加，由于不同用户有各自的听觉偏好，左右耳平衡的需求，实际的听力补偿效果需要根据用户的反馈进行微调。这部调整可以基于用户在当前交互界面下的反馈，也可以基于云端服务器所获取的用户数据。

在一个可能的示例中，上述步骤104之后，还可以包括如下步骤：

E1、获取与所述第一语音信号对应的目标图像信号；

E2、将所述第二语音信号与所述目标图像信号进行同步处理，得到同步混合信号。

具体实现中，电子设备可以对第二语音信号及其对应的目标图像信号进行同步，同步的主要考量可以来自于处理系统本身的处理延时。如可以为音/视频信号添加时间戳，也可以依据处理前同时植入音视数据流的水印信号。

进一步地，具体实现中，电子设备可以是通过该电子设备的音频输出模块播放音频信号，同时，通过该电子设备的视频输出模块播放所同步的视频信号。音频信号的输出模块可由蓝牙发射模块、音频放大模块、音频处理模块等来替代，电子设备所连接的设备可以为耳机或音响。视频输出模块可由视频处理模块、投影仪设备或显示器设备等替代。

可以看出，本申请实施例中所描述的信号处理方法，获取第一语音信号，确定第一语音信号的目标来源，确定与目标来源对应的目标听力补偿参数，依据目标听力补偿参数对第一语音信号进行听力补偿，得到第二语音信号，能够针对语音信号的来源，针对性地对语音信号进行补偿，有助于提升语音信号的补偿效率。

与上述图1A所示的实施例一致地，请参阅图2，图2是本申请实施例提供的一种信号处理方法的流程示意图，如图所示，应用于如图1A所示的电子设备，本信号处理方法包括：

201、获取第一语音信号。

202、确定所述第一语音信号的目标来源。

203、在所述目标来源为本地输入时，对所述第一语音信号进行回声消除处理，得到第三语音信号。

204、对所述第一语音信号进行噪声检测，得到目标噪声参数。

205、确定与所述目标噪声参数对应的第一目标听力补偿参数。

206、通过所述第一目标听力补偿参数对所述第三语音信号进行听力补偿，得到补偿后的语音信号。

207、在所述目标来源为非本地输入时，对所述第一语音信号进行丢包检测及修复处理，得到第四语音信号。

208、获取所述第一语音信号对应的目标用户的听力损伤曲线。

209、依据所述听力损伤曲线确定所述目标用户的目标损伤区间。

210、按照预设的区间与听力补偿参数之间的映射关系，确定所述目标损伤区间对应的第二目标听力补偿参数。

211、通过所述第二目标听力补偿参数对所述第四语音信号进行听力补偿，得到补偿后的语音信号。

其中，上述步骤201-步骤211的具体描述可以参照上述图1A所描述的信号处理方法的相应步骤，在此不再赘述。

可以看出，本申请实施例中所描述的信号处理方法，获取第一语音信号，确定第一语音信号的目标来源，确定与目标来源对应的目标听力补偿参数，依据目标听力补偿参数对第一语音信号进行听力补偿，得到第二语音信号，即，一方面，针对本地输入的语音信号，可以消除语音中的噪声，并且只对无回声的语音信号，采取与环境相宜的补偿方式进行听力补偿，可以提升语音信号的补偿效率，便于用户更加方便听清楚语音信号，另一方面，针对非本地输入的语音信号，实现了对语音信号的针对性补偿，提高了针对无线传输的声音信号进行听力补偿的效果，提升了用户体验。

与上述实施例一致地，请参阅图3，图3是本申请实施例提供的一种电子设备的结构示意图，如图所示，该电子设备包括处理器、存储器、通信接口以及一个或多个程序，其中，上述一个或多个程序被存储在上述存储器中，并且被配置由上述处理器执行，本申请实施例中，上述程序包括用于执行以下步骤的指令：

获取第一语音信号；

确定所述第一语音信号的目标来源；

确定与所述目标来源对应的目标听力补偿参数；

依据所述目标听力补偿参数对所述第一语音信号进行听力补偿，得到第二语音信号。

可以看出，本申请实施例中所描述的电子设备，通过确定第一语音信号的目标来源，确定与目标来源对应的目标听力补偿参数，依据目标听力补偿参数对第一语音信号进行听力补偿，得到第二语音信号，能够针对语音信号的来源，针对性地对语音信号进行补偿，有助于提升语音信号的补偿效率。

在一个可能的示例中，在所述目标来源为本地输入时，在所述确定与所述目标来源对应的目标听力补偿参数方面，上述程序包括用于执行以下步骤的指令：

对所述第一语音信号进行回声消除处理，得到第三语音信号；

对所述第一语音信号进行噪声检测，得到目标噪声参数；

确定与所述目标噪声参数对应的所述目标听力补偿参数；

在所述依据所述目标听力补偿参数对所述第一语音信号进行听力补偿，得到第二语音信号方面，上述程序包括用于执行以下步骤的指令：

通过所述目标听力补偿参数对所述第三语音信号进行听力补偿，得到所述第二语音信号。

在一个可能的示例中，上述程序还包括用于执行以下步骤的指令：

对所述第三语音信号进行环境噪声消除处理，得到处理后的所述第三语音信号；

所述通过所述目标听力补偿参数对所述第三语音信号进行听力补偿，得到所述第二语音信号，包括：

通过所述目标听力补偿参数对处理后的所述第三语音信号进行听力补偿，得到所述第二语音信号。

在一个可能的示例中，在所述目标来源为非本地输入时，在所述确定与所述目标来源对应的目标听力补偿参数方面，上述程序包括用于执行以下步骤的指令：

对所述第一语音信号进行丢包检测及修复处理，得到第四语音信号；

获取所述第一语音信号对应的目标用户的听力损伤曲线；

依据所述听力损伤曲线确定所述目标用户的目标损伤区间；

按照预设的区间与听力补偿参数之间的映射关系，确定所述目标损伤区间对应的目标听力补偿参数；

在所述依据所述目标听力补偿参数对所述第一语音信号进行听力补偿，得到第二语音信号方面，上述程序包括用于执行以下步骤的指令：

通过所述目标听力补偿参数对所述第四语音信号进行听力补偿，得到所述第二语音信号。

在一个可能的示例中，上述程序还包括用于执行以下步骤的指令：

对所述第二语音信号进行动态音量压缩，得到压缩后的所述第二语音信号；

对压缩后的所述第二语音信号进行校准，得到校准后的所述第二语音信号。

在一个可能的示例中，上述程序还包括用于执行以下步骤的指令：

获取与所述第一语音信号对应的目标图像信号；

将所述第二语音信号与所述目标图像信号进行同步处理，得到同步混合信号。

上述主要从方法侧执行过程的角度对本申请实施例的方案进行了介绍。可以理解的是，电子设备为了实现上述功能，其包含了执行各个功能相应的硬件结构和/或软件模块。本领域技术人员应该很容易意识到，结合本文中所提供的实施例描述的各示例的单元及算法步骤，本申请能够以硬件或硬件和计算机软件的结合形式来实现。某个功能究竟以硬件还是计算机软件驱动硬件的方式来执行，取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用使用不同方法来实现所描述的功能，但是这种实现不应认为超出本申请的范围。

本申请实施例可以根据上述方法示例对电子设备进行功能单元的划分，例如，可以对应各个功能划分各个功能单元，也可以将两个或两个以上的功能集成在一个处理单元中。上述集成的单元既可以采用硬件的形式实现，也可以采用软件功能单元的形式实现。需要说明的是，本申请实施例中对单元的划分是示意性的，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式。

图4A是本申请实施例中所涉及的信号处理装置400的功能单元组成框图。该信号处理装置400，应用于电子设备，所述装置400包括：第一获取单元401、第一确定单元402、第二确定单元403和补偿单元404，其中，

所述第一获取单元401，用于获取第一语音信号；

所述第一确定单元402，用于确定所述第一语音信号的目标来源；

所述第二确定单元403，用于确定与所述目标来源对应的目标听力补偿参数；

所述补偿单元404，用于依据所述目标听力补偿参数对所述第一语音信号进行听力补偿，得到第二语音信号。

可以看出，本申请实施例中所描述的信号处理装置，应用于电子设备，通过获取第一语音信号，确定第一语音信号的目标来源，确定与目标来源对应的目标听力补偿参数，依据目标听力补偿参数对第一语音信号进行听力补偿，得到第二语音信号，能够针对语音信号的来源，针对性地对语音信号进行补偿，有助于提升语音信号的补偿效率。

在一个可能的示例中，在所述目标来源为本地输入时，在所述确定与所述目标来源对应的目标听力补偿参数方面，所述第二确定单元403具体用于：

对所述第一语音信号进行回声消除处理，得到第三语音信号；

对所述第一语音信号进行噪声检测，得到目标噪声参数；

确定与所述目标噪声参数对应的所述目标听力补偿参数；

在所述依据所述目标听力补偿参数对所述第一语音信号进行听力补偿，得到第二语音信号方面，所述补偿单元404具体用于：

通过所述目标听力补偿参数对所述第三语音信号进行听力补偿，得到所述第二语音信号。

进一步地，在一个可能的示例中，所述第二确定单元403还具体用于：

对所述第三语音信号进行环境噪声消除处理，得到处理后的所述第三语音信号；

所述通过所述目标听力补偿参数对所述第三语音信号进行听力补偿，得到所述第二语音信号，包括：

通过所述目标听力补偿参数对处理后的所述第三语音信号进行听力补偿，得到所述第二语音信号。

在一个可能的示例中，在所述目标来源为非本地输入时，在所述确定与所述目标来源对应的目标听力补偿参数方面，所述第二确定单元403具体用于：

对所述第一语音信号进行丢包检测及修复处理，得到第四语音信号；

获取所述第一语音信号对应的目标用户的听力损伤曲线；

依据所述听力损伤曲线确定所述目标用户的目标损伤区间；

按照预设的区间与听力补偿参数之间的映射关系，确定所述目标损伤区间对应的目标听力补偿参数。

则，在所述依据所述目标听力补偿参数对所述第一语音信号进行听力补偿，得到第二语音信号方面，所述补偿单元404具体用于：

通过所述目标听力补偿参数对所述第四语音信号进行听力补偿，得到所述第二语音信号。

在一个可能的示例中，如图4B所示，图4B为图4A所示的信号处理装置又一变型结构，其与图4A相比较，还可以包括：压缩单元405和校准单元406，具体如下：

所述压缩单元405，用于对所述第二语音信号进行动态音量压缩，得到压缩后的所述第二语音信号；

所述校准单元406，用于对压缩后的所述第二语音信号进行校准，得到校准后的所述第二语音信号。

在一个可能的示例中，如图4C所示，图4C为图4A所示的信号处理装置又一变型结构，其与图4A相比较，还可以包括：第二获取单元407和同步单元408，具体如下：

所述第二获取单元407，用于获取与所述第一语音信号对应的目标图像信号；

所述同步单元408，用于将所述第二语音信号与所述目标图像信号进行同步处理，得到同步混合信号。

可以理解的是，本实施例的信号处理装置的各程序模块的功能可根据上述方法实施例中的方法具体实现，其具体实现过程可以参照上述方法实施例的相关描述，此处不再赘述。

本申请实施例还提供一种计算机存储介质，其中，该计算机存储介质存储用于电子数据交换的计算机程序，该计算机程序使得计算机执行如上述方法实施例中记载的任一方法的部分或全部步骤，上述计算机包括电子设备。

本申请实施例还提供一种计算机程序产品，上述计算机程序产品包括存储了计算机程序的非瞬时性计算机可读存储介质，上述计算机程序可操作来使计算机执行如上述方法实施例中记载的任一方法的部分或全部步骤。该计算机程序产品可以为一个软件安装包，上述计算机包括电子设备。

需要说明的是，对于前述的各方法实施例，为了简单描述，故将其都表述为一系列的动作组合，但是本领域技术人员应该知悉，本申请并不受所描述的动作顺序的限制，因为依据本申请，某些步骤可以采用其他顺序或者同时进行。其次，本领域技术人员也应该知悉，说明书中所描述的实施例均属于优选实施例，所涉及的动作和模块并不一定是本申请所必须的。

在上述实施例中，对各个实施例的描述都各有侧重，某个实施例中没有详述的部分，可以参见其他实施例的相关描述。

在本申请所提供的几个实施例中，应该理解到，所揭露的装置，可通过其它的方式实现。例如，以上所描述的装置实施例仅仅是示意性的，例如上述单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口，装置或单元的间接耦合或通信连接，可以是电性或其它的形式。

上述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。

另外，在本申请各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现，也可以采用软件功能单元的形式实现。

上述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储器中。基于这样的理解，本申请的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储器中，包括若干指令用以使得一台计算机设备(可为个人计算机、服务器或者网络设备等)执行本申请各个实施例上述方法的全部或部分步骤。而前述的存储器包括：U盘、只读存储器(ROM，Read-Only Memory)、随机存取存储器(RAM，Random Access Memory)、移动硬盘、磁碟或者光盘等各种可以存储程序代码的介质。

本领域普通技术人员可以理解上述实施例的各种方法中的全部或部分步骤是可以通过程序来指令相关的硬件来完成，该程序可以存储于一计算机可读存储器中，存储器可以包括：闪存盘、只读存储器(英文：Read-Only Memory，简称：ROM)、随机存取器(英文：Random Access Memory，简称：RAM)、磁盘或光盘等。

以上对本申请实施例进行了详细介绍，本文中应用了具体个例对本申请的原理及实施方式进行了阐述，以上实施例的说明只是用于帮助理解本申请的方法及其核心思想；同时，对于本领域的一般技术人员，依据本申请的思想，在具体实施方式及应用范围上均会有改变之处，综上所述，本说明书内容不应理解为对本申请的限制。

Claims (7)

1.一种信号处理方法，其特征在于，所述方法包括：

获取第一语音信号；

确定所述第一语音信号的目标来源；

确定与所述目标来源对应的目标听力补偿参数，所述语音信号其来源不同，则采用的补偿方式不一样；

依据所述目标听力补偿参数对所述第一语音信号进行听力补偿，得到第二语音信号；

其中，在所述目标来源为本地输入时，所述确定与所述目标来源对应的目标听力补偿参数，包括：

对所述第一语音信号进行回声消除处理，得到第三语音信号；

对所述第一语音信号进行噪声检测，得到目标噪声参数；

确定与所述目标噪声参数对应的所述目标听力补偿参数；

所述依据所述目标听力补偿参数对所述第一语音信号进行听力补偿，得到第二语音信号，包括：

通过所述目标听力补偿参数对所述第三语音信号进行听力补偿，得到所述第二语音信号；

其中，在所述目标来源为非本地输入时，所述确定与所述目标来源对应的目标听力补偿参数，包括：

对所述第一语音信号进行丢包检测及修复处理，得到第四语音信号；

获取所述第一语音信号对应的目标用户的听力损伤曲线；

依据所述听力损伤曲线确定所述目标用户的目标损伤区间；

按照预设的区间与听力补偿参数之间的映射关系，确定所述目标损伤区间对应的目标听力补偿参数；

所述依据所述目标听力补偿参数对所述第一语音信号进行听力补偿，得到第二语音信号，包括：

通过所述目标听力补偿参数对所述第四语音信号进行听力补偿，得到所述第二语音信号。

2.根据权利要求1所述的方法，其特征在于，所述方法还包括：

对所述第三语音信号进行环境噪声消除处理，得到处理后的所述第三语音信号；

所述通过所述目标听力补偿参数对所述第三语音信号进行听力补偿，得到所述第二语音信号，包括：

通过所述目标听力补偿参数对处理后的所述第三语音信号进行听力补偿，得到所述第二语音信号。

3.根据权利要求1或2所述的方法，其特征在于，所述方法还包括：

对所述第二语音信号进行动态音量压缩，得到压缩后的所述第二语音信号；

对压缩后的所述第二语音信号进行校准，得到校准后的所述第二语音信号。

4.根据权利要求1或2所述的方法，其特征在于，所述方法还包括：

获取与所述第一语音信号对应的目标图像信号；

将所述第二语音信号与所述目标图像信号进行同步处理，得到同步混合信号。

5.一种信号处理装置，其特征在于，所述装置包括：

第一获取单元，用于获取第一语音信号；

第一确定单元，用于确定所述第一语音信号的目标来源；

第二确定单元，用于确定与所述目标来源对应的目标听力补偿参数，所述语音信号其来源不同，则采用的补偿方式不一样；

补偿单元，用于依据所述目标听力补偿参数对所述第一语音信号进行听力补偿，得到第二语音信号；

其中，在所述目标来源为本地输入时，在所述确定与所述目标来源对应的目标听力补偿参数方面，所述第二确定单元具体用于：

对所述第一语音信号进行回声消除处理，得到第三语音信号；

对所述第一语音信号进行噪声检测，得到目标噪声参数；

确定与所述目标噪声参数对应的所述目标听力补偿参数；

在所述依据所述目标听力补偿参数对所述第一语音信号进行听力补偿，得到第二语音信号方面，所述补偿单元具体用于：

通过所述目标听力补偿参数对所述第三语音信号进行听力补偿，得到所述第二语音信号；

其中，在所述目标来源为非本地输入时，在所述确定与所述目标来源对应的目标听力补偿参数方面，包括：

对所述第一语音信号进行丢包检测及修复处理，得到第四语音信号；

获取所述第一语音信号对应的目标用户的听力损伤曲线；

依据所述听力损伤曲线确定所述目标用户的目标损伤区间；

按照预设的区间与听力补偿参数之间的映射关系，确定所述目标损伤区间对应的目标听力补偿参数；

所述依据所述目标听力补偿参数对所述第一语音信号进行听力补偿，得到第二语音信号，包括：

通过所述目标听力补偿参数对所述第四语音信号进行听力补偿，得到所述第二语音信号。

6.一种电子设备，其特征在于，包括处理器、存储器，所述存储器用于存储一个或多个程序，并且被配置由所述处理器执行，所述程序包括用于执行如权利要求1-4任一项所述的方法中的步骤的指令。

7.一种计算机可读存储介质，其特征在于，存储用于电子数据交换的计算机程序，其中，所述计算机程序使得计算机执行如权利要求1-4任一项所述的方法。

Images