CN116088786A - 音频播放方法、装置、电子设备和存储介质 - Google Patents

Abstract

本公开提供了一种音频播放方法、装置、电子设备和存储介质，应用于电子设备，所述方法包括：获取收听用户的耳朵的三维信息；其中，所述三维信息包括：耳朵的立体空间信息和/或，所述耳朵相对于所述电子设备的三维相对位置信息；根据所述三维信息，确定第一音频参数；以所述第一音频参数进行音频的播放。本公开实施例的音频播放方法提高了收听体验。

Description

音频播放方法、装置、电子设备和存储介质

技术领域

本公开涉及电子设备技术，尤其涉及一种音频播放方法、装置、电子设备和存储介质。

背景技术

电子设备以手机为例。手机的音频播放主要靠听筒和/或扬声器，扬声器一般用于外放，常用于向用户播放音量较大的音频，这类音频可以是音乐软件或视频软件中的音频。听筒不用于外放，多在语音通话过程中向用户播放音量较小的音频，保证通话的隐私性。无论采用哪种方式播放，在用户没有进行手动调节的情况下，电子设备的音频参数是固定的。即，同一段音频向不同用户播放的音频参数均相同，影响用户的收听体验。

发明内容

本公开提供一种音频播放方法、装置、电子设备和存储介质。

根据本公开第一方面实施例，提供了一种音频播放方法，应用于电子设备，所述方法包括：

获取收听用户的耳朵的三维信息；其中，所述三维信息包括：耳朵的立体空间信息和/或，所述耳朵相对于所述电子设备的三维相对位置信息；

根据所述三维信息，确定第一音频参数；

以所述第一音频参数进行音频的播放。

在一些实施例中，所述根据所述三维信息，确定第一音频参数，包括：

根据所述三维信息与预设对应关系，确定与所述三维信息对应的预设音频参数为所述第一音频参数；其中，所述预设对应关系包括：预设的三维信息与预设音频参数对应关系。

在一些实施例中，所述第一音频参数包括以下至少之一：

音量参数、音效参数或音质参数。

在一些实施例中，所述获取收听用户的耳朵的三维信息，包括：

在所述电子设备处于语音通话的状态中，获取所述收听用户的耳朵的所述三维信息。

所述获取所述收听用户的耳朵的三维信息，包括：

采集所述收听用户的耳朵图像及所述耳朵的高度信息；其中，所述高度信息为所述耳朵垂直于所述电子设备所在平面的距离信息；

根据所述耳朵图像，确定所述耳朵的二维信息；其中，所述二维信息为平行于所述电子设备所在平面的所述耳朵的信息；

根据所述高度信息和所述二维信息，确定所述耳朵的三维信息。

在一些实施例中，所述获取所述耳朵的高度信息，包括：

获取目标设备向所述耳朵发出的检测信号，及所述耳朵基于所述检测信号反射形成的反馈信号；其中，所述目标设备包括：所述电子设备，或，外接设备；其中，所述外接设备与所述电子设备通信连接；

根据所述检测信号的发射参数和所述反馈信号的接收参数，确定所述高度信息。

在一些实施例中，所述根据所述检测信号和所述反馈信号，确定所述高度信息，包括：

根据所述检测信号的发射参数和所述反馈信号的接收参数，确定所述检测信号的强度和所述反馈信号的强度的差值；

根据所述差值与强度因子的乘积，确定所述高度信息。

在一些实施例中，所述方法还包括：

控制所述电子设备的听筒向所述耳朵发出所述检测信号；

所述获取目标设备向所述耳朵发出的检测信号，及所述耳朵基于所述检测信号反射形成的反馈信号，包括：

获取所述电子设备中扬声器采集的来自所述听筒的所述检测信号，及所述扬声器采集的所述反馈信号。

在一些实施例中，所述检测信号包括：超声波信号和/或红外信号。

在一些实施例中，所述根据所述耳朵图像，确定所述耳朵的二维信息，包括：

根据所述耳朵图像中所述耳朵对应的像素坐标及立体空间的坐标关系，确定坐标转换因子；

根据所述坐标转换因子及所述耳朵图像，确定所述二维信息。

在一些实施例中，所述根据所述高度信息和所述二维信息，确定所述耳朵的三维信息，包括：

根据所述高度信息和所述二维信息，确定所述耳朵的三维模型；

根据所述三维模型和标准人工头模型，确定所述三维信息。

在一些实施例中，所述方法，还包括：

若所述电子设备与所述收听用户的耳朵之间的相对位置改变，将所述第一音频参数调整为第二音频参数。

根据本公开第二方面实施例，提供了一种音频播放装置，其特征在于，应用于电子设备，所述装置包括：

获取模块，用于获取收听用户的耳朵的三维信息；其中，所述三维信息包括：耳朵的立体空间信息和/或，所述耳朵相对于所述电子设备的三维相对位置信息；

确定模块，用于根据所述三维信息，确定第一音频参数；

播放模块，用于以所述第一音频参数进行音频的播放。

在一些实施中，所述确定模块，还用于：

根据所述三维信息与预设对应关系，确定与所述三维信息对应的预设音频参数为所述第一音频参数；其中，所述预设对应关系包括：预设的三维信息与预设音频参数对应关系。

在一些实施例中，所述获取模块，还用于：

在所述电子设备处于语音通话的状态中，获取所述收听用户的耳朵的所述三维信息。

在一些实施例中，所述获取模块，还用于：

采集所述收听用户的耳朵图像及所述耳朵的高度信息；其中，所述高度信息为所述耳朵垂直于所述电子设备所在平面的距离信息；

根据所述耳朵图像，确定所述耳朵的二维信息；其中，所述二维信息为平行于所述电子设备所在平面的所述耳朵的信息；

根据所述高度信息和所述二维信息，确定所述耳朵的三维信息。

在一些实施例中，所述获取模块，还用于：

获取目标设备向所述耳朵发出的检测信号，及所述耳朵基于所述检测信号反射形成的反馈信号；其中，所述目标设备包括：所述电子设备，或，外接设备；其中，所述外接设备与所述电子设备通信连接；

根据所述检测信号的发射参数和所述反馈信号的接收参数，确定所述高度信息。

在一些实施例中，所述获取模块，还用于：

根据所述检测信号的发射参数和所述反馈信号的接收参数，确定所述检测信号的强度和所述反馈信号的强度的差值；

根据所述差值与强度因子的乘积，确定所述高度信息。

在一些实施例中，所述装置，还包括：

控制模块，用于控制所述电子设备的听筒向所述耳朵发出所述检测信号；

所述获取模块，还用于：

获取所述电子设备中扬声器采集的来自所述听筒的所述检测信号，及所述扬声器采集的所述反馈信号。

在一些实施例中，所述获取模块，还用于：

根据所述耳朵图像中所述耳朵对应的像素坐标及立体空间的坐标关系，确定坐标转换因子；

根据所述坐标转换因子及所述耳朵图像，确定所述二维信息。

在一些实施例中，所述获取模块，还用于：根据所述高度信息和所述二维信息，确定所述耳朵的三维模型；

根据所述三维模型和标准人工头模型，确定所述三维信息。

在一些实施例中，所述装置，还包括：

调整模块，用于在所述电子设备与所述收听用户的耳朵之间的相对位置改变时，根据所述相对位置，将所述第一音频参数调整为第二音频参数。

根据本公开第三方面实施例，提供了一种终端，包括：

处理器；

用于存储处理器可执行指令的存储器；

其中，所述处理器被配置为：实现时执行第一方面实施例所述的方法步骤。

根据本公开第四方面实施例，提供了计算机可读存储介质，其上存储有计算机程序，当所述存储介质中的指令由电子设备的处理器执行时，使得电子设备能够执行实现执行第一方面实施例所述的方法步骤。

本公开的实施例提供的技术方案可以包括以下有益效果：

由上述实施例可知，本公开实施例通过获取用户耳朵的三维信息，根据三维信息确定要播放的音频的第一音频参数，使电子设备播放的音频可以随用户耳朵的三维信息不同而调整。由于不同耳朵对应的三维信息不同，和/或，耳朵相对于电子设备的三维相对位置信息不同三维信息也不同，这种根据耳朵三维信息确定第一音频参数的方法，不仅适应了不同用户的收听需要，还提高了同一用户在与电子设备不同的相对位置时的收听感受，提高了收听体验。

应当理解的是，以上的一般描述和后文的细节描述仅是示例性和解释性的，并不能限制本公开。

附图说明

此处的附图被并入说明书中并构成本说明书的一部分，示出了符合本公开的实施例，并与说明书一起用于解释本公开的原理。

图1是根据一示例性实施例示出的音频播放方法的流程图之一；

图2是根据一示例性实施例示出的音频播放方法的流程图之二；

图3是根据一示例性实施例示出的音频播放方法的流程图之三；

图4是根据一示例性实施例示出的音频播放方法的应用场景结构示意图；

图5是根据一示例性实施例示出的音频播放装置的结构示意图之一；

图6是根据一示例性实施例示出的音频播放装置的结构示意图之二；

图7是根据一示例性实施例示出的音频播放装置的结构示意图之三；

图8是根据一示例性实施例示出的电子设备的结构示意图之一；

图9是根据一示例性实施例示出的电子设备的结构示意图之二；

图10是根据一示例性实施例示出的电子设备的组成结构框图。

具体实施方式

这里将详细地对示例性实施例进行说明，其示例表示在附图中。下面的描述涉及附图时，除非另有表示，不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本公开相一致的所有实施方式。相反，它们仅是与如所附权利要求书中所详述的、本公开的一些方面相一致的装置的例子。

本公开第一方面实施例提供了一种音频播放方法，应用于电子设备，如图1所示，所述方法包括：

步骤S110、获取收听用户的耳朵的三维信息；其中，所述三维信息包括：耳朵的立体空间信息和/或，所述耳朵相对于所述电子设备的三维相对位置信息；

步骤S120、根据所述三维信息，确定第一音频参数；

步骤S130、以所述第一音频参数进行音频的播放。

本公开实施例中，电子设备包括但不限于手机、平板电脑、耳机、笔记本电脑或可穿戴设备等。

步骤S110中，耳朵与收听体验有关。不同用户的耳朵的大小、形状等结构并不完全相同，导致不同用户的耳朵的三维信息不同，进而同一音频被不同用户收听，也会因为耳朵的结构差异造成不同的收听效果。因此，获取耳朵的三维信息，可以根据耳朵的差异性确定第一音频参数，提高音频播放的个性化体验。

同样地，对于同一用户的耳朵，如果耳朵与电子设备的相对位置不同，获取的三维信息也不同，导致收听效果也不同。例如：耳朵与电子设备处于两种不同的相对位置时，三维信息表征的耳朵结构也具有以下两种不同情况。其中，耳朵与电子设备的两种不同相对位置分别为耳朵(或耳道)正对电子设备，耳朵(或耳道)偏离于电子设备。第一种情况：三维信息表征了具有完整外形的耳朵，且耳道正对电子设备听筒和/或扬声器；或者，第二种情况：三维信息表征了非完整外形的耳朵，且耳道偏离于听筒和/或扬声器。第一种情况是耳朵正对电子设备，第二种情况是耳朵偏离于电子设备。相对于第二种情况，第一种情况更容易听得清，收听效果也更好。第一种情况和第二种情况分别采用不同的音频参数，可以使第二种情况下也获得与第一种情况类似的收听效率。因此，在收听过程中，及时获取耳朵的三维信息，可以实时改变第一音频参数，提高收听体验。

相对于二维信息，三维信息能够更精准地反映耳朵结构，获得更多的耳朵信息，从而进一步保证第一音频参数与用户耳朵的匹配程度，提高收听效果。

在一些实施例中，若所述电子设备与所述收听用户的耳朵之间的相对位置改变，重新获取所述三维信息。

可通过电子设备上的传感器检测电子设备与收听用户耳朵之间的相对位置。传感器包括但不限于距离传感器、陀螺仪等。

相对位置改变时，重新获取的三维信息也会有所改变，此时确定的第一音频参数也随之改变。

步骤S120和步骤S130中，通过获取用户耳朵的三维信息，确定第一音频参数，使电子设备播放的音频可以随用户耳朵的三维信息不同而调整。由于不同耳朵对应的三维信息不同，和/或，耳朵相对于电子设备的三维相对位置信息不同三维信息也不同，这种根据耳朵三维信息确定第一音频参数的方法，不仅适应了不同用户的收听需要，还提高了同一用户在与电子设备不同的相对位置时的收听感受，提高了收听体验。

根据本公开一些可选实施例，所述第一音频参数包括以下至少之一：

音量参数、音效参数或音质参数。

根据本公开一些可选实施例，所述根据所述三维信息，确定第一音频参数，包括：

根据所述三维信息与预设对应关系，确定与所述三维信息对应的预设音频参数为所述第一音频参数；其中，所述预设对应关系包括：预设的三维信息与预设音频参数对应关系。

非限制地，预设对应关系包括多种预设的三维信息，每种预设的三维信息对应的预设音频参数不同。当步骤S110获取的三维信息与某一预设的三维信息相同或相近，根据对应关系列表中的关系，确定相应的预设音频参数为第一音频参数。

非限制地，预设对应关系中的三维信息是：在用户授权下，用户在电子设备的提示引导下，多次改变电子设备与耳朵的相对位置，电子设备在此过程中获取的三维信息。

根据本公开一些可选实施例，如图2所示，所述方法，还包括：

步骤S140、若所述电子设备与所述收听用户的耳朵之间的相对位置改变，根据所述相对位置，将所述第一音频参数调整为第二音频参数。

在实际应用中，第一音频参数调整为第二音频参数后，以第二音频参数进行音频的播放。

相对位置改变时，可以不重新获取三维信息，根据相对位置的参数，将所述第一音频参数调整为第二音频参数。其中，相对位置的参数包括相对距离和/或相对角度。

在一些实施例中，所述若所述电子设备与所述收听用户的耳朵之间的相对位置改变，根据所述相对位置，将所述第一音频参数调整为第二音频参数，包括：

根据相对位置的参数，对所述音频的音量进行调大处理；其中，所述相对位置为电子设备与所述收听用户的耳朵之间的相对位置，所述相对位置的参数包括相对距离和/或相对角度。

在一些实施例中，所述根据相对位置的参数，对所述音频的音量进行调大处理，包括：

根据所述相对位置的参数，按照预设调节音量调大所述音频的音量。

在一些实施例中，所述根据所述相对位置的参数，按照预设调节音量调大所述音频的音量，包括：

若所述耳朵与所述电子设备的相对角度在第一预设范围内，且所述耳朵与所述电子设备之间的相对距离大于或等于第一预设阈值时，按照所述预设调节音量调大所述音频的音量。

在一些实施例中，所述根据所述相对位置的参数，按照预设调节音量调大所述音频的音量，包括：

若所述耳朵与所述电子设备的相对距离在第二预设范围内，且所述耳朵与所述电子设备之间的相对角度大于或等于第二预设阈值时，按照所述预设调节音量调大所述音频的音量。

在一些实施例中，所述根据所述相对位置的参数，按照预设调节音量调大所述音频的音量，包括：

所述调节音量与所述相对距离呈正比例关系；和/或，

所述调节音量与所述相对角度呈正比例关系。

在实际应用中，耳朵与电子设备之间的相对角度可以为0°～180°，其中，相对角度越大表明耳朵越偏离于电子设备。例如：0°代表耳朵与电子设备正对，此时，耳道一般正对电子设备的听筒和/或扬声器。90°表明耳朵与电子设备垂直，此时，相对与0°夹角而言，90°夹角时，听筒和/或扬声器更远离耳朵，更高的音量设置可以获得更好的收听效果。

音效参数包括但不限于频率，音质参数包括但不限于音色。

在一些实施例中，所述若所述电子设备与所述收听用户的耳朵之间的相对位置改变，将收听音频的第一音频参数调整为第二音频参数，包括：

根据所述相对位置的参数，将所述收听音频的第一音频频率调整为第二音频频率。

在一些实施例中，所述根据所述相对位置的参数，将所述收听音频的第一音频频率调整为第二音频频率，包括：

若所述耳朵与所述电子设备之间的相对距离小于所述第一预设阈值，和/或，所述耳朵与所述电子设备之间的相对角度小于第二预设阈值，降低所述第一音频频率为所述第二音频频率。

耳朵与电子设备之间的相对角度较小，或者耳朵与电子设备之间的相对距离较小时，表明耳道与电子设备之间的距离较近，此时，使用更低频率的音效参数既能够保证听得清，又有利于保护耳朵，保护通话隐私，提高收听体验。

根据本公开一些可选实施例，所述获取收听用户的耳朵的三维信息，包括：

在所述电子设备处于语音通话的状态中，获取所述收听用户的耳朵的所述三维信息。

一般地，语音通话状态是电子设备的听筒或扬声器，与耳朵的相对距离在预设距离范围内的通话状态。预设距离可以是0～10cm。例如：如图4所示，电子设备的顶端贴紧耳朵，一般地，听筒位于电子设备的顶端，此时，听筒与耳朵的距离接近于0cm。这种应用场景下，电子设备20与耳朵10相对，电子设备10可以更容易获得处于收听状态下的耳朵20的三维信息。

语音通话状态可以是电子设备处于听筒模式下的非外放通话状态，也可以是扬声器模式下的外放通话状态。其中，听筒模式下的非外放通话状态一般为指手持语音通话状态。

在一些实施例中，在所述电子设备处于语音通话的状态中，获取所述收听用户的耳朵的所述三维信息，包括：

在所述电子设备处于语音通话的状态中，以预设间隔时间获取所述三维信息。

预设间隔时间可以是5s、10s、15s、20s、30s或60s等。每预设间隔时间后均重新获取三维信息，以及时有效的确定用户当前状态，保证第一音频参数与用户的匹配度，提高收听体验。

本公开实施例应用场景并不限于此，例如，应用场景还可以是：电子设备处于音频播放状态。即在电子设备处于音频播放状态中，获取收听用户的耳朵的三维信息。

根据本公开一些可选实施例，所述获取所述收听用户的耳朵的三维信息，包括：

采集所述收听用户的耳朵图像及所述耳朵的高度信息；其中，所述高度信息为所述耳朵垂直于所述电子设备所在平面的距离信息；

根据所述耳朵图像，确定所述耳朵的二维信息；其中，所述二维信息为平行于所述电子设备所在平面的所述耳朵的信息；

根据所述高度信息和所述二维信息，确定所述耳朵的三维信息。

二维信息是耳朵的平面外形信息，可以反映出耳朵在平行于电子设备所在平面上的耳廓位置、耳道位置等信息。

高度信息是耳朵的二维信息与三维信息之间缺少的信息。例如：高度信息包括耳道的深度、耳廓中褶皱深度等信息。

高度信息是垂直于电子设备所在平面的耳朵的信息，与电子设备的相对位置有关，因而，高度信息也反映了耳朵相对于所述电子设备的三维相对位置信息。例如：耳朵与电子设备处于不同的相对位置时，可以获得的耳道深度是不一样的。

本公开实施例中，耳朵的二维信息可以图像采集模组获得，高度信息可以由传感器获得。

在一些实施例中，所述检测信号包括：超声波信号和/或红外信号。但并不限于此。

传感器可以是超声波传感器，或，红外传感器等光传感器，但并不限于此。

在一些实施例中，所述获取图像采集模组采集的耳朵图像，包括：

获取所述电子设备的所述图像采集模组采集的所述耳朵图像，或，获取外接设备的所述图像采集模组采集的所述耳朵图像；其中，所述外接设备与所述电子设备通信连接。

耳朵图像可以由电子设备自带的相机采集得到。或者，电子设备可以与外接设备配合使用，利用外接设备的相机采集耳朵图像，然后电子设备接收外接设备发送的耳朵图像。

外接设备包括但不限于耳机、手机、平板电脑、电视机、笔记本电脑、监视器或可穿戴设备等。

同样地，高度信息可以由电子设备获得，也可以由外接设备获得。

根据本公开一些可选实施例，所述获取所述耳朵的高度信息，包括：

获取目标设备向所述耳朵发出的检测信号，及所述耳朵基于所述检测信号反射形成的反馈信号；其中，所述目标设备包括：所述电子设备，或，外接设备；其中，所述外接设备与所述电子设备通信连接；

根据所述检测信号的发射参数和所述反馈信号的接收参数，确定所述高度信息。

发射参数包括但不限于检测信号的强度，接收参数包括但不限于反馈信号的强度。

外接设备以TWS(True Wireless Stereo，真正无线立体声)降噪耳机为例，可以通过TWS降噪耳机内的反馈扬声器发送收检测信号，并接收反馈信息，进而确定高度信息。

根据本公开一些可选实施例，所述根据所述检测信号和所述反馈信号，确定所述高度信息，包括：

根据所述检测信号的发射参数和所述反馈信号的接收参数，确定所述检测信号的强度和所述反馈信号的强度的差值；

根据所述差值与强度因子的乘积，确定所述高度信息。

在实际应用中，以H表示高度信息，M表示检测信号的强度，N表示反馈信号的强度，h表示强度转换因子，则H＝h(M-N)。

高度信息以耳道深度为例：由于电子设备与耳朵的相对距离不同，M-N的差值会有差异，但耳道的深度与电子设备与耳朵的相对距离，因此，利用强度转换因子可调整不同相对距离下，对耳道深度测量的误差。

根据本公开一些可选实施例，所述方法还包括：

控制所述电子设备的听筒向所述耳朵发出所述检测信号；

所述获取目标设备向所述耳朵发出的检测信号，及所述耳朵基于所述检测信号反射形成的反馈信号，包括：

获取所述电子设备中扬声器采集的来自所述听筒的所述检测信号，及所述扬声器采集的所述反馈信号。

电子设备内一般安装有检测信号发射器，即可以发射检测信号的传感器。此外，听筒和扬声器也是电子设备内普遍配备的硬件。传感器一般安装在听筒内，或听筒附近。传感器产生的超声波可以由听筒发出。

电子设备以手机为例。手机的听筒331一般位于显示屏30顶部，如图8所示的全面屏手机；或，如图9所示的非全面屏手机，手机的听筒331位于显示屏30正面，听筒331是一种发声器件。在显示屏30顶部或显示屏30正面一般也会设置有扬声器311，此时，扬声器311可以作为收声器件。在手持语音通话状态时，这种分布方式的听筒331和扬声器311更容易靠近耳朵，且这种结构在手机中较为常见，因此，利用扬声器和听筒更容易采集耳朵的高度信息。

本公开实施例中，通过听筒发出检测信号，再由扬声器采集检测信号及反馈信号，这种方式可以充分利用电子设备内已有的硬件，无需增加新的硬件，不会增加对电子设备内空间的占用。

根据本公开一些可选实施例，所述根据所述耳朵图像，确定所述耳朵的二维信息，包括：

根据所述耳朵图像中所述耳朵对应的像素坐标及立体空间的坐标关系，确定坐标转换因子；

根据所述坐标转换因子及所述耳朵图像，确定所述二维信息。

通过坐标转换，可以获得与耳朵图像中耳朵对应的立体空间内的二维模型坐标。

例如：以A表示立体空间内耳朵的二维模型，用X表示立体空间坐标的横坐标，Y表示立体空间的纵坐标，x表示耳朵图像中平面坐标系中的横坐标，y表示耳朵图像中平面坐标系中的纵坐标。C表示耳朵图像的图像信息。B表示坐标转换因子。则立体空间中耳朵的二维模型和耳朵图像中的平面二维图形关系可以表示为：A(X,Y)＝B*C(x，y)。

高度信息对应的是立体空间内垂直于XY平面的Z方向的耳朵信息。

根据本公开一些可选实施例，所述根据所述高度信息和所述二维信息，确定所述耳朵的三维信息，包括：

根据所述高度信息和所述二维信息，确定所述耳朵的三维模型；

根据所述三维模型和标准人工头模型，确定所述三维信息。

三维模型用D(X,Y,H)表示，则D(X,Y,H)＝A(X,Y)+H，H为高度信息。

三维信息用H(t)表示，通过传递函数处理，得到H(t)＝D(X,Y,H)/F，其中，F为标准人工头模型。

在一具体实施例中，电子设备以手机为例，如图3所示，音频播放方法包括：

步骤S210、根据图像采集模组采集耳朵图像，得到耳朵的二维信息；手机的相机采集耳朵平面外观图得到耳朵图像，并根据耳朵图像，计算得到二维信息；其中，计算包括从耳朵图像中提取出耳朵的像素坐标，然后根据像素坐标与立体空间坐标系的关系，将像素坐标进行坐标变换后，得到二维信息；

步骤S220、获取点子设备向耳朵发出的检测信号，及所述耳朵基于所述检测信号反射形成的反馈信号；在实际应用中，检测信号以超声波为例，发射超声波的传感器位于音频输入模块内，音频输入模块将检测信号输入听筒，听筒发出超声波，扬声器采集发出的超声波，及耳朵反馈的反馈超声波(即反馈信号)；

步骤S230、根据所述检测信号的发射参数和所述反馈信号的接收参数，确定所述高度信息。手机内的运输模块对采集到的两种信号(指发射的检测信号和接收的反馈信号)进行处理，得到耳朵的高度信息；

步骤S240、根据所述高度信息和所述二维信息，确定所述耳朵的三维模型；

步骤S250、根据所述三维模型和标准人工头模型，确定所述三维信息；运算模块利用三维模型和标准人工头模型的比值，得到耳朵的三维信息，并将三维信息发送至手机的音效处理模块；

步骤S260、根据所述三维信息，确定第一音频参数。手机的音效处理模块接收三维信息及音频输入模块发送的音频，并根据三维信息及预设对应关系，确定与所述三维信息对应的预设音频参数为所述第一音频参数；其中，所述预设对应关系包括：预设的三维信息与预设音频参数对应关系；

步骤S270、播放具有所述第一音频参数的所述收听音频。例如：手机的音效处理模块将第一音频参数发送至听筒播放。

本示例在不占用更多空间，使用现有硬件的情况下，获得用户耳形外观的三维模型，针对性的调整通话音效。这种根据不同人耳外形针对性的调整通话效果，提高了收听体验。

本公开第二方面提供了一种音频播放装置，应用于电子设备，如图5所示，所述装置300包括：

获取模块310，用于获取收听用户的耳朵的三维信息；其中，所述三维信息包括：耳朵的立体空间信息和/或，所述耳朵相对于所述电子设备的三维相对位置信息；

确定模块320，用于根据所述三维信息，确定第一音频参数；

播放模块330，用于以所述第一音频参数进行音频的播放。

在一些实施例中，所述确定模块，还用于：

根据所述三维信息与预设对应关系，确定与所述三维信息对应的预设音频参数为所述第一音频参数；其中，所述预设对应关系包括：预设的三维信息与预设音频参数对应关系。

在一些实施例中，所述获取模块，还用于：

在所述电子设备处于语音通话的状态中，获取所述收听用户的耳朵的所述三维信息。

在一些实施例中，所述获取模块，还用于：

采集所述收听用户的耳朵图像及所述耳朵的高度信息；其中，所述高度信息为所述耳朵垂直于所述电子设备所在平面的距离信息；

根据所述耳朵图像，确定所述耳朵的二维信息；其中，所述二维信息为平行于所述电子设备所在平面的所述耳朵的信息；

根据所述高度信息和所述二维信息，确定所述耳朵的三维信息。

在一些实施例中，所述获取模块，还用于：

获取目标设备向所述耳朵发出的检测信号，及所述耳朵基于所述检测信号反射形成的反馈信号；其中，所述目标设备包括：所述电子设备，或，外接设备；其中，所述外接设备与所述电子设备通信连接；

根据所述检测信号的发射参数和所述反馈信号的接收参数，确定所述高度信息。

在一些实施例中，所述获取模块，还用于：

根据所述检测信号的发射参数和所述反馈信号的接收参数，确定所述检测信号的强度和所述反馈信号的强度的差值；

根据所述差值与强度因子的乘积，确定所述高度信息。

在一些实施例中，所述装置，还包括：

控制模块，用于控制所述电子设备的听筒向所述耳朵发出所述检测信号；

所述获取模块，还用于：

获取所述电子设备中扬声器采集的来自所述听筒的所述检测信号，及所述扬声器采集的所述反馈信号。

在一些实施例中，所述获取模块，还用于：

根据所述耳朵图像中所述耳朵对应的像素坐标及立体空间的坐标关系，确定坐标转换因子；

根据所述坐标转换因子及所述耳朵图像，确定所述二维信息。

在一些实施例中，所述获取模块，还用于：根据所述高度信息和所述二维信息，确定所述耳朵的三维模型；

根据所述三维模型和标准人工头模型，确定所述三维信息。

在一些实施例中，如图6所示，所述装置300，还包括：

调整模块340，用于在所述电子设备与所述收听用户的耳朵之间的相对位置改变时，根据所述相对位置，将所述第一音频参数调整为第二音频参数。

如图7所示，音频调整装置还包括音频输入模块350，确定模块320包括运算模块321和音效处理模块322，播放模块330包括听筒331，获取模块310包括扬声器311。图像采集模组340将采集的耳朵图像发送至运算模块321，扬声器311将采集的检测信号和反馈信号发送至运算模块321。运算模块321根据耳朵图像得到二维信息，然后根据二维信号及反馈信号得到高度信息，最后根据高度信息和二维信息得到三维信息。音效处理模块322根据接收的运算模块321发送的三维信息，将音频输入模块350输入的音频的初始音频参数，根据三维信息和预设对应关系，调整为第一音频参数，最后将第一音频参数发送至听筒331播放。

本公开第三方面实施例提供了一种电子设备，包括：

处理器；

用于存储处理器可执行指令的存储器；

其中，所述处理器被配置为：实现时执行第一方面实施例所述的方法步骤。

本公开第四方面实施例提供了一种计算机可读存储介质，其上存储有计算机程序，当所述存储介质中的指令由电子设备的处理器执行时，使得电子设备能够执行实现时执行第一实施例所述的方法步骤。

在示例性实施例中，打印装置中的多个模块等可以被一个或多个中央处理器(CPU，Central Processing Unit)、图形处理器(GPU，Graphics Processing Unit)、基带处理器(BP，baseband processor)、应用专用集成电路(ASIC，Application SpecificIntegrated Circuit)、DSP、可编程逻辑器件(PLD，Programmable Logic Device)、复杂可编程逻辑器件(CPLD，Complex Programmable Logic Device)、现场可编程门阵列(FPGA，Field-Programmable Gate Array)、通用处理器、控制器、微控制器(MCU，MicroController Unit)、微处理器(Microprocessor)、或其他电子元件实现，用于执行前述方法。

图10是根据一示例性实施例示出的一种电子设备800的框图。例如，装置800可以是移动电话，计算机，数字广播终端，消息收发设备，游戏控制台，平板设备，医疗设备，健身设备，个人数字助理等。

参照图10，装置800可以包括以下一个或多个组件：处理组件802，存储器804，电源组件806，多媒体组件808，音频组件810，输入/输出(I/O)的接口812，传感器组件814，以及通信组件816。

处理组件802通常控制装置800的整体操作，诸如与显示，电话呼叫，数据通信，相机操作和记录操作相关联的操作。处理组件802可以包括一个或多个处理器820来执行指令，以完成上述的方法的全部或部分步骤。此外，处理组件802可以包括一个或多个模块，便于处理组件802和其他组件之间的交互。例如，处理组件802可以包括多媒体模块，以方便多媒体组件808和处理组件802之间的交互。

存储器804被配置为存储各种类型的数据以支持在装置800的操作。这些数据的示例包括用于在装置800上操作的任何应用程序或方法的指令，联系人数据，电话簿数据，消息，图片，视频等。存储器804可以由任何类型的易失性或非易失性存储设备或者它们的组合实现，如静态随机存取存储器(SRAM)，电可擦除可编程只读存储器(EEPROM)，可擦除可编程只读存储器(EPROM)，可编程只读存储器(PROM)，只读存储器(ROM)，磁存储器，快闪存储器，磁盘或光盘。

电源组件806为装置800的各种组件提供电力。电源组件806可以包括电源管理系统，一个或多个电源，及其他与为装置800生成、管理和分配电力相关联的组件。

多媒体组件808包括在所述装置800和用户之间的提供一个输出接口的屏幕。在一些实施例中，屏幕可以包括液晶显示器(LCD)和触摸面板(TP)。如果屏幕包括触摸面板，屏幕可以被实现为触摸屏，以接收来自用户的输入信号。触摸面板包括一个或多个触摸传感器以感测触摸、滑动和触摸面板上的手势。所述触摸传感器可以不仅感测触摸或滑动动作的边界，而且还检测与所述触摸或滑动操作相关的持续时间和压力。在一些实施例中，多媒体组件808包括一个前置摄像头和/或后置摄像头。当装置800处于操作模式，如拍摄模式或视频模式时，前置摄像头和/或后置摄像头可以接收外部的多媒体数据。每个前置摄像头和后置摄像头可以是一个固定的光学透镜系统或具有焦距和光学变焦能力。

音频组件810被配置为输出和/或输入音频信号。例如，音频组件810包括一个麦克风(MIC)，当装置800处于操作模式，如呼叫模式、记录模式和语音识别模式时，麦克风被配置为接收外部音频信号。所接收的音频信号可以被进一步存储在存储器804或经由通信组件816发送。在一些实施例中，音频组件810还包括一个扬声器，用于输出音频信号。

I/O接口812为处理组件802和外围接口模块之间提供接口，上述外围接口模块可以是键盘，点击轮，按钮等。这些按钮可包括但不限于：主页按钮、音量按钮、启动按钮和锁定按钮。

传感器组件814包括一个或多个传感器，用于为装置800提供各个方面的状态评估。例如，传感器组件814可以检测到装置800的打开/关闭状态，组件的相对定位，例如所述组件为装置800的显示器和小键盘，传感器组件814还可以检测装置800或装置800一个组件的位置改变，用户与装置800接触的存在或不存在，装置800方位或加速/减速和装置800的温度变化。传感器组件814可以包括接近传感器，被配置用来在没有任何的物理接触时检测附近物体的存在。传感器组件814还可以包括光传感器，如CMOS或CCD图像传感器，用于在成像应用中使用。在一些实施例中，该传感器组件814还可以包括加速度传感器，陀螺仪传感器，磁传感器，压力传感器或温度传感器。

通信组件816被配置为便于装置800和其他设备之间有线或无线方式的通信。装置800可以接入基于通信标准的无线网络，如WiFi，4G或5G，或它们的组合。在一个示例性实施例中，通信组件816经由广播信道接收来自外部广播管理系统的广播信号或广播相关信息。在一个示例性实施例中，所述通信组件816还包括近场通信(NFC)模块，以促进短程通信。例如，在NFC模块可基于射频识别(RFID)技术，红外数据协会(IrDA)技术，超宽带(UWB)技术，蓝牙(BT)技术和其他技术来实现。

在示例性实施例中，装置800可以被一个或多个应用专用集成电路(ASIC)、数字信号处理器(DSP)、数字信号处理设备(DSPD)、可编程逻辑器件(PLD)、现场可编程门阵列(FPGA)、控制器、微控制器、微处理器或其他电子元件实现，用于执行上述方法。

在示例性实施例中，还提供了一种包括指令的非临时性计算机可读存储介质，例如包括指令的存储器804，上述指令可由装置800的处理器820执行以完成上述方法。例如，所述非临时性计算机可读存储介质可以是ROM、随机存取存储器(RAM)、CD-ROM、磁带、软盘和光数据存储设备等。

本公开所提供的几个方法实施例中所揭露的方法，在不冲突的情况下可以任意组合，得到新的方法实施例。

本公开所提供的几个设备实施例中所揭露的特征，在不冲突的情况下可以任意组合，得到新的产品实施例。

本公开所提供的几个方法或设备实施例中所揭露的特征，在不冲突的情况下可以任意组合，得到新的方法实施例或产品实施例。

本领域技术人员在考虑说明书及实践这里公开的发明后，将容易想到本公开的其它实施方案。本公开旨在涵盖本公开的任何变型、用途或者适应性变化，这些变型、用途或者适应性变化遵循本公开的一般性原理并包括本公开未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的，本公开的真正范围和精神由下面的权利要求指出。

应当理解的是，本公开并不局限于上面已经描述并在附图中示出的精确结构，并且可以在不脱离其范围进行各种修改和改变。本公开的范围仅由所附的权利要求来限制。

Claims (24)

1.一种音频播放的方法，其特征在于，应用于电子设备，所述方法包括：

获取收听用户的耳朵的三维信息；其中，所述三维信息包括：耳朵的立体空间信息和/或，所述耳朵相对于所述电子设备的三维相对位置信息；

根据所述三维信息，确定第一音频参数；

以所述第一音频参数进行音频的播放。

2.根据权利要求1所述的方法，其特征在于，所述根据所述三维信息，确定第一音频参数，包括：

根据所述三维信息与预设对应关系，确定与所述三维信息对应的预设音频参数为所述第一音频参数；其中，所述预设对应关系包括：预设的三维信息与预设音频参数对应关系。

3.根据权利要求1所述的方法，其特征在于，所述第一音频参数包括以下至少之一：

音量参数、音效参数或音质参数。

4.根据权利要求1所述的方法，其特征在于，所述获取收听用户的耳朵的三维信息，包括：

在所述电子设备处于语音通话的状态中，获取所述收听用户的耳朵的所述三维信息。

5.根据权利要求1所述的方法，其特征在于，所述获取所述收听用户的耳朵的三维信息，包括：

采集所述收听用户的耳朵图像及所述耳朵的高度信息；其中，所述高度信息为所述耳朵垂直于所述电子设备所在平面的距离信息；

根据所述耳朵图像，确定所述耳朵的二维信息；其中，所述二维信息为平行于所述电子设备所在平面的所述耳朵的信息；

根据所述高度信息和所述二维信息，确定所述耳朵的三维信息。

6.根据权利要求5所述的方法，其特征在于，所述获取所述耳朵的高度信息，包括：

获取目标设备向所述耳朵发出的检测信号，及所述耳朵基于所述检测信号反射形成的反馈信号；其中，所述目标设备包括：所述电子设备，或，外接设备；其中，所述外接设备与所述电子设备通信连接；

根据所述检测信号的发射参数和所述反馈信号的接收参数，确定所述高度信息。

7.根据权利要求6所述的方法，其特征在于，所述根据所述检测信号和所述反馈信号，确定所述高度信息，包括：

根据所述检测信号的发射参数和所述反馈信号的接收参数，确定所述检测信号的强度和所述反馈信号的强度的差值；

根据所述差值与强度因子的乘积，确定所述高度信息。

8.根据权利要求6所述的方法，其特征在于，所述方法还包括：

控制所述电子设备的听筒向所述耳朵发出所述检测信号；

所述获取目标设备向所述耳朵发出的检测信号，及所述耳朵基于所述检测信号反射形成的反馈信号，包括：

获取所述电子设备中扬声器采集的来自所述听筒的所述检测信号，及所述扬声器采集的所述反馈信号。

9.根据权利要求6所述的方法，其特征在于，所述检测信号包括：超声波信号和/或红外信号。

10.根据权利要求5所述的方法，其特征在于，所述根据所述耳朵图像，确定所述耳朵的二维信息，包括：

根据所述耳朵图像中所述耳朵对应的像素坐标及立体空间的坐标关系，确定坐标转换因子；

根据所述坐标转换因子及所述耳朵图像，确定所述二维信息。

11.根据权利要求5所述的方法，其特征在于，所述根据所述高度信息和所述二维信息，确定所述耳朵的三维信息，包括：

根据所述高度信息和所述二维信息，确定所述耳朵的三维模型；

根据所述三维模型和标准人工头模型，确定所述三维信息。

12.根据权利要求1至11任一项所述的方法，其特征在于，所述方法，还包括：

若所述电子设备与所述收听用户的耳朵之间的相对位置改变，根据所述相对位置，将所述第一音频参数调整为第二音频参数。

13.一种音频播放装置，其特征在于，应用于电子设备，所述装置包括：

获取模块，用于获取收听用户的耳朵的三维信息；其中，所述三维信息包括：耳朵的立体空间信息和/或，所述耳朵相对于所述电子设备的三维相对位置信息；

确定模块，用于根据所述三维信息，确定第一音频参数；

播放模块，用于以所述第一音频参数进行音频的播放。

14.根据权利要求13所述的装置，其特征在于，所述确定模块，还用于：

根据所述三维信息与预设对应关系，确定与所述三维信息对应的预设音频参数为所述第一音频参数；其中，所述预设对应关系包括：预设的三维信息与预设音频参数对应关系。

15.根据权利要求13所述的装置，其特征在于，所述获取模块，还用于：

在所述电子设备处于语音通话的状态中，获取所述收听用户的耳朵的所述三维信息。

16.根据权利要求13所述的装置，其特征在于，所述获取模块，还用于：

采集所述收听用户的耳朵图像及所述耳朵的高度信息；其中，所述高度信息为所述耳朵垂直于所述电子设备所在平面的距离信息；

根据所述耳朵图像，确定所述耳朵的二维信息；其中，所述二维信息为平行于所述电子设备所在平面的所述耳朵的信息；

根据所述高度信息和所述二维信息，确定所述耳朵的三维信息。

17.根据权利要求16所述的装置，其特征在于，所述获取模块，还用于：

获取目标设备向所述耳朵发出的检测信号，及所述耳朵基于所述检测信号反射形成的反馈信号；其中，所述目标设备包括：所述电子设备，或，外接设备；其中，所述外接设备与所述电子设备通信连接；

根据所述检测信号的发射参数和所述反馈信号的接收参数，确定所述高度信息。

18.根据权利要求17所述的装置，其特征在于，所述获取模块，还用于：

根据所述检测信号的发射参数和所述反馈信号的接收参数，确定所述检测信号的强度和所述反馈信号的强度的差值；

根据所述差值与强度因子的乘积，确定所述高度信息。

19.根据权利要求17所述的装置，其特征在于，所述装置，还包括：

控制模块，用于控制所述电子设备的听筒向所述耳朵发出所述检测信号；

所述获取模块，还用于：

获取所述电子设备中扬声器采集的来自所述听筒的所述检测信号，及所述扬声器采集的所述反馈信号。

20.根据权利要求16所述的装置，其特征在于，所述获取模块，还用于：

根据所述耳朵图像中所述耳朵对应的像素坐标及立体空间的坐标关系，确定坐标转换因子；

根据所述坐标转换因子及所述耳朵图像，确定所述二维信息。

21.根据权利要求16所述的装置，其特征在于，所述获取模块，还用于：

根据所述高度信息和所述二维信息，确定所述耳朵的三维模型；

根据所述三维模型和标准人工头模型，确定所述三维信息。

22.根据权利要求13至21任一项所述的装置，其特征在于，所述装置，还包括：

调整模块，用于在所述电子设备与所述收听用户的耳朵之间的相对位置改变时，根据所述相对位置，将所述第一音频参数调整为第二音频参数。

23.一种电子设备，其特征在于，包括：

处理器；

用于存储处理器可执行指令的存储器；

其中，所述处理器被配置为：实现时执行权利要求1至12任一项所述的方法步骤。

24.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，当所述存储介质中的指令由电子设备的处理器执行时，使得电子设备能够执行实现时执行权利要求1至12任一项所述的方法步骤。

Images