CN112083379B - 基于声源定位的音频播放方法、装置、投影设备及介质 - Google Patents

基于声源定位的音频播放方法、装置、投影设备及介质 Download PDF

Info

Publication number
CN112083379B
CN112083379B CN202010941349.0A CN202010941349A CN112083379B CN 112083379 B CN112083379 B CN 112083379B CN 202010941349 A CN202010941349 A CN 202010941349A CN 112083379 B CN112083379 B CN 112083379B
Authority
CN
China
Prior art keywords
sound
sound box
audio
boxes
channel
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202010941349.0A
Other languages
English (en)
Other versions
CN112083379A (zh
Inventor
姜彦兮
王鑫
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Jimi Technology Co ltd
Original Assignee
Jimi Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Jimi Technology Co ltd filed Critical Jimi Technology Co ltd
Priority to CN202010941349.0A priority Critical patent/CN112083379B/zh
Publication of CN112083379A publication Critical patent/CN112083379A/zh
Priority to PCT/CN2021/098493 priority patent/WO2022052529A1/zh
Application granted granted Critical
Publication of CN112083379B publication Critical patent/CN112083379B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S5/00—Position-fixing by co-ordinating two or more direction or position line determinations; Position-fixing by co-ordinating two or more distance determinations
    • G01S5/18—Position-fixing by co-ordinating two or more direction or position line determinations; Position-fixing by co-ordinating two or more distance determinations using ultrasonic, sonic, or infrasonic waves
    • G01S5/22—Position of source determined by co-ordinating a plurality of position lines defined by path-difference measurements

Landscapes

  • Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Stereophonic System (AREA)

Abstract

本申请公开了一种基于声源定位的音频播放方法、装置、投影设备及介质，涉及音频播放领域。基于声源定位的音频播放方法包括：依次播放各个通道的音频数据，通过麦克风阵列获取各个通道对应的音箱发出的声音，并测算各个通道对应的音箱的空间位置；根据各个音箱的空间位置，确定各个音箱之间的相对位置；根据各个音箱之间的相对位置，设置音频流数据格式。本申请根据音箱位置设置音频流数据格式，使其符合用户音箱摆放位置，即使用户将音箱的位置摆放错误，也不需要重新调整音箱的位置，同样能实现或基本实现多声道音箱系统本来的效果。且本申请还根据音箱的位置，更改音频流数据格式中对应音箱数据发送的时间，保证音频数据同步，提高用户体验。

Description

基于声源定位的音频播放方法、装置、投影设备及介质
技术领域
本申请涉及音频播放领域，尤其涉及一种基于声源定位的音频播放方法、装置、投影设备及介质。
背景技术
随着人们对影音播放的高品质追求，多声道音箱系统逐渐普及，如5.1音箱和7.1音箱等。多声道音箱系统通常包括多个音箱，用户需要将多个音箱摆放到对应位置，才能达到理想的听觉效果。由于多声道音箱系统中的有些音箱的外观基本一样，用户难以识别，在安装时，用户可能会将音箱的位置放错，影响听觉效果。以5.1音箱为例，通常由L(左前)、R(右前)、Ls(左后)、Rs(右后)、Lfe(低音)和C(中置)音箱组成。用户在安装时，需要看每个音箱后面的标识，然后摆放到对应的位置上去，内容(杜比或DTS多声道)播放时，才能在正确的方向听到对应的音频信息。C(中置)和Lfe(低音)的外观是比较容易识别的，外观也比较独特；而L(左前)、R(右前)、Ls(左后)和Rs(右后)四个音箱往往可能在外观上是一样的，用户不容易识别，可能会存在摆放错的情况。
发明内容
有鉴于此，本申请提出一种基于声源定位的音频播放方法、装置、投影设备及介质，通过麦克风阵列的声源定位对摆放的音箱进行定位，然后根据实际摆放位置信息设置声音播放端的音频流数据格式，以匹配当前音箱摆放的位置。
第一方面，本申请提供一种基于声源定位的音频播放方法，包括：依次播放各个通道的音频数据，通过麦克风阵列获取各个通道对应的音箱发出的声音，并测算各个通道对应的音箱的空间位置，其中，一个通道对应一个音箱；根据各个音箱的空间位置，确定各个音箱之间的相对位置；根据各个音箱之间的相对位置，设置音频流数据格式。
在一种可能的实现方式中，所述根据各个音箱之间的相对位置，设置音频流数据格式，包括：将音频流中各相对位置对应的音频数据格式设置为位于该相对位置的音箱对应的通道的格式。
在一种可能的实现方式中，还包括：根据各个音箱的空间位置，计算由各个音箱围成的空间的中心点的空间位置。
在一种可能的实现方式中，还包括：计算各个音箱到所述中心点的距离，根据各个音箱到所述中心点的距离对部分音箱的音频数据做延迟或超前处理。
在一种可能的实现方式中，所述根据各个音箱到所述中心点的距离对部分音箱的音频数据做延迟或超前处理包括：计算各个音箱到所述中心点的距离的平均值；计算各个音箱到所述中心点的距离与所述平均值之差ΔSi，其中，i＝1,2,3，…，n，n为待测音箱的总个数；若ΔSi小于或等于预设距离值的相反数，则对音箱i的音频数据做延迟处理或对音箱i之外的音箱的音频数据做超前处理；若ΔSi大于或等于预设距离值，则对音箱i的音频数据做超前处理或对音箱i之外的音箱的音频数据做延迟处理。
在一种可能的实现方式中，所述预设距离值直接预先设定，或根据预设时间值乘以声速计算得到。
在一种可能的实现方式中，所述延迟处理的延迟时间或超前处理的超前时间ti的计算公式为：其中，C为声速。
在一种可能的实现方式中，所述根据各个音箱的空间位置，确定各个音箱之间的相对位置，包括：根据各个音箱的空间位置和所述中心点的空间位置，确定各个音箱之间的相对位置。
在一种可能的实现方式中，所述空间位置包括空间坐标。
第二方面，本申请还提供一种音频播放装置，包括：空间位置测算单元，用于依次播放各个通道的音频数据，通过麦克风阵列获取各个通道对应的音箱发出的声音，并测算各个通道对应的音箱的空间位置，其中，一个通道对应一个音箱；相对位置确定单元，用于根据各个音箱的空间位置，确定各个音箱之间的相对位置；音频流数据格式设置单元，用于根据各个音箱之间的相对位置，设置音频流数据格式。
在一种可能的实现方式中，音频流数据格式设置单元设置音频流数据格式的方法包括：将音频流中各相对位置对应的音频数据格式设置为位于该相对位置的音箱对应的通道的格式。
在一种可能的实现方式中，还包括：中心点位置计算单元，用于根据各个音箱的空间位置，计算由各个音箱围成的空间的中心点的空间位置；同步处理单元，用于计算各个音箱到所述中心点的距离，根据各个音箱到所述中心点的距离对部分音箱的音频数据做延迟或超前处理。
第三方面，本申请提供一种音频播放装置，包括：存储器，用于存储程序；处理器，耦合到所述存储器，所述程序被所述处理器运行时，实现如第一方面或第一方面可能的实现方式中任一项所述基于声源定位的音频播放方法。
第四方面，本申请提供一种投影设备，包括第二方面或第二方面可能的实现方式或第三方面中任一项所述的音频播放装置。
在一种可能的实现方式中，还包括：麦克风阵列，所述麦克风阵列用于获取各个音箱发出的声音，并测算各个音箱的空间位置。
第五方面，本申请提供一种计算机可读存储介质，包括计算机指令，当计算机指令被一处理器运行时，实现如第一方面或第一方面可能的实现方式中任一项所述基于声源定位的音频播放方法。
需要说明的是，本申请中第二方面和第三方面所述的音频播放装置、第四方面所述的投影设备及第五方面所述的计算机可读存储介质，用于执行上述第一方面所提供的方法，因此可以达到与第一方面所述的方法相同的有益效果，本申请实施例在此不再一一赘述。
本申请根据音箱位置设置音频流数据格式，使其符合用户音箱摆放位置，即使用户将音箱的位置摆放错误，也不需要重新调整音箱的位置，同样能实现或基本实现多声道音箱系统本来的效果。此外，本申请还根据音箱的位置，更改音频流数据格式中对应音箱数据发送的时间，保证音频数据同步，提高用户体验。
附图说明
本申请将通过实施例并参照附图的方式说明，其中：
图1为本申请实施例的基于声源定位的音频播放方法的流程图；
图2为本申请实施例的5.1音箱位置正确摆放的示意图；
图3为本申请实施例的5.1音箱位置错误摆放的示意图。
具体实施方式
为了使本技术领域的人员更好地理解本申请中的技术方案，下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本申请一部分实施例，而不是全部的实施例。应当理解，此处所描述的具体实施例仅仅用以解释本申请，并不用于限定本申请。基于本申请中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都应当属于本申请保护的范围。此外，虽然本申请中公开内容按照示范性一个或几个实例来介绍，但应理解，可以就这些公开内容的各个方面也可以单独构成一个完整技术方案。在不冲突的情况下，下述的实施例及实施例中的特征可以相互组合。
在本申请实施例中，“示例地”、“例如”等词用于表示作例子、例证或说明。本申请中被描述为“示例”的任何实施例或设计方案不应被解释为比其它实施例或设计方案更优选或更具优势。确切而言，使用示例的一词旨在以具体方式呈现概念。
除非另外定义，本申请使用的技术术语或者科学术语应当为本申请所属领域内具有一般技能的人士所理解的通常意义。本申请中使用的“第一”、“第二”以及类似的词语并不表示任何顺序、数量或者重要性，而是仅用于区分描述。“包括”或者“包含”等类似的词语意指出现该词前面的元件或者物件涵盖出现在该词后面列举的元件或者物件及其等同，而不排除其他元件或者物件。术语“和/或”包括一个或多个相关联的所列项目的任何和所有组合。
下面将结合附图，对本申请中的技术方案进行描述。
在以下具体实施例中，本申请以5.1音箱为示例进行说明，5.1音箱通常由L、R、Ls、Rs、Lfe和C音箱组成，Lfe音箱为低音音箱，C音箱为中置音箱，L、R、Ls和Rs音箱分别用于播放L、R、Ls和Rs通道的音频数据，摆放正确的情况下，L、R、Ls和Rs音箱的位置分别是左前、右前、左后和右后，C音箱通常位于L和R中间，Lfe音箱的位置较为随意，示例地，Lfe音箱位于R和Rs音箱中间，如图2所示。由于C和Lfe音箱的外观比较容易识别，本申请假设这两个音箱的位置不会摆放错误，因此只需要考虑其他四个音箱的位置，即待测音箱的总个数为4。但是本申请的方案不限于此，同样适用于7.1音箱等其他多声道音箱系统。
如图1所示，本申请实施例的基于声源定位的音频播放方法包括以下步骤：
S101.依次播放各个通道的音频数据，通过麦克风阵列获取各个通道对应的音箱发出的声音，并测算各个通道对应的音箱的空间位置，其中，一个通道对应一个音箱。
需要说明的是，一个通道对应一个音箱，即一个通道的音频数据只能由与该通道对应的音箱播放出来，因此，每次播放一个通道的音频数据，相应地只有一个音箱发出声音，通过麦克风阵列获取该音箱发出的声音，测算该音箱的空间位置。而通过麦克风阵列来定位声源的位置，可参考相关技术，这里不再赘述。
声音播放端播放的音频数据通过音箱发出声音，再通过麦克风阵列获取音箱发出的声音，并测算音箱的空间位置，需要保证声音播放端与麦克风阵列位于相同位置，但麦克风阵列可以包括在声音播放端里边，作为声音播放端的组件，麦克风阵列也可以为声音播放端外的单独组件。
S102.根据各个音箱的空间位置，确定各个音箱之间的相对位置。
空间位置可以为空间坐标，也可以为方向、距离等。各个音箱之间的相对位置包括前、后、左和右等，如左前、右前、左后和右后等。示例地，空间位置为空间坐标，根据各个音箱的空间坐标，即可确定各个音箱之间的相对位置。如，假设纵轴正方向为前方，横轴正方向为右方，如图3所示，z轴图中未示出，若4个待测音箱L、R、Ls和Rs音箱的空间坐标为(1,2,0)、(-1,2,0)、(2,-5,0)和(-1,-2,0)，则x坐标较小的两个音箱在左边，x坐标较大的两个音箱在右边，y坐标较大的两个音箱在前方，y坐标较小的两个音箱在后方，可确定L、R、Ls和Rs音箱之间的相对位置分别是右前、左前、右后和左后。
在一些实施例中，还可根据各个音箱的空间位置，计算由各个音箱围成的空间的中心点的空间位置。然后根据各个音箱的空间位置和所述中心点的空间位置，来确定各个音箱之间的相对位置。此时，相当于把所述中心点看作原点，然后根据各个音箱与该原点的相对位置再确定各个音箱之间的相对位置。
S103.根据各个音箱之间的相对位置，设置音频流数据格式。
示例地，设置音频流数据格式包括：将音频流中各相对位置对应的音频数据格式设置为位于该相对位置的音箱对应的通道的格式。如步骤S102中确认5.1音箱中的L音箱的相对位置为右前，R音箱的相对位置为左前，Ls音箱的相对位置为右后，Rs音箱的相对位置为左后，而音频流数据通常是按左前_中置_右前_左后_右后_低音的顺序循环编制的，因此，设置音频流数据格式为R_C_L_Rs_Ls_Lfe。
由于用户安装的不规范，各个音箱之间的相对距离可能相差很大，如某个或某几个音箱的实际位置相对其他音箱要近或远，会导致声音不同步，用户体验差。可通过计算各个音箱到所述中心点的距离，根据各个音箱到所述中心点的距离对部分音箱的音频数据做延迟或超前处理，使各个音箱发出的声音到达人耳的时间同步，提高用户体验。
在一些实施例中，根据各个音箱到所述中心点的距离对部分音箱的音频数据做延迟或超前处理具体包括：计算各个音箱到所述中心点的距离的平均值；计算各个音箱到所述中心点的距离与所述平均值之差ΔSi，其中，i＝1,2,3，…，n，n为待测音箱的总个数；若ΔSi小于或等于预设距离值的相反数，则对音箱i的音频数据做延迟处理或对音箱i之外的音箱的音频数据做超前处理；若ΔSi大于或等于预设距离值，则对音箱i的音频数据做超前处理或对音箱i之外的音箱的音频数据做延迟处理。示例地，延迟处理的延迟时间或超前处理的超前时间ti的计算公式为：其中，C为声速，空气中的声速在1个标准大气压和15℃的条件下约为340m/s。所述预设距离值可直接预先设定，若预先设定的是时间值，则将该预设时间值乘以声速即可得到预设距离值。
如图2所示，5.1音箱在各个音箱的位置摆放正确的情况下，声音播放端(如投影设备)音频每一帧的数据顺序为L_C_R_Ls_Rs_Lfe；并且不同音箱的数据之间同步发送。
用户在安装时，可能会将音箱的位置摆放错误，示例地，如图3所示。用户首次连接音箱或者手动触发检测时，声音播放端先播放只有R音箱有效的R通道的音频数据，同时通过麦克风阵列获取R音箱发出的声音，进行声源定位，测算R音箱的空间位置，如，通过DOA(声源定位)方法进行测算。以此类推，分别播放L、Ls和Rs通道的音频数据，依次测算L、Ls和Rs音箱的空间位置。然后根据R、L、Ls和Rs音箱的空间位置，确定这四个音箱之间的相对位置为左前、右前、右后和左后。根据确定的这四个音箱之间的相对位置，设置音频流数据格式为R_C_L_Rs_Ls_Lfe。
在一些实施例中，还需要对部分音箱的音频数据做延迟或超前处理，以保证声音同步。假设预设的时间值为1ms，各音箱的声音到达人耳的时间差值不能超过1ms，即各音箱到中心点的距离之差的绝对值不能超过0.34m，也可直接预设距离值为0.34m。为了计算的简便性，本申请实施例利用音箱到中心点的距离与各音箱到中心点的距离的平均值之差进行计算，若其差值在范围内，则不需要做处理，若其差值小于或等于预设值的相反数，即该音箱距离太近，需要对该音箱的音频数据做延迟处理，或对该音箱之外的音箱的音频数据做超前处理；若其差值大于或等于预设值，即该音箱距离太远，需要对该音箱的音频数据做超前处理，或对该音箱之外的音箱的音频数据做延迟处理。
具体方法包括：根据这四个音箱的空间位置，计算由这四个音箱围成的空间的中心点的空间位置，如对四个音箱的各坐标值求平均值从而得到中心点的坐标值，或者利用对角线的交点作为中心点等，本申请对中心点的确认方法不做限制。然后分别计算R、L、Ls和Rs音箱到所述中心点的距离S1、S2、S3和S4，并对这四个距离值求平均值S*＝(S1+S2+S3+S4)/4，然后分别计算S1、S2、S3和S4与S*之差ΔSi，其中，i＝1,2,3,4。假设ΔS1、ΔS2和ΔS4的绝对值都小于0.34m，ΔS3＝3大于0.34m，则需要对Ls音箱的音频数据做超前处理，或对R、L和Rs音箱的音频数据做延迟处理，且处理的时间即将Ls音箱的音频数据提前8.8ms发送，或将R、L和Rs音箱的音频数据延迟8.8ms发送。若ΔS1＝-1，ΔS4＝2，ΔS1和ΔS3的绝对值都小于0.34m，则需要对R音箱的音频数据做延迟处理，对Rs音箱的音频数据做超前处理，且/> 即将R音箱的音频数据延迟2.9ms发送，Rs音箱的音频数据提前5.9ms发送。
本申请实施例还提供一种音频播放装置，该装置用于实现如图1中实施例涉及的基于声源定位的音频播放方法，可以通过硬件实现，也可以通过硬件执行相应的软件实现。硬件或软件包括一个或多个与上述功能相对应的单元，例如，空间位置测算单元、相对位置确定单元和音频流数据格式设置单元，空间位置测算单元用于依次播放各个通道的音频数据，通过麦克风阵列获取各个通道对应的音箱发出的声音，并测算各个通道对应的音箱的空间位置，其中，一个通道对应一个音箱；相对位置确定单元用于根据各个音箱的空间位置，确定各个音箱之间的相对位置；音频流数据格式设置单元用于根据各个音箱之间的相对位置，设置音频流数据格式。
在一些实施例中，音频流数据格式设置单元设置音频流数据格式的方法包括：将音频流中各相对位置对应的音频数据格式设置为位于该相对位置的音箱对应的通道的格式。
在一些实施例中，音频播放装置还包括：中心点位置计算单元，用于根据各个音箱的空间位置，计算由各个音箱围成的空间的中心点的空间位置；同步处理单元，用于计算各个音箱到所述中心点的距离，根据各个音箱到所述中心点的距离对部分音箱的音频数据做延迟或超前处理。
本申请实施例还提供一种音频播放装置，包括存储器，所述存储器用于存储程序，处理器，耦合到所述存储器，其中，所述处理器运行所述程序时，实现如图1中实施例涉及的方法。
本申请实施例还提供一种投影设备，包括上述的音频播放装置。在一些实施例中，投影设备还包括上述的麦克风阵列，所述麦克风阵列用于获取声音，并测试各待测音箱的空间位置。
本申请实施例还提供一种计算机可读存储介质，包括计算机指令，当计算机指令被一处理器运行时，实现如图1中实施例涉及的方法。
应理解，在本申请的各种实施例中，上述各过程的序号的大小并不意味着执行顺序的先后，部分或全部步骤可以并行执行或先后执行，各过程的执行顺序应以其功能和内在逻辑确定，而不应对本申请实施例的实施过程构成任何限定。
本领域普通技术人员可以意识到，结合本文中所公开的实施例描述的各示例的单元及算法步骤，能够以电子硬件、或者计算机软件和电子硬件的结合来实现。这些功能究竟以硬件还是软件方式来执行，取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能，但是这种实现不应认为超出本申请的范围。
所属领域的技术人员可以清楚地了解到，为描述的方便和简洁，上述描述的系统、装置和单元的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。
在本申请所提供的几个实施例中，应该理解到，所揭露的系统、装置和方法，可以通过其它的方式实现。例如，以上所描述的装置实施例仅仅是示意性的，例如，所述单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口，装置或单元的间接耦合或通信连接，可以是电性，机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外，在本申请各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。
所述功能如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本申请的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，网络设备或者终端设备等)执行本申请各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：U盘、移动硬盘、ROM、RAM)磁碟或者光盘等各种可以存储程序代码的介质。
在本申请实施例中使用的术语是仅仅出于描述特定实施例的目的，而非旨在限制本申请。在本申请实施例和所附权利要求书中所使用的单数形式的“一种”、“所述”和“该”也旨在包括多数形式，除非上下文清楚地表示其他含义。还应当理解，本文中使用的术语“和/或”是指并包含一个或多个相关联的列出项目的任何或所有可能组合。本文中字符“/”，一般表示前后关联对象是一种“或”的关系。
取决于语境，如在此所使用的词语“如果”或“若”可以被解释成为“在……时”或“当……时”或“响应于确定”或“响应于检测”。类似地，取决于语境，短语“如果确定”或“如果检测(陈述的条件或事件)”可以被解释成为“当确定时”或“响应于确定”或“当检测(陈述的条件或事件)时”或“响应于检测(陈述的条件或事件)”。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分步骤是可以通过程序来指令相关硬件来完成，所述的程序可以存储于一个设备的可读存储介质中，该程序在执行时，包括上述全部或部分步骤，所述的存储介质，如：FLASH、EEPROM等。
以上所述，仅为本申请的具体实施方式，但本申请的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本申请揭露的技术范围内，可轻易想到变化或替换，都应涵盖在本申请的保护范围之内。因此，本申请的保护范围应以所述权利要求的保护范围为准。

Claims (14)

1.一种基于声源定位的音频播放方法，其特征在于，包括：
依次播放各个通道的音频数据，通过麦克风阵列获取各个通道对应的音箱发出的声音，并测算各个通道对应的音箱的空间位置，其中，一个通道对应一个音箱；
根据各个音箱的空间位置，确定各个音箱之间的相对位置；
根据各个音箱之间的相对位置，设置音频流数据格式，所述音频流数据是按预设的通道顺序循环编制的；
所述根据各个音箱之间的相对位置，设置音频流数据格式，包括：
将音频流中各相对位置对应的音频数据格式设置为位于该相对位置的音箱对应的通道的格式，而不改变各音箱对应的通道。
2.根据权利要求1所述的一种基于声源定位的音频播放方法，其特征在于，还包括：
根据各个音箱的空间位置，计算由各个音箱围成的空间的中心点的空间位置。
3.根据权利要求2所述的一种基于声源定位的音频播放方法，其特征在于，还包括：
计算各个音箱到所述中心点的距离，根据各个音箱到所述中心点的距离对部分音箱的音频数据做延迟或超前处理。
4.根据权利要求3所述的一种基于声源定位的音频播放方法，其特征在于，所述根据各个音箱到所述中心点的距离对部分音箱的音频数据做延迟或超前处理包括：
计算各个音箱到所述中心点的距离的平均值；
计算各个音箱到所述中心点的距离与所述平均值之差ΔSi，其中，i＝1,2,3，…，n，n为待测音箱的总个数；
若ΔSi小于或等于预设距离值的相反数，则对音箱i的音频数据做延迟处理或对音箱i之外的音箱的音频数据做超前处理；
若ΔSi大于或等于预设距离值，则对音箱i的音频数据做超前处理或对音箱i之外的音箱的音频数据做延迟处理。
5.根据权利要求4所述的一种基于声源定位的音频播放方法，其特征在于，所述预设距离值预先设定，或根据预设时间值乘以声速计算得到。
6.根据权利要求4所述的一种基于声源定位的音频播放方法，其特征在于，所述延迟处理的延迟时间或超前处理的超前时间ti的计算公式为：
其中，C为声速。
7.根据权利要求2所述的一种基于声源定位的音频播放方法，其特征在于，所述根据各个音箱的空间位置，确定各个音箱之间的相对位置，包括：
根据各个音箱的空间位置和所述中心点的空间位置，确定各个音箱之间的相对位置。
8.根据权利要求1-7中任一项所述的一种基于声源定位的音频播放方法，其特征在于，所述空间位置包括空间坐标。
9.一种音频播放装置，其特征在于，包括：
空间位置测算单元，用于依次播放各个通道的音频数据，通过麦克风阵列获取各个通道对应的音箱发出的声音，并测算各个通道对应的音箱的空间位置，其中，一个通道对应一个音箱；
相对位置确定单元，用于根据各个音箱的空间位置，确定各个音箱之间的相对位置；
音频流数据格式设置单元，用于根据各个音箱之间的相对位置，设置音频流数据格式，所述音频流数据是按预设的通道顺序循环编制的；
音频流数据格式设置单元设置音频流数据格式的方法包括：
将音频流中各相对位置对应的音频数据格式设置为位于该相对位置的音箱对应的通道的格式，而不改变各音箱对应的通道。
10.根据权利要求9所述的一种音频播放装置，其特征在于，还包括：
中心点位置计算单元，用于根据各个音箱的空间位置，计算由各个音箱围成的空间的中心点的空间位置；
同步处理单元，用于计算各个音箱到所述中心点的距离，根据各个音箱到所述中心点的距离对部分音箱的音频数据做延迟或超前处理。
11.一种音频播放装置，其特征在于，包括：
存储器，用于存储程序；
处理器，耦合到所述存储器，所述程序被所述处理器运行时，实现如权利要求1-8中任一项所述基于声源定位的音频播放方法。
12.一种投影设备，其特征在于，包括权利要求9-11中任一项所述的音频播放装置。
13.根据权利要求12所述的一种投影设备，其特征在于，还包括：麦克风阵列，所述麦克风阵列用于获取各个音箱发出的声音，并测算各个音箱的空间位置。
14.一种计算机可读存储介质，其特征在于，包括计算机指令，当计算机指令被一处理器运行时，实现如权利要求1-8中任一项所述基于声源定位的音频播放方法。
CN202010941349.0A 2020-09-09 2020-09-09 基于声源定位的音频播放方法、装置、投影设备及介质 Active CN112083379B (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN202010941349.0A CN112083379B (zh) 2020-09-09 2020-09-09 基于声源定位的音频播放方法、装置、投影设备及介质
PCT/CN2021/098493 WO2022052529A1 (zh) 2020-09-09 2021-06-05 基于声源定位的音频播放方法、装置、投影设备及介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010941349.0A CN112083379B (zh) 2020-09-09 2020-09-09 基于声源定位的音频播放方法、装置、投影设备及介质

Publications (2)

Publication Number Publication Date
CN112083379A CN112083379A (zh) 2020-12-15
CN112083379B true CN112083379B (zh) 2023-10-20

Family

ID=73732982

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010941349.0A Active CN112083379B (zh) 2020-09-09 2020-09-09 基于声源定位的音频播放方法、装置、投影设备及介质

Country Status (2)

Country Link
CN (1) CN112083379B (zh)
WO (1) WO2022052529A1 (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112083379B (zh) * 2020-09-09 2023-10-20 极米科技股份有限公司 基于声源定位的音频播放方法、装置、投影设备及介质
WO2024164174A1 (zh) * 2023-02-08 2024-08-15 华为技术有限公司 控制方法、音频播放方法及相关装置、系统、车辆

Citations (29)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP0961277A1 (en) * 1998-05-26 1999-12-01 Koninklijke Philips Electronics N.V. Record carrier, apparatus and method
CN1942962A (zh) * 2004-04-06 2007-04-04 松下电器产业株式会社 声音再生装置、声音再生方法和程序
JP2008047969A (ja) * 2006-08-10 2008-02-28 Sony Corp マルチチャンネル音響装置、音響聴取位置特定方法、音響聴取位置特定プログラム及びマルチチャンネル音響システム
CN103270508A (zh) * 2010-09-08 2013-08-28 Dts（英属维尔京群岛）有限公司 对漫射声音的空间音频编码和再现
CN103460285A (zh) * 2010-12-03 2013-12-18 弗兰霍菲尔运输应用研究公司 用于以几何为基础的空间音频编码的装置及方法
CN103945301A (zh) * 2014-04-24 2014-07-23 Tcl集团股份有限公司 一种音响系统平衡调节方法及装置
CN104185132A (zh) * 2014-09-02 2014-12-03 广东欧珀移动通信有限公司 声道配置方法、智能终端及相应系统
CN104581602A (zh) * 2014-10-27 2015-04-29 常州听觉工坊智能科技有限公司 录音数据训练方法、多轨音频环绕方法及装置
CN104967953A (zh) * 2015-06-23 2015-10-07 Tcl集团股份有限公司 一种多声道播放方法和系统
CN105874408A (zh) * 2014-01-03 2016-08-17 哈曼国际工业有限公司 用手势交互的可穿戴式空间音频系统
CN105933820A (zh) * 2016-04-28 2016-09-07 冠捷显示科技（中国）有限公司 一种外置无线音箱自动定位方法
CN106686520A (zh) * 2017-01-03 2017-05-17 南京地平线机器人技术有限公司 能跟踪用户的多声道音响系统和包括其的设备
CN106998514A (zh) * 2016-01-26 2017-08-01 湖南汇德电子有限公司 智能多声道配置方法和系统
CN107040843A (zh) * 2017-03-06 2017-08-11 联想(北京)有限公司 通过两个麦克风获取同一个音源的方法及采集设备
CN107040850A (zh) * 2017-04-28 2017-08-11 湖南海翼电子商务股份有限公司 智能音箱、音响系统及其自动设置声道的方法
CN107211226A (zh) * 2015-01-19 2017-09-26 微软技术许可有限责任公司 具有远程扬声器的空间音频
CN107682772A (zh) * 2017-10-25 2018-02-09 倬韵科技（深圳）有限公司 一种识别危险以控制音频输出的方法、装置和耳机
CN107734444A (zh) * 2017-10-23 2018-02-23 恒玄科技（上海）有限公司 一种无线多声道声音同步播放控制系统及方法
CN107801132A (zh) * 2017-11-22 2018-03-13 广东欧珀移动通信有限公司 一种智能音箱控制方法、移动终端及智能音箱
CN108107407A (zh) * 2017-12-18 2018-06-01 黑龙江大学 一种基于空间分布式麦克风的三维声源定位方法
CN108513223A (zh) * 2018-03-19 2018-09-07 成都星环科技有限公司 一种多声道无损传输系统
CN109256153A (zh) * 2018-08-29 2019-01-22 北京云知声信息技术有限公司 一种声源定位方法及系统
CN109831735A (zh) * 2019-01-11 2019-05-31 歌尔科技有限公司 适于室内环境的音频播放方法、设备、系统及存储介质
CN208971756U (zh) * 2018-11-28 2019-06-11 王鑫燚 一种立体声耳机
CN110049428A (zh) * 2019-03-20 2019-07-23 中国科学院计算技术研究所 用于实现多声道环绕立体声播放的方法、播放设备及系统
CN110049409A (zh) * 2019-04-30 2019-07-23 中国联合网络通信集团有限公司 用于全息影像的动态立体声调节方法及装置
CN110377265A (zh) * 2019-06-24 2019-10-25 贵安新区新特电动汽车工业有限公司 声音播放方法及装置
CN110677801A (zh) * 2019-08-23 2020-01-10 华为技术有限公司 一种音箱控制方法、音箱以及音箱系统
CN111065020A (zh) * 2019-11-07 2020-04-24 华为终端有限公司 音频数据处理的方法和装置

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7924655B2 (en) * 2007-01-16 2011-04-12 Microsoft Corp. Energy-based sound source localization and gain normalization
US20110091055A1 (en) * 2009-10-19 2011-04-21 Broadcom Corporation Loudspeaker localization techniques
CN102857857B (zh) * 2012-02-17 2015-01-28 东莞耳神电声科技有限公司 多通道无线音响系统的音箱通道匹配方法
US9426598B2 (en) * 2013-07-15 2016-08-23 Dts, Inc. Spatial calibration of surround sound systems including listener position estimation
CN112083379B (zh) * 2020-09-09 2023-10-20 极米科技股份有限公司 基于声源定位的音频播放方法、装置、投影设备及介质

Patent Citations (29)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP0961277A1 (en) * 1998-05-26 1999-12-01 Koninklijke Philips Electronics N.V. Record carrier, apparatus and method
CN1942962A (zh) * 2004-04-06 2007-04-04 松下电器产业株式会社 声音再生装置、声音再生方法和程序
JP2008047969A (ja) * 2006-08-10 2008-02-28 Sony Corp マルチチャンネル音響装置、音響聴取位置特定方法、音響聴取位置特定プログラム及びマルチチャンネル音響システム
CN103270508A (zh) * 2010-09-08 2013-08-28 Dts（英属维尔京群岛）有限公司 对漫射声音的空间音频编码和再现
CN103460285A (zh) * 2010-12-03 2013-12-18 弗兰霍菲尔运输应用研究公司 用于以几何为基础的空间音频编码的装置及方法
CN105874408A (zh) * 2014-01-03 2016-08-17 哈曼国际工业有限公司 用手势交互的可穿戴式空间音频系统
CN103945301A (zh) * 2014-04-24 2014-07-23 Tcl集团股份有限公司 一种音响系统平衡调节方法及装置
CN104185132A (zh) * 2014-09-02 2014-12-03 广东欧珀移动通信有限公司 声道配置方法、智能终端及相应系统
CN104581602A (zh) * 2014-10-27 2015-04-29 常州听觉工坊智能科技有限公司 录音数据训练方法、多轨音频环绕方法及装置
CN107211226A (zh) * 2015-01-19 2017-09-26 微软技术许可有限责任公司 具有远程扬声器的空间音频
CN104967953A (zh) * 2015-06-23 2015-10-07 Tcl集团股份有限公司 一种多声道播放方法和系统
CN106998514A (zh) * 2016-01-26 2017-08-01 湖南汇德电子有限公司 智能多声道配置方法和系统
CN105933820A (zh) * 2016-04-28 2016-09-07 冠捷显示科技（中国）有限公司 一种外置无线音箱自动定位方法
CN106686520A (zh) * 2017-01-03 2017-05-17 南京地平线机器人技术有限公司 能跟踪用户的多声道音响系统和包括其的设备
CN107040843A (zh) * 2017-03-06 2017-08-11 联想(北京)有限公司 通过两个麦克风获取同一个音源的方法及采集设备
CN107040850A (zh) * 2017-04-28 2017-08-11 湖南海翼电子商务股份有限公司 智能音箱、音响系统及其自动设置声道的方法
CN107734444A (zh) * 2017-10-23 2018-02-23 恒玄科技（上海）有限公司 一种无线多声道声音同步播放控制系统及方法
CN107682772A (zh) * 2017-10-25 2018-02-09 倬韵科技（深圳）有限公司 一种识别危险以控制音频输出的方法、装置和耳机
CN107801132A (zh) * 2017-11-22 2018-03-13 广东欧珀移动通信有限公司 一种智能音箱控制方法、移动终端及智能音箱
CN108107407A (zh) * 2017-12-18 2018-06-01 黑龙江大学 一种基于空间分布式麦克风的三维声源定位方法
CN108513223A (zh) * 2018-03-19 2018-09-07 成都星环科技有限公司 一种多声道无损传输系统
CN109256153A (zh) * 2018-08-29 2019-01-22 北京云知声信息技术有限公司 一种声源定位方法及系统
CN208971756U (zh) * 2018-11-28 2019-06-11 王鑫燚 一种立体声耳机
CN109831735A (zh) * 2019-01-11 2019-05-31 歌尔科技有限公司 适于室内环境的音频播放方法、设备、系统及存储介质
CN110049428A (zh) * 2019-03-20 2019-07-23 中国科学院计算技术研究所 用于实现多声道环绕立体声播放的方法、播放设备及系统
CN110049409A (zh) * 2019-04-30 2019-07-23 中国联合网络通信集团有限公司 用于全息影像的动态立体声调节方法及装置
CN110377265A (zh) * 2019-06-24 2019-10-25 贵安新区新特电动汽车工业有限公司 声音播放方法及装置
CN110677801A (zh) * 2019-08-23 2020-01-10 华为技术有限公司 一种音箱控制方法、音箱以及音箱系统
CN111065020A (zh) * 2019-11-07 2020-04-24 华为终端有限公司 音频数据处理的方法和装置

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
PC音频系统优化技巧;飞雪;电脑(05);全文 *
数字功放典型IC模组;祖学;;实用影音技术(第06期);全文 *

Also Published As

Publication number Publication date
CN112083379A (zh) 2020-12-15
WO2022052529A1 (zh) 2022-03-17

Similar Documents

Publication Publication Date Title
US10469976B2 (en) Wearable electronic device and virtual reality system
US10397722B2 (en) Distributed audio capture and mixing
CN106576203B (zh) 确定和使用房间优化传输函数
US10257630B2 (en) Computer program and method of determining a personalized head-related transfer function and interaural time difference function
KR102393798B1 (ko) 오디오 신호 처리 방법 및 장치
US9769589B2 (en) Method of improving externalization of virtual surround sound
US10972856B2 (en) Audio processing method and audio processing apparatus
KR20080060640A (ko) 개인 청각 특성을 고려한 2채널 입체 음향 재생 방법 및장치
US20150189455A1 (en) Transformation of multiple sound fields to generate a transformed reproduced sound field including modified reproductions of the multiple sound fields
US10652686B2 (en) Method of improving localization of surround sound
US9769585B1 (en) Positioning surround sound for virtual acoustic presence
CN112083379B (zh) 基于声源定位的音频播放方法、装置、投影设备及介质
EP2243136B1 (en) Mediaplayer with 3D audio rendering based on individualised HRTF measured in real time using earpiece microphones.
US10979846B2 (en) Audio signal rendering
CN107182021A (zh) Vr电视中的动态空间虚拟声处理系统及处理方法
JP2019508964A (ja) ヘッドフォン上でバーチャルサラウンドサウンドを提供する方法及びシステム
CN106792365B (zh) 一种音频播放方法及装置
KR102580502B1 (ko) 전자장치 및 그 제어방법
CN106572425A (zh) 音频处理装置及方法
US6990210B2 (en) System for headphone-like rear channel speaker and the method of the same
US10440495B2 (en) Virtual localization of sound
US11102604B2 (en) Apparatus, method, computer program or system for use in rendering audio
JP6296072B2 (ja) 音響再生装置及びプログラム
US7050596B2 (en) System and headphone-like rear channel speaker and the method of the same
US6983054B2 (en) Means for compensating rear sound effect

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
CB02 Change of applicant information
CB02 Change of applicant information

Address after: 610000 building 4, zone a, Tianfu Software Park, No. 1129, shijicheng Road, high tech Zone, Chengdu, Sichuan

Applicant after: Jimi Technology Co.,Ltd.

Address before: No.2, floor 2, unit 1, building 4, Tianfu Software Park, no.1129, shijicheng Road, hi tech Zone, Chengdu, Sichuan 610041

Applicant before: Chengdu Jimi Technology Co.,Ltd.

GR01 Patent grant
GR01 Patent grant