CN112969121A - 耳机与多媒体设备的智能交互系统及方法 - Google Patents

耳机与多媒体设备的智能交互系统及方法 Download PDF

Info

Publication number
CN112969121A
CN112969121A CN202110390287.3A CN202110390287A CN112969121A CN 112969121 A CN112969121 A CN 112969121A CN 202110390287 A CN202110390287 A CN 202110390287A CN 112969121 A CN112969121 A CN 112969121A
Authority
CN
China
Prior art keywords
sound
earphone
signal
sound signal
multimedia
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
CN202110390287.3A
Other languages
English (en)
Inventor
向玮晨
刘广松
黄焱鑫
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Suzhou Touchair Technology Co ltd
Original Assignee
Suzhou Touchair Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Suzhou Touchair Technology Co ltd filed Critical Suzhou Touchair Technology Co ltd
Priority to CN202110390287.3A priority Critical patent/CN112969121A/zh
Publication of CN112969121A publication Critical patent/CN112969121A/zh
Withdrawn legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R1/00—Details of transducers, loudspeakers or microphones
    • H04R1/10—Earpieces; Attachments therefor ; Earphones; Monophonic headphones
    • H04R1/1041—Mechanical or electronic switches, or control elements
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S5/00—Position-fixing by co-ordinating two or more direction or position line determinations; Position-fixing by co-ordinating two or more distance determinations
    • G01S5/18—Position-fixing by co-ordinating two or more direction or position line determinations; Position-fixing by co-ordinating two or more distance determinations using ultrasonic, sonic, or infrasonic waves
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/02—Services making use of location information
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W76/00—Connection management
    • H04W76/10—Connection setup
    • H04W76/14—Direct-mode setup

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Physics & Mathematics (AREA)
  • Acoustics & Sound (AREA)
  • General Physics & Mathematics (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Headphones And Earphones (AREA)

Abstract

本发明公开了一种耳机与多媒体设备的智能交互系统及方法，包括：布置于多媒体设备上的声源模块，用于发出声音信号；布置于耳机上的至少两个声音检测模块，用于检测多媒体发出并直达的声音信号；处理器，被配置用于处理声源模块和声音检测模块的数据，解算出耳机与多媒体设备的实时相对位置，并完成交互；或者，声源模块和声音检测模块的位置互换。本发明通过对声音信号的实时解算，完成耳机与多媒体设备相对位置的感知，应用于各种场景时，将位置信息的变化转化为各类操作指令，实现耳机与多媒体设备的智能交互，同时，此类交互方法无需提前预设多媒体设备与耳机的相对位置或角度，大大提高了交互效果和实用性。

Description

耳机与多媒体设备的智能交互系统及方法
技术领域
本发明涉及一种耳机与多媒体设备的智能交互系统及方法，属于声音处理技术领域。
背景技术
随着信息技术的发展，人们的生活也越加丰富，特别是随着“智能”这一概念的引入，人脸识别、手势控制、语音助手等更加便捷的人机交互模式受到了大众的青睐。
无线智能耳机正是在这一趋势下，摆脱了数据线的束缚所衍生的收听设备，与多媒体设备、特别是与智能手机协同使用时，极大地方便了人们的携带与操作；但是，在需要进行实时控制时，仍然需要拿出手机进行手动操作，十分麻烦，因此，尝试建立起耳机与多媒体设备更为多元化的交互形式，实现智能化操作是目前亟需解决的问题。
发明内容
本发明的目的是提供一种耳机与多媒体设备的智能交互系统及方法，该交互系统及方法解决了现有技术中多媒体设备控制方法单一、实时操作麻烦的问题，还解决了耳机与多媒体设备交互困难，现有的无线耳机适用性不足的问题。
为达到上述目的，本发明采用的技术方案是：一种耳机与多媒体设备的智能交互系统，包括：
布置于多媒体设备上的声源模块，用于发出声音信号；
布置于耳机上的声音检测模块，用于检测多媒体发出并直达的声音信号；
处理器，被配置用于处理声源模块和声音检测模块的数据，解算出耳机与多媒体设备的实时相对位置，并完成交互；
其中，声源模块和声音检测模块的数量之和至少为3个；
或者，布置于耳机上的声源模块，用于发出声音信号；
布置于多媒体设备上的声音检测模块，用于检测耳机发出并直达的声音信号；
处理器，被配置用于处理声源模块和声音检测模块得到的数据，解算得出耳机与多媒体设备的实时相对位置，并完成交互；
其中，声源模块和声音检测模块的数量之和至少为3个。
上述技术方案中进一步改进的方案如下：
1.上述方案中，所述声音信号为携带有数据的超声波信号。
2.上述方案中，所述耳机与多媒体设备的相对位置为距离和相对角度中的一种或多种。
3.上述方案中，所述耳机的数目为1个。
4.上述方案中，当声音检测模块布置于耳机上、且所述耳机的数目为2个时，此每个耳机上布置有至少一个声音检测模块。
5.上述方案中，所述耳机为无线耳机。
为达到上述目的，本发明还提供了一种技术方案是：一种耳机与多媒体设备的智能交互方法，包括：
布置于多媒体设备上的声源模块发出第一声音信号和第二声音信号，其中，所述第一声音信号与第二声音信号为同一时刻发出的；
布置于耳机上的声音检测模块检测到直达的第一声音信号和第二声音信号；
其中，当第一声音信号和第二声音信号为同一个声源模块发出时，声音信号由任意两个声音检测模块收到；
当第一声音信号和第二声音信号为任意两个声源模块发出时，声音信号由任意一个声音检测模块收到；
其中，两个声音检测模块的距离在使用时已知或不变；
处理器得到来自多媒体设备和耳机的反馈信息后，解算出耳机与多媒体设备的实时相对位置；
多媒体设备或者耳机依据实时相对位置做出响应动作；
或者，布置于耳机上的声源模块发出第一声音信号和第二声音信号，其中，所述第一声音信号与第二声音信号为同一时刻发出的；
布置于多媒体设备上的声音检测模块检测到直达的第一声音信号和第二声音信号；
其中，当第一声音信号和第二声音信号为同一个声源模块发出时，声音信号由任意两个声音检测模块收到；
当第一声音信号和第二声音信号为任意两个声源模块发出时，声音信号由任意一个声音检测模块收到；
其中，两个声音检测模块的距离在使用时已知或不变；
处理器得到来自多媒体设备和耳机的反馈信息后，解算出声源模块与多媒体设备的实时相对位置；
多媒体设备或者耳机依据实时相对位置做出响应动作。
1.上述方案中，所述声音信号为携带有数据的超声波信号。
2.上述方案中，所述耳机为无线耳机。
3.上述方案中，所述耳机与多媒体设备的相对位置为距离和相对角度中的一种或多种。
由于上述技术方案的运用，本发明与现有技术相比具有下列优点：
1、本发明耳机与多媒体设备的智能交互系统及方法，通过对声音信号的实时解算，完成耳机与多媒体设备相对位置的感知，应用于各种场景时，将位置信息的变化转化为各类操作指令，实现耳机与多媒体设备的智能交互；同时，此类交互方法无需提前预设多媒体设备与耳机的相对位置或角度，大大提高了交互效果和实用性。
2、本发明耳机与多媒体设备的智能交互系统及方法，使用携带有数据信息的超声波定位实现实时交互，不仅可以充分利用耳机及多媒体设备自带的麦克风设备，无需新增额外模块，进一步提高了交互技术的适用性，还不会影响到正常音源的使用，实时操控无延时。
3、本发明耳机与多媒体设备的智能交互系统及方法，通过变更发射端和接收端，使得交互方式更加多元，不仅在耳机位置变更时，多媒体设备可做出反馈，还可以在多媒体设备位置变更时，耳机也同步做出响应。
附图说明
附图1为本发明耳机与多媒体设备的智能交互系统及方法的工作模块示意图；
附图2为本发明耳机与多媒体设备的智能交互系统及方法中多媒体设备作为声源的工作示意图；
附图3为本发明耳机与多媒体设备的智能交互系统及方法中单个耳机使用2个声音检测模块的工作示意图；
附图4为本发明耳机与多媒体设备的智能交互系统及方法中耳机作为声源的工作示意图。
附图标记说明：1、声源模块；2、声音检测模块；3、处理器。
具体实施方式
以下实施例中，耳机与多媒体设备的时间同步，如果存在不同步情况，优先将其同步后再进行交互；文中提到的处理器至少具有存储、运算和控制功能。
实施例1：一种耳机与多媒体设备的智能交互系统，参照附图1-3，包括：
布置于多媒体设备上的声源模块1，用于发出声音信号，其中，所述声音信号为携带有数据的超声波信号，这些数据包括声音信号的发射时间、设备信息等；
布置于耳机上的至少两个声音检测模块2，用于检测多媒体发出并直达的声音信号；
其中，耳机优选为无线耳机，上述声源模块1和声音检测模块2均可为设备自带的麦克风；
处理器3，被配置用于处理声源模块1和声音检测模块2的数据，解算出耳机与多媒体设备的实时相对位置，这里，耳机与多媒体设备的实时相对位置可以为实时距离或者实时相对角度，或者既有实时距离，也有实时相对角度，可根据不同场景进行选择，并完成交互。
其中，耳机与多媒体设备的距离通过超声波定位获得：多媒体设备于t0时刻发送声音信号至耳机处，耳机的每个声音检测模块2收到声音信号的时刻为t1、t2……tn，已知声音在空气中的传播速度c，可知Ln＝(tn-t0)*c，可得到每个声音检测模块2与多媒体设备的声源模块1的距离为L1、L2……Ln。
其中，耳机与多媒体设备的相对角度也可以通过超声波定位获得：已知每个声音检测模块2与多媒体设备的声源模块1的距离为L1、L2……Ln，选择两个声音检测模块2的距离数据L1、L2，已知用户在使用此两个声音检测模块2的过程中，它们的距离是固定的，设为D，那么L1、L2所夹的相对角度为
Figure BDA0003016432280000041
这里，D可以为已知的具体数值，此时，可直接解算出的相对角度θ，得到相对角度的变化情况，D也可以为未知数值，此时，在L1、L2为已知数值，D不变的前提下，可推算出相对角度θ的变化情况；或者，D在未知且值不变的情况下，可导入一预估数值，也可以完成相对角度θ的判断。
其中，即使耳机的数目为1个时，只要其上具有至少两个声音检测模块2，仍然能够完成上述测算，这样，用户即使只佩戴一个耳机，也能实现耳机与多媒体设备的交互。
当耳机的数目为2个时，此每个耳机上布置有至少一个声音检测模块2，这样，无论是单个耳机还是同时佩戴两个耳机，都能完成交互过程，满足多场景应用。
实施例2：一种耳机与多媒体设备的智能交互系统，参照附图1和4，包括：
布置于耳机上的声源模块1，用于发出声音信号，其中，所述声音信号为携带有数据的超声波信号，这些数据包括声音信号的发射时间、设备信息等；
布置于多媒体设备上的至少两个声音检测模块2，用于检测耳机发出并直达的声音信号；
其中，耳机优选为无线耳机，上述声源模块1和声音检测模块2均可为设备自带的麦克风；
处理器3，被配置用于处理声源模块1和声音检测模块2得到的数据，解算得出耳机与多媒体设备的实时相对位置，并完成交互，这里，耳机与多媒体设备的实时相对位置可以为实时距离或者实时相对角度，或者既有实时距离，也有实时相对角度，可根据不同场景进行选择，并完成交互
其中，耳机与多媒体设备的距离通过超声波定位获得：耳机于t0时刻发送声音信号至多媒体设备处，多媒体设备的每个声音检测模块2收到声音信号的时刻为t1、t2……tn，已知声音在空气中的传播速度c，可知Ln＝(tn-t0)*c，可得到每个声音检测模块2与耳机的声源模块1的距离为L1、L2……Ln。
其中，耳机与多媒体设备的相对角度也可以通过超声波定位获得：已知每个声音检测模块2与耳机的声源模块1的距离为L1、L2……Ln，选择两个声音检测模块2的距离数据L1、L2，已知用户在使用此两个声音检测模块2的过程中，它们的距离是固定的，设为D，那么L1、L2所夹的相对角度为
Figure BDA0003016432280000051
这里，D可以为已知的具体数值，此时，可直接解算出的相对角度θ，得到相对角度的变化情况，D也可以为未知数值，此时，在L1、L2为已知数值，D不变的前提下，可推算出相对角度θ的变化情况；或者，D在未知且值不变的情况下，可导入一预估数值，也可以完成相对角度θ的判断。
实施例3：一种耳机与多媒体设备的智能交互方法，包括以下步骤：
S1：布置于多媒体设备上的声源模块1于同一时刻发出第一声音信号和第二声音信号，其中，所述声音信号为携带有数据的超声波信号，这些数据包括声音信号的发射时间、设备信息等。
S2：布置于耳机上的任意两个声音检测模块2分别检测到直达的第一声音信号和第二声音信号，其中，耳机优选为无线耳机，同时，这里，第一声音信号和第二声音信号在发出后会有多个，以下给出了判断直达信号的方法：
申请人发现：通常情况下，每个声音检测模块2的接收信号流(stream)都包含直达信道与反射信道。可以依据如下原则简单且便利地确定直达信道：在声音检测模块2检测到的所有信号中，直达信道的信号强度一般是最强的。
因此，将第一声音检测模块2接收设备的声音信号流中的、在预定时间窗口内强度大于预定门限值的声音信号，确定为所述第一声音信号；将第二声音检测模块2接收设备的声音信号流中的、在所述预定时间窗口内强度大于所述预定门限值的声音信号，确定为所述第二声音信号。
第一声音检测模块2检测到的声音信号流为stream1，stream1包含沿着时间变化的多个脉冲信号，预定信号强度的门限值为T。在时间窗口90的范围内，stream1中的脉冲信号50的信号强度大于门限值T。第二声音检测模块2检测到的声音信号流为stream2，stream2包含沿着时间变化的多个脉冲信号，预定信号强度的门限值同样为T。在时间窗口90的范围内，stream2中的脉冲信号60的信号强度大于门限值T。因此，确定脉冲信号50为第一声音信号；脉冲信号60为第二声音信号。
另外，申请人还发现：可以综合考虑以下两个原则准确地确定直达信道：原则(1)、在声音检测模块2检测到的所有信号中，直达信道的信号强度一般是最强的；原则(2)、联合判别法：两条直达信道信号(第一声音信号和第二声音信号)的到达时间差所换算出的距离差d不应大于第一声音检测模块2和第二声音检测模块2之间的距离。
因此，在第一声音检测模块2检测设备的声音信号流中确定出强度大于预定门限值的声音信号，以形成第一候选信号集；在第二声音检测模块2检测第设备的声音信号流中确定出强度大于所述预定门限值的声音信号，以形成第二候选信号集；确定第一候选信号集中的每个声音信号的接收时刻与第二候选信号集中的每个声音信号的接收时刻之间的各自的时间差；将所述时间差小于M的一对声音信号，确定为所述第一声音信号和第二声音信号，其中M＝(D/c)，D为第一声音检测模块2与第二声音检测模块2之间的距离，c为声音的传播速度。
第一声音检测模块2检测到的声音信号流为stream1，stream1包含沿着时间变化的多个脉冲信号，预定信号强度的门限值为T。在stream1中，脉冲信号50的信号强度大于门限值T，因此第一候选信号集包含脉冲信号50。第二声音检测模块2检测到的声音信号流为stream2，stream1包含沿着时间变化的多个脉冲信号，预定信号强度的门限值同样为T。在stream2中，脉冲信号60和脉冲信号70的信号强度都大于门限值T，因此第二候选信号集包含脉冲信号60和脉冲信号70。
而且，确定第一候选信号集中的脉冲信号50与第二候选信号集中的脉冲信号60的接收时刻之间的时间差d1，以及确定第一候选信号集中的脉冲信号50与第二候选信号集中的脉冲信号70的接收时刻之间的时间差d2。假定d1小于M，d2大于M，其中M＝(D/c)，D为第一声音检测模块2与第二声音检测模块2之间的距离，c为声音的传播速度。因此，将与d1相关的一对声音信号中的脉冲信号50确定为直达的第一声音信号，且该对声音信号中的脉冲信号60确定为直达的第二声音信号。
其中，两个声音检测模块2的距离在使用时不变，这里，通常情况下，在佩戴耳机进行交互操作的过程中，耳机在头部的位置是固定不变的，因此，选取的位于耳机上的两个声音检测模块2的距离也就为固定值。
S3：处理器3得到来自多媒体设备和耳机的反馈信息后，解算出耳机与多媒体设备的实时相对位置，多媒体设备或者耳机依据实时相对位置做出反馈动作，这里，耳机与多媒体设备的实时相对位置可以为实时距离或者实时相对角度，或者既有实时距离，也有实时相对角度，可根据不同场景进行选择，并完成交互。
其中，耳机与多媒体设备的距离通过超声波定位获得：多媒体设备于t0时刻发送声音信号至耳机处，耳机的每个声音检测模块2收到声音信号的时刻为t1、t2……tn，已知声音在空气中的传播速度c，可知Ln＝(tn-t0)*c，可得到每个声音检测模块2与多媒体设备的声源模块1的距离为L1、L2……Ln。
其中，耳机与多媒体设备的相对角度也可以通过超声波定位获得：已知每个声音检测模块2与多媒体设备的声源模块1的距离为L1、L2……Ln，选择两个声音检测模块2的距离数据L1、L2，已知用户在使用此两个声音检测模块2的过程中，它们的距离是固定的，设为D，那么L1、L2所夹的相对角度为
Figure BDA0003016432280000071
这里，D可以为已知的具体数值，此时，可直接解算出的相对角度θ，得到相对角度的变化情况，D也可以为未知数值，此时，在L1、L2为已知数值，D不变的前提下，可推算出相对角度θ的变化情况；或者，D在未知且值不变的情况下，可导入一预估数值，也可以完成相对角度θ的判断。
实施例4：一种耳机与多媒体设备的智能交互方法，包括以下步骤：
S1：布置于耳机上的声源模块1发出第一声音信号和第二声音信号，其中，所述第一声音信号与第二声音信号为同一时刻发出的，耳机优选为无线耳机；其中，所述声音信号为携带有数据的超声波信号，这些数据包括声音信号的发射时间、设备信息等。
S2：布置于多媒体设备上的任意两个声音检测模块2分别检测到直达的第一声音信号和第二声音信号；同时，这里，第一声音信号和第二声音信号在发出后会有多个，以下给出了判断直达信号的方法：
申请人发现：通常情况下，每个声音检测模块2的接收信号流(stream)都包含直达信道与反射信道。可以依据如下原则简单且便利地确定直达信道：在声音检测模块2检测到的所有信号中，直达信道的信号强度一般是最强的。
因此，将第一声音检测模块2接收设备的声音信号流中的、在预定时间窗口内强度大于预定门限值的声音信号，确定为所述第一声音信号；将第二声音检测模块2接收设备的声音信号流中的、在所述预定时间窗口内强度大于所述预定门限值的声音信号，确定为所述第二声音信号。
第一声音检测模块2检测到的声音信号流为stream1，stream1包含沿着时间变化的多个脉冲信号，预定信号强度的门限值为T。在时间窗口90的范围内，stream1中的脉冲信号50的信号强度大于门限值T。第二声音检测模块2检测到的声音信号流为stream2，stream2包含沿着时间变化的多个脉冲信号，预定信号强度的门限值同样为T。在时间窗口90的范围内，stream2中的脉冲信号60的信号强度大于门限值T。因此，确定脉冲信号50为第一声音信号；脉冲信号60为第二声音信号。
另外，申请人还发现：可以综合考虑以下两个原则准确地确定直达信道：原则(1)、在声音检测模块2检测到的所有信号中，直达信道的信号强度一般是最强的；原则(2)、联合判别法：两条直达信道信号(第一声音信号和第二声音信号)的到达时间差所换算出的距离差d不应大于第一声音检测模块2和第二声音检测模块2之间的距离。
因此，在第一声音检测模块2检测设备的声音信号流中确定出强度大于预定门限值的声音信号，以形成第一候选信号集；在第二声音检测模块2检测第设备的声音信号流中确定出强度大于所述预定门限值的声音信号，以形成第二候选信号集；确定第一候选信号集中的每个声音信号的接收时刻与第二候选信号集中的每个声音信号的接收时刻之间的各自的时间差；将所述时间差小于M的一对声音信号，确定为所述第一声音信号和第二声音信号，其中M＝(D/c)，D为第一声音检测模块2与第二声音检测模块2之间的距离，c为声音的传播速度。
第一声音检测模块2检测到的声音信号流为stream1，stream1包含沿着时间变化的多个脉冲信号，预定信号强度的门限值为T。在stream1中，脉冲信号50的信号强度大于门限值T，因此第一候选信号集包含脉冲信号50。第二声音检测模块2检测到的声音信号流为stream2，stream1包含沿着时间变化的多个脉冲信号，预定信号强度的门限值同样为T。在stream2中，脉冲信号60和脉冲信号70的信号强度都大于门限值T，因此第二候选信号集包含脉冲信号60和脉冲信号70。
而且，确定第一候选信号集中的脉冲信号50与第二候选信号集中的脉冲信号60的接收时刻之间的时间差d1，以及确定第一候选信号集中的脉冲信号50与第二候选信号集中的脉冲信号70的接收时刻之间的时间差d2。假定d1小于M，d2大于M，其中M＝(D/c)，D为第一声音检测模块2与第二声音检测模块2之间的距离，c为声音的传播速度。因此，将与d1相关的一对声音信号中的脉冲信号50确定为直达的第一声音信号，且该对声音信号中的脉冲信号60确定为直达的第二声音信号。
其中，两个声音检测模块2的距离在使用时不变，这里，通常情况下，在佩戴耳机进行交互操作的过程中，多媒体设备上的声音检测模块2的位置是固定不变的。
S3：处理器3得到来自多媒体设备和耳机的反馈信息后，解算出声源模块1与多媒体设备的实时相对位置，这里，耳机与多媒体设备的实时相对位置可以为实时距离或者实时相对角度，或者既有实时距离，也有实时相对角度，可根据不同场景进行选择，并完成交互。
其中，耳机与多媒体设备的距离通过超声波定位获得：耳机于t0时刻发送声音信号至多媒体设备处，多媒体设备的每个声音检测模块2收到声音信号的时刻为t1、t2……tn，已知声音在空气中的传播速度c，可知Ln＝(tn-t0)*c，可得到每个声音检测模块2与耳机的声源模块1的距离为L1、L2……Ln。
其中，耳机与多媒体设备的相对角度也可以通过超声波定位获得：已知每个声音检测模块2与耳机的声源模块1的距离为L1、L2……Ln，选择两个声音检测模块2的距离数据L1、L2，已知用户在使用此两个声音检测模块2的过程中，它们的距离是固定的，设为D，那么L1、L2所夹的相对角度为
Figure BDA0003016432280000091
这里，D可以为已知的具体数值，此时，可直接解算出的相对角度θ，得到相对角度的变化情况，D也可以为未知数值，此时，在L1、L2为已知数值，D不变的前提下，可推算出相对角度θ的变化情况；或者，D在未知且值不变的情况下，可导入一预估数值，也可以完成相对角度θ的判断。
应用场景示例：
1、用户在佩戴无线耳机收听音乐时，如果对当前的音量不满意，可以通过向左或者向右转动的方式调节音量大小，转动的幅度对应的音量的变化量，在需要切换歌曲时，可以通过上下点头的方式完成，向上摆动即回到上一首，向下摆动即切换至下一首，用户无需触碰耳机或者拿起手机进行操作，也不用呼唤出语音助手输入调节命令，十分便捷且响应速度极快。
2、用户在佩戴无线耳机观看视频时，如果想跳过当前的画面，可以向左或者向右转动脑袋，即可快进或者快退，如果想切换视频，可以快速转动，处理器3根据转动速度远大于快进速度判断出用户想要切换视频，如果需要调节音量，可以通过上下点头的方式完成，向上摆动即放大音量，向下摆动即调低音量，用户无需触碰或者拿起手机进行操作，也不用呼唤出语音助手输入调节命令，十分便捷且响应速度极快。
3、用户长时间使用手机时，头部关节会感到疲劳，此时，手机可引导用户头部运动，手机界面显示出头部运动方向，超声模块实时检测用户完成情况，当依照当前指令完成放松运动后，方才显示下一运动指令或解锁手机。
另外，除了与手机内部程序的互动外，还可以实现对外部硬件的操作，这里不再一一赘述。
另外，以上实施例1～4均为一个声源模块1对应两个声音检测模块2，两个声源模块1对应一个声音检测模块2的形式也可以使用上述方法实现交互。
采用上述方案，通过对声音信号的实时解算，完成耳机与多媒体设备相对位置的感知，应用于各种场景时，将位置信息的变化转化为各类操作指令，实现耳机与多媒体设备的智能交互，同时，此类交互方法无需提前预设多媒体设备与耳机的相对位置或角度，大大提高了交互效果和实用性。
另外，使用携带有数据信息的超声波定位实现实时交互，不仅可以充分利用耳机及多媒体设备自带的麦克风设备，无需新增额外模块，进一步提高了交互技术的适用性，还不会影响到正常音源的使用，实时操控无延时。
另外，通过变更发射端和接收端，使得交互方式更加多元，不仅在耳机位置变更时，多媒体设备可做出反馈，还可以在多媒体设备位置变更时，耳机也同步做出响应。
上述实施例只为说明本发明的技术构思及特点，其目的在于让熟悉此项技术的人士能够了解本发明的内容并据以实施，并不能以此限制本发明的保护范围。凡根据本发明精神实质所作的等效变化或修饰，都应涵盖在本发明的保护范围之内。

Claims (10)

1.一种耳机与多媒体设备的智能交互系统，其特征在于，包括：
布置于多媒体设备上的声源模块(1)，用于发出声音信号；
布置于耳机上的声音检测模块(2)，用于检测多媒体发出并直达的声音信号；
处理器(3)，被配置用于处理声源模块(1)和声音检测模块(2)的数据，解算出耳机与多媒体设备的实时相对位置，并完成交互；
其中，声源模块(1)和声音检测模块(2)的数量之和至少为3个；
或者，布置于耳机上的声源模块(1)，用于发出声音信号；
布置于多媒体设备上的声音检测模块(2)，用于检测耳机发出并直达的声音信号；
处理器(3)，被配置用于处理声源模块(1)和声音检测模块(2)得到的数据，解算得出耳机与多媒体设备的实时相对位置，并完成交互；
其中，声源模块(1)和声音检测模块(2)的数量之和至少为3个。
2.根据权利要求1所述的耳机与多媒体设备的智能交互系统，其特征在于，所述声音信号为携带有数据的超声波信号。
3.根据权利要求1所述的耳机与多媒体设备的智能交互系统，其特征在于，所述耳机与多媒体设备的相对位置为距离和相对角度中的一种或多种。
4.根据权利要求1所述的耳机与多媒体设备的智能交互系统，其特征在于，所述耳机的数目为1个。
5.根据权利要求1所述的耳机与多媒体设备的智能交互系统，其特征在于，当声音检测模块(2)布置于耳机上、且所述耳机的数目为2个时，此每个耳机上布置有至少一个声音检测模块(2)。
6.根据权利要求1所述的耳机与多媒体设备的智能交互系统，其特征在于，所述耳机为无线耳机。
7.一种耳机与多媒体设备的智能交互方法，其特征在于，包括：
布置于多媒体设备上的声源模块(1)发出第一声音信号和第二声音信号，其中，所述第一声音信号与第二声音信号为同一时刻发出的；
布置于耳机上的声音检测模块(2)检测到直达的第一声音信号和第二声音信号；
其中，当第一声音信号和第二声音信号为同一个声源模块(1)发出时，声音信号由任意两个声音检测模块(2)收到；
当第一声音信号和第二声音信号为任意两个声源模块(1)发出时，声音信号由任意一个声音检测模块(2)收到；
其中，两个声音检测模块(2)的距离在使用时已知或不变；
处理器(3)得到来自多媒体设备和耳机的反馈信息后，解算出耳机与多媒体设备的实时相对位置；
多媒体设备或者耳机依据实时相对位置做出响应动作；
或者，布置于耳机上的声源模块(1)发出第一声音信号和第二声音信号，其中，所述第一声音信号与第二声音信号为同一时刻发出的；
布置于多媒体设备上的声音检测模块(2)检测到直达的第一声音信号和第二声音信号；
其中，当第一声音信号和第二声音信号为同一个声源模块(1)发出时，声音信号由任意两个声音检测模块(2)收到；
当第一声音信号和第二声音信号为任意两个声源模块(1)发出时，声音信号由任意一个声音检测模块(2)收到；
其中，两个声音检测模块(2)的距离在使用时已知或不变；
处理器(3)得到来自多媒体设备和耳机的反馈信息后，解算出声源模块(1)与多媒体设备的实时相对位置；
多媒体设备或者耳机依据实时相对位置做出响应动作。
8.根据权利要求6所述的耳机与多媒体设备的智能交互系统，其特征在于，所述声音信号为携带有数据的超声波信号。
9.根据权利要求6所述的耳机与多媒体设备的智能交互系统，其特征在于，所述耳机为无线耳机。
10.根据权利要求6所述的耳机与多媒体设备的智能交互系统，其特征在于，所述耳机与多媒体设备的相对位置为距离和相对角度中的一种或多种。
CN202110390287.3A 2021-04-12 2021-04-12 耳机与多媒体设备的智能交互系统及方法 Withdrawn CN112969121A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110390287.3A CN112969121A (zh) 2021-04-12 2021-04-12 耳机与多媒体设备的智能交互系统及方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110390287.3A CN112969121A (zh) 2021-04-12 2021-04-12 耳机与多媒体设备的智能交互系统及方法

Publications (1)

Publication Number Publication Date
CN112969121A true CN112969121A (zh) 2021-06-15

Family

ID=76279872

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110390287.3A Withdrawn CN112969121A (zh) 2021-04-12 2021-04-12 耳机与多媒体设备的智能交互系统及方法

Country Status (1)

Country Link
CN (1) CN112969121A (zh)

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112098942A (zh) * 2020-02-24 2020-12-18 苏州触达信息技术有限公司 一种智能设备的定位方法和智能设备
CN112104929A (zh) * 2020-05-13 2020-12-18 苏州触达信息技术有限公司 一种智能设备、控制智能音箱的方法和系统
CN112104928A (zh) * 2020-05-13 2020-12-18 苏州触达信息技术有限公司 一种智能音箱、控制智能音箱的方法和系统
CN112098935A (zh) * 2020-04-02 2020-12-18 苏州触达信息技术有限公司 一种寻找智能设备的方法和智能设备
CN112098936A (zh) * 2020-04-16 2020-12-18 苏州触达信息技术有限公司 一种定位智能设备的方法和智能设备
CN112098943A (zh) * 2020-03-31 2020-12-18 苏州触达信息技术有限公司 一种可穿戴设备的定位方法和智能设备
CN112105129A (zh) * 2020-04-09 2020-12-18 苏州触达信息技术有限公司 一种智能灯、智能发光方法和计算机可读存储介质

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112098942A (zh) * 2020-02-24 2020-12-18 苏州触达信息技术有限公司 一种智能设备的定位方法和智能设备
CN112098943A (zh) * 2020-03-31 2020-12-18 苏州触达信息技术有限公司 一种可穿戴设备的定位方法和智能设备
CN112098935A (zh) * 2020-04-02 2020-12-18 苏州触达信息技术有限公司 一种寻找智能设备的方法和智能设备
CN112105129A (zh) * 2020-04-09 2020-12-18 苏州触达信息技术有限公司 一种智能灯、智能发光方法和计算机可读存储介质
CN112098936A (zh) * 2020-04-16 2020-12-18 苏州触达信息技术有限公司 一种定位智能设备的方法和智能设备
CN112104929A (zh) * 2020-05-13 2020-12-18 苏州触达信息技术有限公司 一种智能设备、控制智能音箱的方法和系统
CN112104928A (zh) * 2020-05-13 2020-12-18 苏州触达信息技术有限公司 一种智能音箱、控制智能音箱的方法和系统

Similar Documents

Publication Publication Date Title
US10585486B2 (en) Gesture interactive wearable spatial audio system
US11043231B2 (en) Speech enhancement method and apparatus for same
US9563278B2 (en) Gesture controlled audio user interface
US10225680B2 (en) Motion detection of audio sources to facilitate reproduction of spatial audio spaces
US9286898B2 (en) Methods and apparatuses for providing tangible control of sound
US20170280235A1 (en) Creating an audio envelope based on angular information
CN108370471A (zh) 分布式音频捕获和混合
CN102819314A (zh) 声音控制设备、程序和控制方法
WO2017036323A1 (zh) 一种接收声音的处理方法、装置、存储介质、移动终端及机器人
US20210092545A1 (en) Audio processing
Ahuja et al. Direction-of-voice (dov) estimation for intuitive speech interaction with smart devices ecosystems
CN105045385A (zh) 一种基于双麦克的终端手势识别方法
CN113853529A (zh) 用于空间音频捕获的装置和相关方法
WO2022062531A1 (zh) 一种多通道音频信号获取方法、装置及系统
CN112969121A (zh) 耳机与多媒体设备的智能交互系统及方法
Comminiello et al. Intelligent acoustic interfaces with multisensor acquisition for immersive reproduction
KR20170094440A (ko) 화상 채팅의 녹화 방법 및 단말
WO2021028716A1 (en) Selective sound modification for video communication
Magassouba et al. Exploiting the distance information of the interaural level difference for binaural robot motion control
WO2023054047A1 (ja) 情報処理装置、情報処理方法、及びプログラム
CN104932666B (zh) 控制方法、控制装置及电子设备
Cecchi et al. An advanced spatial sound reproduction system with listener position tracking
JP2020136904A (ja) スピーカ装置、ビデオ会議装置及び電子黒板
TW202242850A (zh) 雙聲道之音訊處理系統及其運作方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
WW01 Invention patent application withdrawn after publication
WW01 Invention patent application withdrawn after publication

Application publication date: 20210615