CN115312050A - 指令的响应方法、存储介质及电子装置 - Google Patents
指令的响应方法、存储介质及电子装置 Download PDFInfo
- Publication number
- CN115312050A CN115312050A CN202210764433.9A CN202210764433A CN115312050A CN 115312050 A CN115312050 A CN 115312050A CN 202210764433 A CN202210764433 A CN 202210764433A CN 115312050 A CN115312050 A CN 115312050A
- Authority
- CN
- China
- Prior art keywords
- equipment
- audio energy
- target user
- cloud server
- sent
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 230000004044 response Effects 0.000 title claims abstract description 80
- 238000000034 method Methods 0.000 title claims abstract description 55
- 238000004364 calculation method Methods 0.000 claims description 12
- 238000012545 processing Methods 0.000 claims description 8
- 230000005540 biological transmission Effects 0.000 claims description 6
- 238000004590 computer program Methods 0.000 claims description 6
- PCTMTFRHKVHKIS-BMFZQQSSSA-N (1s,3r,4e,6e,8e,10e,12e,14e,16e,18s,19r,20r,21s,25r,27r,30r,31r,33s,35r,37s,38r)-3-[(2r,3s,4s,5s,6r)-4-amino-3,5-dihydroxy-6-methyloxan-2-yl]oxy-19,25,27,30,31,33,35,37-octahydroxy-18,20,21-trimethyl-23-oxo-22,39-dioxabicyclo[33.3.1]nonatriaconta-4,6,8,10 Chemical compound C1C=C2C[C@@H](OS(O)(=O)=O)CC[C@]2(C)[C@@H]2[C@@H]1[C@@H]1CC[C@H]([C@H](C)CCCC(C)C)[C@@]1(C)CC2.O[C@H]1[C@@H](N)[C@H](O)[C@@H](C)O[C@H]1O[C@H]1/C=C/C=C/C=C/C=C/C=C/C=C/C=C/[C@H](C)[C@@H](O)[C@@H](C)[C@H](C)OC(=O)C[C@H](O)C[C@H](O)CC[C@@H](O)[C@H](O)C[C@H](O)C[C@](O)(C[C@H](O)[C@H]2C(O)=O)O[C@H]2C1 PCTMTFRHKVHKIS-BMFZQQSSSA-N 0.000 description 6
- 238000010586 diagram Methods 0.000 description 6
- 238000004422 calculation algorithm Methods 0.000 description 4
- 230000006855 networking Effects 0.000 description 3
- 238000005406 washing Methods 0.000 description 3
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Substances O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 description 3
- 230000006870 function Effects 0.000 description 2
- 230000003993 interaction Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000008569 process Effects 0.000 description 2
- 230000005236 sound signal Effects 0.000 description 2
- 238000004887 air purification Methods 0.000 description 1
- 235000019504 cigarettes Nutrition 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000010408 sweeping Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/28—Constructional details of speech recognition systems
- G10L15/30—Distributed recognition, e.g. in client-server systems, for mobile phones or network applications
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/28—Constructional details of speech recognition systems
- G10L15/34—Adaptation of a single recogniser for parallel processing, e.g. by use of multiple processors or cloud computing
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L12/00—Data switching networks
- H04L12/28—Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
- H04L12/2803—Home automation networks
- H04L12/2816—Controlling appliance services of a home automation network by calling their functionalities
- H04L12/282—Controlling appliance services of a home automation network by calling their functionalities based on user interaction within the home
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
- G10L2015/223—Execution procedure of a spoken command
Landscapes
- Engineering & Computer Science (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- Acoustics & Sound (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Health & Medical Sciences (AREA)
- Computational Linguistics (AREA)
- Multimedia (AREA)
- Automation & Control Theory (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Computing Systems (AREA)
- Mathematical Physics (AREA)
- Theoretical Computer Science (AREA)
- Telephonic Communication Services (AREA)
Abstract
本申请公开了一种指令的响应方法、存储介质及电子装置,涉及智能家居/智慧家庭技术领域,该指令的响应方法包括:当第一设备处于未唤醒状态,且第一设备接收到第二设备发送的唤醒事件时,第一设备获取在第一时间范围内接收到的第一音频能量;第一设备将第一音频能量发送至云端服务器,所述云端服务器用于通过第一音频能量确定第一设备是否为所述目标用户的响应设备;在确定第一设备为目标用户的响应设备的情况下,第一设备对目标用户的指令进行响应。通过本发明解决了由于不同设备向云端服务器上报音频能量的时间差较大,导致的多个设备对用户指令进行响应,用户体验差的问题。
Description
技术领域
本申请涉及智能家居/智慧家庭领域,具体而言,涉及一种指令的响应方法、存储介质及电子装置。
背景技术
用户家中的添加智能语音功能的设备越来越多,从智能音箱、智能电视拓展到智能空调、智能冰箱、智能热水器等。用户通过向设备发送唤醒指令以唤醒设备进行工作,对于同一厂家的智能设备往往具有相同的唤醒指令。相关技术中常用的方法是各个设备计算出唤醒时段的音频能量,将音频能量上报到云端服务器,云端服务器根据能量大小决策由哪个设备唯一的响应用户。
然而不同设备的运算能力不同,算法的执行速度也不相同,CPU配置高或其运行负载小的设备,其唤醒的速度会快,而有较多麦克风的唤醒模块的算法的复杂性高,其唤醒的速度会很慢,综合这些原因,最终会导致不同设备上报给云端服务器的音频能量的时间相差较大。例如,运算能力强并且唤醒算法执行快的设备A在T1时刻被唤醒,并将音频能量EA上报云端服务器。而唤醒算法执行较慢的设备B在T2时刻被唤醒,并将音频能量EB上报云端服务器,EB大于EA,但如果T2-T1的时间过大,会导致最终设备B响应用户的时间很长,而且如果云端下发指令的时间超过了设备A本机的等待时间,设备A也会自己唤醒,这样会导致设备A和设备B同时被唤醒,且设备A和设备B都会对用户进行响应,用户体验很差。
针对上述问题,目前尚未存在有效的解决方案。
发明内容
本发明实施例提供了一种指令的响应方法、存储介质及电子装置,以至少解决由于不同设备向云端服务器上报音频能量的时间差较大,导致的多个设备对用户指令进行响应,用户体验差的问题。
根据本发明的一个实施例,提供了一种指令的响应方法,包括:当第一设备处于未唤醒状态,且所述第一设备接收到第二设备发送的唤醒事件时,所述第一设备获取在第一时间范围内接收到的第一音频能量,其中,所述唤醒事件是所述第二设备被目标用户发出的唤醒词语唤醒时生成的事件;所述第一设备将所述第一音频能量发送至云端服务器,其中,所述云端服务器用于通过所述第一音频能量确定所述第一设备是否为所述目标用户的响应设备;在确定所述第一设备为所述目标用户的响应设备的情况下,所述第一设备对所述目标用户的指令进行响应。
在一个示例性实施例中,在所述第一设备接收到第二设备发送的唤醒事件之前,所述方法还包括:所述第一设备和所述第二设备在第一时刻接收所述目标用户发出的所述唤醒词语;所述第二设备在第二时刻被所述唤醒词语唤醒,所述第二设备在所述第二时刻生成所述唤醒事件并将所述唤醒事件发送至所述第一设备。
在一个示例性实施例中,所述获取所述第一设备在第一时间范围内接收到的第一音频能量,包括:若所述第一设备在所述第二时刻处于所述未唤醒状态,将所述第一时刻至所述第一时刻之前的预设时间范围确定为所述第一时间范围;所述第一设备获取在所述第一时间范围内接收到的音频;所述第一设备通过音频能量计算模块,确定所述第一设备在所述第一时间范围内接收到的所述第一音频能量。
在一个示例性实施例中,在确定所述第一设备为所述目标用户的响应设备的情况下,所述第一设备对所述目标用户的指令进行响应,包括:在确定所述第一设备为所述目标用户的响应设备的情况下,所述第一设备接收所述云端服务器发送的响应消息,其中,所述响应消息用于指示所述第一设备对所述目标用户的指令进行响应;所述第一设备接收所述目标用户发出的指令,并对所述目标用户发出的指令进行响应。
在一个示例性实施例中,所述第二设备在第一时刻接收所述目标用户发出的所述唤醒词语之后,所述方法还包括:所述第二设备获取在第一时间范围内接收到的第二音频能量,其中,所述第一时刻至所述第一时刻之前的预设时间范围为所述第一时间范围;所述第二设备将所述第二音频能量发送至云端服务器,所述云端服务器还用于通过所述第二音频能量确定所述第二设备是否为所述目标用户的响应设备;在确定所述第二设备为所述目标用户的响应设备的情况下,所述第二设备对所述目标用户的指令进行响应。
在一个示例性实施例中,所述方法还包括:所述云端服务器接收所述第一设备发送的所述第一音频能量,以及所述第二设备发送的所述第二音频能量;所述云端服务器将所述第一音频能量和所述第二音频能量中能量最大的音频能量确定为目标音频能量;所述云端服务器将所述目标音频能量对应的设备确定为所述目标用户的响应设备。
在一个示例性实施例中,在所述第一设备接收到第二设备发送的唤醒事件之前,所述方法还包括:所述第一设备接收所述第二设备的设备信息,并通过所述第二设备的设备信息与所述第二设备建立网络连接,其中,所述第二设备的设备信息是由所述第二设备发送至所述第一设备,或者,由所述云端服务器发送至所述第一设备。
根据本发明的另一个实施例,提供了指令的响应装置,包括:获取单元,用于当第一设备处于未唤醒状态,且所述第一设备接收到第二设备发送的唤醒事件时,获取在第一时间范围内接收到的第一音频能量,其中,所述唤醒事件是所述第二设备被目标用户发出的唤醒词语唤醒时生成的事件;发送单元,用于将所述第一音频能量发送至云端服务器,其中,所述云端服务器用于通过所述第一音频能量确定所述第一设备是否为所述目标用户的响应设备;响应单元,用于在确定所述第一设备为所述目标用户的响应设备的情况下,所述第一设备对所述目标用户的指令进行响应。
根据本发明的另一个实施例,提供了指令的响应设备,应用于上述指令的响应方法中的第二设备,包括:语音采集模块,用于采集目标用户发出的唤醒词语,以及所述目标用户发出的指令;唤醒模块,用于当接收到所述目标用户发出的唤醒词语时,将唤醒事件发送至应用模块;应用模块,用于在接收到所述唤醒事件时,调用音频能量计算模块计算所述第二设备在第一时间范围内接收到的第二音频能量,并将所述第二音频能量发送至云端服务器,其中,所述云端服务器用于通过所述第二音频能量确定所述第二设备是否为所述目标用户的响应设备,所述第一时间范围是第一时刻至所述第一时刻之前的预设时间范围,所述第一时刻是所述唤醒模块接收到所述唤醒词语的时刻;唤醒事件传输模块,用于将所述唤醒事件发送至第一设备;音频能量计算模块,用于计算所述第二设备在所述第一时间范围内接收到的第二音频能量。
根据本发明的又一个实施例,还提供了一种计算机可读的存储介质,所述计算机可读存储介质中存储有计算机程序,其中,所述计算机程序被设置为运行时执行上述任一项方法实施例中的步骤。
根据本发明的又一个实施例,还提供了一种电子装置,包括存储器和处理器,所述存储器中存储有计算机程序,所述处理器被设置为运行所述计算机程序以执行上述任一项方法实施例中的步骤。
通过本发明,若第二设备在第一设备之前被唤醒,第二设备将其唤醒事件发送给第一设备,第一设备接收到第二设备发送的唤醒事件后,第一设备获取第一时间范围内的第一音频能量,并将第一音频能量发送给云端服务器,云端服务器根据接收到的第一音频能量确定第一设备是否为用户的响应设备。
这样通过将唤醒速度较快的第二设备的唤醒事件,发送给其他唤醒较慢慢的第一设备,使唤醒慢的第一设备能够提前计算音频能量,并将发送给云端服务器,缩短了第一设备与第二设备之间的上报音频能量的时间差,进而避免了不同设备向云端服务器上报音频能量的时间差较大的问题,云端服务器可以根据第一设备上报的音频能量、第二设备上报的音频能量,确定响应用户指令的响应设备,这样可以避免第一设备和第二设备全部对用户指令进行响应的问题,达到了提升用户体验的效果。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分,示出了符合本申请的实施例,并与说明书一起用于解释本申请的原理。
为了更清楚地说明本申请实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,对于本领域普通技术人员而言,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1是根据本申请实施例的一种智能设备的交互方法的硬件环境示意图;
图2是根据本申请实施例的一种智能设备的交互方法的流程示意图;
图3是根据本申请实施例的设备与云端服务器通过网络进行连接的示意图;
图4是根据本申请实施例的一种流程示意图;
图5是根据本申请实施例的另一种流程示意图;
图6是根据本发明实施例的指令的响应装置的结构框图。
具体实施方式
为了使本技术领域的人员更好地理解本申请方案,下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本申请一部分的实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都应当属于本申请保护的范围。
需要说明的是,本申请的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的本申请的实施例能够以除了在这里图示或描述的那些以外的顺序实施。此外,术语“包括”和“具有”以及他们的任何变形,意图在于覆盖不排他的包含,例如,包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
根据本申请实施例的一个方面,提供了一种指令的响应方法。该指令的响应方法广泛应用于智慧家庭(Smart Home)、智能家居、智能家用设备生态、智慧住宅(IntelligenceHouse)生态等全屋智能数字化控制应用场景。可选地,在本实施例中,上述指令的响应方法可以应用于如图1所示的由终端设备102和服务器104所构成的硬件环境中。如图1所示,服务器104通过网络与终端设备102进行连接,可用于为终端或终端上安装的客户端提供服务(如应用服务等),可在服务器上或独立于服务器设置数据库,用于为服务器104提供数据存储服务,可在服务器上或独立于服务器配置云计算和/或边缘计算服务,用于为服务器104提供数据运算服务。
上述网络可以包括但不限于以下至少之一:有线网络,无线网络。上述有线网络可以包括但不限于以下至少之一:广域网,城域网,局域网,上述无线网络可以包括但不限于以下至少之一:WIFI(Wireless Fidelity,无线保真),蓝牙。终端设备102可以并不限定于为PC、手机、平板电脑、智能空调、智能烟机、智能冰箱、智能烤箱、智能炉灶、智能洗衣机、智能热水器、智能洗涤设备、智能洗碗机、智能投影设备、智能电视、智能晾衣架、智能窗帘、智能影音、智能插座、智能音响、智能音箱、智能新风设备、智能厨卫设备、智能卫浴设备、智能扫地机器人、智能擦窗机器人、智能拖地机器人、智能空气净化设备、智能蒸箱、智能微波炉、智能厨宝、智能净化器、智能饮水机、智能门锁等。
基于上述的移动终端或网络架构,在本实施例中提供了一种指令的响应方法,图2是根据本发明实施例的基指令的响应方法的流程示意图,如图2所示,该流程包括如下步骤:
步骤S202,当第一设备处于未唤醒状态,且所述第一设备接收到第二设备发送的唤醒事件时,所述第一设备获取在第一时间范围内接收到的第一音频能量,其中,所述唤醒事件是所述第二设备被目标用户发出的唤醒词语唤醒时生成的事件;
其中,上述第一设备、第二设备可以是智能家居系统中的智能家居设备,例如智能洗衣机、智能空调、智能音箱等。第一设备和第二设备可以被同一唤醒词语唤醒,该唤醒词语可以根据实际情况而定。
步骤S204,所述第一设备将所述第一音频能量发送至云端服务器,其中,所述云端服务器用于通过所述第一音频能量确定所述第一设备是否为所述目标用户的响应设备;
其中,上述第二设备可以是唤醒速度较快的设备,第一设备是唤醒速度较慢的设备。当目标用户发出唤醒词语后,第二设备的唤醒速度较快先被唤醒。第二设备唤醒后生成唤醒事件,该唤醒事件用于表示第二设备已被唤醒。由于第一设备的唤醒速度较慢,第二设备将唤醒事件发送给第一设备,第一设备接收到第二设备的唤醒事件后,计算第一设备在第一时间范围内的第一音频能量,并将第一音频能量上报给云端服务器,云端服务器根据接收到的第一音频能量确定第一设备是否为目标用户的响应设备。
步骤S206,在确定所述第一设备为所述目标用户的响应设备的情况下,所述第一设备对所述目标用户的指令进行响应。
在一个示例性实施例中,在所述第一设备接收到第二设备发送的唤醒事件之前,所述方法还包括:所述第一设备和所述第二设备在第一时刻接收所述目标用户发出的所述唤醒词语;所述第二设备在第二时刻被所述唤醒词语唤醒,所述第二设备在所述第二时刻生成所述唤醒事件并将所述唤醒事件发送至所述第一设备。
作为一个可选的实施方式,第一设备和第二设备在睡眠状态时,其语音采集模块是工作状态(采集音频)。假设上述唤醒词语为“ABCD”,假设第一设备和第二设备接收到“ABCD”中“D”的时刻T1为上述第一时刻,第二设备在第二时刻T2(T2小于或等于T1)被唤醒词语“ABCD”唤醒,第二设备在第二时刻T2生成唤醒事件,表示第二设备已被唤醒词语“ABCD”唤醒,并将该唤醒事件发送给第一设备。
在一个示例性实施例中,所述获取所述第一设备在第一时间范围内接收到的第一音频能量,包括:若所述第一设备在所述第二时刻处于所述未唤醒状态,将所述第一时刻至所述第一时刻之前的预设时间范围确定为所述第一时间范围;所述第一设备获取在所述第一时间范围内接收到的音频;所述第一设备通过音频能量计算模块,确定所述第一设备在所述第一时间范围内接收到的所述第一音频能量。
作为一个可选的实施方式,第二设备在第二时刻T2将该唤醒事件发送给第一设备,此时第一设备并未被唤醒的情况下。假设第一设备接收到“ABCD”中“D”的时刻为上述第一时刻,则将第一时刻之前的预设时间范围确定为第一时间范围,上述预设时间范围可以根据实际情况而定,例如3秒、4秒等。假设预设时间范围为3秒,第一时刻为8:53,则将8:50至8:53确定为第一时间范围。第一设备的语音采集模块接收音频信号。获取第一设备在第一时间范围接收到的音频,并通过第一设备中的音频能量计算模块计算第一时间范围内接收到的第一音频能量,音频能量计算模块可以采用现有技术中计算音频能量的方法计算第一设备在第一时间范围内接收到的第一音频能量。
在一个示例性实施例中,在确定所述第一设备为所述目标用户的响应设备的情况下,所述第一设备对所述目标用户的指令进行响应,包括:在确定所述第一设备为所述目标用户的响应设备的情况下,所述第一设备接收所述云端服务器发送的响应消息,其中,所述响应消息用于指示所述第一设备对所述目标用户的指令进行响应;所述第一设备接收所述目标用户发出的指令,并对所述目标用户发出的指令进行响应。
作为一个可选的实施方式,假设云端服务器确定第一设备为响应设备,则向第一设备发送响应消息,该响应消息用于指示第一设备是响应设备,响应消息可以根据实际情况设置,例如1。也就是接收到云端服务发送为1的响应消息的设备为响应设备。若第一设备是目标用户的响应设备,则由第一设备对目标用户发出的指令进行响应。
在一个示例性实施例中,所述第二设备在第一时刻接收所述目标用户发出的所述唤醒词语之后,所述方法还包括:所述第二设备获取在第一时间范围内接收到的第二音频能量,其中,所述第一时刻至所述第一时刻之前的预设时间范围为所述第一时间范围;所述第二设备将所述第二音频能量发送至云端服务器,所述云端服务器还用于通过所述第二音频能量确定所述第二设备是否为所述目标用户的响应设备;在确定所述第二设备为所述目标用户的响应设备的情况下,所述第二设备对所述目标用户的指令进行响应。
作为一个可选的实施方式,假设第二设备接收到“ABCD”中“D”的时刻为上述第一时刻,则将第一时刻之前的预设时间范围确定为第一时间范围,上述预设时间范围可以根据实际情况而定,例如3秒、4秒等。假设预设时间范围为3秒,第一时刻为8:53,则将8:50至8:53确定为第一时间范围。第二设备的语音采集模块接收音频信号。获取第二设备在第一时间范围接收到的音频,并通过第二设备中的音频能量计算模块计算第一时间范围内接收到的第二音频能量,音频能量计算模块可以采用现有技术中计算音频能量的方法计算第二设备在第一时间范围内接收到的第二音频能量。
第二设备将第一时间范围内接收到的第二音频能量上报给云端服务器,由于第二设备和第一设备的位置不同,接收到的音频能量也不同,云端服务器可以根据第二设备上报的第二音频能量和第一设备上报的第一音频能量确定用于响应目标用户指令的响应设备,具体地,可以将最大的音频能量对应的设备确定为目标用户的响应设备。
在一个示例性实施例中,所述方法还包括:所述云端服务器接收所述第一设备发送的所述第一音频能量,以及所述第二设备发送的所述第二音频能量;所述云端服务器将所述第一音频能量和所述第二音频能量中能量最大的音频能量确定为目标音频能量;所述云端服务器将所述目标音频能量对应的设备确定为所述目标用户的响应设备。
作为一个可选的实施方式,如图3所示设备与云端服务器通过网络进行连接,假设图中所示的设备A为上述第一设备,设备B为上述第二设备。设备A和设备B将音频能量上报给云端服务器,云端服务器根据设备A和设备B上报的音频能量确定目标用户的响应设备,具体地,可以将音频能量最大的设备确定为响应设备。假设设备A上报的第一音频能量E1大于设备B上报的第二音频能量E2,则设备A为目标用户的响应设备,由设备A对目标用户的指令进行响应。
在一个示例性实施例中,在所述第一设备接收到第二设备发送的唤醒事件之前,所述方法还包括:所述第一设备接收所述第二设备的设备信息,并通过所述第二设备的设备信息与所述第二设备建立网络连接,其中,所述第二设备的设备信息是由所述第二设备发送至所述第一设备,或者,由所述云端服务器发送至所述第一设备。
作为一个可选的实施方式,分布式网络中每个设备需要至少其他设备的信息,由此才可以将唤醒事件发送给网络内的其他设备。可以通过以下方式实现:
方法1,设备开机后,通过局域网将自身的设备信息(设备名称、ID、IP地址等)广播给其他设备,其他设备收到后保存并与其建立局域网内的链接,以此类推,所有设备都会保存该网络下的所有设备的信息,从而建立了包含所有设备的本地网络。此方法在设备端即可完成,不需要云端服务器参与,传输速度也比云端传输快。例如,第二设备开机后,将自身的设备信息广播给其他设备(包括第一设备),第一设备收到后保存并与其建立局域网内的链接。或者,第一设备开机后,将自身的设备信息广播给其他设备(包括第二设备),第二设备收到后保存并与其建立局域网内的链接。
方法2,云端服务器将分布式网络中的所有设备信息下发给所有设备,这样所有设备也保存了该网络的所有设备的信息。此方法,唤醒事件都通过云端服务器转发。例如,云端服务器将第二设备的设备信息下发给第一设备,将第一设备的设备进行下发给第二设备。
作为一个可选的实施方式,如图4所示所示的流程示意图,可以应用于上述实施例中的第二设备,包括以下步骤:
步骤S41,设备开机并与其他设备进行组网;
第二设备可以通过上述实施例中的方法1和方法2与其他设备(包括第一设备)进行组网;
步骤S42,唤醒模块检测到用户唤醒并上报给应用模块;
第二设备中的唤醒模块检测到用户的唤醒词语后,将唤醒事件上报给应用模块。
步骤S43,应用模块发送唤醒事件给其他设备;
第二设备的应用模块将唤醒事件发送给其他设备,其他设备包括上述实施例中的第一设备。
步骤S44,应用模块将第二音频能量发送至云端服务器;
第二设备的音频能量计算模块计算第二设备的第二音频能量,并将第二音频能量上报至云端服务器。
步骤S45,等待并处理云端服务器返回的唤醒结果;
其中,云端服务器根据多个设备上报的音频能量(包括第一设备上报的第一音频能量和第二设备上报的第二音频能量)确定目标用户的响应设备,云端服务器返回结果为1的设备为响应设备,为0的设备为不需要响应的设备。若第二设备接收到的唤醒结果是1,则第二设备是目标用户的响应设备,若接收到的是0则第二设备不需要对目标用户进行响应。
作为一个可选的实施方式,如图5所示所示的流程示意图,可以应用于上述实施例中的第一设备,包括以下步骤:
步骤S51,接收网络中其他设备发送的唤醒事件;
其中,其他设备包括上述实施例中的第二设备,唤醒事件是第二设备接收到唤醒词语被唤醒后生成的事件。
步骤S52,检测是否已被唤醒;
判断第一设备是否已被唤醒,若已被唤醒直接执行步骤S55,否则执行步骤S53。
步骤S53,处理其他设备发送的唤醒事件;
第一设备接收到其他设备(例如第二设备)的唤醒事件Wi。
步骤S54,应用模块发送第一音频能量至云端服务器;
第一设备提前获取第一音频能量Ej后并发送给云端服务器。
步骤S55,处理云端服务器返回的唤醒结果;
其中,云端服务器根据多个设备上报的音频能量(包括第一设备上报的第一音频能量和第二设备上报的第二音频能量)确定目标用户的响应设备,云端服务器返回结果为1的设备为响应设备,为0的设备为不需要响应的设备。若第一设备接收到的唤醒结果是1,则第一设备是目标用户的响应设备,若接收到的是0则第一设备不需要对目标用户进行响应。
在上述实施例中,将唤醒速度快的设备的唤醒事件,发送给网络中其他唤醒慢的设备,使唤醒慢的设备能够提前做相应的处理,缩短了唤醒响应时间。使用局域网组网方案,在局域网内传输唤醒事件,提高传输速度,同时减少了云端的资源占用和开发成本。
在本实施例中还提供了一种指令的响应装置,该装置用于实现上述实施例及优选实施方式,已经进行过说明的不再赘述。如以下所使用的,术语“单元”可以实现预定功能的软件和/或硬件的组合。尽管以下实施例所描述的装置较佳地以软件来实现,但是硬件,或者软件和硬件的组合的实现也是可能并被构想的。
图6是根据本发明实施例的指令的响应装置的结构框图,如图6所示,该装置包括:获取单元62,用于当第一设备处于未唤醒状态,且所述第一设备接收到第二设备发送的唤醒事件时,获取在第一时间范围内接收到的第一音频能量,其中,所述唤醒事件是所述第二设备被目标用户发出的唤醒词语唤醒时生成的事件;发送单元64,用于将所述第一音频能量发送至云端服务器,其中,所述云端服务器用于通过所述第一音频能量确定所述第一设备是否为所述目标用户的响应设备;响应单元66,用于在确定所述第一设备为所述目标用户的响应设备的情况下,所述第一设备对所述目标用户的指令进行响应。
在一个示例性实施例中,上述装置还用于在所述第一设备接收到第二设备发送的唤醒事件之前,在第一时刻接收所述目标用户发出的所述唤醒词语,其中,所述第二设备用于在第二时刻被所述唤醒词语唤醒,所述第二设备在所述第二时刻生成所述唤醒事件并将所述唤醒事件发送至所述第一设备。
在一个示例性实施例中,上述装置还用于若所述第一设备在所述第二时刻处于所述未唤醒状态,将所述第一时刻至所述第一时刻之前的预设时间范围确定为所述第一时间范围;获取在所述第一时间范围内接收到的音频;通过音频能量计算模块,确定所述第一设备在所述第一时间范围内接收到的所述第一音频能量。
在一个示例性实施例中,上述装置还用于在确定所述第一设备为所述目标用户的响应设备的情况下,接收所述云端服务器发送的响应消息,其中,所述响应消息用于指示所述第一设备对所述目标用户的指令进行响应;接收所述目标用户发出的指令,并对所述目标用户发出的指令进行响应。
在一个示例性实施例中,所述第二设备用于在第一时刻接收所述目标用户发出的所述唤醒词语之后,所述第二设备获取在第一时间范围内接收到的第二音频能量,其中,所述第一时刻至所述第一时刻之前的预设时间范围为所述第一时间范围;所述第二设备将所述第二音频能量发送至云端服务器,所述云端服务器还用于通过所述第二音频能量确定所述第二设备是否为所述目标用户的响应设备;在确定所述第二设备为所述目标用户的响应设备的情况下,所述第二设备对所述目标用户的指令进行响应。
在一个示例性实施例中,所述云端服务器还用于接收所述第一设备发送的所述第一音频能量,以及所述第二设备发送的所述第二音频能量;所述云端服务器将所述第一音频能量和所述第二音频能量中能量最大的音频能量确定为目标音频能量;所述云端服务器将所述目标音频能量对应的设备确定为所述目标用户的响应设备。
在一个示例性实施例中,上述装置还用于在所述第一设备接收到第二设备发送的唤醒事件之前,接收所述第二设备的设备信息,并通过所述第二设备的设备信息与所述第二设备建立网络连接,其中,所述第二设备的设备信息是由所述第二设备发送至所述第一设备,或者,由所述云端服务器发送至所述第一设备。
在本实施例中还提供了一种指令的响应设备,应用于上述指令的响应方法中的第二设备,该设备包括:语音采集模块,用于采集目标用户发出的唤醒词语,以及所述目标用户发出的指令;唤醒模块,用于当接收到所述目标用户发出的唤醒词语时,将唤醒事件发送至应用模块;应用模块,用于在接收到所述唤醒事件时,调用音频能量计算模块计算所述第二设备在第一时间范围内接收到的第二音频能量,并将所述第二音频能量发送至云端服务器,其中,所述云端服务器用于通过所述第二音频能量确定所述第二设备是否为所述目标用户的响应设备,所述第一时间范围是第一时刻至所述第一时刻之前的预设时间范围,所述第一时刻是所述唤醒模块接收到所述唤醒词语的时刻;唤醒事件传输模块,用于将所述唤醒事件发送至第一设备;音频能量计算模块,用于计算所述第二设备在所述第一时间范围内接收到的第二音频能量。
以上所述仅是本申请的优选实施方式,应当指出,对于本技术领域的普通技术人员来说,在不脱离本申请原理的前提下,还可以做出若干改进和润饰,这些改进和润饰也应视为本申请的保护范围。
Claims (11)
1.一种指令的响应方法,其特征在于,包括:
当第一设备处于未唤醒状态,且所述第一设备接收到第二设备发送的唤醒事件时,所述第一设备获取在第一时间范围内接收到的第一音频能量,其中,所述唤醒事件是所述第二设备被目标用户发出的唤醒词语唤醒时生成的事件;
所述第一设备将所述第一音频能量发送至云端服务器,其中,所述云端服务器用于通过所述第一音频能量确定所述第一设备是否为所述目标用户的响应设备;
在确定所述第一设备为所述目标用户的响应设备的情况下,所述第一设备对所述目标用户的指令进行响应。
2.根据权利要求1所述的方法,其特征在于,在所述第一设备接收到第二设备发送的唤醒事件之前,所述方法还包括:
所述第一设备和所述第二设备在第一时刻接收所述目标用户发出的所述唤醒词语;
所述第二设备在第二时刻被所述唤醒词语唤醒,所述第二设备在所述第二时刻生成所述唤醒事件并将所述唤醒事件发送至所述第一设备。
3.根据权利要求2所述的方法,其特征在于,所述获取所述第一设备在第一时间范围内接收到的第一音频能量,包括:
若所述第一设备在所述第二时刻处于所述未唤醒状态,将所述第一时刻至所述第一时刻之前的预设时间范围确定为所述第一时间范围;
所述第一设备获取在所述第一时间范围内接收到的音频;
所述第一设备通过音频能量计算模块,确定所述第一设备在所述第一时间范围内接收到的所述第一音频能量。
4.根据权利要求1所述的方法,其特征在于,在确定所述第一设备为所述目标用户的响应设备的情况下,所述第一设备对所述目标用户的指令进行响应,包括:
在确定所述第一设备为所述目标用户的响应设备的情况下,所述第一设备接收所述云端服务器发送的响应消息,其中,所述响应消息用于指示所述第一设备对所述目标用户的指令进行响应;
所述第一设备接收所述目标用户发出的指令,并对所述目标用户发出的指令进行响应。
5.根据权利要求2所述的方法,其特征在于,所述第二设备在第一时刻接收所述目标用户发出的所述唤醒词语之后,所述方法还包括:
所述第二设备获取在所述第一时间范围内接收到的第二音频能量,其中,所述第一时刻至所述第一时刻之前的预设时间范围为所述第一时间范围;
所述第二设备将所述第二音频能量发送至云端服务器,所述云端服务器还用于通过所述第二音频能量确定所述第二设备是否为所述目标用户的响应设备;
在确定所述第二设备为所述目标用户的响应设备的情况下,所述第二设备对所述目标用户的指令进行响应。
6.根据权利要求5所述的方法,其特征在于,所述方法还包括:
所述云端服务器接收所述第一设备发送的所述第一音频能量,以及所述第二设备发送的所述第二音频能量;
所述云端服务器将所述第一音频能量和所述第二音频能量中能量最大的音频能量确定为目标音频能量;
所述云端服务器将所述目标音频能量对应的设备确定为所述目标用户的响应设备。
7.根据权利要求1至6中任一项所述的方法,其特征在于,在所述第一设备接收到第二设备发送的唤醒事件之前,所述方法还包括:
所述第一设备接收所述第二设备的设备信息,并通过所述第二设备的设备信息与所述第二设备建立网络连接,其中,所述第二设备的设备信息是由所述第二设备发送至所述第一设备,或者,由所述云端服务器发送至所述第一设备。
8.一种指令的响应装置,其特征在于,包括:
获取单元,用于当第一设备处于未唤醒状态,且所述第一设备接收到第二设备发送的唤醒事件时,获取在第一时间范围内接收到的第一音频能量,其中,所述唤醒事件是所述第二设备被目标用户发出的唤醒词语唤醒时生成的事件;
发送单元,用于将所述第一音频能量发送至云端服务器,其中,所述云端服务器用于通过所述第一音频能量确定所述第一设备是否为所述目标用户的响应设备;
响应单元,用于在确定所述第一设备为所述目标用户的响应设备的情况下,所述第一设备对所述目标用户的指令进行响应。
9.一种指令的响应设备,其特征在于,应用于上述权利要求1至6中任一项所述的方法中的第二设备,包括:
语音采集模块,用于采集目标用户发出的唤醒词语,以及所述目标用户发出的指令;
唤醒模块,用于当接收到所述目标用户发出的唤醒词语时,将唤醒事件发送至应用模块;
应用模块,用于在接收到所述唤醒事件时,调用音频能量计算模块计算所述第二设备在第一时间范围内接收到的第二音频能量,并将所述第二音频能量发送至云端服务器,其中,所述云端服务器用于通过所述第二音频能量确定所述第二设备是否为所述目标用户的响应设备,所述第一时间范围是第一时刻至所述第一时刻之前的预设时间范围,所述第一时刻是所述唤醒模块接收到所述唤醒词语的时刻;
唤醒事件传输模块,用于将所述唤醒事件发送至第一设备;
音频能量计算模块,用于计算所述第二设备在所述第一时间范围内接收到的第二音频能量。
10.一种计算机可读的存储介质,其特征在于,所述计算机可读的存储介质包括存储的程序,其中,所述程序运行时执行权利要求1至7中任一项所述的方法。
11.一种电子装置,包括存储器和处理器,其特征在于,所述存储器中存储有计算机程序,所述处理器被设置为通过所述计算机程序执行权利要求1至7中任一项所述的方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210764433.9A CN115312050A (zh) | 2022-06-30 | 2022-06-30 | 指令的响应方法、存储介质及电子装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210764433.9A CN115312050A (zh) | 2022-06-30 | 2022-06-30 | 指令的响应方法、存储介质及电子装置 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN115312050A true CN115312050A (zh) | 2022-11-08 |
Family
ID=83855192
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202210764433.9A Pending CN115312050A (zh) | 2022-06-30 | 2022-06-30 | 指令的响应方法、存储介质及电子装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN115312050A (zh) |
Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10192546B1 (en) * | 2015-03-30 | 2019-01-29 | Amazon Technologies, Inc. | Pre-wakeword speech processing |
CN110223684A (zh) * | 2019-05-16 | 2019-09-10 | 华为技术有限公司 | 一种语音唤醒方法及设备 |
CN111192591A (zh) * | 2020-02-10 | 2020-05-22 | 百度在线网络技术(北京)有限公司 | 智能设备的唤醒方法、装置、智能音箱及存储介质 |
CN111223497A (zh) * | 2020-01-06 | 2020-06-02 | 苏州思必驰信息科技有限公司 | 一种终端的就近唤醒方法、装置、计算设备及存储介质 |
CN111857849A (zh) * | 2020-07-20 | 2020-10-30 | 北京小米松果电子有限公司 | 唤醒处理方法、装置、电子设备及存储介质 |
CN112133302A (zh) * | 2020-08-26 | 2020-12-25 | 北京小米松果电子有限公司 | 预唤醒终端的方法、装置及存储介质 |
CN114387965A (zh) * | 2021-12-15 | 2022-04-22 | 珠海格力电器股份有限公司 | 防止多设备误唤醒的方法及系统 |
CN114639383A (zh) * | 2022-03-17 | 2022-06-17 | 北京小米移动软件有限公司 | 设备唤醒方法、装置、电子设备和介质 |
-
2022
- 2022-06-30 CN CN202210764433.9A patent/CN115312050A/zh active Pending
Patent Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10192546B1 (en) * | 2015-03-30 | 2019-01-29 | Amazon Technologies, Inc. | Pre-wakeword speech processing |
CN110223684A (zh) * | 2019-05-16 | 2019-09-10 | 华为技术有限公司 | 一种语音唤醒方法及设备 |
CN111223497A (zh) * | 2020-01-06 | 2020-06-02 | 苏州思必驰信息科技有限公司 | 一种终端的就近唤醒方法、装置、计算设备及存储介质 |
CN111192591A (zh) * | 2020-02-10 | 2020-05-22 | 百度在线网络技术(北京)有限公司 | 智能设备的唤醒方法、装置、智能音箱及存储介质 |
CN111857849A (zh) * | 2020-07-20 | 2020-10-30 | 北京小米松果电子有限公司 | 唤醒处理方法、装置、电子设备及存储介质 |
CN112133302A (zh) * | 2020-08-26 | 2020-12-25 | 北京小米松果电子有限公司 | 预唤醒终端的方法、装置及存储介质 |
CN114387965A (zh) * | 2021-12-15 | 2022-04-22 | 珠海格力电器股份有限公司 | 防止多设备误唤醒的方法及系统 |
CN114639383A (zh) * | 2022-03-17 | 2022-06-17 | 北京小米移动软件有限公司 | 设备唤醒方法、装置、电子设备和介质 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN111245677A (zh) | 通信异常上报方法、装置、电子设备及存储介质 | |
CN111965989A (zh) | 系统更新方法、装置、智能家居控制面板以及存储介质 | |
CN116016002A (zh) | 智能家电配网方法、装置及电子装置 | |
CN113691935A (zh) | 网络优化方法、装置及电子设备 | |
CN115174512A (zh) | 消息推送方法及装置、存储介质及电子装置 | |
CN115309062B (zh) | 设备的控制方法、装置、存储介质及电子装置 | |
CN111540360A (zh) | 设备唤醒方法及设备唤醒系统 | |
CN115312050A (zh) | 指令的响应方法、存储介质及电子装置 | |
CN114884975B (zh) | 业务消息的处理方法和装置、存储介质及电子装置 | |
CN115474225A (zh) | 在线状态的确定方法、装置、存储介质及电子装置 | |
CN115356937A (zh) | 设备控制方法、装置和存储介质及电子装置 | |
CN115312049B (zh) | 指令的响应方法、存储介质及电子装置 | |
CN115312048A (zh) | 设备唤醒方法及装置、存储介质及电子装置 | |
CN115312048B (zh) | 设备唤醒方法及装置、存储介质及电子装置 | |
CN115148204B (zh) | 语音唤醒的处理方法及装置、存储介质及电子装置 | |
CN113645108B (zh) | 一种智能家居设备监控系统及方法 | |
CN115314331B (zh) | 智能终端的控制方法和装置、存储介质及电子装置 | |
CN115296945B (zh) | 设备的控制方法、系统和装置、存储介质及电子装置 | |
CN115473753B (zh) | 网关设备的控制方法、装置、存储介质及电子装置 | |
CN115167163B (zh) | 场景执行方法及装置、存储介质及电子装置 | |
CN115296947B (zh) | 控制命令的响应方法和装置、存储介质及电子装置 | |
CN115174297B (zh) | 属性信息的更新方法和装置、存储介质及电子装置 | |
CN115616930A (zh) | 控制指令的发送方法及装置、存储介质及电子装置 | |
CN117527459A (zh) | 智能设备的控制方法和装置、存储介质及电子装置 | |
CN116092498A (zh) | 语音指令的响应方法和装置、存储介质及电子装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |