CN108831448B - 语音控制智能设备的方法、装置及存储介质 - Google Patents

语音控制智能设备的方法、装置及存储介质 Download PDF

Info

Publication number
CN108831448B
CN108831448B CN201810239487.7A CN201810239487A CN108831448B CN 108831448 B CN108831448 B CN 108831448B CN 201810239487 A CN201810239487 A CN 201810239487A CN 108831448 B CN108831448 B CN 108831448B
Authority
CN
China
Prior art keywords
intelligent
target
intelligent device
voice
equipment
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201810239487.7A
Other languages
English (en)
Other versions
CN108831448A (zh
Inventor
陈维扬
常洋
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Xiaomi Mobile Software Co Ltd
Original Assignee
Beijing Xiaomi Mobile Software Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Xiaomi Mobile Software Co Ltd filed Critical Beijing Xiaomi Mobile Software Co Ltd
Priority to CN201810239487.7A priority Critical patent/CN108831448B/zh
Publication of CN108831448A publication Critical patent/CN108831448A/zh
Application granted granted Critical
Publication of CN108831448B publication Critical patent/CN108831448B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/22Procedures used during a speech recognition process, e.g. man-machine dialogue
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/08Speech classification or search
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/26Speech to text systems
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/28Constructional details of speech recognition systems
    • G10L15/30Distributed recognition, e.g. in client-server systems, for mobile phones or network applications
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00Data switching networks
    • H04L12/28Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/2803Home automation networks
    • H04L12/2816Controlling appliance services of a home automation network by calling their functionalities
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/08Speech classification or search
    • G10L2015/088Word spotting
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/22Procedures used during a speech recognition process, e.g. man-machine dialogue
    • G10L2015/223Execution procedure of a spoken command

Landscapes

  • Engineering & Computer Science (AREA)
  • Computational Linguistics (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • Acoustics & Sound (AREA)
  • Multimedia (AREA)
  • Automation & Control Theory (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Telephonic Communication Services (AREA)

Abstract

本公开是关于一种语音控制智能设备的方法、装置及存储介质,属于智能家居领域。所述方法包括:当控制终端检测到目标唤醒词时,可以建立与该目标唤醒词对应的目标智能设备之间的网络连接,并通过该网络连接向目标智能设备同步传输采集到的语音信息,以使目标智能设备根据接收到的语音信息执行相应的操作。由于智能家居系统中的每个智能设备都存在对应的唤醒词,因此,在本公开中,直接由控制终端通过检测到的目标唤醒词来识别用户需要控制的目标智能设备,并将采集到的语音信息传输给目标智能设备,无需智能家居系统中的智能设备具备麦克风采集功能即可实现对智能家居系统的智能设备的语音控制,提高了语音控制智能设备的灵活性。

Description

语音控制智能设备的方法、装置及存储介质
技术领域
本公开涉及智能家居领域,尤其涉及一种语音控制智能设备的方法、装置及存储介质。
背景技术
目前,智能家居系统中通常包括各种各样的智能设备,比如,智能电视、智能冰箱以及智能空调等,用户可以通过控制终端对这些智能设备进行控制。由于语音控制的便捷性,因此,通过语音控制智能设备越来越受到用户的青睐。
发明内容
为克服相关技术中存在的问题,本公开提供了一种语音控制智能设备的方法、装置及存储介质。
根据本公开实施例的第一方面,提供一种语音控制智能设备的方法,应用于智能家居系统中的控制终端,所述方法包括:
当检测到目标唤醒词时,建立与所述目标唤醒词对应的目标智能设备之间的网络连接;
其中,所述目标智能设备为所述智能家居系统包括的多个智能设备中的任一智能设备,所述智能家居系统中的每个智能设备存在对应的唤醒词;
通过所述网络连接向所述目标智能设备同步传输检测到所述目标唤醒词之后采集到的语音信息,由所述目标智能设备根据接收到的语音信息执行相应的操作。
可选地,所述建立与所述目标唤醒词对应的目标智能设备之间的网络连接之后,还包括:
若所述网络连接建立失败,则根据存储的蓝牙物理地址和设备标识之间的对应关系以及所述目标设备的设备标识,确定所述目标智能设备的蓝牙物理地址;
广播唤醒消息,所述唤醒消息中携带所述目标智能设备的蓝牙物理地址;
当接收到所述目标智能设备根据所述唤醒消息返回的唤醒确认消息时,重新执行建立与所述目标唤醒词对应的目标智能设备之间的网络连接的步骤。
可选地,所述根据存储的蓝牙物理地址和设备标识之间的对应关系以及所述目标设备的设备标识,确定所述目标智能设备的蓝牙物理地址之前,还包括:
通过UPnP(Universal Plug and Play,通用即插即用)协议广播查询消息,所述查询消息用于查询支持所述UPnP协议的智能设备;
接收至少一个智能设备中每个智能设备发送的响应消息,所述响应消息用于指示对应的智能设备支持所述UPnP协议,且所述响应消息携带对应的智能设备的设备标识和IP(Internet Protocol,网际协议)地址;
通过每个智能设备的IP地址确定每个智能设备的功能描述信息,所述功能描述信息包括对应的智能设备是否支持语音功能以及对应的智能设备的蓝牙物理地址;
根据每个智能设备的功能描述信息从所述至少一个智能设备中确定需要进行语音控制的智能设备,并保存确定的智能设备的蓝牙物理地址和设备标识之间的对应关系。
可选地,所述建立与所述目标唤醒词对应的目标智能设备之间的网络连接,包括:
根据所述目标唤醒词确定所述目标智能设备的设备标识;
根据存储的IP地址和设备标识之间的对应关系以及所述目标设备的设备标识,确定所述目标智能设备的IP地址;
根据所述目标智能设备的IP地址建立与所述目标智能设备之间的网络连接。
可选地,所述根据存储的网际协议IP地址和设备标识之间的对应关系以及所述目标设备的设备标识,确定所述目标智能设备的IP地址之前,还包括:
通过通用即插即用UPnP协议广播查询消息,所述查询消息用于查询支持所述UPnP协议的智能设备;
接收至少一个智能设备中每个智能设备发送的响应消息,所述响应消息用于指示对应的智能设备支持所述UPnP协议,且所述响应消息携带对应的智能设备的设备标识和IP地址;
通过每个智能设备的IP地址确定每个智能设备的功能描述信息,所述功能描述信息包括对应的智能设备是否支持语音功能;
根据每个智能设备的功能描述信息从所述至少一个智能设备中确定需要进行语音控制的智能设备,并保存确定的智能设备的IP地址和设备标识之间的对应关系。
可选地,所述根据每个智能设备的功能描述信息从所述至少一个智能设备中确定需要进行语音控制的智能设备,包括:
根据每个智能设备的功能描述信息,确定所述至少一个智能设备中支持语音功能的智能设备;
当确定的智能设备中存在至少两个设备类型相同的智能设备时,按照所述确定的智能设备的设备类型,从所述确定的智能设备中划分出至少一组智能设备,每组智能设备中包括至少两个设备类型相同的智能设备;
从每组智能设备中选择出一个智能设备,并将选择的智能设备和所述确定的智能设备中未进行划分的智能设备确定为需要进行语音控制的智能设备。
可选地,所述通过所述网络连接向所述目标智能设备同步传输检测到所述目标唤醒词之后采集到的语音信息,包括:
在检测到所述目标唤醒词之后,每隔第一预设时间段将采集的语音信息封装为数据帧,并在每封装完一个数据帧时,向所述目标智能设备发送一个数据帧,每个数据帧包括所述第一预设时间段内采集的语音信息。
可选地,每个数据帧还包括所述第一预设时间段内采集的语音信息的音量信息,用于指示所述目标智能设备根据每个数据帧中包括的音量信息进行语音动效显示。
可选地,所述控制终端为部署于所述智能家居系统中的麦克风阵列。
根据本公开实施例的第二方面,提供一种语音控制智能设备的方法,应用于目标智能设备,所述目标智能设备为智能家居系统包括的多个智能设备中的任一智能设备,所述方法包括:
接收所述智能家居系统中的控制终端通过网络连接同步传输的语音信息;
其中,所述网络连接为所述控制终端检测到与所述目标智能设备对应的目标唤醒词之后建立的,所述语音信息为所述控制终端在检测到所述目标唤醒词之后采集的,所述智能家居系统中每个智能设备存在对应的唤醒词;
根据接收到的语音信息执行相应的操作。
可选地,所述根据接收到的语音信息执行相应的操作,包括:
确定自身在当前之前且距离当前时间最近的第二预设时间段内的状态信息,所述状态信息包括所述目标智能设备在当前之前且距离当前时间最近的第二预设时间段内执行的操作或显示的内容;
将确定的状态信息和接收到的语音信息发送至服务器,由所述服务器对接收到语音信息进行文本识别,得到识别结果,并根据所述状态信息对所述识别结果进行校正,得到语义结果;
接收所述服务器发送的语义结果,并执行与所述语义结果对应的操作。
可选地,所述接收所述智能家居系统中的控制终端通过网络连接同步传输的语音信息,包括:
接收所述控制终端在检测到所述目标唤醒词之后依次发送的多个数据帧,每个数据帧包括所述控制终端在第一预设时间段内采集的语音信息;
相应地,所述将确定的状态信息和接收到的语音信息发送至服务器,包括:
当接收到的数据帧为第一个数据帧时,将所述状态信息和所述第一个数据帧发送至所述服务器;
当接收到的数据帧不是第一个数据帧时,将接收到的数据帧发送至所述服务器。
可选地,每个数据帧中还包括所述控制终端在所述第一预设时间段内采集的语音信息的音量信息;
所述将确定的状态信息和接收到的语音信息发送至服务器之后,还包括:
接收所述服务器发送的针对每个数据帧中的语音信息进行文本识别后得到的识别结果;
根据每个数据帧中的语音信息进行文本识别后得到的识别结果和每个数据帧中的音量信息,显示语音动效。
根据本公开实施例的第三方面,提供一种语音控制智能设备的装置,应用于智能家居系统中的控制终端,所述装置包括:
第一建立模块,用于当检测到目标唤醒词时,建立与所述目标唤醒词对应的目标智能设备之间的网络连接;
其中,所述目标智能设备为所述智能家居系统包括的多个智能设备中的任一智能设备,所述智能家居系统中的每个智能设备存在对应的唤醒词;
传输模块,用于通过所述网络连接向所述目标智能设备同步传输检测到所述目标唤醒词之后采集到的语音信息,由所述目标智能设备根据接收到的语音信息执行相应的操作。
可选地,所述装置包括:
第一确定模块,用于若所述网络连接建立失败,则根据存储的蓝牙物理地址和设备标识之间的对应关系以及所述目标设备的设备标识,确定所述目标智能设备的蓝牙物理地址;
第一广播模块,用于广播唤醒消息,所述唤醒消息中携带所述目标智能设备的蓝牙物理地址;
第二建立模块,用于当接收到所述目标智能设备根据所述唤醒消息返回的唤醒确认消息时,重新执行建立与所述目标唤醒词对应的目标智能设备之间的网络连接的步骤。
可选地,所述装置还包括:
第二广播模块,用于通过UPnP协议广播查询消息,所述查询消息用于查询支持所述UPnP协议的智能设备;
第一接收模块,用于接收至少一个智能设备中每个智能设备发送的响应消息,所述响应消息用于指示对应的智能设备支持所述UPnP协议,且所述响应消息携带对应的智能设备的设备标识和IP地址;
第二确定模块,用于通过每个智能设备的IP地址确定每个智能设备的功能描述信息,所述功能描述信息包括对应的智能设备是否支持语音功能以及对应的智能设备的蓝牙物理地址;
保存模块,用于根据每个智能设备的功能描述信息从所述至少一个智能设备中确定需要进行语音控制的智能设备,并保存确定的智能设备的蓝牙物理地址和设备标识之间的对应关系。
可选地,所述第一建立模块,具体用于:
根据所述目标唤醒词确定所述目标智能设备的设备标识;
根据存储的IP地址和设备标识之间的对应关系以及所述目标设备的设备标识,确定所述目标智能设备的IP地址;
根据所述目标智能设备的IP地址建立与所述目标智能设备之间的网络连接。
可选地,所述装置还包括:
第三广播模块,用于通过UPnP协议广播查询消息,所述查询消息用于查询支持所述UPnP协议的智能设备;
第二接收模块,用于接收至少一个智能设备中每个智能设备发送的响应消息,所述响应消息用于指示对应的智能设备支持所述UPnP协议,且所述响应消息携带对应的智能设备的设备标识和IP地址;
第三确定模块,用于通过每个智能设备的IP地址确定每个智能设备的功能描述信息,所述功能描述信息包括对应的智能设备是否支持语音功能;
保存模块,用于根据每个智能设备的功能描述信息从所述至少一个智能设备中确定需要进行语音控制的智能设备,并保存确定的智能设备的IP地址和设备标识之间的对应关系。
可选地,所述保存模块,具体用于:
根据每个智能设备的功能描述信息,确定所述至少一个智能设备中支持语音功能的智能设备;
当确定的智能设备中存在至少两个设备类型相同的智能设备时,按照所述确定的智能设备的设备类型,从所述确定的智能设备中划分出至少一组智能设备,每组智能设备中包括至少两个设备类型相同的智能设备;
从每组智能设备中选择出一个智能设备,并将选择的智能设备和所述确定的智能设备中未进行划分的智能设备确定为需要进行语音控制的智能设备。
可选地,所述传输模块,具体用于:
在检测到所述目标唤醒词之后,每隔第一预设时间段将采集的语音信息封装为数据帧,并在每封装完一个数据帧时,向所述目标智能设备发送一个数据帧,每个数据帧包括所述第一预设时间段内采集的语音信息。
可选地,每个数据帧还包括所述第一预设时间段内采集的语音信息的音量信息,用于指示所述目标智能设备根据每个数据帧中包括的音量信息进行语音动效显示。
可选地,所述控制终端为部署于所述智能家居系统中的麦克风阵列。
根据本公开实施例的第四方面,提供一种语音控制智能设备的装置,应用于目标智能设备,所述目标智能设备为智能家居系统包括的多个智能设备中的任一智能设备,所述装置包括:
第一接收模块,用于接收所述智能家居系统中的控制终端通过网络连接同步传输的语音信息;
其中,所述网络连接为所述控制终端检测到与所述目标智能设备对应的目标唤醒词之后建立的,所述语音信息为所述控制终端在检测到所述目标唤醒词之后采集的,所述智能家居系统中每个智能设备存在对应的唤醒词;
执行模块,用于根据接收到的语音信息执行相应的操作。
可选地,所述执行模块包括:
确定单元,用于确定自身在当前之前且距离当前时间最近的第二预设时间段内的状态信息,所述状态信息包括所述目标智能设备在当前之前且距离当前时间最近的第二预设时间段内执行的操作或显示的内容;
发送单元,用于将确定的状态信息和接收到的语音信息发送至服务器,由所述服务器对接收到语音信息进行文本识别,得到识别结果,并根据所述状态信息对所述识别结果进行校正,得到语义结果;
执行单元,用于接收所述服务器发送的语义结果,并执行与所述语义结果对应的操作。
可选地,所述接第一接收模块,具体用于:
接收所述控制终端在检测到所述目标唤醒词之后依次发送的多个数据帧,每个数据帧包括所述控制终端在第一预设时间段内采集的语音信息;
相应地,所述发送单元,具体用于:
当接收到的数据帧为第一个数据帧时,将所述状态信息和所述第一个数据帧发送至所述服务器;
当接收到的数据帧不是第一个数据帧时,将接收到的数据帧发送至所述服务器。
可选地,每个数据帧中还包括所述控制终端在所述第一预设时间段内采集的语音信息的音量信息;
所述装置还包括:
第二接收模块,用于接收所述服务器发送的针对每个数据帧中的语音信息进行文本识别后得到的识别结果;
显示模块,用于根据每个数据帧中的语音信息进行文本识别后得到的识别结果和每个数据帧中的音量信息,显示语音动效。
根据本公开实施例的第五方面,提供一种语音控制智能设备的装置,应用于智能家居系统中的控制终端,其特征在于,所述装置包括:
处理器;
用于存储处理器可执行指令的存储器;
其中,所述处理器被配置为执行上述第一方面所述的任一项方法的步骤。
根据本公开实施例的第六方面,提供一种确语音控制智能设备的装置,应用于目标智能设备,所述目标智能设备为智能家居系统包括的多个智能设备中的任一智能设备,所述装置包括:
处理器;
用于存储处理器可执行指令的存储器;
其中,所述处理器被配置为执行上述第二方面所述的任一项方法的步骤。
根据本公开实施例的第七方面,提供一种计算机可读存储介质,所述计算机可读存储介质上存储有指令,其特征在于,所述指令被处理器执行时实现上述第一方面所述的任一项方法的步骤。
根据本公开实施例的第八方面,提供一种计算机可读存储介质,所述计算机可读存储介质上存储有指令,其特征在于,所述指令被处理器执行时实现上述第二方面所述的任一项方法的步骤。
根据本公开实施例的第九方面,提供一种包含指令的计算机程序产品,当其在计算机上运行时,使得计算机执行上述第一方面所述的语音控制智能设备的方法。
根据本公开实施例的第十方面,提供一种包含指令的计算机程序产品,当其在计算机上运行时,使得计算机执行上述第二方面所述的语音控制智能设备的方法。
本公开的实施例提供的技术方案可以包括以下有益效果:
在本公开实施例中,智能家居系统包括多个智能设备,且智能家居系统中的每个智能设备都存在对应的唤醒词,因此,当控制终端检测到目标唤醒词时,可以建立与该目标唤醒词对应的目标智能设备之间的网络连接,并通过该网络连接向目标智能设备同步传输采集到的语音信息,以使目标智能设备根据接收到的语音信息执行相应的操作。也即,在本公开实施例中,直接由控制终端通过检测到的目标唤醒词来识别用户需要控制的目标智能设备,并将采集到的语音信息传输给目标智能设备,无需智能家居系统中的智能设备具备麦克风采集功能即可实现对智能家居系统中的智能设备的语音控制,提高了语音控制智能家居系统中的智能设备的灵活性。
应当理解的是,以上的一般描述和后文的细节描述仅是示例性和解释性的,并不能限制本公开。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分,示出了符合本发明的实施例,并与说明书一起用于解释本发明的原理。
图1是本公开实施例提供的一种智能家居系统的示意图;
图2是本公开实施例提供的一种语音控制智能设备的方法流程图;
图3是本公开实施例提供的另一种语音控制智能设备的方法流程图;
图4是本公开实施例提供的另一种语音控制智能设备的方法流程图;
图5是本公开实施例提供的一种语音控制智能设备的装置框图;
图6是本公开实施例提供的另一种语音控制智能设备的装置框图;
图7是本公开实施例提供的另一种语音控制智能设备的装置框图。
具体实施方式
这里将详细地对示例性实施例进行说明,其示例表示在附图中。下面的描述涉及附图时,除非另有表示,不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本发明相一致的所有实施方式。相反,它们仅是与如所附权利要求书中所详述的、本发明的一些方面相一致的装置和方法的例子。
在对本公开实施例进行详细的解释说明之前,先对本公开实施例的应用场景予以介绍。
随着智能家居系统的发展,智能家居系统中包括的智能设备越来越多,导致用户对控制智能设备的灵活性的要求也越来越高,因此,如何对智能家居系统中的众多智能设备进行控制已经成为当前的研究热点。而本公开实施例提供的语音控制智能设备的方法就应用于对智能家居系统中的智能设备进行控制的场景中。
在本公开实施例中,当控制终端接收到目标唤醒词时,由于预先为智能家居系统中的每个智能设备设置有对应的唤醒词,因此,可以建立与该目标唤醒词对应的目标智能设备之间的网络连接,并通过该网络连接向目标智能设备同步传输采集到的语音信息,以使目标智能设备根据接收到的语音信息执行相应的操作。也即,在本公开实施例中,直接由控制终端通过检测到的目标唤醒词来识别用户需要控制的目标智能设备,并将采集到的语音信息传输给目标智能设备,无需智能家居系统中的智能设备具备麦克风采集功能即可实现对智能家居系统的智能设备的语音控制,提高了语音控制智能家居系统中的智能设备的灵活性。
图1是本公开实施例提供的一种智能家居系统的示意图,如图1所示,该系统100包括多个智能设备101、控制终端102和服务器103,每个智能设备101与控制终端102之间通过无线或有线方式连接以进行通信。每个智能设备101与服务器103之间通过无线或有线方式连接以进行通信,控制终端102与服务器之间也通过无线或有线方式连接以进行通信。
控制终端102用于根据用户的需求向智能设备101发送指令,智能设备101用于接收控制终端102发出的指令,并根据控制终端102发出的指令执行相应的操作。控制终端102或智能设备101还可以与服务器103之间进行信息交互。
其中,智能设备101可以为智能电视、智能冰箱、智能空调以及智能照明灯等设备,控制终端可以为台式计算机、平板电脑、手机或智能手表等终端,本公开实施例在此不做具体限定。
图2是本公开实施例提供的一种语音控制智能设备的方法流程图,应用于智能家居系统中的控制终端,如图2所示,该方法包括如下步骤:
在步骤201中,当检测到目标唤醒词时,建立与该目标唤醒词对应的目标智能设备之间的网络连接,其中,该目标智能设备为该智能家居系统包括的多个智能设备中的任一智能设备,该智能家居系统中的每个智能设备存在对应的唤醒词。
在步骤202中,通过该网络连接向该目标智能设备同步传输检测到该目标唤醒词之后采集到的语音信息,由该目标智能设备根据接收到的语音信息执行相应的操作。
在本公开实施例中,智能家居系统包括多个智能设备,且智能家居系统中的每个智能设备都存在对应的唤醒词,因此,当控制终端接收到目标唤醒词时,可以建立与该目标唤醒词对应的目标智能设备之间的网络连接,并通过该网络连接向目标智能设备同步传输采集到的语音信息,以使目标智能设备根据接收到的语音信息执行相应的操作。也即,在本公开实施例中,直接由控制终端通过检测到的目标唤醒词来识别用户需要控制的目标智能设备,并将采集到的语音信息传输给目标智能设备,无需智能家居系统中的智能设备具备麦克风采集功能即可实现对智能家居系统的智能设备的语音控制,提高了语音控制智能家居系统中的智能设备的灵活性。
可选地,建立与该目标唤醒词对应的目标智能设备之间的网络连接之后,还包括:
若该网络连接建立失败,则根据存储的蓝牙物理地址和设备标识之间的对应关系以及该目标设备的设备标识,确定该目标智能设备的蓝牙物理地址;
广播唤醒消息,该唤醒消息中携带该目标智能设备的蓝牙物理地址;
当接收到该目标智能设备根据该唤醒消息返回的唤醒确认消息时,重新执行建立与该目标唤醒词对应的目标智能设备之间的网络连接的步骤。
可选地,该根据存储的蓝牙物理地址和设备标识之间的对应关系以及该目标设备的设备标识,确定该目标智能设备的蓝牙物理地址之前,还包括:
通过UPnP协议广播查询消息,该查询消息用于查询支持该UPnP协议的智能设备;
接收至少一个智能设备中每个智能设备发送的响应消息,该响应消息用于指示对应的智能设备支持该UPnP协议,且该响应消息携带对应的智能设备的设备标识和IP地址;
通过每个智能设备的IP地址确定每个智能设备的功能描述信息,该功能描述信息包括对应的智能设备是否支持语音功能以及对应的智能设备的蓝牙物理地址;
根据每个智能设备的功能描述信息从该至少一个智能设备中确定需要进行语音控制的智能设备,并保存确定的智能设备的蓝牙物理地址和设备标识之间的对应关系。
可选地,建立与该目标唤醒词对应的目标智能设备之间的网络连接,包括:
根据该目标唤醒词确定该目标智能设备的设备标识;
根据存储的IP地址和设备标识之间的对应关系以及该目标设备的设备标识,确定该目标智能设备的IP地址;
根据该目标智能设备的IP地址建立与该目标智能设备之间的网络连接。
可选地,根据存储的网际协议IP地址和设备标识之间的对应关系以及该目标设备的设备标识,确定该目标智能设备的IP地址之前,还包括:
通过UPnP协议广播查询消息,该查询消息用于查询支持该UPnP协议的智能设备;
接收至少一个智能设备中每个智能设备发送的响应消息,该响应消息用于指示对应的智能设备支持该UPnP协议,且该响应消息携带对应的智能设备的设备标识和IP地址;
通过每个智能设备的IP地址确定每个智能设备的功能描述信息,该功能描述信息包括对应的智能设备是否支持语音功能;
根据每个智能设备的功能描述信息从该至少一个智能设备中确定需要进行语音控制的智能设备,并保存确定的智能设备的IP地址和设备标识之间的对应关系。
可选地,根据每个智能设备的功能描述信息从该至少一个智能设备中确定需要进行语音控制的智能设备,包括:
根据每个智能设备的功能描述信息,确定该至少一个智能设备中支持语音功能的智能设备;
当确定的智能设备中存在至少两个设备类型相同的智能设备时,按照该确定的智能设备的设备类型,从该确定的智能设备中划分出至少一组智能设备,每组智能设备中包括至少两个设备类型相同的智能设备;
从每组智能设备中选择出一个智能设备,并将选择的智能设备和该确定的智能设备中未进行划分的智能设备确定为需要进行语音控制的智能设备。
可选地,通过该网络连接向该目标智能设备同步传输检测到该目标唤醒词之后采集到的语音信息,包括:
在检测到该目标唤醒词之后,每隔第一预设时间段将采集的语音信息封装为数据帧,并在每封装完一个数据帧时,向该目标智能设备发送一个数据帧,每个数据帧包括该第一预设时间段内采集的语音信息。
可选地,每个数据帧还包括该第一预设时间段内采集的语音信息的音量信息,用于指示该目标智能设备根据每个数据帧中包括的音量信息进行语音动效显示。
可选地,该控制终端为部署于该智能家居系统中的麦克风阵列。
上述所有可选技术方案,均可按照任意结合形成本公开的可选实施例,本公开实施例对此不再一一赘述。
图3是本公开实施例提供的另一种语音控制智能设备的方法流程图,应用于目标智能设备,该目标智能设备为智能家居系统包括的多个智能设备中的任一智能设备,如图3所示,该方法包括如下步骤:
在步骤301中,接收该智能家居系统中的控制终端通过网络连接同步传输的语音信息,其中,该网络连接为该控制终端检测到与该目标智能设备对应的目标唤醒词之后建立的,该语音信息为该控制终端在检测到该目标唤醒词之后采集的,该智能家居系统中每个智能设备存在对应的唤醒词。
在步骤302中,根据接收到的语音信息执行相应的操作。
在本公开实施例中,智能家居系统包括多个智能设备,且智能家居系统中的每个智能设备都存在对应的唤醒词,因此,当控制终端接收到目标唤醒词时,可以建立与该目标唤醒词对应的目标智能设备之间的网络连接,并通过该网络连接向目标智能设备同步传输采集到的语音信息,以使目标智能设备根据接收到的语音信息执行相应的操作。也即,在本公开实施例中,直接由控制终端通过检测到的目标唤醒词来识别用户需要控制的目标智能设备,并将采集到的语音信息传输给目标智能设备,无需智能家居系统中的智能设备具备麦克风采集功能即可实现对智能家居系统的智能设备的语音控制,提高了语音控制智能家居系统中的智能设备的灵活性。
可选地,根据接收到的语音信息执行相应的操作,包括:
确定自身在当前之前且距离当前时间最近的第二预设时间段内的状态信息,该状态信息包括该目标智能设备在当前之前且距离当前时间最近的第二预设时间段内执行的操作或显示的内容;
将确定的状态信息和接收到的语音信息发送至服务器,由该服务器对接收到语音信息进行文本识别,得到识别结果,并根据该状态信息对该识别结果进行校正,得到语义结果;
接收该服务器发送的语义结果,并执行与该语义结果对应的操作。
可选地,接收该智能家居系统中的控制终端通过网络连接同步传输的语音信息,包括:
接收该控制终端在检测到该目标唤醒词之后依次发送的多个数据帧,每个数据帧包括该控制终端在第一预设时间段内采集的语音信息;
相应地,将确定的状态信息和接收到的语音信息发送至服务器,包括:
当接收到的数据帧为第一个数据帧时,将该状态信息和该第一个数据帧发送至该服务器;
当接收到的数据帧不是第一个数据帧时,将接收到的数据帧发送至该服务器。
可选地,每个数据帧中还包括该控制终端在该第一预设时间段内采集的语音信息的音量信息;
将确定的状态信息和接收到的语音信息发送至服务器之后,还包括:
接收该服务器发送的针对每个数据帧中的语音信息进行文本识别后得到的识别结果;
根据每个数据帧中的语音信息进行文本识别后得到的识别结果和每个数据帧中的音量信息,显示语音动效。
上述所有可选技术方案,均可按照任意结合形成本公开的可选实施例,本公开实施例对此不再一一赘述。
图4是本公开实施例提供的另一种语音控制智能设备的方法流程图,应用于如图1所示的智能家居系统中,如图4所示,该方法包括如下步骤:
在步骤401中,当控制终端检测到目标唤醒词时,建立与该目标唤醒词对应的目标智能设备之间的网络连接,其中,该目标智能设备为该智能家居系统包括的多个智能设备中的任一智能设备,该智能家居系统中的每个智能设备存在对应的唤醒词。
在本公开实施例中,为了便于用户可以灵活控制智能家居系统中的任一智能设备,预先针对智能家居系统的每个智能设备设置有对应的唤醒词,该唤醒词用于指示用户需要控制的智能设备为哪个智能设备。也即,当用户需要控制某个智能设备时,可以发出包括与该智能设备对应的唤醒词的语音,以使控制终端根据采集的语音信息确定用户需要控制该智能设备。
比如,针对电视设置唤醒词“电视”、针对冰箱设置唤醒词“冰箱”。当控制终端检测到目标唤醒词为“电视”时,确定用户需要控制的目标智能设备为智能家居系统中的电视。
另外,为了便于控制终端可以精确采集到用户发出的语音,在本公开实施例中,控制终端可以为麦克风阵列,该麦克风阵列包括多个麦克风和麦克风控制中心,该多个麦克风分布于智能家居系统对应的家居空间的各个地方。
此时,控制终端检测到目标唤醒词的实现方式可以为:该多个麦克风一直处于采集语音信息的状态,并将实时采集的语音信息发送给麦克风控制中心,麦克风控制中心对该多个麦克风采集的语音信息进行识别,确定该多个麦克风采集的语音信息中是否有唤醒词,当麦克风控制中心在该多个麦克风采集到的语音信息中检测到唤醒词时,将检测到的唤醒词确定为目标唤醒词。
当控制终端检测到目标唤醒词时,表明用户需要语音控制的智能设备为与该目标唤醒词对应的目标智能设备,此时,控制终端可以建立与该目标智能设备之间的网络连接,以通过该网络连接将检测到目标唤醒词之后采集到的语音信息发送给目标智能设备。
其中,控制终端建立与该目标唤醒词对应的目标智能设备之间的网络连接的实现方式可以为:根据该目标唤醒词确定该目标智能设备的设备标识,根据存储的IP地址和设备标识之间的对应关系以及该目标设备的设备标识,确定该目标智能设备的IP地址,根据该目标智能设备的IP地址建立与该目标智能设备之间的网络连接。
其中,目标智能设备的设备标识用于唯一标识该目标智能设备,比如,该目标智能设备的设备标识可以为该目标智能设备的名称。
值得注意的是,控制终端中存储有IP地址和设备标识之间的对应关系,该对应关系是控制终端预先确定并存储的。其中,该控制终端确定并存储该对应关系的实现方式可以为:通过UPnP协议广播查询消息,该查询消息用于查询支持该UPnP协议的智能设备。当智能家居系统中智能设备接收到该查询消息时,向该控制终端发送响应消息,该响应消息用于指示对应的智能设备支持该UPnP协议,且该响应消息携带对应的智能设备的设备标识和IP地址。控制终端接收至少一个智能设备中每个智能设备发送的响应消息,并通过每个智能设备的IP地址确定每个智能设备的功能描述信息,该功能描述信息包括对应的智能设备是否支持语音功能,然后根据每个智能设备的功能描述信息从该至少一个智能设备中确定需要进行语音控制的智能设备,并保存确定的智能设备的IP地址和设备标识之间的对应关系。
其中,通过每个智能设备的IP地址确定每个智能设备的功能描述信息的实现方式为:通过每个智能设备的IP地址,访问每个智能设备的HTTP(HyperText TransferProtocol,超文本传输协议)服务接口,以获取每个智能设备的功能描述信息。
另外,根据每个智能设备的功能描述信息从该至少一个智能设备中确定需要进行语音控制的智能设备的实现方式为:根据每个智能设备的功能描述信息,确定该至少一个智能设备中支持语音功能的智能设备,当确定的智能设备中存在至少两个设备类型相同的智能设备时,按照该确定的智能设备的设备类型,从该确定的智能设备中划分出至少一组智能设备,每组智能设备中包括至少两个设备类型相同的智能设备,从每组智能设备中选择出一个智能设备,并将选择的智能设备和该确定的智能设备中未进行划分的智能设备确定为需要进行语音控制的智能设备。
其中,从每组智能设备中选择出一个智能设备的实现方式为:控制终端向用户当前使用的终端发送选择消息,该选择消息中携带每组智能设备包括的至少两个智能设备中每个智能设备的设备标识。当用户当前使用的终端接收到该选择消息时,根据该选择消息显示每组智能设备包括的至少两个智能设备中每个智能设备,并显示针对每个智能设备的选项,当用户当前使用的终端检测到针对某个智能设备的选项的选择操作时,将该智能设备确定为用户选择的智能设备,并将用户选择的智能设备发送至控制终端,以使控制终端将该智能设备确定为选择的智能设备。
上述用户当前使用的终端可以为手机、平板电脑、台式计算机或智能手表等终端。选择操作可以为点击操作、滑动操作或语音操作等。
另外需要说明的是,控制终端是目标智能设备的IP地址建立与该目标智能设备之间的网络连接,而根据目标智能设备的IP地址建立与该目标智能设备之间的网络连接的前提是目标智能设备处于唤醒状态。因此,若目标智能设备当前未处于唤醒状态,那么此时通过目标智能设备的IP地址是无法建立与该目标智能设备之间的网络连接的。而当目标智能设备未处于唤醒状态时,目标智能设备是可以通过蓝牙物理地址收发信息的,因此,在控制终端建立与该目标唤醒词对应的目标智能设备之间的网络连接之后,还可能存在如下操作:
若该网络连接建立失败,则根据存储的蓝牙物理地址和设备标识之间的对应关系以及该目标设备的设备标识,确定该目标智能设备的蓝牙物理地址;广播唤醒消息,该唤醒消息中携带该目标智能设备的蓝牙物理地址;当接收到该目标智能设备根据该唤醒消息返回的唤醒确认消息时,重新执行建立与该目标唤醒词对应的目标智能设备之间的网络连接的步骤。
也即,在控制终端通过目标智能设备的IP地址建立与该目标智能设备之间的网络连接之后,若该网络连接建立失败,则表明目标智能设备当前可能未处于唤醒状态,此时,控制终端可以通过该目标智能设备的蓝牙物理地址来唤醒目标智能设备,并在唤醒目标智能设备之后重新根据目标智能设备的IP地址建立与该目标智能设备之间的网络连接。
由于控制终端是根据存储的蓝牙物理地址和设备标识之间的对应关系以及该目标设备的设备标识,确定该目标智能设备的蓝牙物理地址,也即,在控制终端中预先存储有蓝牙物理地址和设备标识之间的对应关系。其中,控制终端中预先确定并存储蓝牙物理地址和设备标识之间的对应关系的实现方式可以为:控制终端通过UPnP协议广播查询消息,该查询消息用于查询支持该UPnP协议的智能设备;接收至少一个智能设备中每个智能设备发送的响应消息,该响应消息用于指示对应的智能设备支持该UPnP协议,且该响应消息携带对应的智能设备的设备标识和IP地址;通过每个智能设备的IP地址确定每个智能设备的功能描述信息,该功能描述信息包括对应的智能设备是否支持语音功能以及对应的智能设备的蓝牙物理地址;根据每个智能设备的功能描述信息从该至少一个智能设备中确定需要进行语音控制的智能设备,并保存确定的智能设备的蓝牙物理地址和设备标识之间的对应关系。
其中,控制终端根据每个智能设备的功能描述信息从该至少一个智能设备中确定需要进行语音控制的智能设备的实现方式已在确定IP地址和设备标识之间的对应关系中介绍,在此不再详细阐述。
需要说明的是,上述控制终端确定并存储蓝牙物理地址和设备标识之间的对应关系可以在该网络连接建立失败之后进行,也可以在控制终端建立与目标智能设备之间的网络连接之前就进行。
可选地,在本公开实施例中,可以预先直接确定需要进行语音控制的智能设备的设备标识、IP地址和蓝牙物理地址之间的对应关系,以便于后续需要IP地址或蓝牙物理地址时可以直接从存储的设备标识、IP地址和蓝牙物理地址之间的对应关系中获取。
也即,在控制终端通过目标智能设备的IP地址建立与该目标智能设备之间的网络连接之前,控制终端通过UPnP协议广播查询消息,该查询消息用于查询支持该UPnP协议的智能设备;接收至少一个智能设备中每个智能设备发送的响应消息,该响应消息用于指示对应的智能设备支持该UPnP协议,且该响应消息携带对应的智能设备的设备标识和IP地址;通过每个智能设备的IP地址确定每个智能设备的功能描述信息,该功能描述信息包括对应的智能设备是否支持语音功能以及对应的智能设备的蓝牙物理地址;根据每个智能设备的功能描述信息从该至少一个智能设备中确定需要进行语音控制的智能设备,并保存确定的智能设备的IP地址、蓝牙物理地址和设备标识之间的对应关系。
在步骤402中,控制终端通过该网络连接向该目标智能设备同步传输检测到该目标唤醒词之后采集到的语音信息。
当控制终端通过步骤401成功建立与目标智能设备之间的网络连接之后,
控制终端可以通过步骤402向目标智能设备传输采集到的语音信息。
其中,步骤402的实现方式为:在检测到该目标唤醒词之后,每隔第一预设时间段将采集的语音信息封装为数据帧,并在每封装完一个数据帧时,向该目标智能设备发送一个数据帧,每个数据帧包括该第一预设时间段内采集的语音信息。
也即,在本公开实施例中,控制终端在检测到目标唤醒词之后,是将当前采集的语音信息实时发送给目标智能设备。其中,第一预设时间段为与预先设置的时间段,该第一预设时间段可以为0.1s、0.2s或0.3s等。
可选地,每个数据帧还包括该第一预设时间段内采集的语音信息的音量信息,用于指示该目标智能设备根据每个数据帧中包括的音量信息进行语音动效显示。由于控制终端在检测到目标唤醒词之后,是将当前采集的语音信息实时发送给目标智能设备,因此,当每个数据帧还包括该第一预设时间段内采集的语音信息的音量信息,可以使该目标智能设备根据每个数据帧中包括的音量信息进行语音动效显示,以实现用户发出的语音和目标智能设备显示的语音动效同步。
其中,数据帧是控制终端根据采集的语音信息通过编码技术得到,下述表1是本公开实施例提供的一种数据帧的结构示意图:
表1
Figure BDA0001604804890000191
如表1所示,该数据帧包括至少9个字节(byte),第一个字节byte[0]用于指示前端类型,该前端类型用于指示控制终端当前的类型,比如当控制终端为麦克风阵列时,该前端类型可以指示控制终端当前为麦克风阵列。第二个字节byte[1]用于指示控制终端当前采用的硬件的类型,比如,当控制终端为麦克风阵列时,该硬件类型是指麦克风阵列中的麦克风的类型。第三个字节byte[2]用于指示前端软件版本,该前端软件版本是指控制终端上对应的应用程序的版本。第四个字节byte[3]用于指示客户端音频事件,由于控制终端是实时向目标智能设备发送采集的语音信息,因此,客户端音频事件用于指示当前采集的语音信息是开始时采集的信息、或者录制中采集的语音信息、或者结束时采集的语音信息。另外,该客户端音频事件还可以指示采集的语音信息的音量信息。第五个字节byte[4]至第八个字节byte[7]为预留状态的字节。第九个字节byte[8]至第九个字节之后字节是将采集的语音信息根据PCM(Pulse Code Modulation,脉冲调制编码)技术编码得到。
另外需要说明的是,当控制终端为麦克风阵列时,控制终端在通过步骤401检测到目标唤醒词之后,该麦克风阵列可以根据各个麦克风采集到的该目标唤醒词对应的语音信息,确定用户当前所处的方向,以根据用户当前所处的方向来采集语音信息,以便于加强在确定的方向上采集的语音信息的强度。
在步骤403中,目标智能设备接收该智能家居系统中的控制终端通过网络连接同步传输的语音信息。
当控制终端以数据帧的方式传输语音信息时,步骤403的实现方式可以为:接收该控制终端在检测到该目标唤醒词之后依次发送的多个数据帧,每个数据帧包括该控制终端在第一预设时间段内采集的语音信息。
也即,目标智能设备是按照时间顺序依次接收控制终端发送的多个数据帧。
在步骤404中,目标智能设备根据接收到的语音信息执行相应的操作。
在本公开实施例中,为了直接根据语音信息确定目标智能设备需要执行的操作,该操作很有可能不是用户想要的操作,因此,可以根据目标智能设备的上下文状态和语音信息来确定目标智能设备需要执行的操作。
因此,步骤404的实现方式可以为:确定自身在当前之前且距离当前时间最近的第二预设时间段内的状态信息,该状态信息包括该目标智能设备在当前之前且距离当前时间最近的第二预设时间段内执行的操作或显示的内容;将确定的状态信息和接收到的语音信息发送至服务器,由该服务器对接收到语音信息进行文本识别,得到识别结果,并根据该状态信息对该识别结果进行校正,得到语义结果;接收该服务器发送的语义结果,并执行与该语义结果对应的操作。
也即,在本公开实施例中,可以通过服务器根据目标智能设备的状态信息对语音信息对应的识别结果进行校正,得到语义结果,以使目标智能设备执行与该语义结果对应的操作。以实现目标智能设备执行的操作更符合用户的需求。
比如,语音信息为“刘德华”,服务器对该语音信息进行识别,得到识别结果为“刘德华”,若目标智能设备的状态信息为“电影页面”,则服务器可以对该识别结果“刘德华”进行校正,得到语义结果“刘德华的电影”,那么此时执行与该语义结果对应的操作,也即,执行“搜索刘德华的电影”的操作。
其中,由于目标智能设备是按照时间顺序依次接收控制终端发送的多个数据帧,因此,目标智能设备将确定的状态信息和接收到的语音信息发送至服务器的实现方式可以为:当目标智能设备接收到的数据帧为第一个数据帧时,将该状态信息和该第一个数据帧发送至该服务器;当接收到的数据帧不是第一个数据帧时,将接收到的数据帧发送至该服务器。
也即,目标智能设备在接收到第一个数据帧时,将接收到的数据帧和状态信息一起发送给服务器,当再次接收到数据帧时,只需将再次接收到的数据帧发送给服务器即可。
可选地,当每个数据帧中还包括该控制终端在该第一预设时间段内采集的语音信息的音量信息时,目标智能设备还可以根据每个数据帧中包括的音量信息进行语音动效显示。其中,目标智能设备根据每个数据帧中包括的音量信息进行语音动效显示的实现方式可以为:接收该服务器发送的针对每个数据帧中的语音信息进行文本识别后得到的识别结果;根据每个数据帧中的语音信息进行文本识别后得到的识别结果和每个数据帧中的音量信息,显示语音动效。
其中,目标智能设备根据每个数据帧中的语音信息进行文本识别后得到的识别结果和每个数据帧中的音量信息,显示语音动效,也即,每当目标智能设备接收到服务器发送的针对一个数据帧的识别结果,则按照该数据帧中的音量信息语音播放该识别结果。
由于控制终端是实时将采集的语音信息同步传输至目标智能设备的,且目标智能设备是在每接收到一个数据帧时,立即将接收到的数据帧发送给服务器,服务器每接收到一个数据帧,立即确定接收到的数据帧中的语音信息的识别结果,并将确定的识别结果发送给目标智能设备。因此,在用户发出语音的同时,目标智能设备将同步播放针对用户发出的语音的识别结果,且目标智能设备播放识别结果时采用的音量的大小与用户发出该识别结果对应的语音的音量的大小一致。也即是,当用户发出的语音的音量较大时,目标智能设备上播放对应的识别结果的音量也较大,当用户发出的语音的音量较小时,目标智能设备上播放对应的识别结果的音量也较小,以实现在目标智能设备上显示语音动效。
在本公开实施例中,智能家居系统包括多个智能设备,且智能家居系统中的每个智能设备存在对应的唤醒词,因此,当控制终端接收到目标唤醒词时,可以建立与该目标唤醒词对应的目标智能设备之间的网络连接,并通过该网络连接向目标智能设备同步传输采集到的语音信息,以使目标智能设备根据接收到的语音信息执行相应的操作。也即,在本公开实施例中,直接由控制终端通过检测到的目标唤醒词来识别用户需要控制的目标智能设备,并将采集到的语音信息传输给目标智能设备,无需智能家居系统中的智能设备具备麦克风采集功能即可实现对智能家居系统的智能设备的语音控制,提高了语音控制智能家居设备的灵活性。
图5是本公开实施例提供的一种语音控制智能设备的装置框图,应用于智能家居系统中的控制终端,如图5所示,该装置500包括第一建立模块501和传输模块502:
第一建立模块501,用于当检测到目标唤醒词时,建立与该目标唤醒词对应的目标智能设备之间的网络连接;
其中,该目标智能设备为该智能家居系统包括的多个智能设备中的任一智能设备,该智能家居系统中的每个智能设备存在对应的唤醒词;
传输模块502,用于通过该网络连接向该目标智能设备同步传输检测到该目标唤醒词之后采集到的语音信息,由该目标智能设备根据接收到的语音信息执行相应的操作。
可选地,该装置500还包括:
第一确定模块,用于若该网络连接建立失败,则根据存储的蓝牙物理地址和设备标识之间的对应关系以及该目标设备的设备标识,确定该目标智能设备的蓝牙物理地址;
第一广播模块,用于广播唤醒消息,该唤醒消息中携带该目标智能设备的蓝牙物理地址;
第二建立模块,用于当接收到该目标智能设备根据该唤醒消息返回的唤醒确认消息时,重新执行建立与该目标唤醒词对应的目标智能设备之间的网络连接的步骤。
可选地,该装置500还包括:
第二广播模块,用于通过通用即插即用UPnP协议广播查询消息,该查询消息用于查询支持该UPnP协议的智能设备;
第一接收模块,用于接收至少一个智能设备中每个智能设备发送的响应消息,该响应消息用于指示对应的智能设备支持该UPnP协议,且该响应消息携带对应的智能设备的设备标识和IP地址;
第二确定模块,用于通过每个智能设备的IP地址确定每个智能设备的功能描述信息,该功能描述信息包括对应的智能设备是否支持语音功能以及对应的智能设备的蓝牙物理地址;
保存模块,用于根据每个智能设备的功能描述信息从该至少一个智能设备中确定需要进行语音控制的智能设备,并保存确定的智能设备的蓝牙物理地址和设备标识之间的对应关系。
可选地,该第一建立模块501,具体用于:
根据该目标唤醒词确定该目标智能设备的设备标识;
根据存储的网际协议IP地址和设备标识之间的对应关系以及该目标设备的设备标识,确定该目标智能设备的IP地址;
根据该目标智能设备的IP地址建立与该目标智能设备之间的网络连接。
可选地,该装置500还包括:
第三广播模块,用于通过通用即插即用UPnP协议广播查询消息,该查询消息用于查询支持该UPnP协议的智能设备;
第二接收模块,用于接收至少一个智能设备中每个智能设备发送的响应消息,该响应消息用于指示对应的智能设备支持该UPnP协议,且该响应消息携带对应的智能设备的设备标识和IP地址;
第三确定模块,用于通过每个智能设备的IP地址确定每个智能设备的功能描述信息,该功能描述信息包括对应的智能设备是否支持语音功能;
保存模块,用于根据每个智能设备的功能描述信息从该至少一个智能设备中确定需要进行语音控制的智能设备,并保存确定的智能设备的IP地址和设备标识之间的对应关系。
可选地,该保存模块,具体用于:
根据每个智能设备的功能描述信息,确定该至少一个智能设备中支持语音功能的智能设备;
当确定的智能设备中存在至少两个设备类型相同的智能设备时,按照该确定的智能设备的设备类型,从该确定的智能设备中划分出至少一组智能设备,每组智能设备中包括至少两个设备类型相同的智能设备;
从每组智能设备中选择出一个智能设备,并将选择的智能设备和该确定的智能设备中未进行划分的智能设备确定为需要进行语音控制的智能设备。
可选地,该传输模块502,具体用于:
在检测到该目标唤醒词之后,每隔第一预设时间段将采集的语音信息封装为数据帧,并在每封装完一个数据帧时,向该目标智能设备发送一个数据帧,每个数据帧包括该第一预设时间段内采集的语音信息。
可选地,每个数据帧还包括该第一预设时间段内采集的语音信息的音量信息,用于指示该目标智能设备根据每个数据帧中包括的音量信息进行语音动效显示。
可选地,该控制终端为部署于该智能家居系统中的麦克风阵列。
在本公开实施例中,智能家居系统包括多个智能设备,且智能家居系统中的每个智能设备存在对应的唤醒词,因此,当控制终端接收到目标唤醒词时,可以建立与该目标唤醒词对应的目标智能设备之间的网络连接,并通过该网络连接向目标智能设备同步传输采集到的语音信息,以使目标智能设备根据接收到的语音信息执行相应的操作。也即,在本公开实施例中,直接由控制终端通过检测到的目标唤醒词来识别用户需要控制的目标智能设备,并将采集到的语音信息传输给目标智能设备,无需智能家居系统中的智能设备具备麦克风采集功能即可实现对智能家居系统的智能设备的语音控制,提高了语音控制智能家居设备的灵活性。
关于上述实施例中的装置,其中各个模块执行操作的具体方式已经在有关该方法的实施例中进行了详细描述,此处将不做详细阐述说明。
图6是本公开实施例提供的另一种语音控制智能设备的装置框图,该目标智能设备为智能家居系统包括的多个智能设备中的任一智能设备,如图6所示,该装置600包括第一接收模块301和执行模块602:
第一接收模块601,用于接收该智能家居系统中的控制终端通过网络连接同步传输的语音信息;
其中,该网络连接为该控制终端检测到与该目标智能设备对应的目标唤醒词之后建立的,该语音信息为该控制终端在检测到该目标唤醒词之后采集的,该智能家居系统中每个智能设备存在对应的唤醒词;
执行模块602,用于根据接收到的语音信息执行相应的操作。
可选地,该执行模块602包括:
确定单元,用于确定自身在当前之前且距离当前时间最近的第二预设时间段内的状态信息,该状态信息包括该目标智能设备在当前之前且距离当前时间最近的第二预设时间段内执行的操作或显示的内容;
发送单元,用于将确定的状态信息和接收到的语音信息发送至服务器,由该服务器对接收到语音信息进行文本识别,得到识别结果,并根据该状态信息对该识别结果进行校正,得到语义结果;
执行单元,用于接收该服务器发送的语义结果,并执行与该语义结果对应的操作。
可选地,该接第一接收模块601,具体用于:
接收该控制终端在检测到该目标唤醒词之后依次发送的多个数据帧,每个数据帧包括该控制终端在第一预设时间段内采集的语音信息;
相应地,发送单元,具体用于:
当接收到的数据帧为第一个数据帧时,将该状态信息和该第一个数据帧发送至该服务器;
当接收到的数据帧不是第一个数据帧时,将接收到的数据帧发送至该服务器。
可选地,每个数据帧中还包括该控制终端在该第一预设时间段内采集的语音信息的音量信息;
该装置600还包括:
第二接收模块,用于接收该服务器发送的针对每个数据帧中的语音信息进行文本识别后得到的识别结果;
显示模块,用于根据每个数据帧中的语音信息进行文本识别后得到的识别结果和每个数据帧中的音量信息,显示语音动效。
在本公开实施例中,智能家居系统包括多个智能设备,且智能家居系统中的每个智能设备存在对应的唤醒词,因此,当控制终端接收到目标唤醒词时,可以建立与该目标唤醒词对应的目标智能设备之间的网络连接,并通过该网络连接向目标智能设备同步传输采集到的语音信息,以使目标智能设备根据接收到的语音信息执行相应的操作。也即,在本公开实施例中,直接由控制终端通过检测到的目标唤醒词来识别用户需要控制的目标智能设备,并将采集到的语音信息传输给目标智能设备,无需智能家居系统中的智能设备具备麦克风采集功能即可实现对智能家居系统的智能设备的语音控制,提高了语音控制智能家居设备的灵活性。
关于上述实施例中的装置,其中各个模块执行操作的具体方式已经在有关该方法的实施例中进行了详细描述,此处将不做详细阐述说明。
图7是本公开实施例提供的一种用于语音控制智能设备的装置框图。图1中的控制终端或智能设备均可以通过图7所示的装置来实现,比如,装置700可以是移动电话,计算机,消息收发设备,游戏控制台,平板设备,医疗设备,健身设备等。
参照图7,装置700可以包括以下一个或多个组件:处理组件702,存储器704,电源组件706,多媒体组件708,音频组件710,输入/输出(I/O)的接口712,传感器组件714,以及通信组件716。
处理组件702通常控制装置700的整体操作,诸如与显示,电话呼叫,数据通信,相机操作和记录操作相关联的操作。处理组件702可以包括一个或多个处理器720来执行指令,以完成上述的方法的全部或部分步骤。此外,处理组件702可以包括一个或多个模块,便于处理组件702和其他组件之间的交互。例如,处理组件702可以包括多媒体模块,以方便多媒体组件708和处理组件702之间的交互。
存储器704被配置为存储各种类型的数据以支持在装置700的操作。这些数据的示例包括用于在装置700上操作的任何应用程序或方法的指令,联系人数据,电话簿数据,消息,图片,视频等。存储器704可以由任何类型的易失性或非易失性存储设备或者它们的组合实现,如静态随机存取存储器(SRAM),电可擦除可编程只读存储器(EEPROM),可擦除可编程只读存储器(EPROM),可编程只读存储器(PROM),只读存储器(ROM),磁存储器,快闪存储器,磁盘或光盘。
电源组件706为装置700的各种组件提供电源。电源组件706可以包括电源管理系统,一个或多个电源,及其他与为装置700生成、管理和分配电源相关联的组件。
多媒体组件708包括在所述装置700和用户之间的提供一个输出接口的屏幕。在一些实施例中,屏幕可以包括液晶显示器(LCD)和触摸面板(TP)。如果屏幕包括触摸面板,屏幕可以被实现为触摸屏,以接收来自用户的输入信号。触摸面板包括一个或多个触摸传感器以感测触摸、滑动和触摸面板上的手势。所述触摸传感器可以不仅感测触摸或滑动动作的边界,而且还检测与所述触摸或滑动操作相关的持续时间和压力。在一些实施例中,多媒体组件708包括一个前置摄像头和/或后置摄像头。当装置700处于操作模式,如拍摄模式或视频模式时,前置摄像头和/或后置摄像头可以接收外部的多媒体数据。每个前置摄像头和后置摄像头可以是一个固定的光学透镜系统或具有焦距和光学变焦能力。
音频组件710被配置为输出和/或输入音频信号。例如,音频组件710包括一个麦克风(MIC),当装置700处于操作模式,如呼叫模式、记录模式和语音识别模式时,麦克风被配置为接收外部音频信号。所接收的音频信号可以被进一步存储在存储器704或经由通信组件716发送。在一些实施例中,音频组件410还包括一个扬声器,用于输出音频信号。
I/O接口712为处理组件702和外围接口模块之间提供接口,上述外围接口模块可以是键盘,点击轮,按钮等。这些按钮可包括但不限于:主页按钮、音量按钮、启动按钮和锁定按钮。
传感器组件714包括一个或多个传感器,用于为装置700提供各个方面的状态评估。例如,传感器组件714可以检测到装置700的打开/关闭状态,组件的相对定位,例如所述组件为装置700的显示器和小键盘,传感器组件714还可以检测装置700或装置700一个组件的位置改变,用户与装置700接触的存在或不存在,装置700方位或加速/减速和装置700的温度变化。传感器组件714可以包括接近传感器,被配置用来在没有任何的物理接触时检测附近物体的存在。传感器组件714还可以包括光传感器,如CMOS或CCD图像传感器,用于在成像应用中使用。在一些实施例中,该传感器组件714还可以包括加速度传感器,陀螺仪传感器,磁传感器,压力传感器或温度传感器。
通信组件716被配置为便于装置700和其他设备之间有线或无线方式的通信。装置700可以接入基于通信标准的无线网络,如WiFi,2G或3G,或它们的组合。在一个示例性实施例中,通信组件716经由广播信道接收来自外部广播管理系统的广播信号或广播相关信息。在一个示例性实施例中,所述通信组件716还包括近场通信(NFC)模块,以促进短程通信。例如,在NFC模块可基于射频识别(RFID)技术,红外数据协会(IrDA)技术,超宽带(UWB)技术,蓝牙(BT)技术和其他技术来实现。
在示例性实施例中,装置700可以被一个或多个应用专用集成电路(ASIC)、数字信号处理器(DSP)、数字信号处理设备(DSPD)、可编程逻辑器件(PLD)、现场可编程门阵列(FPGA)、控制器、微控制器、微处理器或其他电子元件实现,用于执行上述方法。
在示例性实施例中,还提供了一种包括指令的非临时性计算机可读存储介质,例如包括指令的存储器704,上述指令可由装置700的处理器720执行以完成上述方法。例如,所述非临时性计算机可读存储介质可以是ROM、随机存取存储器(RAM)、CD-ROM、磁带、软盘和光数据存储设备等。
一种非临时性计算机可读存储介质,当所述存储介质中的指令由终端的处理器执行时,使得终端能够执行一种上述实施例提供的语音控制智能设备的方法。
本领域技术人员在考虑说明书及实践这里公开的发明后,将容易想到本发明的其它实施方案。本申请旨在涵盖本发明的任何变型、用途或者适应性变化,这些变型、用途或者适应性变化遵循本发明的一般性原理并包括本公开未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的,本发明的真正范围和精神由下面的权利要求指出。
应当理解的是,本发明并不局限于上面已经描述并在附图中示出的精确结构,并且可以在不脱离其范围进行各种修改和改变。本发明的范围仅由所附的权利要求来限制。

Claims (24)

1.一种语音控制智能设备的方法,应用于智能家居系统中的控制终端,其特征在于,所述方法包括:
当检测到目标唤醒词时,建立与所述目标唤醒词对应的目标智能设备之间的网络连接;
其中,所述目标智能设备为所述智能家居系统包括的多个智能设备中的任一智能设备,所述智能家居系统中的每个智能设备存在对应的唤醒词;
当所述目标智能设备处于唤醒状态时,所述网络连接建立成功,通过所述网络连接向所述目标智能设备同步传输检测到所述目标唤醒词之后采集到的语音信息,由所述目标智能设备根据接收到的语音信息执行相应的操作;
当所述目标智能设备未处于唤醒状态时,所述网络连接建立失败,则根据存储的蓝牙物理地址和设备标识之间的对应关系以及所述目标智能设备的设备标识,确定所述目标智能设备的蓝牙物理地址,广播唤醒消息,当接收到所述目标智能设备根据所述唤醒消息返回的唤醒确认消息时,重新执行建立与所述目标唤醒词对应的目标智能设备之间的网络连接的步骤,所述唤醒消息中携带所述目标智能设备的蓝牙物理地址;
所述通过所述网络连接向所述目标智能设备同步传输检测到所述目标唤醒词之后采集到的语音信息,包括:
在检测到所述目标唤醒词之后,每隔第一预设时间段将采集的语音信息封装为数据帧,并在每封装完一个数据帧时,向所述目标智能设备发送一个数据帧,每个数据帧包括所述第一预设时间段内采集的语音信息。
2.根据权利要求1所述的方法,其特征在于,所述根据存储的蓝牙物理地址和设备标识之间的对应关系以及所述目标智能设备的设备标识,确定所述目标智能设备的蓝牙物理地址之前,还包括:
通过通用即插即用UPnP协议广播查询消息,所述查询消息用于查询支持所述UPnP协议的智能设备;
接收至少一个智能设备中每个智能设备发送的响应消息,所述响应消息用于指示对应的智能设备支持所述UPnP协议,且所述响应消息携带对应的智能设备的设备标识和网际协议IP地址;
通过每个智能设备的IP地址确定每个智能设备的功能描述信息,所述功能描述信息包括对应的智能设备是否支持语音功能以及对应的智能设备的蓝牙物理地址;
根据每个智能设备的功能描述信息从所述至少一个智能设备中确定需要进行语音控制的智能设备,并保存确定的智能设备的蓝牙物理地址和设备标识之间的对应关系。
3.根据权利要求1所述的方法,其特征在于,所述建立与所述目标唤醒词对应的目标智能设备之间的网络连接,包括:
根据所述目标唤醒词确定所述目标智能设备的设备标识;
根据存储的IP地址和设备标识之间的对应关系以及所述目标智能设备的设备标识,确定所述目标智能设备的IP地址;
根据所述目标智能设备的IP地址建立与所述目标智能设备之间的网络连接。
4.根据权利要求3所述的方法,其特征在于,所述根据存储的网际协议IP地址和设备标识之间的对应关系以及所述目标智能设备的设备标识,确定所述目标智能设备的IP地址之前,还包括:
通过UPnP协议广播查询消息,所述查询消息用于查询支持所述UPnP协议的智能设备;
接收至少一个智能设备中每个智能设备发送的响应消息,所述响应消息用于指示对应的智能设备支持所述UPnP协议,且所述响应消息携带对应的智能设备的设备标识和IP地址;
通过每个智能设备的IP地址确定每个智能设备的功能描述信息,所述功能描述信息包括对应的智能设备是否支持语音功能;
根据每个智能设备的功能描述信息从所述至少一个智能设备中确定需要进行语音控制的智能设备,并保存确定的智能设备的IP地址和设备标识之间的对应关系。
5.根据权利要求2或4所述的方法,其特征在于,所述根据每个智能设备的功能描述信息从所述至少一个智能设备中确定需要进行语音控制的智能设备,包括:
根据每个智能设备的功能描述信息,确定所述至少一个智能设备中支持语音功能的智能设备;
当确定的智能设备中存在至少两个设备类型相同的智能设备时,按照所述确定的智能设备的设备类型,从所述确定的智能设备中划分出至少一组智能设备,每组智能设备中包括至少两个设备类型相同的智能设备;
从每组智能设备中选择出一个智能设备,并将选择的智能设备和所述确定的智能设备中未进行划分的智能设备确定为需要进行语音控制的智能设备。
6.根据权利要求1所述的方法,其特征在于,每个数据帧还包括所述第一预设时间段内采集的语音信息的音量信息,用于指示所述目标智能设备根据每个数据帧中包括的音量信息进行语音动效显示。
7.根据权利要求1所述的方法,其特征在于,所述控制终端为部署于所述智能家居系统中的麦克风阵列。
8.一种语音控制智能设备的方法,应用于目标智能设备,所述目标智能设备为智能家居系统包括的多个智能设备中的任一智能设备,其特征在于,所述方法包括:
接收所述智能家居系统中的控制终端通过网络连接同步传输的语音信息;
其中,所述网络连接为所述控制终端检测到与所述目标智能设备对应的目标唤醒词之后建立的,所述语音信息为所述控制终端在检测到所述目标唤醒词之后采集的,所述智能家居系统中每个智能设备存在对应的唤醒词;
根据接收到的语音信息执行相应的操作,所述操作包括将确定的状态信息和接收到的语音信息发送至服务器;
所述接收所述智能家居系统中的控制终端通过网络连接同步传输的语音信息,包括:
接收所述控制终端在检测到所述目标唤醒词之后依次发送的多个数据帧,每个数据帧包括所述控制终端在第一预设时间段内采集的语音信息;
相应地,所述将确定的状态信息和接收到的语音信息发送至服务器,包括:
当接收到的数据帧为第一个数据帧时,将所述状态信息和所述第一个数据帧发送至所述服务器;当接收到的数据帧不是第一个数据帧时,将接收到的数据帧发送至所述服务器;
所述控制终端用于当所述目标智能设备处于唤醒状态时,所述网络连接建立成功,通过所述网络连接向所述目标智能设备同步传输检测到所述目标唤醒词之后采集到的语音信息;
所述控制终端还用于当所述目标智能设备未处于唤醒状态时,所述网络连接建立失败,则根据存储的蓝牙物理地址和设备标识之间的对应关系以及所述目标智能设备的设备标识,确定所述目标智能设备的蓝牙物理地址,广播唤醒消息,当接收到所述目标智能设备根据所述唤醒消息返回的唤醒确认消息时,重新执行建立与所述目标唤醒词对应的目标智能设备之间的网络连接的步骤,所述唤醒消息中携带所述目标智能设备的蓝牙物理地址。
9.根据权利要求8所述的方法,其特征在于,所述根据接收到的语音信息执行相应的操作,包括:
确定自身在当前之前且距离当前时间最近的第二预设时间段内的状态信息,所述状态信息包括所述目标智能设备在当前之前且距离当前时间最近的第二预设时间段内执行的操作或显示的内容;
将所述确定的状态信息和接收到的语音信息发送至所述服务器,由所述服务器对接收到语音信息进行文本识别,得到识别结果,并根据所述状态信息对所述识别结果进行校正,得到语义结果;
接收所述服务器发送的语义结果,并执行与所述语义结果对应的操作。
10.根据权利要求9所述的方法,其特征在于,每个数据帧中还包括所述控制终端在所述第一预设时间段内采集的语音信息的音量信息;
所述将确定的状态信息和接收到的语音信息发送至服务器之后,还包括:
接收所述服务器发送的针对每个数据帧中的语音信息进行文本识别后得到的识别结果;
根据每个数据帧中的语音信息进行文本识别后得到的识别结果和每个数据帧中的音量信息,显示语音动效。
11.一种语音控制智能设备的装置,应用于智能家居系统中的控制终端,其特征在于,所述装置包括:
第一建立模块,用于当检测到目标唤醒词时,建立与所述目标唤醒词对应的目标智能设备之间的网络连接;
其中,所述目标智能设备为所述智能家居系统包括的多个智能设备中的任一智能设备,所述智能家居系统中的每个智能设备存在对应的唤醒词;
传输模块,用于当所述目标智能设备处于唤醒状态时,所述网络连接建立成功,通过所述网络连接向所述目标智能设备同步传输检测到所述目标唤醒词之后采集到的语音信息,由所述目标智能设备根据接收到的语音信息执行相应的操作;
所述装置还包括:
第一确定模块,用于当所述目标智能设备未处于唤醒状态时,所述网络连接建立失败,则根据存储的蓝牙物理地址和设备标识之间的对应关系以及所述目标智能设备的设备标识,确定所述目标智能设备的蓝牙物理地址;
第一广播模块,用于广播唤醒消息,所述唤醒消息中携带所述目标智能设备的蓝牙物理地址;
第二建立模块,用于当接收到所述目标智能设备根据所述唤醒消息返回的唤醒确认消息时,重新执行建立与所述目标唤醒词对应的目标智能设备之间的网络连接的步骤;
所述传输模块,具体用于:
在检测到所述目标唤醒词之后,每隔第一预设时间段将采集的语音信息封装为数据帧,并在每封装完一个数据帧时,向所述目标智能设备发送一个数据帧,每个数据帧包括所述第一预设时间段内采集的语音信息。
12.根据权利要求11所述的装置,其特征在于,所述装置还包括:
第二广播模块,用于通过通用即插即用UPnP协议广播查询消息,所述查询消息用于查询支持所述UPnP协议的智能设备;
第一接收模块,用于接收至少一个智能设备中每个智能设备发送的响应消息,所述响应消息用于指示对应的智能设备支持所述UPnP协议,且所述响应消息携带对应的智能设备的设备标识和网际协议IP地址;
第二确定模块,用于通过每个智能设备的IP地址确定每个智能设备的功能描述信息,所述功能描述信息包括对应的智能设备是否支持语音功能以及对应的智能设备的蓝牙物理地址;
保存模块,用于根据每个智能设备的功能描述信息从所述至少一个智能设备中确定需要进行语音控制的智能设备,并保存确定的智能设备的蓝牙物理地址和设备标识之间的对应关系。
13.根据权利要求11所述的装置,其特征在于,所述第一建立模块,具体用于:
根据所述目标唤醒词确定所述目标智能设备的设备标识;
根据存储的IP地址和设备标识之间的对应关系以及所述目标智能设备的设备标识,确定所述目标智能设备的IP地址;
根据所述目标智能设备的IP地址建立与所述目标智能设备之间的网络连接。
14.根据权利要求13所述的装置,其特征在于,所述装置还包括:
第三广播模块,用于通过UPnP协议广播查询消息,所述查询消息用于查询支持所述UPnP协议的智能设备;
第二接收模块,用于接收至少一个智能设备中每个智能设备发送的响应消息,所述响应消息用于指示对应的智能设备支持所述UPnP协议,且所述响应消息携带对应的智能设备的设备标识和IP地址;
第三确定模块,用于通过每个智能设备的IP地址确定每个智能设备的功能描述信息,所述功能描述信息包括对应的智能设备是否支持语音功能;
保存模块,用于根据每个智能设备的功能描述信息从所述至少一个智能设备中确定需要进行语音控制的智能设备,并保存确定的智能设备的IP地址和设备标识之间的对应关系。
15.根据权利要求12或14所述的装置,其特征在于,所述保存模块,具体用于:
根据每个智能设备的功能描述信息,确定所述至少一个智能设备中支持语音功能的智能设备;
当确定的智能设备中存在至少两个设备类型相同的智能设备时,按照所述确定的智能设备的设备类型,从所述确定的智能设备中划分出至少一组智能设备,每组智能设备中包括至少两个设备类型相同的智能设备;
从每组智能设备中选择出一个智能设备,并将选择的智能设备和所述确定的智能设备中未进行划分的智能设备确定为需要进行语音控制的智能设备。
16.根据权利要求11所述的装置,其特征在于,每个数据帧还包括所述第一预设时间段内采集的语音信息的音量信息,用于指示所述目标智能设备根据每个数据帧中包括的音量信息进行语音动效显示。
17.根据权利要求11所述的装置,其特征在于,所述控制终端为部署于所述智能家居系统中的麦克风阵列。
18.一种语音控制智能设备的装置,应用于目标智能设备,所述目标智能设备为智能家居系统包括的多个智能设备中的任一智能设备,其特征在于,所述装置包括:
第一接收模块,用于接收所述智能家居系统中的控制终端通过网络连接同步传输的语音信息;
其中,所述网络连接为所述控制终端检测到与所述目标智能设备对应的目标唤醒词之后建立的,所述语音信息为所述控制终端在检测到所述目标唤醒词之后采集的,所述智能家居系统中每个智能设备存在对应的唤醒词;
执行模块,用于根据接收到的语音信息执行相应的操作;
所述第一接收模块,具体用于:
接收所述控制终端在检测到所述目标唤醒词之后依次发送的多个数据帧,每个数据帧包括所述控制终端在第一预设时间段内采集的语音信息;
相应地,所述执行模块包括发送单元,所述发送单元,用于:
当接收到的数据帧为第一个数据帧时,将确定的状态信息和所述第一个数据帧发送至服务器;
当接收到的数据帧不是第一个数据帧时,将接收到的数据帧发送至所述服务器;
所述控制终端用于当所述目标智能设备处于唤醒状态时,所述网络连接建立成功,通过所述网络连接向所述目标智能设备同步传输检测到所述目标唤醒词之后采集到的语音信息;
所述控制终端还用于当所述目标智能设备未处于唤醒状态时,所述网络连接建立失败,则根据存储的蓝牙物理地址和设备标识之间的对应关系以及所述目标智能设备的设备标识,确定所述目标智能设备的蓝牙物理地址,广播唤醒消息,当接收到所述目标智能设备根据所述唤醒消息返回的唤醒确认消息时,重新执行建立与所述目标唤醒词对应的目标智能设备之间的网络连接的步骤,所述唤醒消息中携带所述目标智能设备的蓝牙物理地址。
19.根据权利要求18所述的装置,其特征在于,所述执行模块包括:
确定单元,用于确定自身在当前之前且距离当前时间最近的第二预设时间段内的状态信息,所述状态信息包括所述目标智能设备在当前之前且距离当前时间最近的第二预设时间段内执行的操作或显示的内容;
所述发送单元,还用于将所述确定的状态信息和接收到的语音信息发送至所述服务器,由所述服务器对接收到语音信息进行文本识别,得到识别结果,并根据所述状态信息对所述识别结果进行校正,得到语义结果;
执行单元,用于接收所述服务器发送的语义结果,并执行与所述语义结果对应的操作。
20.根据权利要求19所述的装置,其特征在于,每个数据帧中还包括所述控制终端在所述第一预设时间段内采集的语音信息的音量信息;
所述装置还包括:
第二接收模块,用于接收所述服务器发送的针对每个数据帧中的语音信息进行文本识别后得到的识别结果;
显示模块,用于根据每个数据帧中的语音信息进行文本识别后得到的识别结果和每个数据帧中的音量信息,显示语音动效。
21.一种语音控制智能设备的装置,应用于智能家居系统中的控制终端,其特征在于,所述装置包括:
处理器;
用于存储处理器可执行指令的存储器;
其中,所述处理器被配置为执行权利要求1-7任一项所述的方法的步骤。
22.一种语音控制智能设备的装置,应用于目标智能设备,所述目标智能设备为智能家居系统包括的多个智能设备中的任一智能设备,其特征在于,所述装置包括:
处理器;
用于存储处理器可执行指令的存储器;
其中,所述处理器被配置为执行权利要求8-10任一项所述的方法的步骤。
23.一种计算机可读存储介质,所述计算机可读存储介质上存储有指令,其特征在于,所述指令被处理器执行时实现权利要求1-7任一项所述的方法的步骤。
24.一种计算机可读存储介质,所述计算机可读存储介质上存储有指令,其特征在于,所述指令被处理器执行时实现权利要求8-10任一项所述的方法的步骤。
CN201810239487.7A 2018-03-22 2018-03-22 语音控制智能设备的方法、装置及存储介质 Active CN108831448B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810239487.7A CN108831448B (zh) 2018-03-22 2018-03-22 语音控制智能设备的方法、装置及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810239487.7A CN108831448B (zh) 2018-03-22 2018-03-22 语音控制智能设备的方法、装置及存储介质

Publications (2)

Publication Number Publication Date
CN108831448A CN108831448A (zh) 2018-11-16
CN108831448B true CN108831448B (zh) 2021-03-02

Family

ID=64154166

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810239487.7A Active CN108831448B (zh) 2018-03-22 2018-03-22 语音控制智能设备的方法、装置及存储介质

Country Status (1)

Country Link
CN (1) CN108831448B (zh)

Families Citing this family (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109215658A (zh) * 2018-11-30 2019-01-15 广东美的制冷设备有限公司 设备的语音唤醒方法、装置和家电设备
CN109450750A (zh) * 2018-11-30 2019-03-08 广东美的制冷设备有限公司 设备的语音控制方法、装置、移动终端和家电设备
CN109243459A (zh) * 2018-11-30 2019-01-18 广东美的制冷设备有限公司 设备的语音唤醒方法、装置、家电设备和控制系统
CN111261151B (zh) * 2018-12-03 2022-12-27 中移(杭州)信息技术有限公司 一种语音处理方法、装置、电子设备及存储介质
JP2020112692A (ja) * 2019-01-11 2020-07-27 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカPanasonic Intellectual Property Corporation of America 方法、制御装置、及びプログラム
CN112152890B (zh) * 2019-06-28 2022-01-21 海信视像科技股份有限公司 一种基于智能音箱的控制系统及方法
CN110361978B (zh) * 2019-07-19 2022-09-06 青岛海尔科技有限公司 基于物联网操作系统的智能设备控制方法和装置及系统
CN112309378B (zh) * 2019-07-24 2023-11-03 广东美的白色家电技术创新中心有限公司 语音识别设备及其唤醒响应方法、计算机存储介质
CN110519133B (zh) * 2019-08-29 2023-11-28 百度在线网络技术(北京)有限公司 一种网络节点设备和无线网络系统
CN110784830B (zh) * 2019-09-18 2022-07-29 华为技术有限公司 数据处理方法、蓝牙模块、电子设备与可读存储介质
CN110879540B (zh) * 2019-12-17 2022-12-23 思必驰科技股份有限公司 智能平台的控制方法、智能平台及计算机可读介质
JP7465700B2 (ja) * 2020-03-27 2024-04-11 株式会社デンソーテン 車載装置および車載装置における音声処理方法
CN111722824B (zh) * 2020-05-29 2024-04-30 北京小米松果电子有限公司 语音控制方法、装置及计算机存储介质
CN113823279B (zh) * 2020-06-16 2024-09-17 阿里巴巴集团控股有限公司 应用程序唤醒方法、装置及电子设备
CN112910747A (zh) * 2021-01-13 2021-06-04 贵州拓视实业有限公司 室内语音转发处理方法及装置
CN113206774A (zh) * 2021-03-19 2021-08-03 武汉特斯联智能工程有限公司 一种基于室内定位信息的智能家居设备的控制方法及装置
CN113225691B (zh) * 2021-04-02 2022-07-08 北京小米移动软件有限公司 音频处理方法、装置及存储介质
CN113625582A (zh) * 2021-08-16 2021-11-09 青岛海尔空调器有限总公司 用于家电设备控制的系统、方法、装置及云端服务器
CN114553622A (zh) * 2022-02-08 2022-05-27 珠海格力电器股份有限公司 语音数据传输方法、装置及语音终端设备
CN114875622B (zh) * 2022-05-31 2023-08-15 四川虹美智能科技有限公司 智能晾晒控制方法及装置
CN115134182B (zh) * 2022-06-29 2023-07-07 歌尔科技有限公司 家居设备的语音控制方法、装置、可穿戴设备及存储介质
CN116192554A (zh) * 2023-04-25 2023-05-30 山东工程职业技术大学 一种基于语音的物联网设备控制方法及系统

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101162393A (zh) * 2007-11-13 2008-04-16 南京邮电大学 基于通用即插即用的自适应通用控制点系统结构和控制方法
CN102694804A (zh) * 2012-05-29 2012-09-26 华南理工大学 基于UPnP协议的智能家居统一平台的实现方法及装置
CN103166937A (zh) * 2011-12-16 2013-06-19 中国移动通信集团公司 家庭网络内的设备访问方法和家庭网关装置
CN105023575A (zh) * 2014-04-30 2015-11-04 中兴通讯股份有限公司 语音识别方法、装置和系统
CN105957527A (zh) * 2016-05-16 2016-09-21 珠海格力电器股份有限公司 一种语音控制电器的方法、装置及语音控制空调
CN106448664A (zh) * 2016-10-28 2017-02-22 魏朝正 一种通过语音控制智能家居设备的系统及方法
CN107528755A (zh) * 2017-09-30 2017-12-29 百度在线网络技术(北京)有限公司 智能设备的控制方法、装置、设备和存储介质
CN107566226A (zh) * 2017-07-31 2018-01-09 深圳真时科技有限公司 一种控制智能家居的方法、装置和系统

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103578474B (zh) * 2013-10-25 2017-09-12 小米科技有限责任公司 一种语音控制方法、装置和设备
TWI557599B (zh) * 2015-11-05 2016-11-11 宏碁股份有限公司 語音控制方法及語音控制系統
US9749583B1 (en) * 2016-03-31 2017-08-29 Amazon Technologies, Inc. Location based device grouping with voice control
KR20170142001A (ko) * 2016-06-16 2017-12-27 삼성전자주식회사 전자 장치, 그의 반향 신호 제거 방법 및 비일시적 컴퓨터 판독가능 기록매체
CN107800594A (zh) * 2016-08-31 2018-03-13 深圳市轻生活科技有限公司 用于家庭语音控制中心的智能路由器及其信号传输方法
CN106448658B (zh) * 2016-11-17 2019-09-20 海信集团有限公司 智能家居设备的语音控制方法及智能家居网关
CN107171874B (zh) * 2017-07-21 2020-02-18 维沃移动通信有限公司 一种语音引擎切换方法、移动终端及服务器
CN107592629A (zh) * 2017-08-17 2018-01-16 北京小米移动软件有限公司 设备控制方法及装置

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101162393A (zh) * 2007-11-13 2008-04-16 南京邮电大学 基于通用即插即用的自适应通用控制点系统结构和控制方法
CN103166937A (zh) * 2011-12-16 2013-06-19 中国移动通信集团公司 家庭网络内的设备访问方法和家庭网关装置
CN102694804A (zh) * 2012-05-29 2012-09-26 华南理工大学 基于UPnP协议的智能家居统一平台的实现方法及装置
CN105023575A (zh) * 2014-04-30 2015-11-04 中兴通讯股份有限公司 语音识别方法、装置和系统
CN105957527A (zh) * 2016-05-16 2016-09-21 珠海格力电器股份有限公司 一种语音控制电器的方法、装置及语音控制空调
CN106448664A (zh) * 2016-10-28 2017-02-22 魏朝正 一种通过语音控制智能家居设备的系统及方法
CN107566226A (zh) * 2017-07-31 2018-01-09 深圳真时科技有限公司 一种控制智能家居的方法、装置和系统
CN107528755A (zh) * 2017-09-30 2017-12-29 百度在线网络技术(北京)有限公司 智能设备的控制方法、装置、设备和存储介质

Also Published As

Publication number Publication date
CN108831448A (zh) 2018-11-16

Similar Documents

Publication Publication Date Title
CN108831448B (zh) 语音控制智能设备的方法、装置及存储介质
CN108520746B (zh) 语音控制智能设备的方法、装置及存储介质
CN108810861B (zh) 智能设备的连接方法、装置及存储介质
EP3136793B1 (en) Method and apparatus for awakening electronic device
US9940829B2 (en) Methods and devices for binding a remote control
EP3148161B1 (en) Message transmission method, message reception method and apparatus, computer program and recording medium
CN104852842A (zh) 信息播报的方法及装置
JP2017531891A (ja) リモートアシスタンス方法、クライアント、プログラム及び記録媒体
CN103997669A (zh) 设备控制方法、装置和系统
US20170171706A1 (en) Device displaying method, apparatus, and storage medium
CN105094321A (zh) 智能设备的控制方法及装置
CN108965413B (zh) 信息交互方法、装置及存储介质
CN105578391B (zh) 信息处理方法、装置、系统及终端设备
CN105049763B (zh) 触发投影的方法及装置
EP3565374A1 (en) Region configuration method and device
CN106292316B (zh) 工作模式切换方法和装置
CN109040651B (zh) 视频通信的方法及装置
CN111010721A (zh) 无线配网方法、无线配网装置及计算机可读存储介质
CN110223500A (zh) 红外设备控制方法及装置
CN109451799B (zh) 剩余关键系统信息的公共控制资源集合的时域信息指示方法
CN110045893A (zh) 直播查询方法及装置
CN106933111B (zh) 一种控制设备的方法及装置
CN108353362B (zh) 系统消息接收方法及系统消息接收装置
CN105376318A (zh) 文件传输方法、装置及系统
CN106878654B (zh) 视频通信的方法及装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant