CN115001890B - 基于免应答的智能家电控制方法及装置 - Google Patents

基于免应答的智能家电控制方法及装置 Download PDF

Info

Publication number
CN115001890B
CN115001890B CN202210606301.3A CN202210606301A CN115001890B CN 115001890 B CN115001890 B CN 115001890B CN 202210606301 A CN202210606301 A CN 202210606301A CN 115001890 B CN115001890 B CN 115001890B
Authority
CN
China
Prior art keywords
voice
equipment
response
intelligent household
skills
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202210606301.3A
Other languages
English (en)
Other versions
CN115001890A (zh
Inventor
陈峰峰
张新星
邓宏
高向军
袁伟
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sichuan Hongmei Intelligent Technology Co Ltd
Hefei Meiling Union Technology Co Ltd
Original Assignee
Sichuan Hongmei Intelligent Technology Co Ltd
Hefei Meiling Union Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sichuan Hongmei Intelligent Technology Co Ltd, Hefei Meiling Union Technology Co Ltd filed Critical Sichuan Hongmei Intelligent Technology Co Ltd
Priority to CN202210606301.3A priority Critical patent/CN115001890B/zh
Publication of CN115001890A publication Critical patent/CN115001890A/zh
Application granted granted Critical
Publication of CN115001890B publication Critical patent/CN115001890B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00Data switching networks
    • H04L12/28Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/2803Home automation networks
    • H04L12/2816Controlling appliance services of a home automation network by calling their functionalities
    • H04L12/282Controlling appliance services of a home automation network by calling their functionalities based on user interaction within the home
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/22Procedures used during a speech recognition process, e.g. man-machine dialogue
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/28Constructional details of speech recognition systems
    • G10L15/34Adaptation of a single recogniser for parallel processing, e.g. by use of multiple processors or cloud computing
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/22Procedures used during a speech recognition process, e.g. man-machine dialogue
    • G10L2015/223Execution procedure of a spoken command
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00Data switching networks
    • H04L12/28Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/2803Home automation networks
    • H04L2012/2847Home automation networks characterised by the type of home appliance used
    • H04L2012/285Generic home appliances, e.g. refrigerators
    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02PCLIMATE CHANGE MITIGATION TECHNOLOGIES IN THE PRODUCTION OR PROCESSING OF GOODS
    • Y02P90/00Enabling technologies with a potential contribution to greenhouse gas [GHG] emissions mitigation
    • Y02P90/02Total factory control, e.g. smart factories, flexible manufacturing systems [FMS] or integrated manufacturing systems [IMS]

Landscapes

  • Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • Computational Linguistics (AREA)
  • Multimedia (AREA)
  • Acoustics & Sound (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Health & Medical Sciences (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Theoretical Computer Science (AREA)
  • Mathematical Physics (AREA)
  • Computing Systems (AREA)
  • Signal Processing (AREA)
  • Automation & Control Theory (AREA)
  • Selective Calling Equipment (AREA)

Abstract

本说明书实施例提供一种基于免应答的智能家电控制方法及装置,方法包括:针对每一次唤醒请求,确定是否满足预设的免应答条件;若满足所述免应答条件,则控制所述全空间内的各个智能家电的语音模块关闭语音反馈功能,并针对所述唤醒请求确定对应的应答语音设备;接收所述应答语音设备发送来的语音指令,对所述语音指令进行解析,得到解析结果;确定所述应答语音设备所在的最佳交互设备组,根据所述最佳交互设备组确定对应的目标智能家电;根据所述解析结果,控制所述目标智能家电进行相应处理。本发明在满足免应答条件时不会通过反馈语音设备将目标智能家电的执行情况反馈给用户,可以避免打扰用户的休息、工作等,提高用户的使用体验。

Description

基于免应答的智能家电控制方法及装置
技术领域
本说明书一个或多个实施例涉及语音设备技术领域,尤其是一种基于免应答的智能家电控制方法及装置。
背景技术
语音识别技术是当下应用最广泛的人机交互技术,用户通过发起语音指令去控制语音设备执行相应的操作,比如,控制空调开机、关机。语音交互控制的全流程包括:语音唤醒、发送语音指令、设备执行动作、设备语音反馈等几个关键环节。语音唤醒即预先为语音设备设定一个或多个专有的词汇,用户通过该专有词汇可以将处于唤醒等待状态的语音设备激活,进入语音指令识别等待状态,用户可进一步发起各类语音指令,语音设备在收到后,执行对应的指令动作,并通过设备自带的播放部件,反馈指令执行的结果,提示用户。
但是在一个家庭内有多个智能家电,在一个位置的用户想要控制相距比较远的一个智能家电时,用户需要走到某个智能家电的位置发出指令,该智能家电才会执行命令。例如,用户在卫生间,想要控制客厅的电视机关闭,用户在卫生间时所发出的语音被拾取的效果比较差,此时对客厅电视机的控制效果是比较差的,用户只能走到电视机的附近下发指令。可见这种控制方式非常的不便捷、灵活。而且一般智能家电会对自己的执行情况反馈给用户,这样有时候会打扰到用户。
发明内容
本说明书一个或多个实施例描述了一种基于免应答的智能家电控制方法及装置。
第一方面,本说明书提供了一种基于免应答的智能家电控制方法,在一个家庭的全空间内分布有语音设备,所述语音设备包括智能家电,所述智能家电中的语音模块具有语音拾取和语音反馈功能,各个所述语音设备均与用于进行全空间内语音设备控制的云平台通信连接;
所述方法由所述云平台执行,所述方法包括:
针对每一次唤醒请求,确定是否满足预设的免应答条件,所述免应答条件为用户在用于进行全空间内语音设备控制的应用程序上设定;
若满足所述免应答条件,则控制所述全空间内的各个智能家电的语音模块关闭语音反馈功能,并针对所述唤醒请求确定对应的应答语音设备;其中,所述应答语音设备为用于拾取用户的语音指令并将所述语音指令发送至所述云平台的一个语音设备;
接收所述应答语音设备发送来的语音指令,对所述语音指令进行解析,得到解析结果;确定所述应答语音设备所在的最佳交互设备组,根据所述最佳交互设备组确定对应的目标智能家电;其中,所述最佳交互设备组为预先根据用户在所述全空间中的位置和朝向所确定的至少两个语音设备所形成的分组;
根据所述解析结果,控制所述目标智能家电进行相应处理。
第二方面,本说明书提供了一种基于免应答的智能家电控制装置,在一个家庭的全空间内分布有语音设备,所述语音设备包括智能家电,所述智能家电中的语音模块具有语音拾取和语音反馈功能,各个所述语音设备均与用于进行全空间内语音设备控制的云平台通信连接;
所述装置位于所述云平台上,所述装置包括:
第一确定模块,用于针对每一次唤醒请求,确定是否满足预设的免应答条件,所述免应答条件为用户在用于进行全空间内语音设备控制的应用程序上设定;
第一控制模块,用于若满足所述免应答条件,则控制所述全空间内的各个智能家电的语音模块关闭语音反馈功能,并针对所述唤醒请求确定对应的应答语音设备;其中,所述应答语音设备为用于拾取用户的语音指令并将所述语音指令发送至所述云平台的一个语音设备;
第二确定模块,用于接收所述应答语音设备发送来的语音指令,对所述语音指令进行解析,得到解析结果;确定所述应答语音设备所在的最佳交互设备组,根据所述最佳交互设备组确定对应的目标智能家电;其中,所述最佳交互设备组为预先根据用户在所述全空间中的位置和朝向所确定的至少两个语音设备所形成的分组;
第二控制模块,用于根据所述解析结果,控制所述目标智能家电进行相应处理。
本说明书实施例提供的基于免应答的智能家电控制方法及装置,具有以下有益效果:
(1)本发明实施例首先判断是否满足免应答条件,如果满足免应答条件就会控制各个智能家电关闭语音反馈功能,接着确定对应的应答语音设备,当确定的应答语音设备拾取到用户发出唤醒词之后的语音指令后,将语音指令发送给云平台,云平台对语音指令进行解析,得到解析内容,进而从应答语音设备所在的最佳交互设备组中选择一个能够进行相应处理的智能家电作为目标智能家电,最后云平台控制所述目标智能家电进行相应处理。由于本发明实施例中设置了免应答条件,在满足免应答条件时不会通过反馈语音设备将目标智能家电的执行情况反馈给用户,可以避免打扰用户的休息、工作等,提高用户的使用体验。
(2)在确定目标智能家电时,是从应答语音设备所在的最佳交互设备组中选择的,由于应答语音设备位于用户附近,而最佳交互设备组中的各个语音设备也位于用户附近,因此最终确定的目标智能家电也位于用户附近,即实现了就近寻找目标智能家电,可以进一步提高用户的使用体验。
(3)针对每一次唤醒请求,确定对应的应答语音设备。如果用户想要对与自己相距较远的一个智能家电进行控制,此时用户不必走到这个智能家电的位置,直接在自己的当前位置唤醒一个应答语音设备即可,非常便捷。应答语音设备会拾取用户的语音指令,将用户指令发送给云平台,进而云平台根据语音指令可以控制家庭内的任意一个智能家电执行相应的操作。
附图说明
为了更清楚地说明本说明书实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图是本说明书的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本说明书一个实施例中基于免应答的智能家电控制方法的流程示意图;
图2是本说明书一个实施例中各个智能家电的分布示意图;
图3a是本说明书一个实施例中一个语音终端的示意图;
图3b是本说明书一个实施例中各个语音设备的分布式示意图;
图4是本说明书一个实施例中智能家电控制方法的举例示意图;
图5是本说明书一个实施例中基于免应答的智能家电控制装置的结构框图。
具体实施方式
下面结合附图,对本说明书提供的方案进行描述。
第一方面,本发明提供一种基于免应答的智能家电控制方法。
本发明实施例提供的方案的适用场景可以包括但不限于如下场景:
在一个家庭内分布有多个语音设备,这些语音设备包括各种智能家电,例如,参见图2,在一个家庭的全空间内设置有一个洗衣机、一个冰箱、两个挂式空调、一个柜式空调、两个电视机。这些智能家电均具有语音模块,智能家电中的语音模块能够拾取用户发出的语音指令,把语音指令发送给云平台。语音模块也可以在云平台的控制下进行语音反馈,即通过语音播报的方式告知用户一些设备的执行情况。
但是由于在阳台、入户区域、卫生间等没有设置智能家电,因此这些区域的语音拾取功能会较差,因此可以在这些区域设置语音终端。参见图3a和3b,在入户区域、阳台、餐厅、书房、次卫、主卫、主卧的床头、儿童房的床头等位置均设置了语音终端。语音终端可以拾取用户发出的语音,也可以通过WIFI接入家庭局域网。由于语音终端的体积非常小,不便安装扩音模块,因此语音终端不具有语音播报的功能。
可理解的是,由于各个智能家电的最佳拾音范围很难将一个家庭内的各个角落都覆盖到,因此有时会出现不能对用户的语音指令进行响应的情况,为此本发明实施例在家庭内智能家电覆盖不到的区域内设置了语音终端。这样各个智能家电和各个语音终端的最佳拾音范围可以覆盖一个家庭内的全空间。
当然,语音终端也可以具有灯光提示的功能。例如,当一个语音终端被唤醒作为应答语音设备时可以通过呼吸灯的方式进行提示,当一个语音终端作为应答语音设备,云平台控制对应的目标智能家电执行指令成功后可以控制作为应答语音设备的语音终端采用绿灯快闪三次的方式进行提示,当云平台控制对应的目标智能家电执行指令失败时可以控制作为应答语音设备的语音终端采用黄灯快闪三次的方式进行提示。
其中,一个家庭内的所有语音设备(包括各个语音终端、各个智能家电)均与云平台通信连接,这样云平台可以对家庭内的各个语音设备进行控制。当然,用户的移动终端上可以安装一个应用程序,通过该应用程序也可以对家庭内各个语音终端的控制、配置等。
例如,用户在阳台上发出唤醒词“长虹小白”,阳台上的语音终端被唤醒,该语音终端通过呼吸灯的方式提示用户该语音终端被唤醒,即阳台上的终端被确定为应答语音设备。之后用户说“关闭主卧室的电视机”,该语音终端拾取该语音指令,并将语音指令发送给云平台。云平台对语音指令进行解析后,控制主卧室的电视机关闭。当主卧室的电视机被关闭后,通过客厅的电视机发出语音“主卧室电视机已关闭”,这样用户可以了解到是否成功关闭主卧室的电视机。也就是说,主卧室的电视机为执行设备,也可以称为目标智能家电。客厅的电视机被确定为反馈语音设备,通过语音播报的方式告知用户目标智能家电的执行情况。
综上可知,在一个场景中,在一个家庭的全空间内分布有语音设备,所述语音设备包括智能家电和语音终端,各个所述智能家电和各个所述语音终端的最佳拾音范围的并集能够覆盖所述全空间;所述智能家电中的语音模块具有语音拾取和语音反馈功能,所述语音终端的语音模块具有语音拾取功能;所述语音设备均与用于进行全空间内语音设备控制的云平台通信连接。
本发明实施例提供一种基于免应答的智能家电控制方法。除了上述场景外,该方法也适用于在一个家庭内只存在智能家电的场景,该智能家电的语音模块具有声音拾取功能和声音反馈功能。
可理解的是,如果本发明的一些可选实施例中涉及到了语音终端,则这样的具体实施例适用的场景为:在一个家庭的全空间内分布有语音设备,所述语音设备包括智能家电和语音终端,各个所述智能家电和各个所述语音终端的最佳拾音范围的并集能够覆盖所述全空间;所述智能家电中的语音模块具有语音拾取和语音反馈功能,所述语音终端的语音模块具有语音拾取功能;所述语音设备均与用于进行全空间内语音设备控制的云平台通信连接。例如,在一个家庭内包含至少两个智能家电和至少两个语音终端。
可理解的是,如果本发明的一些可选实施例中没有涉及到语音终端,则这样的具体实施例适用的场景可以为上一段文字所描述的场景,当然也可以为场景:在一个家庭内仅包含智能家电的场景,该智能家电中的语音模块具有语音拾取和语音反馈功能。
本发明实施例提供的方法可以由云平台执行,参见图1,本发明实施例提供的方法可以包括如下步骤S100~S400:
S100、针对每一次唤醒请求,确定是否满足预设的免应答条件,所述免应答条件为用户在用于进行全空间内语音设备控制的应用程序上设定;
其中,所述免应答条件可以包括多种,例如,设置在晚间时间11:00~早上的7:00这个时间段为免应答时间段,当时间在这个时间段时就进入免应答状态。也可以设置免应答条件为用户发出唤醒词的声强很小,认为用户为轻声唤醒,此时也可以进入免应答状态。
具体的,所述免应答条件可以为所述唤醒请求对应的时间段为预设的免应答时间段(例如上例中的晚间时间11:00~早上的7:00这个时间段),或者,各个语音设备拾取到的声音强度中的最大值小于预设值(例如上例中的用户为轻声唤醒)。
当然,还可以设置其它的免应答条件,此处不一一描述。用户可以在应用程序上对具体的免应答条件进行设置,该应用程序可以对全空间内各个语音终端进行控制、配置等。
其中,免应答状态时,应答语音状态仍会拾取用户发出的语音指令,并将指令发送给云平台加以解析,并控制对应的目标智能家电执行,但是不会控制反馈智能设备进行语音反馈。也就是说,本发明实施例所提出的免应答状态是指仍然按照正常方式对目标智能家电进行控制,但是不会把执行情况反馈给用户,以免打扰到用户。
S200、若满足所述免应答条件,则控制所述全空间内的各个智能家电的语音模块关闭语音反馈功能,并针对所述唤醒请求确定对应的应答语音设备;
其中,所述应答语音设备为用于拾取用户的语音指令并将所述语音指令发送至所述云平台的一个语音设备。
也就是说,如果满足免应答条件,就会控制所有的智能家电关闭其语音反馈功能,但是其语音拾取功能不关闭。然后,针对本次的唤醒请求,确定对应的应答语音设备。应答语音设备的作用是拾取用户在发出唤醒词之后发出的语音指令,然后将拾取到的语音指令发送给云平台,云平台对语音指令解析,进而控制目标智能家电执行。
可理解的是,针对每一次唤醒请求,用户在全空间内的位置、说话时的发声方向不同,因此最合适的语音拾取设备不同。故针对每一次唤醒请求都要确定应答语音设备。也就是说,确定应答语音设备的目的是确定一个最适合拾取用户的语音指令的语音设备,这样可以拾取到清晰的语音指令,从而云平台可以解析出准确的指令,进而进行准确的控制,这样可以减少错误控制发生的概率。
例如,用户在发出唤醒词“长虹小白”后,即用户发起一次唤醒请求后,云平台可以确定出一个应答语音设备。接着用户会发出语音指令“打开客厅电视机”,应答语音设备会拾取到该语音指令,将该语音指令发送给云平台,这样云平台对语音指令进行解析,进而控制客厅电视机打开。
下面针对每一次唤醒请求确定应答语音设备的过程进行说明。
S210、接收决策设备发送来的通知信息,所述通知信息用于将决策设备所确定的应答语音设备告知云平台,所述决策设备为所述语音设备中的一个智能家电;
也就是说,应答语音设备是由决策设备确定的,决策设备在确定应答语音设备之后,告知云平台,这样云平台就会得知哪个语音设备作为应答语音设备。决策设备是家庭中各个智能家电中的一个,在整个家庭的全空间内只有一个决策设备,该决策设备为提前确定好的。
其中,每一个语音设备在拾取到用户发出的预设唤醒词时,计算对应的评分值,并判断该评分值是否高于该语音设备对应的评分值阈值;若是,则根据该语音设备的评分值生成所述选举参与请求,并将所述选举参与请求发送至决策设备;所述决策设备根据各个所述选举参与请求中的评分值,从发送所述选举参与请求的各个语音设备中选举出一个语音设备作为所述应答语音设备。
例如,当用户在客厅发出预设唤醒词“长虹小白”后,即用户发起一个唤醒请求后,在入户、客厅、餐厅、阳台、厨房、洗衣房中的7个语音设备均拾取到用户发出的预设唤醒词,然后这7个语音设备会计算各自的评分值,进而判断自己的评分值是否高于自己的评分值阈值。即每一个语音设备都有一个对应的评分值阈值。判断之后,只有入户、客厅、餐厅、阳台中的5个语音设备的评分值高于各自的评分值阈值,这样只有这5个语音设备向决策设备发送选举参与请求。决策设备在接收到这5个语音设备发送来的选举参与请求后,从发送选举参与请求的5个语音设备中选择一个语音设备作为应答语音设备。
进一步的,每一个语音设备的评分值阈值的确定过程包括:所述云平台获取所述全空间内每一个语音设备的历史评分值;所述云平台根据每一个语音设备的所述历史评分值确定该语音设备被选中为应答语音设备的规律数据,根据所述规律数据为该语音设备设置对应的评分值阈值;所述云平台将每一个语音设备的评分值阈值发送至该语音设备中。
可见,每一个语音设备的评分值阈值为云平台确定。
其中,一个语音设备的所述历史评分值为该语音设备在预设历史时间段内每一次拾取到唤醒词后的评分值,所述评分值用于表征用户唤醒该语音设备的概率,一个语音设备的所述规律数据为该语音设备在所述预设历史时间段内被选举为应答语音设备时对应的历史评分值区间。
可理解的是,一个语音设备的评分值可以反映用户唤醒该语音设备的概率,即一个语音设备的评分值越高,用户唤醒该语音设备的概率越高。历史评分值为在历史时间段内一个语音设备每一次拾取到唤醒词时计算出来的评分值,例如,在过去的一个月内客厅的电视机拾取到100次的唤醒词时,针对每一次唤醒请求,计算出来一个评分值,共计100个评分值。依据这100个评分值,从中筛选出该语音设备被选中为应答语音设备时的历史评分值,进而根据被筛选出的历史评分值可以确定该语音设备被选中为应答语音设备时的历史评分区间,即得到规律数据。接着根据一个语音设备对应的历史评分区间确定对应的评分值阈值,例如,一个语音设备被选中为应答语音设备时的历史评分区间为[70,100],依据该历史评分区间为该语音设备设置的评分值阈值为60,即该语音设备的评分值只有高于60时才会参与选举,不然参与选举的机会都没有。最后,云平台将为每一个语音设备设置的评分值阈值发送给对应的语音设备中。
进一步的,每一个语音设备在拾取到用户发出的预设唤醒词时,计算对应的评分值,进而将该评分值和自己的评分值阈值进行比较。其中,当一个语音设备的拾音角度在预设范围内时,该语音设备可以采用第一计算式计算对应的评分值,所述第一计算式包括:
当r在第一范围内时,P2=a*s+b/|r-90|
当r在第二范围内时,P2=b*s-a*|r-90|+c
式中,P2为所述评分值;s为所述拾音声强;r为所述拾音角度;所述第一范围为:r大于等于60且小于80,或者,r大于100且小于等于120;所述第二范围为:r大于等于80且小于等于100;a和b为预设权重,且a大于b,c为10*a+b/10,所述预设范围为第一范围和第二范围的并集。
其中,当r在第一范围内时,拾音强度越大,P2越大;拾音角度越接近90,P2越大,所以拾音强度高且拾音角度接近90的语音设备的唤醒评分是比较高的。而且,当r在第一范围内时,拾音声强的权重为a,而a大于b,说明此时更为关注拾音声强,也就是说,在这种情况下拾音声强更为重要。
其中,当r在第二范围内时,拾音强度越大,P2越大,拾音角度越接近,P2越大,所以拾音强度高且拾音角度接近90的语音设备的评分是比较高的。当r在第二范围内时,拾音角度的权重为a,而a大于b,说明此时更为关注拾音角度,也就是说,在这种情况下,拾音角度跟为重要。
进一步的,当拾音声强相同,而r在第二范围时的评分应大于r在第一范围内的评分,为保证此要求,本发明实施例中当r在第二范围内时的计算式中增加了参数c,且令c为10*a+b/10,该值可以保证在拾音声强相同的情况下r在第二范围时的评分大于r在第一范围内的评分。
其中,c=10*a+b/10是当r为100时、拾音声强为0时,为保证b*s-a*|r-90|+c大于等于a*s+b/|r-90|而计算得到。在该c值的基础上,当r处于第二范围内的任一值时,都能保证在拾音声强相同的情况下r在第二范围时的唤醒评分大于r在第一范围内的唤醒评分。
在实际中,当拾音角度位于预设范围之外时,例如,拾音角度小于60或者大于120时,说明此时语音设备的拾音角度并不是最佳拾音角度,但是也可以采用P2=a*s+b/|r-90|来计算对应的评分值。
在具体实施时,在S210中接收决策设备发送来的通知信息之前,所述方法还包括:根据用户在所述全空间的位置确定对应的最佳交互设备组;确定所述最佳交互设备组是否具有对应的优选应答设备;其中,所述优选应答设备为用户在所述应用程序上针对所述最佳交互设备组而预先设定的一个智能家电;若具有对应的优选应答设备,则确定所述优选应答设备对应的评分值是否高于预设评分值;若高于所述预设评分值,则将所述优选应答设备作为所述应答语音设备;若低于等于所述预设评分值,则执行所述接收决策设备发送来的通知信息的步骤;若不具有对应的优选应答设备,则执行所述接收决策设备发送来的通知信息的步骤。
也就是说,用户可以在移动终端的应用程序上为各个最佳交互设备组设置一个优选应答设备。针对每一次唤醒请求,云平台根据用户的位置确定对应的最佳交互设备组,然后判断是否为该最佳交互设备组设定了优选应答设备。如果设定了优选应答设备,然后计算该优选应答设备的评分值,将该评分值与预设评分值比较。如果该评分值高于预设评分值,说明优选应答设备拾取到的声音强度不是很低,能够满足声音的拾取要求,此时将该优选应答设备作为应答语音设备。
但是如果该优选应答设备的评分值小于等于预设评分值,说明此时优选应答设备拾取的声音强度很低,不能满足声音的拾取要求。因此需要采用决策设备所确定的应答语音设备。当然,如果针对这个最佳交互设备组没有设定对应的优选应答设备,则需要采用决策设备所确定的应答语音设备。
可理解的是,一个最佳交互设备组的优选应答设备为该最佳交互设备组中的一个语音设备,最好为智能家电。
可见,依据以上内容,可以针对每一次唤醒请求确定应答语音设备。
S300、接收所述应答语音设备发送来的语音指令,对所述语音指令进行解析,得到解析结果;确定所述应答语音设备所在的最佳交互设备组,根据所述最佳交互设备组确定对应的目标智能家电;
其中,所述最佳交互设备组为预先根据用户在所述全空间中的位置和朝向所确定的至少两个语音设备所形成的分组。
也就是说,本发明实施例中在确定目标智能家电时,首先确定应答语音设备所在的最佳交互设备组,然后从最佳交互设备组中选择合适的目标智能家电。可理解的是,应答语音设备位于用户的附近,最佳交互设备组中的各个语音设备也位于用户的附近,在最佳交互设备组中寻找目标智能家电,可以实现就近寻找原则,尤其是当一个家庭内有多个可以执行语音指令的智能家电时,就近寻找目标智能家电可以提高用户的使用体验。
在具体实施时,S300中确定目标智能家电的方式可以有两种,下面针对这两种进行说明:
(1)基于最佳交互设备组和执行设备序列确定目标智能家电;
(2)基于最佳交互设备组和询问流程确定目标智能家电。
针对第(1)种,具体的过程包括如下步骤S310~S340:
S310、根据所述解析结果,确定执行所述语音指令所需的设备技能;
也就是说,云平台在接收到应答语音设备发送来的语音指令后,对该语音指令进行解析,从而得知用户想要做什么,进而得知想要实现用户的目的需要智能家电具备的设备技能。
例如,用户的语音指令为“我有点热了”,通过解析得知,为了执行这一语音指令需要智能家电具有降低环境温度的功能,即所需的设备技能为降低环境温度。
S320、判断所述设备技能是否属于通用技能;
由于在家庭的全空间内有多种类型的智能家电,不同的智能家电具有自己的专属技能,例如,电视机具有播放视频、展示菜谱等设备技能,冰箱具有食材管理、食材状态查询的设备技能,空调具有调节温度、湿度的设备技能,洗衣机具有洗涤、烘干等设备技能。执行指令和设备之间是强关联的。
各个智能家电除了各自的专属技能之外,还具有一些通用技能,例如,各个智能家电均具有资讯查询(例如,天气查询、股票查询、百科查询、新闻查询、日期查询等)的设备技能,也具有闹钟提醒的设备技能。用户与任何智能家电的交互都可以得到相同的反馈。
当然,各个智能家电还具有公共技能。例如,售后服务、场景控制等设备技能。公共技能可以为产品提供公共服务和场景控制。虽然各个智能家电都具有售后服务、场景控制的设备技能,但是不同智能家电的售后、场景控制是不同的。
可见,设备技能有多个类型:通用技能、专属技能、公共技能。针对通用技能,各个智能家电针对同一个语音指令可以得到同样的结果。针对公共技能,各个智能家电针对同一个语音指令可以得到不同的结果。针对专属技能,各个智能家电只能执行与其专属技能匹配的语音指令。这里主要将所需的设备技能分为两类:通用技能和非通用技能,非通用技能包括专属技能和公共技能。
S330、若不属于通用技能,则确定所述应答语音设备所在的最佳交互设备组中具备所述设备技能的智能家电的数量;
S340、若所述数量为1,则将所述应答语音设备所在的最佳交互设备组中具备所述设备技能的智能家电作为所述目标智能家电;
也就是说,在应答语音设备所在的最佳交互设备组中具有所需设备技能的智能家电只有1个,就将这个智能家电作为目标智能家电。
S350、若所述数量大于1,则判断所述设备技能是否具有对应的执行设备序列;若具有对应的所述执行设备序列,则确定所述应答语音设备所在的最佳交互设备组中是否包含所述执行设备序列中的智能家电;若是,则将所述最佳交互设备组中所包含的所述执行设备序列中执行优先级最高的智能家电作为目标智能家电。
其中,所述执行设备序列为由具备所述设备技能的各个智能家电按照预定的执行优先级排序得到的一个序列,且所述执行设备序列为用户在用于进行全空间内语音设备控制的应用程序上预先设定。
也就是说,如果在应答语音设备所在的最佳交互设备组中具有所需设备技能的智能家电的数量为多个,此时需要从中选择一个作为目标智能家电,那究竟如何进行选择呢。本发明实施例提供了一个执行设备序列。这个执行设备序列是用户在应用程序上设置的,针对具有同一个设备技能的各个智能家电按照优先级进行排序,得到该设备技能对应的执行设备序列。可以基于这个执行设备序列在最佳交互设备组中选择一个智能家电作为目标智能家电。
例如,在一个家庭内的多个智能家电都具有某个设备技能,例如,一个家庭内的一个冰箱、三个空调和两个电视机均具有播放音乐的设备技能。用户可以在移动终端的应用程序上针对播放音乐这一设备技能设置一个对应的执行设备序列,具体的按照优先级高低将冰箱、空调和电视机进行排序,从而得到所述执行设备序列。在该执行设备序列中,客厅电视机、客厅的柜式空调、主卧的挂式空调、儿童房的挂式空调、冰箱的优先级依次降低。
可理解的是,有的设备技能只有某个智能家电具有,例如,专属技能,针对这种情况不需要设置对应的执行设备序列。
可理解的是,如果所需的设备技能具有对应的执行设备序列,可以将优先级最高的智能家电作为目标智能家电,但是为了兼顾就近选取原则,本发明实施例还考虑了应答语音设备所在的最佳交互设备组,应答语音设备位于用户的附近,最佳交互设备组中的各个语音设备也位于用户的附近。本发明实施例判断在最佳交互设备组中是否包含执行设备序列中的智能家电,如果包含,则将最佳交互设备组中所包含的执行设备序列中执行优先级最高的智能家电作为目标智能家电。
例如,应答语音设备为客厅中的柜式空调,在应答语音设备所在的最佳交互设备组中包括:客厅电视机、阳台的语音终端、客厅的柜式空调,针对播放视频这一设备技能,对应的执行设备序列为:客厅的电视机、主卧的电视机、冰箱(按照优先级从高到低排序)。可见,最佳交互设备组中仅包含了执行设备序列中的客厅的电视机,此时则将客厅的电视机作为目标智能家电。
再例如,应答语音设备为客厅中的柜式空调,在应答语音设备所在的最佳交互设备组中包括:客厅电视机、阳台的语音终端、客厅的柜式空调,针对播放音乐这一设备技能,对应的执行设备序列为:主卧的挂式空调、客厅电视机、客厅的柜式空调、儿童房的挂式空调、冰箱(按照优先级从高到低排序)。可见,最佳交互设备组中包含了执行设备序列中的客厅电视机、客厅的柜式空调,在客厅电视机和客厅的柜式空调中客厅电视机的优先级是最高的,因此将客厅电视机作为目标智能家电。
在具体实施时,如果所需的设备技能具有对应的所述执行设备序列,但是在应答语音设备所在的最佳交互设备组中不包含所述执行设备序列中的智能家电,说明在最佳交互设备组中不存在具有所需的设备技能的智能家电,此时可以在全空间内寻找具有所需的设备技能的智能家电,将寻找到的具有所需的设备技能的智能家电作为目标智能家电。
在具体实施时,如果经过判断得知所需的设备技能不具有对应的执行设备序列,有可能是用户没有在应用程序上针对该设备技能设置对应的执行设备序列,有可能是在全空间内具有该设备技能的智能家电只有一个。针对所需的设备技能不具有对应的执行设备序列这一情况,可以判断应答语音设备所在的最佳交互设备组内是否存在具有所需的设备技能的智能家电。如果有,可以通过询问或者随机选择的方式将最佳交互设备组内具有所需的设备技能的一个智能家电作为目标智能家电。如果应答语音设备所在的最佳交互设备组内不存在具有所需的设备技能的智能家电,则可以通过询问或者随机选择的方式在全空间内寻找具有所需的设备技能的智能家电,将寻找到的具有所需的设备技能的智能家电作为目标智能家电。
可见,针对多个智能家电均具有的设备技能来说,用户可以在应用程序上设置对应的执行设备序列,通过该执行设备序列设置具有同一设备技能的各个智能家电的优先级,进而在选择目标智能家电时,在考虑就近原则的同时,也考虑到智能家电的优先级,即尽可能选择优先级高的智能家电作为目标智能家电,进而尽可能符合用户的使用习惯和喜好。
当然,除了设置执行设备序列这种方式之外,用户还可以在应用程序中设置对应的优先执行设备。在S350中判断所述设备技能是否具有对应的执行设备序列之前,本发明实施例提供的方法还可以包括:
a1、判断所述设备技能是否具有对应的优选执行设备;
其中,所述优先执行设备为用户在用于进行全空间内语音设备控制的应用程序上针对所述设备技能预先设定的一个智能家电。
a2、若具有对应的优选执行设备,则判断所述优选执行设备是否位于所述应答语音设备所在的最佳交互设备组中;若位于所述最佳交互设备组中,则将所述优选执行设备作为所述目标智能家电;
a3、若不具有对应的优选执行设备,则执行所述判断所述设备技能是否具有对应的执行设备序列的步骤。
例如,具有播放音乐这一设备技能的智能家电有主卧的挂式空调、客厅电视机、客厅的柜式空调、儿童房的挂式空调、冰箱等,用户在应用程序上设定了客厅电视机作为优选执行设备。当用户在客厅内发起了一个唤醒请求后,用户发出语音指令为播放歌曲《XXX》,由于此时对应的最佳交互设备组中包括客厅电视机、客厅的柜式空调、阳台的语音终端,由于最佳交互设备组中的客厅电视机和柜式空调均具有播放歌曲的设备技能,可见数量大于1,则需要从客厅电视机和柜式空调中选择一个作为目标智能家电。由于针对播放音乐这一技能用户设定了客厅电视机作为优选执行设备,因此将最佳交互设备组中的客厅电视机作为目标智能家电,即由客厅电视机播放歌曲《XXX》。
如果一个设备技能只能由一个智能家电实现,例如,某种专属技能只能由特定的智能家电执行,对于这种设备技能,用户可以在应用程序上设定其唯一的智能家电作为优选执行设备,也可以不设置优选执行设备。
如果经过a1判断,确定所需的设备技能不具有对应的优选执行设备,则说明用户有可能没有在应用程序上为这一设备技能设置对应的优选执行设备,也有可能该设备技能为专属技能,只有一个智能家电具备这一设备技能。如果确定所需的设备技能不具有对应的优选执行设备,则可以判断是否具有对应的执行设备序列。
如果所需的设备技能具有对应的优选执行设备,但是该优选执行设备不在应答语音设备所在的最佳交互设备组中,为了保证较佳的交互体验,还是在最佳交互设备组中继续寻找具有所需的设备技能的一个智能家电作为目标智能家电。当然,针对这一情况,也可以继续判断所需的设备技能是否具有对应的执行设备序列。
可理解的是,这里首先判断所需的设备技能是否具有对应的优选执行设备,在不具有优选执行设备的情况下再判断是否具有对应的执行设备序列。采用这种先后顺序是因为优选执行设备在应用程序上的设置流程比较简单,而执行设备序列在应用程序上的设置流程稍微复杂些。针对一个设备技能,可以同时设置对应的优选执行设备和执行设备序列。当然,也可以在设置对应的优选执行设备之后,不再设置对应的执行设备序列;当然也可以不设置对应的优选执行设备,而直接设置对应的执行设备序列。当然也可以既不设置优选执行设备,也不设置执行设备序列。其中,基于执行设备序列确定目标智能家电这种方式,不仅考虑了用户的喜好和习惯,也考虑了就近寻找原则,可以在打破用户原有习惯和喜好的同时,有可能会给用户带来更好的使用体验。
可理解的是,如果经过a1判断所需的设备技能不具有对应的优选执行设备,经过S350判断也不具有对应的执行设备序列,此时可以通过询问或者随机选择的方式从最佳交互设备组中选择一个具备所述设备技能的智能家电作为目标智能家电。
针对第(2)种,具体的过程包括如下步骤S360~S390:
S360、根据所述解析结果,确定执行所述语音指令所需的设备技能;判断所述设备技能是否属于通用技能;
S370、若不属于通用技能,则确定所述应答语音设备所在的最佳交互设备组中具备所述设备技能的智能家电的数量;
S380、若所述数量为1,则将所述应答语音设备所在的最佳交互设备组中具备所述设备技能的智能家电作为所述目标智能家电;
以上步骤S360~S380可以参见以上步骤S310~S340。
S390、若所述应答语音设备所在的最佳交互设备组中具备所述设备技能的智能家电的数量大于1,且所述应答语音设备为一个智能家电,则控制所述应答语音设备进入所述最佳交互设备组的询问流程,并根据所述应答语音设备反馈的询问结果,确定所述应答语音设备所在的最佳交互设备组中具备所述设备技能的一个智能家电作为所述目标智能家电;
若所述应答语音设备所在的最佳交互设备组中具备所述设备技能的智能家电的数量大于1,且所述应答语音设备为一个语音终端,则控制所述应答语音设备所在的最佳交互设备组中的一个智能家电进入所述最佳交互设备组的询问流程,并根据该智能家电反馈的询问结果确定所述应答语音设备所在的最佳交互设备组中具备所述设备技能的一个智能家电作为所述目标智能家电。
即,在应答语音设备所在的最佳交互设备组内具有所需的设备技能的智能家电的数量大于1的情况下,增加询问流程。如果应答语音设备为一个智能家电,由于智能家电具有语音播报的功能,因此可以直接利用该智能家电进入询问流程,即利用该应答语音设备通过语音播报的方式询问用户具体的目标智能家电,该应答语音设备拾取到用户的询问结果,将询问结果发送至云平台,云平台进而对询问结果进行解析,确定最终的目标智能家电。具体的询问范围可以仅为最佳交互设备组。
例如,用户在客厅发出唤醒请求“长虹小白”,针对这一唤醒请求,确定应答语音设备为客厅电视机,接着用户发出语音指令“我想听歌曲《XXX》”,此时客厅电视机拾取到这一语音指令后发送给云平台,云平台对该语音指令进行解析,得知设备技能为播放歌曲。而客厅电视机所在的最佳交互设备组内具有播放歌曲这一设备技能的智能家电有电视机、柜式空调。由于具备播放歌曲这一设备技能的智能家电的数量大于1,此时客厅电视机会继续询问用户“是由客厅电视机播放歌曲还是柜式空调播放歌曲”,如果用户说由电视机播放,客厅电视机拾取到这一询问结果后发送给云平台,云平台对用户的询问结果进行解析,得知最终的目标智能家电为客厅电视机,进而控制客厅电视机播放歌曲《XXX》。
然而,在应答语音设备所在的最佳交互设备组内具有所需的设备技能的智能家电的数量大于1的情况下,如果应答语音设备为一个语音终端,由于语音终端不具有语音播报的功能,不能直接利用该语音终端进入询问流程。此时可以在应答语音终端所在的最佳交互设备组中选一个智能家电进入询问流程。
例如,用户在阳台发出唤醒请求“长虹小白”,针对这一唤醒请求,确定应答语音设备为阳台上的语音终端,接着用户发出语音指令“我想听歌曲《XXX》”,此时阳台上的语音终端拾取到这一语音指令后发送给云平台,云平台对该语音指令进行解析,得知设备技能为播放歌曲。而阳台上的语音终端所在的最佳交互设备组内具有播放歌曲这一设备技能的智能家电有电视机、柜式空调。在阳台上的语音终端所在的最佳交互设备组内随机选择柜式空调进入询问流程,即柜式空调询问用户“是由客厅电视机播放歌曲还是柜式空调播放歌曲”,如果用户说由电视机播放,柜式空调拾取到这一询问结果后发送给云平台,云平台对用户的询问结果进行解析,得知最终的目标智能家电为客厅电视机,进而控制客厅电视机播放歌曲《XXX》。
以上可以在所需设备技能为非通用技能时,在最佳交互设备组中确定一个智能家电作为目标智能家电。而当所需设备技能为通用技能时,可以采用如下方式确定目标智能家电:如果所需的设备技能为通用技能,而应答语音设备为一个智能家电,此时可以直接将该智能家电作为目标智能家电。而如果应答语音设备为一个语音终端,此时可以在应答语音终端所在的最佳交互设备组中随机选择一个智能家电作为目标智能家电。
也就是说,如果设备技能为通用技能,将当前的应答语音设备作为目标智能家电,这是最简单的方式,只不过当应答语音设备为语音终端时,由于语音终端仅仅是语音拾取,所以将应答语音设备所在的最佳交互设备组中的一个智能家电作为目标智能家电。
举例来说,参见图4,用户在阳台上发出了“长虹小白”,阳台上的语音终端被确定为应答语音设备,当用户说“天气怎么样”后,应答语音设备拾取到该段语音,并将该段语音发送至云平台,云平台确定天气查询为通用指令,此时由于应答语音设备为语音终端,因此选取了应答语音设备所在的最佳交互设备组中的电视机作为目标智能家电和反馈语音终端,通过该目标智能家电查询天气,并通过电视机通过语音播报的方式告知用户今天的天气。
S400、根据所述解析结果,控制所述目标智能家电进行相应处理。
在云平台确定最终的目标智能家电之后,云平台便可以控制目标智能家电执行相应的操作,例如,控制空调制冷、控制电视机播放歌曲等。在执行完毕后结束,不必控制反馈语音设备进行语音反馈,避免打扰到用户的休息或工作。
在具体实施时,本发明实施例提供的方法还可以包括:
若不满足所述免应答条件,则针对所述唤醒请求确定对应的应答语音设备和反馈语音设备;在所述目标智能家电处理完毕后,控制所述反馈语音设备对处理结果进行语音播报。
也就是说,如果不满足免应答条件,就需要为用户提供反馈,为此在确定应答语音设备的同时还需要确定反馈语音设备。在目标智能家电处理完毕后,通过反馈语音设备进行语音反馈,以便用户了解情况。
在具体实施时,确定反馈语音设备的过程可以包括:
若所述应答语音设备为一个智能家电,则所述应答语音设备同时也作为所述反馈语音设备;若所述应答语音设备为一个语音终端,则将所述语音应答设备所在的所述最佳交互设备组中的一个智能家电作为所述反馈语音设备。
也就是说,如果应答语音设备为智能家电,则可以将该应答语音设备也作为反馈语音设备,此时应答语音设备和反馈语音设备为同一个设备。如果应答语音设备为语音终端,则可以在所在的最佳交互设备组中选择一个智能家电作为反馈语音终端,此时应答语音设备和反馈语音设备为不同的设备。
下面针对云平台确定最佳交互设备组的过程进行说明:
b1、所述云平台在历史唤醒任务中获取发出预设唤醒词的用户在所述全空间中的位置和朝向;
b2、获取各个语音设备拾取到所述预设唤醒词的声音强度,并根据所述声音强度从各个语音设备中选出第一语音设备;其中,各个所述第一语音设备所拾取到的声音强度高于其它的语音设备所拾取到的声音强度,且各个所述第一语音设备所拾取到的声音强度之间的最大差值在预设范围内;
b3、获取各个所述第一语音设备的拾音角度,并根据各个所述第一语音设备的拾音角度,从所述第一语音设备中选出拾音角度落在最佳拾音角度范围内的第二语音设备;
b4、将各个所述第二语音设备形成针对用户的所述位置和所述朝向的最佳交互设备组。
举例来说,用户在客厅和餐厅的中间位置并面向阳台发出“长虹小白”,此时入户、客厅和餐厅内的5个语音设备拾取到的声音强度稍微高于洗衣房和厨房内的语音设备拾取到的声音强度,入户、客厅和餐厅内的5个语音设备拾取到的声音强度远高于在书房、卧室和卫生间中的语音设备拾取到的声音强度。根据各个语音设备拾取到的声音强度筛选出第一语音设备。由于用户站在客厅和餐厅的中间位置,此时入户、客厅和餐厅内的5个语音设备拾取的声音强度是差不多的,而且这5个语音设备是所有语音设备中声音强度最大的语音设备,因此将这5个语音设备作为第一语音设备。
进一步的,由于用户面向阳台,因此位于客厅和阳台中的3个语音设备面向用户的发声方向,而入户、餐厅内的两个语音设备背向用户的发声方向,因此客厅和阳台中的3个语音设备的拾音角度位于最佳拾音角度范围,而入户、餐厅内的两个语音设备的拾音角度未处于最佳拾音角度范围内,因此将客厅和阳台中的3个语音设备作为第二语音设备,这3个第二语音设备形成一个最佳交互设备组。当然,如果用户面向的是餐厅方向,则餐厅和入户的两个语音设备形成一个最佳交互设备组。
可见,依据用户的位置和朝向可以对应一个最佳交互设备组,实际上当用户在某一个位置时就可以对应一个最佳交互设备组,例如,用户处于坐在客厅沙发上看电视时,此时对应的最佳交互设备组为客厅和阳台的三个语音设备形成的最佳交互设备组。
在实际中,用户处于家庭的全空间内的不同位置和朝向时,针对多次的唤醒请求,可以形成多个最佳交互设备组,将多个最佳交互设备组进行保存,在后续可以直接使用最佳交互设备组。
可见,最佳交互设备组为一个虚拟空间分组,在这个虚拟空间分组中有至少两个语音设备,如果仅有一个语音设备就没有必要划分为一个组了。
可理解的是,在一个家庭的全空间内为了能够拾取到用户在各个角落发出的语音指令,设置了多个语音终端,使智能家电和语音终端的最佳拾音范围的并集能够覆盖全空间,这样可以避免或大大减少因没有拾取到用户指令而没有对用户指令进行响应的问题。而且各个语音终端与云平台连接,这样可以形成针对一个家庭的全空间内的各个语音终端的控制。
本发明实施例提供的方法,首先判断是否满足免应答条件,如果满足免应答条件就会控制各个智能家电关闭语音反馈功能,接着确定对应的应答语音设备,当确定的应答语音设备拾取到用户发出唤醒词之后的语音指令后,将语音指令发送给云平台,云平台对语音指令进行解析,得到解析内容,进而从应答语音设备所在的最佳交互设备组中选择一个能够进行相应处理的智能家电作为目标智能家电,最后云平台控制所述目标智能家电进行相应处理。由于本发明实施例中设置了免应答条件,在满足免应答条件时不会通过反馈语音设备将目标智能家电的执行情况反馈给用户,可以避免打扰用户的休息、工作等,提高用户的使用体验。在确定目标智能家电时,是从应答语音设备所在的最佳交互设备组中选择的,由于应答语音设备位于用户附近,而最佳交互设备组中的各个语音设备也位于用户附近,因此最终确定的目标智能家电也位于用户附近,即实现了就近寻找目标智能家电,可以进一步提高用户的使用体验。针对每一次唤醒请求,确定对应的应答语音设备。如果用户想要对与自己相距较远的一个智能家电进行控制,此时用户不必走到这个智能家电的位置,直接在自己的当前位置唤醒一个应答语音设备即可,非常便捷。应答语音设备会拾取用户的语音指令,将用户指令发送给云平台,进而云平台根据语音指令可以控制家庭内的任意一个智能家电执行相应的操作。
第二方面,本发明实施例提供一种基于免应答的智能家电控制装置,在一个家庭的全空间内分布有语音设备,所述语音设备包括智能家电,所述智能家电中的语音模块具有语音拾取和语音反馈功能,各个所述语音设备均与用于进行全空间内语音设备控制的云平台通信连接;
所述装置位于所述云平台上,参见图5,所述装置包括:
第一确定模块,用于针对每一次唤醒请求,确定是否满足预设的免应答条件,所述免应答条件为用户在用于进行全空间内语音设备控制的应用程序上设定;
第一控制模块,用于若满足所述免应答条件,则控制所述全空间内的各个智能家电的语音模块关闭语音反馈功能,并针对所述唤醒请求确定对应的应答语音设备;其中,所述应答语音设备为用于拾取用户的语音指令并将所述语音指令发送至所述云平台的一个语音设备;
第二确定模块,用于接收所述应答语音设备发送来的语音指令,对所述语音指令进行解析,得到解析结果;确定所述应答语音设备所在的最佳交互设备组,根据所述最佳交互设备组确定对应的目标智能家电;其中,所述最佳交互设备组为预先根据用户在所述全空间中的位置和朝向所确定的至少两个语音设备所形成的分组;
第二控制模块,用于根据所述解析结果,控制所述目标智能家电进行相应处理。
可理解的是,第二方面提供的装置和第一方面提供的方法是对应的,本方面中有关内容的解释、举例、有益效果等内容可以参见第一方面中的有关内容,此处不再赘述。
本说明书中的各个实施例均采用递进的方式描述,各个实施例之间相同相似的部分互相参见即可,每个实施例重点说明的都是与其他实施例的不同之处。尤其,对于装置实施例而言,由于其基本相似于方法实施例,所以描述的比较简单,相关之处参见方法实施例的部分说明即可。
本领域技术人员应该可以意识到,在上述一个或多个示例中,本发明所描述的功能可以用硬件、软件、挂件或它们的任意组合来实现。当使用软件实现时,可以将这些功能存储在计算机可读介质中或者作为计算机可读介质上的一个或多个指令或代码进行传输。
以上所述的具体实施方式,对本发明的目的、技术方案和有益效果进行了进一步详细说明,所应理解的是,以上所述仅为本发明的具体实施方式而已,并不用于限定本发明的保护范围,凡在本发明的技术方案的基础之上,所做的任何修改、等同替换、改进等,均应包括在本发明的保护范围之内。

Claims (9)

1.一种基于免应答的智能家电控制方法,其特征在于,在一个家庭的全空间内分布有语音设备,所述语音设备包括智能家电,所述智能家电中的语音模块具有语音拾取和语音反馈功能,各个所述语音设备均与用于进行全空间内语音设备控制的云平台通信连接;
所述方法由所述云平台执行,所述方法包括:
针对每一次唤醒请求,确定是否满足预设的免应答条件;其中,所述免应答条件为用户在用于进行全空间内语音设备控制的应用程序上设定,所述免应答条件为所述唤醒请求对应的时间段为预设的免应答时间段或者各个语音设备拾取到的声音强度中的最大值小于预设值;
若满足所述免应答条件,则控制所述全空间内的各个智能家电的语音模块关闭语音反馈功能,并针对所述唤醒请求确定对应的应答语音设备;其中,所述应答语音设备为用于拾取用户的语音指令并将所述语音指令发送至所述云平台的一个语音设备;
接收所述应答语音设备发送来的语音指令,对所述语音指令进行解析,得到解析结果;确定所述应答语音设备所在的最佳交互设备组,根据所述最佳交互设备组确定对应的目标智能家电;其中,所述最佳交互设备组为预先根据用户在所述全空间中的位置和朝向所确定的至少两个语音设备所形成的分组;
根据所述解析结果,控制所述目标智能家电进行相应处理;
其中,所述根据所述最佳交互设备组确定对应的目标智能家电,包括:
根据所述解析结果,确定执行所述语音指令所需的设备技能;
判断所述设备技能是否属于通用技能;
若不属于通用技能,则确定所述应答语音设备所在的最佳交互设备组中具备所述设备技能的智能家电的数量;
若所述数量为1,则将所述应答语音设备所在的最佳交互设备组中具备所述设备技能的智能家电作为所述目标智能家电;
若所述数量大于1,则判断所述设备技能是否具有对应的执行设备序列;若具有对应的所述执行设备序列,则确定所述应答语音设备所在的最佳交互设备组中是否包含所述执行设备序列中的智能家电;若是,则将所述最佳交互设备组中所包含的所述执行设备序列中执行优先级最高的智能家电作为目标智能家电;其中,所述执行设备序列为由具备所述设备技能的各个智能家电按照预定的执行优先级排序得到的一个序列,且所述执行设备序列为用户在用于进行全空间内语音设备控制的应用程序上预先设定。
2.根据权利要求1所述的方法,其特征在于,所述方法还包括:
若不满足所述免应答条件,则针对所述唤醒请求确定对应的应答语音设备和反馈语音设备;在所述目标智能家电处理完毕后,控制所述反馈语音设备对处理结果进行语音播报。
3.根据权利要求1所述的方法,其特征在于,所述语音设备还包括语音终端,所述智能家电和所述语音终端的最佳拾音范围的并集能够覆盖所述全空间,所述语音终端的语音模块具有语音拾取功能;
对应的,所述根据所述最佳交互设备组确定对应的目标智能家电,包括:
根据所述解析结果,确定执行所述语音指令所需的设备技能;
判断所述设备技能是否属于通用技能;
若不属于通用技能,则确定所述应答语音设备所在的最佳交互设备组中具备所述设备技能的智能家电的数量;
若所述数量为1,则将所述应答语音设备所在的最佳交互设备组中具备所述设备技能的智能家电作为所述目标智能家电;
若所述应答语音设备所在的最佳交互设备组中具备所述设备技能的智能家电的数量大于1,且所述应答语音设备为一个智能家电,则控制所述应答语音设备进入所述最佳交互设备组的询问流程,并根据所述应答语音设备反馈的询问结果,确定所述应答语音设备所在的最佳交互设备组中具备所述设备技能的一个智能家电作为所述目标智能家电;
若所述应答语音设备所在的最佳交互设备组中具备所述设备技能的智能家电的数量大于1,且所述应答语音设备为一个语音终端,则控制所述应答语音设备所在的最佳交互设备组中的一个智能家电进入所述最佳交互设备组的询问流程,并根据该智能家电反馈的询问结果确定所述应答语音设备所在的最佳交互设备组中具备所述设备技能的一个智能家电作为所述目标智能家电。
4.根据权利要求1所述的方法,其特征在于,所述针对所述唤醒请求确定对应的应答语音设备,包括:
接收决策设备发送来的通知信息,所述通知信息用于将决策设备所确定的应答语音设备告知云平台,所述决策设备为所述语音设备中的一个智能家电;
其中,每一个语音设备在拾取到用户发出的预设唤醒词时,计算对应的评分值,并判断该评分值是否高于该语音设备对应的评分值阈值;若是,则根据该语音设备的评分值生成选举参与请求,并将所述选举参与请求发送至决策设备;所述决策设备根据各个所述选举参与请求中的评分值,从发送所述选举参与请求的各个语音设备中选举出一个语音设备作为所述应答语音设备;
其中,每一个语音设备具有一个对应的评分值阈值,所述评分值阈值的确定过程包括:所述云平台获取所述全空间内每一个语音设备的历史评分值和被选举为应答语音设备的规律数据;根据每一个语音设备的所述历史评分值和所述规律数据,为该语音设备设置对应的评分值阈值;将每一个语音设备的评分值阈值发送至该语音设备中;其中,一个语音设备的所述历史评分值为该语音设备在预设历史时间段内每一次拾取到唤醒词后的评分值,所述评分值用于表征用户唤醒该语音设备的概率,一个语音设备的所述规律数据为该语音设备在所述预设历史时间段内被选举为应答语音设备时对应的历史评分值区间。
5.根据权利要求4所述的方法,其特征在于,当一个语音设备的拾音角度在预设范围内时,该语音设备采用第一计算式计算对应的评分值,所述第一计算式包括:
当r在第一范围内时,P2=a*s+b/|r-90|
当r在第二范围内时,P2=b*s-a*|r-90|+c
式中,P2为所述评分值;s为拾音声强;r为所述拾音角度;所述第一范围为:r大于等于60且小于80,或者,r大于100且小于等于120;所述第二范围为:r大于等于80且小于等于100;a和b为预设权重,且a大于b,c为10*a+b/10。
6.根据权利要求1所述的方法,其特征在于,所述语音设备还包括语音终端,所述智能家电和所述语音终端的最佳拾音范围的并集能够覆盖所述全空间,所述语音终端的语音模块具有语音拾取功能;
对应的,所述针对所述唤醒请求确定对应的反馈语音设备,包括如下至少一项:
若所述应答语音设备为一个智能家电,则所述应答语音设备同时也作为所述反馈语音设备;
若所述应答语音设备为一个语音终端,则将所述应答语音设备所在的所述最佳交互设备组中的一个智能家电作为所述反馈语音设备。
7.根据权利要求1所述的方法,其特征在于,所述最佳交互设备组的确定过程包括:
所述云平台在历史唤醒任务中获取发出预设唤醒词的用户在所述全空间中的位置和朝向;获取各个语音设备拾取到所述预设唤醒词的声音强度,并根据所述声音强度从各个语音设备中选出第一语音设备;其中,各个所述第一语音设备所拾取到的声音强度高于其它的语音设备所拾取到的声音强度,且各个所述第一语音设备所拾取到的声音强度之间的最大差值在预设差值范围内;获取各个所述第一语音设备的拾音角度,并根据各个所述第一语音设备的拾音角度,从所述第一语音设备中选出拾音角度落在最佳拾音角度范围内的第二语音设备;将各个所述第二语音设备形成针对用户的所述位置和所述朝向的最佳交互设备组。
8.根据权利要求5所述的方法,其特征在于,所述接收决策设备发送来的通知信息之前,所述方法还包括:
根据用户在所述全空间的位置确定对应的最佳交互设备组;
确定所述最佳交互设备组是否具有对应的优选应答设备;其中,所述优选应答设备为用户在所述应用程序上针对所述最佳交互设备组而预先设定的一个智能家电;
若具有对应的优选应答设备,则确定所述优选应答设备对应的评分值是否高于预设评分值;若高于所述预设评分值,则将所述优选应答设备作为所述应答语音设备;若低于等于所述预设评分值,则执行所述接收决策设备发送来的通知信息的步骤;
若不具有对应的优选应答设备,则执行所述接收决策设备发送来的通知信息的步骤。
9.一种基于免应答的智能家电控制装置,其特征在于,在一个家庭的全空间内分布有语音设备,所述语音设备包括智能家电,所述智能家电中的语音模块具有语音拾取和语音反馈功能,各个所述语音设备均与用于进行全空间内语音设备控制的云平台通信连接;
所述装置位于所述云平台上,所述装置包括:
第一确定模块,用于针对每一次唤醒请求,确定是否满足预设的免应答条件,所述免应答条件为用户在用于进行全空间内语音设备控制的应用程序上设定;
第一控制模块,用于若满足所述免应答条件,则控制所述全空间内的各个智能家电的语音模块关闭语音反馈功能,并针对所述唤醒请求确定对应的应答语音设备;其中,所述应答语音设备为用于拾取用户的语音指令并将所述语音指令发送至所述云平台的一个语音设备;
第二确定模块,用于接收所述应答语音设备发送来的语音指令,对所述语音指令进行解析,得到解析结果;确定所述应答语音设备所在的最佳交互设备组,根据所述最佳交互设备组确定对应的目标智能家电;其中,所述最佳交互设备组为预先根据用户在所述全空间中的位置和朝向所确定的至少两个语音设备所形成的分组;
第二控制模块,用于根据所述解析结果,控制所述目标智能家电进行相应处理;
其中,所述第二确定模块具体用于:根据所述解析结果,确定执行所述语音指令所需的设备技能;判断所述设备技能是否属于通用技能;若不属于通用技能,则确定所述应答语音设备所在的最佳交互设备组中具备所述设备技能的智能家电的数量;若所述数量为1,则将所述应答语音设备所在的最佳交互设备组中具备所述设备技能的智能家电作为所述目标智能家电;若所述数量大于1,则判断所述设备技能是否具有对应的执行设备序列;若具有对应的所述执行设备序列,则确定所述应答语音设备所在的最佳交互设备组中是否包含所述执行设备序列中的智能家电;若是,则将所述最佳交互设备组中所包含的所述执行设备序列中执行优先级最高的智能家电作为目标智能家电;其中,所述执行设备序列为由具备所述设备技能的各个智能家电按照预定的执行优先级排序得到的一个序列,且所述执行设备序列为用户在用于进行全空间内语音设备控制的应用程序上预先设定。
CN202210606301.3A 2022-05-31 2022-05-31 基于免应答的智能家电控制方法及装置 Active CN115001890B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202210606301.3A CN115001890B (zh) 2022-05-31 2022-05-31 基于免应答的智能家电控制方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210606301.3A CN115001890B (zh) 2022-05-31 2022-05-31 基于免应答的智能家电控制方法及装置

Publications (2)

Publication Number Publication Date
CN115001890A CN115001890A (zh) 2022-09-02
CN115001890B true CN115001890B (zh) 2023-10-31

Family

ID=83030406

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210606301.3A Active CN115001890B (zh) 2022-05-31 2022-05-31 基于免应答的智能家电控制方法及装置

Country Status (1)

Country Link
CN (1) CN115001890B (zh)

Citations (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106354025A (zh) * 2016-10-31 2017-01-25 广州华凌制冷设备有限公司 一种基于语音识别的智能家电控制方法及装置、空调
CN107622767A (zh) * 2016-07-15 2018-01-23 青岛海尔智能技术研发有限公司 家电系统的语音控制方法与家电控制系统
CN107622652A (zh) * 2016-07-15 2018-01-23 青岛海尔智能技术研发有限公司 家电系统的语音控制方法与家电控制系统
CN109166580A (zh) * 2018-09-17 2019-01-08 珠海格力电器股份有限公司 一种语音反馈提示控制方法、系统及空调器
US10332513B1 (en) * 2016-06-27 2019-06-25 Amazon Technologies, Inc. Voice enablement and disablement of speech processing functionality
CN110211580A (zh) * 2019-05-15 2019-09-06 海尔优家智能科技(北京)有限公司 多智能设备应答方法、装置、系统及存储介质
CN110415694A (zh) * 2019-07-15 2019-11-05 深圳市易汇软件有限公司 一种多台智能音箱协同工作的方法
CN111048067A (zh) * 2019-11-11 2020-04-21 云知声智能科技股份有限公司 一种麦克风响应方法及装置
CN112311635A (zh) * 2020-11-05 2021-02-02 深圳市奥谷奇技术有限公司 语音打断唤醒方法、装置及计算机可读存储介质
WO2021081744A1 (zh) * 2019-10-29 2021-05-06 深圳市欢太科技有限公司 语音信息处理方法、装置、设备及存储介质
CN113053388A (zh) * 2021-03-09 2021-06-29 北京百度网讯科技有限公司 语音交互方法、装置、设备和存储介质
CN113393835A (zh) * 2020-03-11 2021-09-14 阿里巴巴集团控股有限公司 语音交互系统、方法和语音设备
WO2022052691A1 (zh) * 2020-09-11 2022-03-17 华为技术有限公司 基于多设备的语音处理方法、介质、电子设备及系统

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105334743B (zh) * 2015-11-18 2018-10-26 深圳创维-Rgb电子有限公司 一种基于情感识别的智能家居控制方法及其系统
CN107146611B (zh) * 2017-04-10 2020-04-17 北京猎户星空科技有限公司 一种语音响应方法、装置及智能设备
CN111862974A (zh) * 2020-07-15 2020-10-30 广州三星通信技术研究有限公司 智能设备的控制方法及智能设备

Patent Citations (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10332513B1 (en) * 2016-06-27 2019-06-25 Amazon Technologies, Inc. Voice enablement and disablement of speech processing functionality
CN107622767A (zh) * 2016-07-15 2018-01-23 青岛海尔智能技术研发有限公司 家电系统的语音控制方法与家电控制系统
CN107622652A (zh) * 2016-07-15 2018-01-23 青岛海尔智能技术研发有限公司 家电系统的语音控制方法与家电控制系统
CN106354025A (zh) * 2016-10-31 2017-01-25 广州华凌制冷设备有限公司 一种基于语音识别的智能家电控制方法及装置、空调
CN109166580A (zh) * 2018-09-17 2019-01-08 珠海格力电器股份有限公司 一种语音反馈提示控制方法、系统及空调器
CN110211580A (zh) * 2019-05-15 2019-09-06 海尔优家智能科技(北京)有限公司 多智能设备应答方法、装置、系统及存储介质
CN110415694A (zh) * 2019-07-15 2019-11-05 深圳市易汇软件有限公司 一种多台智能音箱协同工作的方法
WO2021081744A1 (zh) * 2019-10-29 2021-05-06 深圳市欢太科技有限公司 语音信息处理方法、装置、设备及存储介质
CN111048067A (zh) * 2019-11-11 2020-04-21 云知声智能科技股份有限公司 一种麦克风响应方法及装置
CN113393835A (zh) * 2020-03-11 2021-09-14 阿里巴巴集团控股有限公司 语音交互系统、方法和语音设备
WO2022052691A1 (zh) * 2020-09-11 2022-03-17 华为技术有限公司 基于多设备的语音处理方法、介质、电子设备及系统
CN112311635A (zh) * 2020-11-05 2021-02-02 深圳市奥谷奇技术有限公司 语音打断唤醒方法、装置及计算机可读存储介质
CN113053388A (zh) * 2021-03-09 2021-06-29 北京百度网讯科技有限公司 语音交互方法、装置、设备和存储介质

Also Published As

Publication number Publication date
CN115001890A (zh) 2022-09-02

Similar Documents

Publication Publication Date Title
CN105700389B (zh) 一种智能家庭自然语言控制方法
CN110211580B (zh) 多智能设备应答方法、装置、系统及存储介质
JP7060811B2 (ja) 機器制御システム
CN107527615B (zh) 信息处理方法、装置、设备、系统及服务器
JP2018036397A (ja) 応答システムおよび機器
JP6355939B2 (ja) 音声サーバおよびその制御方法、並びに音声システム
US20200280763A1 (en) Video integration with home assistant
KR20050010866A (ko) 국부적 환경내의 사람들의 위치와 개인적 선호들에 따른국부적 환경의 분위기에 적응하는 시스템 및 방법
CN109661856A (zh) 光照控制
KR20080096239A (ko) 주방tv 및 홈네트워크시스템 및 가전기기를 음성으로제어하는 음성인식 네트워크주방tv시스템.
WO2019082630A1 (ja) 情報処理装置、及び情報処理方法
US11153147B2 (en) Dynamic event notification routing and delivery device and corresponding systems and methods
WO2017018032A1 (ja) 連携システム、機器制御サーバ、制御対象機器、および端末装置
CN110632854A (zh) 语音控制方法及装置、语音控制节点及系统及存储介质
CN114898750B (zh) 基于协同响应的智能家电控制方法、装置及系统、设备
CN115001890B (zh) 基于免应答的智能家电控制方法及装置
CN114120996A (zh) 语音交互方法及装置
CN115001891B (zh) 基于分级管理的智能家电控制方法及装置
CN114879527B (zh) 基于智能分组和技能匹配的智能家电控制方法及装置
CN114175145A (zh) 多模态智能音频设备系统注意力表达
US20230154460A1 (en) Digital assistant device for resolving command conflicts
CN114999484A (zh) 交互语音设备的选举方法及系统
US11818820B2 (en) Adapting a lighting control interface based on an analysis of conversational input
WO2015046362A1 (ja) 出力可否判定装置、出力可否判定装置の制御方法、出力制御装置、出力制御装置の制御方法、制御プログラム、出力装置、およびメッセージ出力システム
US11741987B2 (en) Information providing method

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
TA01 Transfer of patent application right

Effective date of registration: 20230919

Address after: 621050 No. 303 Jiuzhou Road, Fucheng District, Mianyang, Sichuan.

Applicant after: SICHUAN HONGMEI INTELLIGENT TECHNOLOGY Co.,Ltd.

Applicant after: Hefei Meiling Union Technology Co.,Ltd.

Address before: 621050 No. 303 Jiuzhou Road, Fucheng District, Mianyang, Sichuan.

Applicant before: SICHUAN HONGMEI INTELLIGENT TECHNOLOGY Co.,Ltd.

TA01 Transfer of patent application right
GR01 Patent grant
GR01 Patent grant