CN113472614A - 一种语音交互设备及语音交互方法 - Google Patents

一种语音交互设备及语音交互方法 Download PDF

Info

Publication number
CN113472614A
CN113472614A CN202010349781.0A CN202010349781A CN113472614A CN 113472614 A CN113472614 A CN 113472614A CN 202010349781 A CN202010349781 A CN 202010349781A CN 113472614 A CN113472614 A CN 113472614A
Authority
CN
China
Prior art keywords
voice interaction
instruction
slave device
user
wake
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202010349781.0A
Other languages
English (en)
Inventor
孟卫明
高雪松
陈维强
王月岭
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hisense Group Co Ltd
Hisense Co Ltd
Original Assignee
Hisense Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hisense Co Ltd filed Critical Hisense Co Ltd
Priority to CN202010349781.0A priority Critical patent/CN113472614A/zh
Publication of CN113472614A publication Critical patent/CN113472614A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00Data switching networks
    • H04L12/28Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/2803Home automation networks
    • H04L12/2816Controlling appliance services of a home automation network by calling their functionalities
    • H04L12/282Controlling appliance services of a home automation network by calling their functionalities based on user interaction within the home
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/22Procedures used during a speech recognition process, e.g. man-machine dialogue
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/22Procedures used during a speech recognition process, e.g. man-machine dialogue
    • G10L2015/223Execution procedure of a spoken command

Landscapes

  • Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Acoustics & Sound (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Health & Medical Sciences (AREA)
  • Physics & Mathematics (AREA)
  • Computational Linguistics (AREA)
  • Multimedia (AREA)
  • Automation & Control Theory (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Selective Calling Equipment (AREA)
  • Telephonic Communication Services (AREA)

Abstract

本发明实施例公开了一种语音交互设备及语音交互方法,包括:接收器,用于接收第一从设备的切换请求。其中第一从设备为多个语音交互设备中正在与用户进行交互的语音交互设备,切换请求是第一从设备确定无法响应用户的操作指令时生成的。处理器被配置为根据切换请求生成切换指令。其中切换指令用于指示第二从设备响应操作指令,且第二从设备为多个语音交互设备中的一个。发送器,用于向第二从设备发送切换指令。本发明通过根据用户的指令确定出与用户进行交互的设备,提高了智能家居系统的自动化和智能化。

Description

一种语音交互设备及语音交互方法
技术领域
本发明涉及智能家居领域,尤其涉及一种语音交互设备及语音交互方法。
背景技术
智能家居设备,是通过物联网技术将局部区域内的各种智能设备(如智能电视、智能台灯、智能窗帘、智能空调、智能卫浴镜等)连接到一起,由用户进行智能控制。与普通家居相比,智能家居设备不仅具有传统的使用功能,还可以提供全方位的智能语音交互功能,提高用户体验,为生活提供便利。
但是当用户在小范围设置了多个智能家居设备,例如客厅里同时放置智能音箱、智能冰箱、智能电视、智能台灯,当用户在客厅说唤醒词时,可能多个智能家居设备同时被唤醒,接着多个智能家居设备同时被唤醒并进行应答,而造成智能家居设备的后台程序出现业务逻辑混乱的问题。
发明内容
本发明实施例提供一种语音交互设备及语音交互方法,用以防止多个智能家居设备在捕捉到唤醒词后同时响应用户而造成响应失序的问题,进一步提高智能家居设备与用户之间的交互准确性,其中智能家居设备可以为语音交互设备。
第一方面,本发明实施例提供了一种语音交互设备,当该语音交互设备被配置为所处工作环境的多个语音交互设备的主控设备时,包括:接收器,用于接收第一从设备的切换请求。其中第一从设备为主控设备从多个语音交互设备中确定出的正在与用户进行交互的语音交互设备,切换请求是第一从设备根据用户的操作指令生成的。处理器被配置为根据切换请求生成切换指令。其中,切换指令用于指示第二从设备响应操作指令,且第二从设备为多个语音交互设备中的一个。发送器用于向第二从设备发送切换指令。
本申请实施例中,第一从设备在接收到用户的操作指令后,通过主控设备切换到用户真正想要的语音交互设备(也就是第二从设备)上,令其响应用户,达到准确使语音交互设备准确响应用户的目的,使用户体验更好,后续的响应过程更及时、可靠。
在一种可能的设计中,接收器还用于接收用户的唤醒指令。进一步地,处理器还被配置为根据唤醒指令生成唤醒请求消息。上述接收器还用于接收各从设备的唤醒请求消息。其中,各从设备的唤醒请求消息是各从设备根据唤醒指令生成的,且各从设备是多个语音交互设备中除主控设备之外的至少一个。处理器还被配置为根据各从设备的唤醒请求消息和主控设备的唤醒请求消息确定出第一从设备。其中,发送器还用于向第一从设备发送唤醒响应;唤醒响应用于唤醒第一从设备。
进一步地,在一种可能的设计中,唤醒请求消息包括以下至少一项:唤醒指令的匹配度、唤醒指令的振幅值、唤醒指令的采集时间及根据唤醒指令确定的用于指示用户位置的信息。
本申请实施例中,主控设备根据各个从设备发送的唤醒请求消息和自身生成的唤醒请求消息确定出第一从设备,从而实现从多个语音交互设备中快速且唯一地确定出响应用户唤醒指令的第一从设备,比如根据用户位置或/和接收到唤醒指令的振幅大小、接收到唤醒指令的时间信息等因素确定出第一从设备,实现保证第一从设备的响应效果更好的目的。可选地,主控设备也可以被选举为第一从设备。
在一种可能的设计中,当语音交互设备被配置为所处工作环境的多个语音交互设备的第一从设备时,包括:接收器用于接收来自用户的操作指令。处理器被配置为在确定自身无法响应操作指令时,生成切换请求。发送器用于向主控设备发送切换请求。其中,切换请求用于指示主控设备确定出响应操作指令的第二从设备。
本申请实施例中,第一从设备在接收到用户进一步的操作指令之后,对该操作指令进行识别处理,当确定用户想要的响应设备不是自身之后,确定出对应的第二从设备,生成对应的切换请求并发送给主控设备,由主控设备根据切换请求确定出第二从设备,从而完成准确对用户的操作指令进行处理,快速切换到第二从设备,实现准确响应用户操作指令的有益效果。
进一步地,在一种可能的设计中,接收器还用于在被配置为第一从设备之前,接收来自用户的唤醒指令。处理器还被配置为根据唤醒指令生成自身的唤醒请求消息。发送器还用于向主控设备发送自身的唤醒请求消息。
进一步地,在一种可能的设计中,接收器还用于在接收操作指令之前,接收来自主控设备的唤醒响应,其中,唤醒响应用于唤醒第一从设备。处理器,被配置为:根据唤醒响应生成针对唤醒指令的第一响应消息。发送器还用于向用户输出第一响应消息。
在一种可能的设计中,当语音交互设备被配置为所处工作环境的多个语音交互设备的第二从设备时,包括:接收器还用于接收来自主控设备的切换指令。处理器被配置为根据切换指令生成响应操作指令第二响应信息。发送器还用于向用户输出第二响应信息。
本申请实施例中,第二从设备接收来自主控设备的切换指令,并根据切换指令对用户的操作指令进行相应,其中,切换指令中可以包括该操作指令的信息。从而实现令第二从设备准确对用户的操作指令进行响应的目的,令用户的交互更加智能化。
在一种可能的设计中,在确定主控设备之前,对于任一项的语音交互设备,包括:处理器被配置为生成自身的自选举指令。其中,自选举指令包括语音交互设备的地址和语音交互设备生成的随机数。发送器,还用于广播自身的自选举指。接收器,还用于接收其他语音交互设备发送的自选举指令。处理器被配置为根据其他语音交互设备的自选举指令和自身的自选举指令确定出主控设备。
进一步地,在一种可能的设计中,处理器还被配置为确定随机数最大的语音交互设备确定为主控设备;当存在多个随机数最大的语音交互设备时,将地址最大的语音交互设备确定为主控设备。
在一种可能的设计中,在确定出主控设备之后,该主控设备的处理器还被配置为与各从设备建立交互频道,交互频道用于从设备与主控设备之间收发信息。
本申请实施例中,通过自选举确定出主控设备,达到了在同一时刻对多个语音交互设备同时进行远程控制的方案,进一步地,主控设备通过从多个语音交互设备中确定出第一从设备,令其对用户的唤醒指令进行响应,提高了智能家居系统的自动化和智能化,并进一步提升了用户体验。
在一种可能的设计中,第一从设备的接收器还可以用于接收来自用户的操作指令。发送器,用于发送操作指令到主控设备。
本申请实施例中,第一从设备在接收到用户的操作指令之后,直接将该操作指令发送至主控设备,由主控设备进行处理分析,确定出响应该操作指令的语音交互设备。实现由快速确定出响应用户的语音交互设备,帮助提高交互效率。
在一种可能的设计中,主控设备的接收器还可以用于接收来自第一从设备的操作指令。处理器还被配置在确定第一从设备无法响应操作指令时,生成并发送切换指令;切换指令用于指示第二从设备响应操作指令。
本申请实施例中,主控设备对操作指令进行处理分析,确定出响应该指令的语音交互设备,提高控制效率。
第二方面,本发明提供一种语音交互方法,包括:
对于所处工作环境下多个语音交互设备的主控设备,包括:接收第一从设备的切换请求,其中第一从设备为主控设备从多个语音交互设备中确定出的正在与用户进行交互的语音交互设备,切换请求是第一从设备确定无法响应用户的操作指令时生成的。进一步地,主控设备根据切换请求,生成切换指令,其中切换指令用于指示第二从设备响应操作指令,且第二从设备为第一从设备根据操作指令从多个语音交互设备中确定出的语音交互设备,接着向第二从设备发送切换指令。
在一种可能的设计中,在主控设备接收第一从设备的切换请求之前,还包括:接收用户的唤醒指令、各从设备的唤醒请求消息。各从设备的唤醒请求消息是各从设备根据唤醒指令生成的。其中,各从设备是多个语音交互设备中除主控设备之外的至少一个。进一步地,主控设备根据唤醒指令生成唤醒请求消息,接着根据各从设备的唤醒请求消息和主控设备的唤醒请求消息确定出第一从设备。主控设备向第一从设备发送唤醒响应,唤醒响应用于唤醒第一从设备。
其中,在一种可能的设计中,唤醒请求消息包括以下至少一项:唤醒指令的匹配度、唤醒指令的振幅值、唤醒指令的采集时间及根据唤醒指令确定的用于指示用户位置的信息。
在一种可能的设计中,对于所处工作环境下多个语音交互设备的第一从设备,包括:接收来自用户的操作指令。在确定自身无法响应操作指令时,生成切换请求并向主控设备发送切换请求。切换请求用于指示主控设备确定出响应操作指令的第二从设备。
进一步地,在一种可能的设计中,第一从设备在接收来自用户的操作指令之前,还包括:接收来自主控设备的唤醒响应,唤醒响应用于唤醒第一从设备。根据唤醒响应生成针对唤醒指令的第一响应消息,再向用户输出第一响应消息。
在一种可能的设计中,对于所处工作环境下多个语音交互设备中的任意一个,包括:接收来自用户的唤醒指令,根据唤醒指令生成自身的唤醒请求消息,向主控设备发送自身的唤醒请求消息。
进一步地,在一种可能的设计中,在确定主控设备之前,各个语音交互设备生成自身的自选举指令,其中,自选举指令包括语音交互设备的地址和语音交互设备生成的随机数并广播自身的自选举指令,同时接收其他语音交互设备发送的自选举指令。进一步地,各个语音交互设备根据其他语音交互设备的自选举指令和自身的自选举指令确定出主控设备。
在一种可能的设计中,各个语音交互设备根据其他语音交互设备的自选举指令和自身的自选举指令确定出主控设备,包括:确定随机数最大的语音交互设备确定为主控设备;当存在多个随机数最大的语音交互设备时,将地址最大的语音交互设备确定为主控设备。
在一种可能的设计中,对于处于工作环境中的多个语音交互设备的主控设备,在确定自身为主控设备之后,与各从设备建立交互频道,互频道用于从设备与主控设备之间收发信息。
在一种可能的设计中,对于所处工作环境下多个语音交互设备的第二从设备,接收来自主控设备的切换指令,第二从设备再根据切换指令生成响应操作指令第二响应信息,最后第二从设备向用户输出第二响应信息。
在一种可能的设计中,第一从设备在接收到用户的操作指令之后,直接将该操作指令发送到主控设备。
在一种可能的设计中,主控设备接收来自第一从设备的操作指令,在确定第一从设备无法响应操作指令时,生成并发送切换指令;切换指令用于指示第二从设备响应操作指令。
第三方面,本发明实施例提供一种计算设备,包括存储器,用于存储程序指令;处理器,用于调用存储器中存储的程序指令,按照获得的程序执行上述第二方面任意一项的交互方法。
第四方面,本发明实施例提供一种计算机可读非易失性存储介质,包括计算机可读指令,当计算机读取并执行计算机可读指令时,使得计算机执行上述第二方面任意一项的交互方法。
附图说明
为了更清楚地说明本发明实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简要介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域的普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1为本发明实施例提供的一种语音交互设备的架构示意图;
图2a为本发明实施例提供的一种语音交互设备进行切换的应用场景示意图;
图2b为本发明实施例提供的一种切换方法的流程示意图;
图3a为本发明实施例提供一种确定第一从设备的应用场景示意图;
图3b为本发明实施例提供的一种确定第一从设备方法的流程示意图;
图4为本发明实施例提供的一种三角定位法示意图;
图5为本发明实施例提供的一种与用户进行响应的方法流程示意图;
图6为本发明实施例提供的一种自选举方法的流程示意图;
图7为本发明实施例提供的一种语音交互设备的结构示意图;
图8为本发明实施例提供的一种计算设备的结构示意图。
具体实施方式
为了使本发明的目的、技术方案和优点更加清楚,下面将结合附图对本发明作进一步地详细描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其它实施例,都属于本发明保护的范围。
本发明实施例可以应用于各类智能家居系统中,本发明实施例尤其适用于连接于物联网的智能家居系统。其中,智能家居系统中可以包括至少一个语音交互设备。
图1示出了本发明实施例提供的一种语音交互设备的架构示意图,如图1所示,包括在同一工作环境下的多个语音交互设备,其中,有当前被唤醒的正在与用户进行交互的第一从设备101,第一从设备101用于对该工作环境内的用户语音信息进行响应;有作为切换目标设备的第二从设备102;还有作为控制中心的主控设备103,主控设备103用于对其他语音交互设备进行管理,如从该工作环境下的多个语音交互设备中确定出第一从设备101响应用户或指示第二从设备102响应用户;还包括可能的第三从设备104,即当前工作环境中处于休眠状态的语音交互设备。其中,上述各个语音交互设备包括但不限于以下任意一个:智能音箱、智能电视、智能洗衣机、智能卫浴镜、智能台灯、智能冰箱。本发明实施例中不对语音交互设备的类型、数量、结构以及连接方式进行限定。
本发明实施例提供的针对智能家居系统中多个语音交互设备的语音交互方法可以分为三个过程:多个语音交互设备自选举出主控设备的语音交互过程、根据用户的唤醒指令确定出第一从设备的语音交互过程、根据用户的操作指令进行语音交互设备的切换的语音交互过程。
首先,本发明实施例以举例的方式对语音交互设备根据用户的操作指令进行语音交互设备的切换的语音交互过程进行详细描述。
图2a示出了本发明实施例提供的一种语音交互设备进行切换的应用场景示意图,包括:第一从设备101接收用户发出的操作指令,生成切换请求发送给主控设备103,主控设备103生成切换指令并发送给第二从设备102,第二从设备102根据切换指令响应用户,完成交互过程。其中可选地,第一从设备101可以根据操作指令确定出第二从设备102;也可以是主控设备103根据切换请求确定出第二从设备102,切换请求可以包括该操作指令。
图2b示出了本发明实施例提供的一种切换方法的流程示意图,如图2b所示,该流程可以包括:
步骤201,主控设备103接收第一从设备101生成的切换请求;切换请求是第一从设备101确定无法响应用户的操作指令时生成的。
在一种可能的实施例中,第一从设备101接收来自用户的操作指令,在确定自身无法响应操作指令时,生成切换请求并向主控设备103发送切换请求;切换请求用于指示主控设备103确定出响应操作指令的第二从设备102。
示例性地,用户在浴室发出的操作指令为:“帮我看下洗衣机还有多久洗好衣服”,此时第一从设备101可以为卫浴镜,进一步地,卫浴镜发现用户的操作指令与自身的服务内容不匹配,确定自身无法响应该操作指令。
可选地,情况一,第一从设备101,也就是卫浴镜,对用户的操作指令进行处理分析,进一步地根据自身存储的服务能力库中找到应该与用户进行交互的第二从设备102,确定出第二从设备102为洗衣机。进一步地,卫浴镜生成包括该第二从设备102洗衣机的地址信息的切换请求并发送到主控设备103,此时主控设备103可以确定出第二从设备102为洗衣机。
可选地,情况二,卫浴镜在确定出自身无法响应该操作指令之后,生成包括操作指令的切换请求并发送给主控设备103,主控设备103对切换请求中的操作指令进行分析后,确定出第二从设备102为洗衣机。
步骤202,主控设备103根据该切换请求生成切换指令,其中切换指令用于指示第二从设备102响应操作指令。
示例性地,主控设备103接收来自第一从设备101的切换请求,根据该切换请求生成切换指令。
对应上述步骤201中的情况一:主控设备103根据切换请求中包括的第二从设备102的地址信息确定出洗衣机为第二从设备102,并生成切换指令。
对应上述步骤201中的情况二:主控设备103对切换请求中的操作指令进行分析处理之后,确定出洗衣机为第二从设备102,并生成切换指令。其中,切换指令中可以包括第一从设备101的地址信息、第二从设备102的地址信息、操作指令中的至少一个。
在另一种可能的实施例中,第一从设备101接收来自用户的操作指令后,向主控设备103发送该操作指令,进一步地,主控设备103对该操作指令进行分析处理,确定出应该响应该操作指令的语音交互设备:
情况一:当确定出应该响应该操作指令的语音交互设备不是第一从设备101时,确定该语音交互设备为第二从设备102,并向该第二从设备102发送用于指示该第二从设备102根据上述操作指令进行响应的切换指令。可选地,第二从设备可以为主控设备103自身,此时主控设备103可以直接响应用户。
情况二:当确定是第一从设备101时,主控设备103指示第一从设备101与用户进行响应。
步骤203,主控设备103向第二从设备102发送切换指令。
在一种可能的实施例中,第二从设备102接收来自主控设备103的切换指令,根据切换指令生成响应操作指令的第二响应信息,并向用户输出第二响应信息。
示例性地,结合上述场景,主控设备103向第二从设备102(洗衣机)发送切换指令。进一步地,洗衣机根据上述切换指令生成响应操作指令的第二响应信息并向用户输出:“剩余时间15分钟”。主控设备103通过对切换请求进行处理分析,确定出当前应该与用户进行交互的第二从设备102,实现准确响应用户的效果,提高用户体验。
可选的,主控设备103将第二从设备102作为当前被唤醒的语音交互设备,同时指示第一从设备101进入休眠状态。
进一步地,在上述步骤201之前,本发明实施例以举例的方式对确定出第一从设备101的交互过程进行详细描述。
图3a示出了本发明实施例提供的一种确定第一从设备的应用场景示意图,在主控设备103接收第一从设备101的切换请求之前,包括:各个语音交互设备接收来自用户的唤醒指令生成唤醒请求并将唤醒请求发送给主控中心103,确定出第一从设备101,完成交互过程。由此提高交互设备选取的效率,提高用户交互体验,帮助快速确定出对用户进行响应的合适的语音交互设备。
图3b示出了本发明实施例提供的一种确定第一从设备方法的流程示意图,该流程可以包括:
步骤301,主控设备103接收用户的唤醒指令、各从设备的唤醒请求消息;各从设备的唤醒请求消息是各从设备根据唤醒指令生成的,各从设备是多个语音交互设备中除主控设备之外的至少一个。
步骤302,主控设备103根据唤醒指令生成唤醒请求消息。
步骤303,主控设备103根据各从设备的唤醒请求消息和主控设备103的唤醒请求消息确定出第一从设备101。
步骤304,主控设备103向第一从设备101发送应用于唤醒第一从设备101的唤醒响应。其中,唤醒请求消息包括以下至少一项:唤醒指令的匹配度、唤醒指令的振幅值、唤醒指令的采集时间及根据唤醒指令确定的用于指示用户位置的信息。可选地,还可以对上述匹配度、振幅值、采集时间及用户位置中的至少一个进行权重分配后确定出第一从设备101。
本申请实施例中,通过结合上述各个语音交互设备接收到的唤醒指令对应的多个影响因素可以更加准确地从多个语音交互设备中确定出用于与用户进行响应的第一从设备101,提高用户体验,避免了多个语音交互设备同时响应用户而造成麻烦。
示例性的,结合上述场景,当用户在浴室说出包括唤醒词的唤醒指令,比如“你好,哈利”,此时“哈利”为发明实施例中智能家居系统中各个语音交互设备预先设定的唤醒词。上述工作环境下的各个语音设备,也就是主控设备103以及各个从设备接收用户的唤醒指令“你好,哈利”并根据各自接收到的唤醒指令信息生成唤醒请求消息,包括各个语音交互设备根据唤醒指令确定出的匹配度、振幅值、采集时间以及根据唤醒指令确定的用于指示用户位置的信息中的至少一个。
本申请实施例中,主控设备103接收各个语音交互设备根据用户的唤醒指令生成的唤醒请求消息,准确且快速地从多个语音交互设备中确定出用于与用户进行响应的第一从设备101。比如,主控设备101确定唤醒请求消息中唤醒指令的振幅值最大对应的语音交互设备为第一从设备101,且由该设备与用户进行后续的交互,实现及时响应用户,提高了用户体验,避免了多个语音交互设备同时响应用户而造成响应无秩序的麻烦。可选地,当确定出主控设备103确定出第一从设备101之后,可以指示除了主控设备103和第一从设备101的语音交互设备进入待机状态,有效减少资源占用。可选地,当满足条件时(比如主控设备103的唤醒请求消息中唤醒指令的振幅值最高,或者计算出该主控设备103与用户距离最近),主控设备103也可以确定自身为第一从设备101,此时有主控设备103与用户进行交互,响应用户,进一步地提高用户使用体验。
可选地,当采用匹配度决策,对于各个语音交互设备:在接收到用户的唤醒指令的设定时间段内,比如100ms内提取该唤醒指令中的唤醒词匹配度评分信息并上传给主控设备103,主控设备103确定匹配度最高的语音交互设备为第一从设备101。比如各个语音交互设备测得对唤醒指令的匹配度有80%、90%、79%,则确定匹配度90%对应的语音交互设备为第一从设备101。
可选地,当采用振幅值决策,对于各个语音交互设备:获取唤醒指令的振幅值信息并上传给主控设备103,主控设备103确定出取值最高的语音交互设备,允许唤醒并确定该语音交互设备为第一从设备101。比如各个语音交互设备测得对唤醒指令的振幅值有80、90、15,则确定振幅值90对应的语音交互设备为第一从设备101。
可选地,当采用采集时间决策,对于各个语音交互设备:获取唤醒指令的时间戳信息并上传给主控设备103,主控设备103确定出各个语音交互设备中时间戳信息最早对应的设备为第一从设备101。比如,各个语音交互设备通同一工作环境进行时间同步,比如采用通用的网络时间协议在LINUX下的时间同步工具NTP,同步各个语音交互设备的时间(其中各个语音交互设备上默认运行此工具,使得在同一局域网下的语音交互设备的时间保持同步),主控设备103根据各个语音交互设备的时间戳信息,比如2020年4月7日10:00、2020年4月7日10:01、2020年4月7日10:02,确定出其中2020年4月7日10:00对应的设备为第一从设备并允许唤醒。通过对比各个设备的时间戳信息,确定出收到唤醒指令最早的设备为第一从设备,一般来说,收到唤醒指令越快的设备离用户的距离越近,所以可以实现快速确定出近距离的设备为第一从设备的有益效果,提高用户后续的交互体验。
可选地,当采用用户位置决策,对于各个语音交互设备:首先确定出用户位置:采用室内定位系统,例如根据用户的智能终端(该智能终端可以与各个语音交互设备工作在同一工作环境下)进行WIFI室内定位(其中,还可以根据蓝牙、毫米波雷达、射频识别RFID进行定位),各个语音交互设备采集到该智能终端对应的信号源强度信息,依据2.4G无线信号在空气环境中的传输损耗,计算各个语音交互设备与智能终端之间的距离,然后采用如图4所示的三角定位法,计算出该用户位置,其中根据设备A、设备B和设备C与用户之间的距离确定出用户位置。可选地,当条件允许时,设备还可以通过捕捉用户的图像信息进行定位,从而确定出用户位置,实现快速准确地确定出第一从设备的有益效果。
可选的,主控设备103还可以采用融合决策,即对匹配度、振幅值、采集时间以及根据唤醒指令确定的用于指示用户位置的信息等多个影响因素进行权重设置,确定出符合预设条件的第一从设备101。在一种可能的实施例中,可以以举例的方式对确定出第一从设备101对用户进行响应的过程进行详细描述。
图5示出了本发明实施例提供的一种与用户进行响应的方法流程示意图,包括:
步骤501,第一从设备101接收来自主控设备103的唤醒响应,唤醒响应用于唤醒第一从设备101。
步骤502,第一从设备101根据唤醒响应生成针对唤醒指令的第一响应消息。
步骤503,向用户输出第一响应消息。
示例性,结合上述场景,主控设备103根据上述唤醒指令“你好,哈利”在各个语音交互设备中确定出第一从设备101,当第一从设备接收唤醒响应之后,确定自身为第一从设备并向用户输出第一响应消息“收到,主人”。
本申请实施例中,用户在接收到第一响应消息之后可以确定该语音交互设备与自己开始进行交互,由此用户发出操作指令与该语音交互设备进行交互,实现了从多个语音交互设备中确定出第一从设备与用户进行交互,使得交互的过程更加顺利,避免多个语音交互设备同时响应用户而互相造成干扰。
在一种可能的实施例中,步骤301之前,多个语音交互设备进行自选举确定出主控设备103,如图6所示的自选举方法的流程示意图,针对每一个语音交互设备:
步骤601,语音交互设备生成自身的自选举指令;自选举指令包括语音交互设备的地址和语音交互设备生成的随机数。
示例性地,工作在同一工作环境下的各个语音交互设备生成1-100内的随机数,与MAC地址组合,生成自选举指令。
步骤602,语音交互设备广播自身的自选举指令。
示例性地,各个语音交互设备向同一工作环境下的语音交互设备的23571端口发送自选举指令。
步骤603,语音交互设备接收其他语音交互设备发送的自选举指令,根据其他语音交互设备的自选举指令和自身的自选举指令确定出主控设备103。
可选地,确定自选举指令中的随机数最大的语音交互设备确定为主控设备;当存在多个随机数最大的语音交互设备时,将地址最大的语音交互设备确定为主控设备。当然,也可以采用轮流机制等均可以。
各个语音交互设备开启服务监听端口,例如23571,用于接收其他语音交互设备发过来的自选举指令。进一步地,在语音交互设备收到自选举指令之后,与自身生成的随机数进行比对:若比另外一个语音交互设备的随机数小,则标识对应的语音交互设备为主控设备103;若否,则标识自身为主控设备103;若随机数相同,则可以通过由第一位开始逐位比较MAC地址的ASCII大小为准。同时,各个语音交互设备记录对应的排序信息。可选地,设置上述选取主控设备103的业务逻辑运行的时间为30秒。
在一种可能的实施例中,在交互过程中,若从设备发现主控设备103失联后,各个语音交互依据上述排序信息,标记去除失联主控设备103后的第一设备为新的主控设备103。
在一种可能的实施例中,当一个新的语音交互设备上电后,完成自身自选举指令的计算后,向工作环境下的各个语音交互设备的23571端口广播自身的自选举指令。其中,对于各个从设备,收到该设备的自选举指令后,仅维护更新自身的排序表;对于主控设备103,收到新的语音交互设备的自选举指令后,更新自己的排序表,然后将排序表发给新的语音交互设备,还可以发送该主控设备103的唯一标识给新的语音交互设备。
进一步地,新的语音交互设备收到排序表并保存,记录主控设备103的唯一标识。其中,若新的语音交互设备的随机数大于主控设备103的随机数,仅在排序表中更新排序信息,不更换主控设备103,当主控设备103失联后,选取剔除主控设备103后的排序表的第一设备为主控设备103,由此实现新设备快速加入交互过程中,提高用户体验。
进一步地,在一种可能的实施例中,主控设备103与各从设备建立交互频道,交互频道用于从设备与主控设备之间收发信息。其中,主控设备103可以通过交互频道与各个从设备之间建立心跳机制,实时监测各个从设备的工作情况,避免了当一些设备出现异常后造成整个智能家居系统瘫痪的风险,提高交互的稳定性、安全性。
在一种可能的实施例中,对于语音交互设备异常恢复的问题,各个语音交互设备的异常恢复按照新的语音交互设备入网选举进行处理。其中,语音交互设备的异常鉴定主要通过各个设备与主控设备103之间的交互频道中的定时心跳确定的。当设备为从设备时,自己与主控设备103失联,并且尝试更换主控设备103建立交互频道,则该设备异常;当设备为主控设备103时,与各个从设备全部失联则标识自身异常。由此减少设备异常对整个智能家居系统影响,帮助用户实现更高效、快速的交互,提高用户体验。
从上述技术方案可以看出,本发明实施例提供一种针对同一工作环境下多个语音交互设备与用户进行交互的方法,首先,各个语音交互设备上电后自发生成自选举指令并广播给其他语音交互设备,比较自身的自选举指令和其他语音交互设备的自选举指令,确定出主控设备103,其他语音交互设备视为从设备。进一步地,当用户发出包括唤醒词的唤醒指令之后,各个语音交互设备接收该唤醒指令,其中由于每个语音交互设备与用户的距离不同,或处于不同房间,针对于每个语音交互设备接收到的唤醒指令都是不同的(比如针对同一唤醒指令,在用户旁边的语音交互设备接收到的比在隔壁的语音交互设备接收到的唤醒指令更清晰、振幅值更大),进一步地由主控中心进行处理比较,确定出符合要求的第一从设备101,由该设备响应该用户。从而达到了在同一时刻对多个设备同时进行远程控制的效果,无需用户对每个语音交互设备进行繁琐的设置或配置,一旦用户发出唤醒指令,可以自动从多个语音交互设备中确定出第一从设备101与用户进行响应,从而提高了智能家居系统的自动化和智能化,并进一步提升了用户体验。
基于相同的技术构思,本发明实施例还提供一种语音交互设备,图7示出了本发明实施例提供的一种语音交互设备的结构示意图,该语音交互设备具有自选举出主控设备的功能、根据用户的唤醒指令确定出第一从设备103的功能、根据用户的操作指令进行语音交互设备的切换的功能。具体来说,一个语音交互设备在某个时刻可能是作为主控设备103.,另一个时刻变成了第一从设备101,后一时刻又变成了第二从设备102或第三从设备104等。以上述卫浴镜为例,若在自选举过程中卫浴镜选举成功,则卫浴镜为主控设备103;若选举失败,则为从设备。当卫浴镜为主控设备103时,具有上述方法流程中对应的功能。当卫浴镜选举失败,为从设备时,此时用户在浴室发出唤醒指令进行语音交互,则卫浴镜可能被确定为第一从设备101,并与用户进行响应。进一步地,用户发出操作指令的语音:“帮我看下洗衣机还有多久洗好衣服”,显然卫浴镜在对该操作指令进行处理分析之后,会发现自身不为该用户的目标交互设备,无法响应用户,接着触发切换操作流程,切换到洗衣机与用户进行交互,这时洗衣机就是第二从设备102。可选地,切换成功后洗衣机还可以看作第一从设备101,此时卫浴镜可以看作第三从设备104。
以下简单介绍语音交互设备的结构,实际产品中还可能包括麦克、扬声器等设备,不一一列出。如图7所示,该装置包括:
接收器701,用于接收第一从设备的切换请求。其中第一从设备101为主控设备103从多个语音交互设备中确定出的正在与用户进行交互的语音交互设备,切换请求是第一从设备101确定无法响应用户的操作指令时生成的。
处理器702,被配置为根据切换请求,生成切换指令。切换指令用于指示第二从设备102响应操作指令,第二从设备102为多个语音交互设备中的一个。
发送器703,用于向第二从设备102发送切换指令。
上述各部件功能以切换过程为主,其他处理过程可参照发明内容中的介绍,不再一一详述。
可选地,唤醒请求消息包括以下至少一项:唤醒指令的匹配度、唤醒指令的振幅值、唤醒指令的采集时间及根据唤醒指令确定的用于指示用户位置的信息。
基于同一发明构思,本发明实施例还提供了一种计算设备,如图8所示,包括:
存储器802,用于存储程序。
处理器801,用于调用存储器中存储的程序,按照获得的程序执行上述语音交互的方法。
基于同一发明构思,本发明实施例还提供了一种计算机可读非易失性存储介质,包括计算机可读程序,当计算机读取并执行计算机可读程序时,使得计算机执行上述语音交互的方法。
本发明是参照根据本发明实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器,使得通过该计算机或其他可编程数据处理设备的处理器执行的指令可实现流程图中的一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中,使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品,该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上,使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理,从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图的一个流程或多个流程和/或方框图的一个方框或多个方框中指定的功能的步骤。
尽管已描述了本发明的优选实施例,但本领域内的技术人员一旦得知了基本创造性概念,则可对这些实施例做出另外的变更和修改。所以,所附权利要求意欲解释为包括优选实施例以及落入本发明范围的所有变更和修改。
显然,本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样,倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内,则本发明也意图包含这些改动和变型在内。

Claims (14)

1.一种语音交互设备,其特征在于,包括:
接收器,用于接收第一从设备的切换请求;所述第一从设备为多个语音交互设备中正在与用户进行交互的语音交互设备;所述切换请求是所述第一从设备确定无法响应用户的操作指令时生成的;
处理器,被配置为:
根据所述切换请求,生成切换指令;所述切换指令用于指示第二从设备响应所述操作指令;所述第二从设备为所述多个语音交互设备中的一个;
发送器,用于向所述第二从设备发送所述切换指令。
2.如权利要求1所述的语音交互设备,其特征在于,
所述接收器,还用于接收用户的唤醒指令及各从设备的唤醒请求消息;所述各从设备的唤醒请求消息是各从设备根据所述唤醒指令生成的;所述各从设备是所述多个语音交互设备中除所述主控设备之外的至少一个;
所述处理器,还被配置为:
根据所述唤醒指令生成所述主控设备的唤醒请求消息,并根据所述各从设备的唤醒请求消息和所述主控设备的唤醒请求消息确定出所述第一从设备;
所述发送器,还用于向所述第一从设备发送唤醒响应;所述唤醒响应用于唤醒所述第一从设备。
3.如权利要求2所述的语音交互设备,其特征在于,所述唤醒请求消息包括以下至少一项:唤醒指令的匹配度、唤醒指令的振幅值、唤醒指令的采集时间及根据唤醒指令确定的用于指示用户位置的信息。
4.一种语音交互设备,其特征在于,包括:
接收器,用于接收来自用户的操作指令;
处理器,被配置为:
在确定自身无法响应所述操作指令时,生成切换请求;
发送器,用于向主控设备发送所述切换请求;所述切换请求用于指示所述主控设备确定出响应所述操作指令的第二从设备。
5.如权利要求4所述的语音交互设备,其特征在于,
所述接收器,还用于接收来自用户的唤醒指令;
所述处理器,还被配置为:
根据所述唤醒指令生成自身的唤醒请求消息;
所述发送器,还用于向主控设备发送自身的唤醒请求消息。
6.如权利要求4所述的语音交互设备,其特征在于,
所述接收器,还用于在接收所述操作指令之前,接收来自所述主控设备的唤醒响应;所述唤醒响应用于唤醒所述第一从设备;
所述处理器,被配置为:
根据所述唤醒响应生成针对所述唤醒指令的第一响应消息;
所述发送器,还用于向所述用户输出所述第一响应消息。
7.一种语音交互设备,其特征在于,包括:
接收器,用于接收来自主控设备的所述切换指令;
处理器,还被配置为:
根据所述切换指令生成响应操作指令的第二响应信息;
发送器,还用于向用户输出所述第二响应信息。
8.如权利要求1至7任一项所述的语音交互设备,其特征在于,
所述处理器,被配置为:
生成自身的自选举指令;所述自选举指令包括所述语音交互设备的地址和语音交互设备生成的随机数;
所述发送器,还用于广播自身的自选举指令;
所述接收器,还用于接收其他语音交互设备发送的自选举指令;
所述处理器,被配置为:
根据其他语音交互设备的自选举指令和自身的自选举指令确定出主控设备。
9.如权利要求8所述的语音交互设备,其特征在于,所述处理器,还被配置为:
确定随机数最大的语音交互设备为所述主控设备;当存在多个随机数最大的语音交互设备时,将地址最大的语音交互设备确定为所述主控设备。
10.一种语音交互设备,其特征在于,包括:
接收器,用于接收来自第一从设备的操作指令;
处理器被配置为:
在确定所述第一从设备无法响应所述操作指令时,生成并发送切换指令;所述切换指令用于指示第二从设备响应所述操作指令。
11.一种语音交互方法,其特征在于,包括:
接收来自第一从设备的切换请求;所述第一从设备为多个语音交互设备中正在与用户进行交互的语音交互设备;所述切换请求是所述第一从设备确定无法响应用户的操作指令时生成的;
根据所述切换请求,生成并发送切换指令;所述切换指令用于指示第二从设备响应所述操作指令。
12.一种语音交互方法,其特征在于,包括:
接收来自用户的操作指令;在确定自身无法响应所述操作指令时,生成切换请求并向主控设备发送所述切换请求,所述切换请求用于指示所述主控设备确定出响应所述操作指令的第二从设备。
13.一种语音交互方法,其特征在于,包括:
接收来自主控设备的切换指令;所述切换指令是所述主控设备根据第一从设备的切换请求生成的;所述第一从设备为正在与用户进行交互的语音交互设备;所述切换请求是所述第一从设备确定无法响应用户的操作指令时生成的;根据所述切换指令生成响应所述操作指令的第二响应信息。
14.一种语音交互方法,其特,其特征在于,包括:
接收来自第一从设备的操作指令,在确定所述第一从设备无法响应所述操作指令时,生成并发送切换指令;所述切换指令用于指示第二从设备响应所述操作指令。
CN202010349781.0A 2020-04-28 2020-04-28 一种语音交互设备及语音交互方法 Pending CN113472614A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010349781.0A CN113472614A (zh) 2020-04-28 2020-04-28 一种语音交互设备及语音交互方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010349781.0A CN113472614A (zh) 2020-04-28 2020-04-28 一种语音交互设备及语音交互方法

Publications (1)

Publication Number Publication Date
CN113472614A true CN113472614A (zh) 2021-10-01

Family

ID=77865860

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010349781.0A Pending CN113472614A (zh) 2020-04-28 2020-04-28 一种语音交互设备及语音交互方法

Country Status (1)

Country Link
CN (1) CN113472614A (zh)

Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5579219A (en) * 1990-05-25 1996-11-26 Hitachi, Ltd. Multi-processor system and method of processing data thereby
CN107272427A (zh) * 2017-06-16 2017-10-20 北京小米移动软件有限公司 智能设备的控制方法及装置
US20180095642A1 (en) * 2011-02-14 2018-04-05 Universal Electronics Inc. Graphical user interface and data transfer methods in a controlling device
CN109287140A (zh) * 2017-05-16 2019-01-29 苹果公司 用于家庭媒体控制的方法和界面
CN109377987A (zh) * 2018-08-31 2019-02-22 百度在线网络技术(北京)有限公司 智能语音设备间的交互方法、装置、设备及存储介质
CN109391528A (zh) * 2018-08-31 2019-02-26 百度在线网络技术(北京)有限公司 语音智能设备的唤醒方法、装置、设备及存储介质
CN110060675A (zh) * 2019-03-29 2019-07-26 华为技术有限公司 唤醒音箱的方法及设备
CN209496279U (zh) * 2019-01-30 2019-10-15 深圳市杰宇和科技有限公司 物联网设备控制电路、装置及电子产品
CN110389532A (zh) * 2018-04-23 2019-10-29 珠海格力电器股份有限公司 基于智能音箱的控制方法和系统
CN111063343A (zh) * 2019-12-11 2020-04-24 广东美的厨房电器制造有限公司 语音交互方法、装置、电子设备及介质

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5579219A (en) * 1990-05-25 1996-11-26 Hitachi, Ltd. Multi-processor system and method of processing data thereby
US20180095642A1 (en) * 2011-02-14 2018-04-05 Universal Electronics Inc. Graphical user interface and data transfer methods in a controlling device
CN109287140A (zh) * 2017-05-16 2019-01-29 苹果公司 用于家庭媒体控制的方法和界面
CN107272427A (zh) * 2017-06-16 2017-10-20 北京小米移动软件有限公司 智能设备的控制方法及装置
CN110389532A (zh) * 2018-04-23 2019-10-29 珠海格力电器股份有限公司 基于智能音箱的控制方法和系统
CN109377987A (zh) * 2018-08-31 2019-02-22 百度在线网络技术(北京)有限公司 智能语音设备间的交互方法、装置、设备及存储介质
CN109391528A (zh) * 2018-08-31 2019-02-26 百度在线网络技术(北京)有限公司 语音智能设备的唤醒方法、装置、设备及存储介质
CN209496279U (zh) * 2019-01-30 2019-10-15 深圳市杰宇和科技有限公司 物联网设备控制电路、装置及电子产品
CN110060675A (zh) * 2019-03-29 2019-07-26 华为技术有限公司 唤醒音箱的方法及设备
CN111063343A (zh) * 2019-12-11 2020-04-24 广东美的厨房电器制造有限公司 语音交互方法、装置、电子设备及介质

Similar Documents

Publication Publication Date Title
WO2019205134A1 (zh) 智能家居语音控制方法、装置、设备和系统
WO2020073292A1 (zh) 搜索空间参数配置和调整方法及装置
US10420168B2 (en) Data transmission connection control method and device for multiple playing devices, and apparatus
CN112035086B (zh) 音频播放方法及装置
CN108665897B (zh) 一种电器控制方法、装置、存储介质及服务器
CN109450747B (zh) 一种唤醒智能家居设备的方法、装置及计算机存储介质
US20180189025A1 (en) Control method, audio device, and information storage medium
CN111093105A (zh) 一种遥控方法与装置
CN112838967B (zh) 主控设备、智能家居及其控制装置、控制系统及控制方法
CN110632854A (zh) 语音控制方法及装置、语音控制节点及系统及存储介质
CN112770166A (zh) 多媒体智能播放方法、装置、播放设备以及存储介质
CN110555981B (zh) 响应方法与装置、寻找方法与装置、遥控器、终端和介质
US10516974B2 (en) Method for equipment networking and outputting by equipment, and equipment
CN111935517A (zh) 一种智能机顶盒的唤醒方法、装置、电子设备及存储介质
CN111792465B (zh) 一种电梯控制系统及方法
CN113472614A (zh) 一种语音交互设备及语音交互方法
CN113488055B (zh) 一种智能交互方法、服务器及智能交互设备
CN112769658B (zh) 终端控制系统、方法、装置、网关设备和存储介质
CN107466458A (zh) 一种语音控制方法、装置及系统
CN109672595A (zh) 一种智能控制系统
CN105744288A (zh) 一种音视频播放系统中的播放控制方法及装置
CN112216279A (zh) 语音传输方法、智能终端及计算机可读存储介质
CN115086939B (zh) 接收器及其处理方法
CN113257228A (zh) 基于分布式麦克风声控的智能终端控制方法、设备和系统
CN113470635A (zh) 一种智能音箱控制方法、设备、中控设备以及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20211001

RJ01 Rejection of invention patent application after publication