CN107077844B - 语音联合协助的实现方法、装置及机器人 - Google Patents

语音联合协助的实现方法、装置及机器人 Download PDF

Info

Publication number
CN107077844B
CN107077844B CN201680002711.XA CN201680002711A CN107077844B CN 107077844 B CN107077844 B CN 107077844B CN 201680002711 A CN201680002711 A CN 201680002711A CN 107077844 B CN107077844 B CN 107077844B
Authority
CN
China
Prior art keywords
robot
voice
collected
environment
environmental
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201680002711.XA
Other languages
English (en)
Other versions
CN107077844A (zh
Inventor
骆磊
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Cloudminds Shanghai Robotics Co Ltd
Original Assignee
Cloudminds Shenzhen Robotics Systems Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Cloudminds Shenzhen Robotics Systems Co Ltd filed Critical Cloudminds Shenzhen Robotics Systems Co Ltd
Publication of CN107077844A publication Critical patent/CN107077844A/zh
Application granted granted Critical
Publication of CN107077844B publication Critical patent/CN107077844B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/22Procedures used during a speech recognition process, e.g. man-machine dialogue
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/22Procedures used during a speech recognition process, e.g. man-machine dialogue
    • G10L2015/223Execution procedure of a spoken command

Landscapes

  • Engineering & Computer Science (AREA)
  • Computational Linguistics (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • Acoustics & Sound (AREA)
  • Multimedia (AREA)
  • Manipulator (AREA)

Abstract

本公开涉及一种语音联合协助的实现方法、装置及机器人。在用户发出的语音是用于唤醒机器人群组中的目标机器人的情况下,为了使得目标机器人听到用户发出的语音,本公开提出由机器人群组中的其他机器人联合协助用户与目标机器人之间的语音交互,使得机器人与目标机器人之间的语音交互不再受限于用户发出的语音的最大传播距离,或者受限于目标机器人所处的环境噪音。

Description

语音联合协助的实现方法、装置及机器人
技术领域
本公开涉及信息处理领域,特别涉及一种语音联合协助的实现方法、装置及机器人。
背景技术
随着机器人的普及,越来越多的用户开始使用机器人作为个人助理。为最大化地给用户提供便利,用户与机器人之间通常进行语音交互。如果用户需要借助于某个机器人完成某项事务,则可以发出语音,以与具有相应功能的机器人交互,进而使得具有相应功能的机器人完成用户为其分配的事务。例如:用户在一个房间中因碰洒了一杯水而发出用于唤醒擦地机器人的语音,擦地机器人在听到用户发出的语音后,将洒在地上的水擦干,无需用户亲自动手擦干地上的水。可见,机器人给用户带来了极大的便利。
发明内容
本公开的主要目的是提供一种语音联合协助的实现方法、装置及机器人,以通过其他机器人协助用户与目标机器人之间的语音交互,优化了机器人的使用体验。
为了达到上述目的,本公开第一方面提供一种语音联合协助的实现方法,所述方法包括:
在本体机器人采集到的环境语音满足设定条件时,将采集到的环境语音发送给其他机器人;
其中,所述设定条件用于指示采集到的环境语音不是用于唤醒本体机器人。
可选地,所述方法还包括:
在接收到其他机器人发送的环境语音后,对接收到的环境语音进行识别。
可选地,所述设定条件包括:采集到的环境语音无法被本体机器人识别;
将采集到的环境语音发送给其他机器人,包括:
在本体机器人所处的网络中广播采集到的环境语音。
可选地,所述设定条件包括:本体机器人识别出采集到的环境语音对应的机器人是目标机器人,且所述目标机器人不是本体机器人;
将采集到的环境语音发送给其他机器人,包括:
将采集到的环境语音发送给所述目标机器人。
可选地,所述方法还包括:
根据本体机器人的语音识别库,确定采集到的环境语音是否为唤醒本体机器人的语音;
在本体机器人所处的网络中广播采集到的环境语音之后,接收身份确认应答,所述身份确认应答用于指示所述采集到的环境语音对应的机器人;
在本体机器人的语音识别库中记录采集到的环境语音与对应的机器人之间的关联关系。
可选地,所述方法还包括:
在接收到发送广播的机器人以广播方式发送的环境语音之后,对接收到的环境语音进行识别;
在识别出接收到的环境语音用于唤醒本体机器人时,向发送广播的机器人发送所述身份确认应答。
可选地,所述方法还包括:
根据采集到的环境语音,对用户的位置进行定位;
在采集到的环境语音满足所述设定条件时,还将所述用户的位置信息发送给其他机器人。
本公开第二方面提供一种语音联合协助的实现装置,包括:
环境语音发送模块,用于在本体机器人采集到的环境语音满足设定条件时,将采集到的环境语音发送给其他机器人;
其中,所述设定条件用于指示采集到的环境语音不是用于唤醒本体机器人。
可选地,所述装置还包括:
第一语音识别模块,用于在接收到其他机器人发送的环境语音后,对接收到的环境语音进行识别。
可选地,所述设定条件包括:采集到的环境语音无法被本体机器人识别;
所述环境语音发送模块用于:
在本体机器人所处的网络中广播采集到的环境语音。
可选地,所述设定条件包括:本体机器人识别出采集到的环境语音对应的机器人是目标机器人,且所述目标机器人不是本体机器人;
所述环境语音发送模块用于:
将采集到的环境语音发送给所述目标机器人。
可选地,所述装置还包括:
确定模块,用于根据本体机器人的语音识别库,确定采集到的环境语音是否为唤醒本体机器人的语音;
接收模块,用于在本体机器人所处的网络中广播采集到的环境语音之后,接收身份确认应答,所述身份确认应答用于指示所述采集到的环境语音对应的机器人;
记录模块,用于在本体机器人的语音识别库中记录采集到的环境语音与对应的机器人之间的关联关系。
可选地,所述装置还包括:
第二语音识别模块,用于在接收到发送广播的机器人以广播方式发送的环境语音之后,对接收到的环境语音进行识别;
应答发送模块,用于在识别出接收到的环境语音用于唤醒本体机器人时,向发送广播的机器人发送所述身份确认应答。
可选地,所述装置还包括:
定位模块,用于根据采集到的环境语音,对用户的位置进行定位;
位置信息发送模块,用于在采集到的环境语音满足所述设定条件时,还将所述用户的位置信息发送给其他机器人。
本公开第三方面提供一种计算机程序产品,所述计算机程序产品包含能够由可编程的装置执行的计算机程序,所述计算机程序具有当由所述可编程的装置执行时用于上述语音联合协助的实现方法的代码部分。
本公开第四方面提供一种非临时性计算机可读存储介质,其特征在于,所述非临时性计算机可读存储介质中包括一个或多个程序,所述一个或多个程序用于执行上述语音联合协助的实现方法。
本公开第五方面提供一种机器人,包括:语音采集装置、非临时性计算机可读存储介质;以及一个或者多个处理器,用于执行所述非临时性计算机可读存储介质中的程序;所述非临时性计算机可读存储介质中存储有用于执行上述语音联合协助的实现方法的指令。
采用本公开提供的语音联合协助的实现方法,在用户发出的语音是用于唤醒机器人群组的某一个机器人(即目标机器人)的情况下,为了使得目标机器人听到用户发出的语音,由机器人群组中的其他机器人联合协助用户与目标机器人之间的语音交互。也就是说,借助于机器人群组中的其他机器人,搭建用户与目标机器人之间的交互通道,使得机器人与目标机器人之间的语音交互不再受限于用户发出的语音的最大传播距离,或者受限于目标机器人所处的环境噪音。增加了目标机器人对用户发出的语音的响应概率,提高了机器人的使用体验。
本公开的其他特征和优点将在随后的具体实施方式部分予以详细说明。
附图说明
附图是用来提供对本公开的进一步理解,并且构成说明书的一部分,与下面的具体实施方式一起用于解释本公开,但并不构成对本公开的限制。在附图中:
图1是根据一示例性实施例示出的机器人群组的示意图。
图2是根据一示例性实施例示出的一种语音联合协助的实现方法的流程图。
图3是根据一示例性实施例示出的一种语音联合协助的实现方法的另一示意图。
图4是根据一示例性实施例示出的一种语音联合协助的实现装置的框图。
图5是根据一示例性实施例示出的一种语音联合协助的实现装置1000的另一框图。
具体实施方式
以下结合附图对本公开的具体实施方式进行详细说明。应当理解的是,此处所描述的具体实施方式仅用于说明和解释本公开,并不用于限制本公开。
机器人给用户带来极大的便利,前提条件是机器人听到用户发出的语音。在某些场景下,机器人可能无法听到用户发出的语音。一种可能的场景是:机器人距离用户较远。由于用户发出的语音的具有最大响度,因而用户发出的语音具有最大传播距离。在机器人与用户之间的距离大于该最大传播距离的情况下,机器人无法听到用户发出的语音。另一种可能的场景是:机器人处于非稳态噪音环境下。由于机器人受到非稳态噪音的干扰,所以可能无法听到用户发出的语音。
为此,本公开提出一种语音联合协助的实现方法,该方法适用于由多个机器人组成的机器人群组,机器人群组中的各个机器人通常分布在不同的位置上。在用户发出的语音是用于唤醒机器人群组的某一个机器人(以下简称目标机器人)的情况下,为了使得目标机器人听到用户发出的语音,本公开提出由机器人群组中的其他机器人联合协助用户与目标机器人之间的语音交互。也就是说,借助于机器人群组中的其他机器人,搭建用户与目标机器人之间的交互通道,使得机器人与目标机器人之间的语音交互不再受限于用户发出的语音的最大传播距离,或者受限于目标机器人所处的环境噪音。
示例地,请参考图1,图1是根据一示例性实施例示出的机器人群组的示意图。图1以机器人群组包括三个机器人为例。如图1所示,机器人群组包括:机器人A、机器人B以及机器人C,三者分别分布于不同的房间中,其中机器人A距离用户最近,与用户在同一房间内,机器人B距离用户较远,机器人C距离用户最远。
在用户发出的语音是用于唤醒机器人C的情况下,采用本公开提供的语音联合协助的实现方法,通过机器人A和机器人B搭建用户与机器人C之间的交互通道,由机器人A和机器人B对用户发出的语音进行接力,进而使得机器人C对用户发出的语音进行响应。如图1所示,机器人A距离用户较近,所以机器人A最先听到该语音,然后将该语音转发给机器人B,机器人B再将接收到的环境语音转发给机器人C,以此实现联合语音协助。
接下来,对本公开提供的语音联合协助的实现方法进行说明。该方法适用于机器人群组中的任一机器人。请参考图2,图2是根据一示例性实施例示出的一种语音联合协助的实现方法的流程图。如图2所示,该方法包括以下步骤:
步骤S21:在本体机器人采集到的环境语音满足设定条件时,将采集到的环境语音发送给其他机器人;
其中,所述设定条件用于指示采集到的环境语音不是用于唤醒本体机器人。
本公开中,本体机器人不是特指某一机器人,而是一个相对的概念,是执行该方法的机器人,可以是机器人群组中的任一机器人。本体机器人配置有语音联合协助的实现装置,由语音联合协助的实现装置执行上述步骤。
本体机器人内置有语音采集模块,用于采集环境语音。环境语音是指本体机器人所处的环境中的语音,根据本体机器人与用户之间的位置关系,环境语音可能包括用户发出的语音,语音采集模块将用户发出的语音转换为语音信号,以供语音联合协助的实现装置对该语音信号进行进一步处理。语音联合协助的实现装置在该语音信号满足设定条件时,将该语音信号打包成语音数据包发送给其他机器人。
根据机器人群组中的各个机器人与用户之间的相对位置关系,机器人群组中可能有一个或多个机器人的语音采集模块均采集到用户发出的语音,进而各自触发与之通信的语音联合协助的实现装置执行本公开提供的语音联合协助的实现方法。
语音采集模块可以是内置于语音联合协助的实现装置的组件,还可以独立于语音联合协助装置。语音采集模块与语音联合协助的实现装置之间可以进行通信。在语音采集模块采集到环境语音时,语音采集模块将该事件通知给语音联合协助的实现装置,语音联合协助的实现装置对该事件做出响应。
由于用户发出的语音具有随机性,即用户需要唤醒的机器人(下文简称目标机器人)是随机的,可能是本体机器人,也可能是机器人群组中除本体机器人外的其他机器人。对于目标机器人是本体机器人的情况,由本体机器人自身直接听到用户发出的语音,无需采用本公开提供的语音联合协助的实现方法;对于目标机器人不是本体机器人的情况,可以采用本公开提供的语音联合协助的实现方法,本体机器人将采集到的环境语音转发给机器人群组中的其他机器人,接收到环境语音的其他机器人再作为本体机器人,并将接收到的环境语音等同于自身采集到的环境语音,执行本公开提供的语音联合协助的实现方法,直到目标机器人接收到环境语音为止。
由于在目标机器人不是本体机器人的情况下,可以采用本公开提供的语音联合协助的实现方法,所以本公开提出设定条件,以指示采集到的环境语音不是用于唤醒本体机器人。因而语音联合协助的实现装置对语音采集模块采集到环境语音这一事件做出的响应是:将语音采集模块采集到的环境语音与该设定条件进行比较,在采集到的环境语音满足设定条件时,将采集到的环境语音发送给机器人群组中的其他机器人。
示例地,用户在一个房间中因碰洒了一杯水而发出用于唤醒擦地机器人(以图1中的机器人C示意)的语音,用户发出的语音作为环境语音在空气中传播,由于机器人群组中的各个机器人与用户之间的相对位置关系,本体机器人(以图1中的机器人A示意)中的语音采集模块采集到该环境语音,因而触发本体机器人中的语音联合协助的实现装置将该环境语音与设定条件进行比较,在该环境语音满足设定条件时,也即该环境语音不是用于唤醒本体机器人时,将该环境语音发送给其他机器人(以图1示意,机器人A将该环境语音发送给机器人B)。接收到该环境语音的其他机器人(以图1中的机器人B示意)再作为本体机器人,并将接收到的环境语音等同于自身采集到的环境语音,执行本公开提供的语音联合协助的实现方法,直到目标机器人接收到该环境语音为止。
可见,采用本公开提供的语音联合协助的实现方法,可以借助于机器人群组中的其他机器人,搭建用户与目标机器人之间的交互通道,使得机器人与目标机器人之间的语音交互不再受限于用户发出的语音的最大传播距离,或者受限于目标机器人所处的环境噪音。增加了目标机器人对用户发出的语音的响应概率,提高了机器人的使用体验。
可选地,如图2所示,本公开提供的语音联合协助的实现方法除包括步骤S21外,还包括以下步骤:
步骤S22:在接收到其他机器人发送的环境语音后,对接收到的环境语音进行识别。
对于本体机器人来说,一方面,本体机器人内的语音采集模块对环境语音进行采集,在本体机器人内的语音采集模块采集到环境语音时,触发本体机器人内的语音联合协助的实现装置执行上述步骤S21;另一方面,由于本体机器人处于机器人群组中,所以可能会收到其他机器人发送的环境语音,在本体机器人接收到其他机器人发送的环境语音后,触发本体机器人内的语音联合协助的实现装置执行上述步骤S22。
本体机器人对接收到的环境语音进行识别,首先要求本体机器人具有语音识别功能。在本体机器人具有语音识别功能的前提下,在识别出用户发出的语音是用于唤醒本体机器人自身的时,生成针对用户发出的语音的应答;在识别出用户发出的语音不是用户唤醒本体机器人自身的时,也即在用户发出的语音不满足设定条件时,将用户发出的语音发送给机器人群组中的其他机器人。
采用以上技术方案,机器人群组中每个作为本体机器人的机器人,都会对接收到的环境语音进行识别,进而保证机器人群组中至少有一个机器人识别出用户发出的语音是用于唤醒自身的,进而生成针对用户发出的语音的应答,以使用户及时获得目标机器人的应答,提高了目标机器人的响应效率。避免了用户发出的语音反复在机器人群组中的各个机器人之间相互转发,节约了网络传输资源以及机器人群组中的各个机器人的功耗。
可选地,请参考图3,图3是根据一示例性实施例示出的一种语音联合协助的实现方法的另一示意图。如图3所示,本公开提供的语音联合协助的实现方法除包括步骤S21外,还包括以下步骤:
步骤S23:根据采集到的环境语音对用户的位置进行定位;
步骤S24:在采集到的环境语音满足所述设定条件时,还将所述用户的位置信息发送给其他机器人。
其中,步骤S23与步骤S21的执行顺序不分先后,两者可以先后执行或者并行执行。图3以步骤S21先于步骤S24执行为例。
可选地,本体机器人可以根据采集到的环境语音,对用户的位置进行定位。一种可能的定位方法是:机器人群组中的各个机器人根据能够获得自身的位置信息,并且机器人群组中采集到同一用户发出的语音的一个或多个机器人还可以判断出用户声音来自的方向,因此,一种可能的情况是:在有两个或多个机器人采集到同一用户发出的语音的情况下,两个或多个采集到环境语音机器人判断出用户声音来自的方向,进而确定用户的位置信息。另一种可能的情况是:在仅有一个机器人采集到用户发出的语音的情况下,可以知道用户在某一条线上,结合地图,可以确定用户的位置信息。
在本体机器人确定用户的位置信息之后,在采集到的环境语音满足设定条件时,本体机器人除将采集到的环境语音发送给其他机器人外,还可以将用户的位置信息发送给其他机器人。
由于将用户的位置信息发送给其他机器人,而目标机器人可能是其他机器人中的,所以便于目标机器人根据用户的位置信息快速行进到用户身边,缩短了用户等待目标机器人做出响应的时间,提高了目标机器人的响应效率。
可选地,根据机器人群组中每个作为本体机器人是否能够识别本体机器人自身采集到的环境语音,本体机器人对采集到的环境语音的发送方式不同。
在本体机器人不能识别本体机器人自身内的语音采集模块采集到的环境语音的前提下,所述设定条件包括:采集到的环境语音无法被本体机器人识别;将采集到的环境语音发送给其他机器人,包括:在本体机器人所处的网络中广播采集到的环境语音。
由于本体机器人内的语音采集模块采集到的环境语音无法被本体机器人自身识别,所以为了节省本体机器人的功耗,本体机器人内的语音联合协助的实现装置将该环境语音广播给自身所处的网络中的其他机器人。
示例地,以图1所示的机器人群组为例,假设图1所示的机器人群组中的机器人A、机器人B以及机器人C处于同一网络中。在机器人A内的语音采集模块采集到的环境语音c不是用于唤醒机器人A自身,且无法被机器人A自身识别时,机器人A内的语音联合协助的实现装置将环境语音c广播给机器人B和机器人C。
在本体机器人能够识别本体机器人自身内的语音采集模块采集到的环境语音的前提下,所述设定条件包括:本体机器人识别出采集到的环境语音对应的机器人是目标机器人,且所述目标机器人不是本体机器人;将采集到的环境语音发送给其他机器人,包括:将采集到的环境语音发送给所述目标机器人。
由于本体机器人能够识别自身采集到的环境语音,所以本体机器人可以得到识别结果。在识别结果为:采集到的环境语音对应的机器人是目标机器人,且目标机器人不是本体机器人时,由于本体机器人已经识别出采集到的环境语音对应的机器人是目标机器人,所以本体机器人内的语音联合协助的实现装置将该环境语音发送给目标机器人。
示例地,以图1所示的机器人群组为例。在机器人A内的语音采集模块采集到的环境语音c不是用于唤醒机器人A自身,且机器人A识别出环境语音c对应的机器人是机器人C时,机器人A内的语音联合协助的实现装置将环境语音c发送给机器人C。
上述两种不同的对采集到的环境语音的发送方式,可以适用于不具有语音识别功能的机器人、具有部分语音识别功能的机器人(仅能够对自身的语音识别库中的各个语音进行识别的机器人)、以及具有完全语音识别功能的机器人(能够对任何语音进行识别的机器人)。
机器人群组可能既包括不具有语音识别功能的机器人,也包括具有部分语音识别功能的机器人,还包括具有完全识别功能的机器人,因此,具有不同功能的机器人均可以作为本体机器人,以执行本公开提供的语音联合协助的实现方法,拓展了本公开提供的语音联合协助的实现方法的适用范围。
可选地,在本体机器人以广播方式对采集到的环境语音进行发送的情况下,本公开提供的语音联合协助的实现方法还可以包括以下步骤:
根据本体机器人的语音识别库,确定采集到的环境语音是否为唤醒本体机器人的语音;
在本体机器人所处的网络中广播采集到的环境语音之后,接收身份确认应答,所述身份确认应答用于指示所述采集到的环境语音对应的机器人;
在本体机器人的语音识别库中记录采集到的环境语音与对应的机器人之间的关联关系。
可选地,在本体机器人以广播方式对采集到的环境语音进行发送的情况下,本公开提供的语音联合协助的实现方法还可以包括以下步骤:
在接收到发送广播的机器人以广播方式发送的环境语音之后,对接收到的环境语音进行识别;
在识别出接收到的环境语音用于唤醒本体机器人时,向发送广播的机器人发送所述身份确认应答。
在本体机器人是上述具有部分语音识别功能的机器人的情况下,以及在本体机器人是上述具有完全语音识别功能的机器人的情况下,本公开提出身份确认应答,以对本体机器人的语音识别库进行更新,其中,身份确认应答是某一机器人在识别出另一机器人采集到的环境语音对应的机器人是自身时,发送给另一机器人的应答。
本体机器人的语音识别库中包括本体机器人采集到的不同环境语音与对应的机器人之间的关联关系,该关联关系可能是某一语音与本体机器人自身之间的关联关系,也可能是某一语音与其他机器人之间的关联关系。示例地,机器人A的语音识别库中的两条记录分别为:机器人A采集到的环境语音a对应的机器人是机器人A;机器人A采集到的环境语音c对应的机器人是机器人C。
本体机器人在自身的语音采集模块采集到环境语音时,触发自身的语音联合协助的实现装置,将采集到的环境语音与本体机器人的语音识别库中的各个语音依次进行匹配,以确定采集到的环境语音是否为唤醒本体机器人的语音,如果采集到的环境语音是唤醒本体机器人的语音,则本体机器人采集到的环境语音不满足设定条件;如果采集到的环境语音不是唤醒本体机器人的语音,则本体机器人采集到的环境语音满足设定条件,进而将采集到的语音广播给本体机器人自身所处网络中的其他机器人。
在本体机器人将采集到的语音广播给本体机器人自身所处网络中的剩余机器人之后,与本体机器人处于同一网络中的剩余机器人均可以接收到发送广播的机器人以广播方式发送的环境语音,进而对接收到的环境语音进行识别,可能存在的情况是:剩余机器人中的某个或某些机器人识别出接收到的环境语音是用于唤醒自身的,进而向发送广播的机器人发送身份确认应答。因而,本体机器人可以接收到来自于本体机器人自身所处网络中的某个或某些机器人发送的身份确认应答,进而触发本体机器人对自身的语音识别库进行更新,即:根据接收到的身份确认应答,在本体机器人的语音识别库中记录采集到的环境语音与对应的机器人之间的关联关系。
采用上述对本体机器人的语音识别库进行更新的方法,本体机器人可以对采集到的环境语音对应的机器人进行学习,以便于在下次采集到相同的环境语音时,根据更新后的语音识别库,快速确定出该环境语音对应的机器人,进而直接将该环境语音发送给对应的机器人。以此缩短用户等待目标机器人做出响应的时间,提高了目标机器人的响应效率。
继续沿用上述例子,机器人A内的语音联合协助的实现装置将环境语音c广播给机器人B和机器人C。机器人B和机器人C分别对接收到的环境语音进行识别,在机器人C识别出环境语音c对应的机器人是自身时,向机器人A发送身份确认应答,以指示环境语音c对应的机器人是机器人C,由于机器人B识别出环境语音c对应的机器人不是自身,所以不向机器人A发送身份确认应答。机器人A在接收到机器人C发送的身份确认应答之后,即可在机器人A的语音识别库中记录环境语音c与机器人C之间的关联关系。这样,下一次机器人A采集到环境语音c时,即可根据自身的语音识别库确定环境语音c对应的机器人是机器人C,进而直接将环境语音c发送给机器人C,缩短了用户等待机器人C做出响应的时间,提高了机器人C的响应效率。
基于同一发明构思,本公开还提供一种语音联合协助的实现装置。请参考图4,图4是根据一示例性实施例示出的一种语音联合协助的实现装置的框图。如图4所示,该装置1000包括:
环境语音发送模块401,用于在本体机器人采集到的环境语音满足设定条件时,将采集到的环境语音发送给其他机器人;
其中,所述设定条件用于指示采集到的环境语音不是用于唤醒本体机器人。
可选地,如图4所示,所述装置还包括:
第一语音识别模块402,用于在接收到其他机器人发送的环境语音后,对接收到的环境语音进行识别。
可选地,所述设定条件包括:采集到的环境语音无法被本体机器人识别;
所述环境语音发送模块用于:
在本体机器人所处的网络中广播采集到的环境语音。
可选地,所述设定条件包括:本体机器人识别出采集到的环境语音对应的机器人是目标机器人,且所述目标机器人不是本体机器人;
所述环境语音发送模块用于:
将采集到的环境语音发送给所述目标机器人。
可选地,所述装置还包括:
确定模块,用于根据本体机器人的语音识别库,确定采集到的环境语音是否为唤醒本体机器人的语音;
接收模块,用于在本体机器人所处的网络中广播采集到的环境语音之后,接收身份确认应答,所述身份确认应答用于指示所述采集到的环境语音对应的机器人;
记录模块,用于在本体机器人的语音识别库中记录采集到的环境语音与对应的机器人之间的关联关系。
可选地,所述装置还包括:
第二语音识别模块,用于在接收到发送广播的机器人以广播方式发送的环境语音之后,对接收到的环境语音进行识别;
应答发送模块,用于在识别出接收到的环境语音用于唤醒本体机器人时,向发送广播的机器人发送所述身份确认应答。
可选地,所述装置还包括:
定位模块,用于根据采集到的环境语音,对用户的位置进行定位;
位置信息发送模块,用于在采集到的环境语音满足所述设定条件时,还将所述用户的位置信息发送给其他机器人。
关于上述实施例中的装置,其中各个模块执行操作的具体方式已经在有关该方法的实施例中进行了详细描述,此处将不做详细阐述说明。
图5是根据一示例性实施例示出的一种语音联合协助的实现装置1000的另一框图,该装置1000可以配置于机器人中。如图5所示,该装置1000可以包括:处理器1001,存储器1002,多媒体组件1003,输入/输出(I/O)接口1004,以及通信组件1005。
其中,处理器1001用于控制该装置1000的整体操作,以完成上述的语音联合协助的实现方法中的全部或部分步骤。存储器1002用于存储各种类型的数据以支持在该装置1000的操作,这些数据的例如可以包括用于在该装置1000上操作的任何应用程序或方法的指令,以及应用程序相关的数据,例如联系人数据、收发的消息、图片、音频、视频等等。该存储器1002可以由任何类型的易失性或非易失性存储设备或者它们的组合实现,例如静态随机存取存储器(Static Random Access Memory,简称SRAM),电可擦除可编程只读存储器(Electrically Erasable Programmable Read-Only Memory,简称EEPROM),可擦除可编程只读存储器(Erasable Programmable Read-Only Memory,简称EPROM),可编程只读存储器(Programmable Read-Only Memory,简称PROM),只读存储器(Read-Only Memory,简称ROM),磁存储器,快闪存储器,磁盘或光盘。多媒体组件1003可以包括屏幕和音频组件。其中屏幕例如可以是触摸屏,音频组件用于输出和/或输入音频信号。例如,音频组件可以包括一个麦克风,麦克风用于接收外部音频信号。所接收的音频信号可以被进一步存储在存储器1002或通过通信组件1005发送。音频组件还包括至少一个扬声器,用于输出音频信号。I/O接口1004为处理器1001和其他接口模块之间提供接口,上述其他接口模块可以是键盘,鼠标,按钮等。这些按钮可以是虚拟按钮或者实体按钮。通信组件1005用于该装置1000与其他设备之间进行有线或无线通信。无线通信,例如Wi-Fi,蓝牙,近场通信(Near FieldCommunication,简称NFC),2G、3G或4G,或它们中的一种或几种的组合,因此相应的该通信组件1005可以包括:Wi-Fi模块,蓝牙模块,NFC模块。
在一示例性实施例中,装置1000可以被一个或多个应用专用集成电路(Application Specific Integrated Circuit,简称ASIC)、数字信号处理器(DigitalSignal Processor,简称DSP)、数字信号处理设备(Digital Signal Processing Device,简称DSPD)、可编程逻辑器件(Programmable Logic Device,简称PLD)、现场可编程门阵列(Field Programmable Gate Array,简称FPGA)、控制器、微控制器、微处理器或其他电子元件实现,用于执行上述的语音联合协助的实现方法。
在另一示例性实施例中,还提供了一种计算机程序产品,所述计算机程序产品包含能够由可编程的装置执行的计算机程序,所述计算机程序具有当由所述可编程的装置执行时用于执行上述的语音联合协助的实现方法的代码部分。
在另一示例性实施例中,还提供了一种包括指令的非临时性计算机可读存储介质,例如包括指令的存储器1002,上述指令可由装置1000的处理器1001执行以完成上述的语音联合协助的实现方法。示例地,该非临时性计算机可读存储介质可以是ROM、随机存取存储器(Random Access Memory,简称RAM)、CD-ROM、磁带、软盘和光数据存储设备等。
在另一示例性实施例中,还提供了一种机器人,包括:语音采集装置、非临时性计算机可读存储介质;以及一个或者多个处理器,用于执行所述非临时性计算机可读存储介质中的程序;所述非临时性计算机可读存储介质中存储有用于执行上述控制机器人的方法的指令。其中,语音采集装置可以是上述环境语音采集模块,以采集环境语音。
以上结合附图详细描述了本公开的优选实施方式,但是,本公开并不限于上述实施方式中的具体细节,在本公开的技术构思范围内,可以对本公开的技术方案进行多种简单变型,这些简单变型均属于本公开的保护范围。
另外需要说明的是,在上述具体实施方式中所描述的各个具体技术特征,在不矛盾的情况下,可以通过任何合适的方式进行组合。为了避免不必要的重复,本公开对各种可能的组合方式不再另行说明。

Claims (14)

1.一种语音联合协助的实现方法,其特征在于,所述方法包括:
在本体机器人采集到的环境语音满足所述环境语音无法被本体机器人识别的设定条件时,在本体机器人所处的网络中广播采集到的所述环境语音。
2.根据权利要求1所述的方法,其特征在于,所述方法还包括:
在接收到其他机器人发送的环境语音后,对接收到的环境语音进行识别。
3.根据权利要求1所述的方法,其特征在于,所述方法还包括:
在本体机器人采集到的环境语音满足所述本体机器人识别出所述环境语音对应的机器人是目标机器人,且所述目标机器人不是本体机器人的设定条件时,将采集到的环境语音发送给所述目标机器人。
4.根据权利要求1所述的方法,其特征在于,所述方法还包括:
根据本体机器人的语音识别库,确定采集到的环境语音是否为唤醒本体机器人的语音;
在本体机器人所处的网络中广播采集到的环境语音之后,接收身份确认应答,所述身份确认应答用于指示所述采集到的环境语音对应的机器人;
在本体机器人的语音识别库中记录采集到的环境语音与对应的机器人之间的关联关系。
5.根据权利要求4所述的方法,其特征在于,所述方法还包括:
在接收到发送广播的机器人以广播方式发送的环境语音之后,对接收到的环境语音进行识别;
在识别出接收到的环境语音用于唤醒本体机器人时,向发送广播的机器人发送所述身份确认应答。
6.根据权利要求1所述的方法,其特征在于,所述方法还包括:
根据采集到的环境语音,对用户的位置进行定位;
在采集到的环境语音满足所述设定条件时,还将所述用户的位置信息发送给其他机器人。
7.一种语音联合协助的实现装置,其特征在于,包括:
环境语音发送模块,用于在本体机器人采集到的环境语音满足所述环境语音无法被本体机器人识别的设定条件时,在本体机器人所处的网络中广播采集到的所述环境语音。
8.根据权利要求7所述的装置,其特征在于,所述装置还包括:
第一语音识别模块,用于在接收到其他机器人发送的环境语音后,对接收到的环境语音进行识别。
9.根据权利要求7所述的装置,其特征在于,所述环境语音发送模块还用于在本体机器人采集到的环境语音满足所述本体机器人识别出所述环境语音对应的机器人是目标机器人,且所述目标机器人不是本体机器人的设定条件时,将采集到的环境语音发送给所述目标机器人。
10.根据权利要求7所述的装置,其特征在于,所述装置还包括:
确定模块,用于根据本体机器人的语音识别库,确定采集到的环境语音是否为唤醒本体机器人的语音;
接收模块,用于在本体机器人所处的网络中广播采集到的环境语音之后,接收身份确认应答,所述身份确认应答用于指示所述采集到的环境语音对应的机器人;
记录模块,用于在本体机器人的语音识别库中记录采集到的环境语音与对应的机器人之间的关联关系。
11.根据权利要求10所述的装置,其特征在于,所述装置还包括:
第二语音识别模块,用于在接收到发送广播的机器人以广播方式发送的环境语音之后,对接收到的环境语音进行识别;
应答发送模块,用于在识别出接收到的环境语音用于唤醒本体机器人时,向发送广播的机器人发送所述身份确认应答。
12.根据权利要求7所述的装置,其特征在于,所述装置还包括:
定位模块,用于根据采集到的环境语音,对用户的位置进行定位;
位置信息发送模块,用于在采集到的环境语音满足所述设定条件时,还将所述用户的位置信息发送给其他机器人。
13.一种非临时性计算机可读存储介质,其特征在于,所述非临时性计算机可读存储介质中包括一个或多个程序,所述一个或多个程序用于执行权利要求1至6中任一项所述的方法。
14.一种机器人,其特征在于,包括:语音采集装置、非临时性计算机可读存储介质;以及
一个或者多个处理器,用于执行所述非临时性计算机可读存储介质中的程序;所述非临时性计算机可读存储介质中存储有用于执行如权利要求1至6中任一项所述的方法的指令。
CN201680002711.XA 2016-12-14 2016-12-14 语音联合协助的实现方法、装置及机器人 Active CN107077844B (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/CN2016/109902 WO2018107389A1 (zh) 2016-12-14 2016-12-14 语音联合协助的实现方法、装置及机器人

Publications (2)

Publication Number Publication Date
CN107077844A CN107077844A (zh) 2017-08-18
CN107077844B true CN107077844B (zh) 2020-07-31

Family

ID=59623435

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201680002711.XA Active CN107077844B (zh) 2016-12-14 2016-12-14 语音联合协助的实现方法、装置及机器人

Country Status (2)

Country Link
CN (1) CN107077844B (zh)
WO (1) WO2018107389A1 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7501523B2 (ja) 2019-03-29 2024-06-18 ソニーグループ株式会社 情報処理装置、情報処理方法、およびプログラム

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107919119A (zh) 2017-11-16 2018-04-17 百度在线网络技术(北京)有限公司 多设备交互协同的方法、装置、设备及计算机可读介质
CN109215658A (zh) * 2018-11-30 2019-01-15 广东美的制冷设备有限公司 设备的语音唤醒方法、装置和家电设备
CN109767772A (zh) * 2019-03-14 2019-05-17 百度在线网络技术(北京)有限公司 分布式语音交互方法和系统
CN112235733B (zh) * 2020-09-29 2023-06-23 京东科技信息技术有限公司 一种多移动机器人协作方法、装置、系统及介质

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006243555A (ja) * 2005-03-04 2006-09-14 Nec Corp 対応決定システム、ロボット、イベント出力サーバ、および対応決定方法
JP2007160473A (ja) * 2005-12-15 2007-06-28 Fujitsu Ltd ロボットにおける対話相手識別方法およびロボット
CN101227503A (zh) * 2008-01-29 2008-07-23 浙江大学 智能微小型地面机器人与无线传感器节点间的通信方法
CN103916299A (zh) * 2013-01-02 2014-07-09 Lg电子株式会社 家用电器及其操作方法
CN104012129A (zh) * 2012-12-12 2014-08-27 华为技术有限公司 一种在线状态信息交互方法、机器人及系统
CN105206275A (zh) * 2015-08-31 2015-12-30 小米科技有限责任公司 一种设备控制方法、装置及终端
CN105563484A (zh) * 2015-12-08 2016-05-11 深圳前海达闼云端智能科技有限公司 一种云机器人系统、机器人和机器人云平台
CN105723635A (zh) * 2013-09-16 2016-06-29 Lg电子株式会社 家用电器及移动终端

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20080090034A (ko) * 2007-04-03 2008-10-08 삼성전자주식회사 음성 화자 인식 방법 및 시스템
JP2014002500A (ja) * 2012-06-18 2014-01-09 Hochiki Corp 警報システム
CN104605793B (zh) * 2014-09-23 2017-09-01 缔奇智能(河南)股份有限公司 地面清洁机器人系统及智能家电系统
CN105788599B (zh) * 2016-04-14 2019-08-06 北京小米移动软件有限公司 语音处理方法、路由器及智能语音控制系统
CN105929827B (zh) * 2016-05-20 2020-03-10 北京地平线机器人技术研发有限公司 移动机器人及其定位方法

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006243555A (ja) * 2005-03-04 2006-09-14 Nec Corp 対応決定システム、ロボット、イベント出力サーバ、および対応決定方法
JP2007160473A (ja) * 2005-12-15 2007-06-28 Fujitsu Ltd ロボットにおける対話相手識別方法およびロボット
CN101227503A (zh) * 2008-01-29 2008-07-23 浙江大学 智能微小型地面机器人与无线传感器节点间的通信方法
CN104012129A (zh) * 2012-12-12 2014-08-27 华为技术有限公司 一种在线状态信息交互方法、机器人及系统
CN103916299A (zh) * 2013-01-02 2014-07-09 Lg电子株式会社 家用电器及其操作方法
CN105723635A (zh) * 2013-09-16 2016-06-29 Lg电子株式会社 家用电器及移动终端
CN105206275A (zh) * 2015-08-31 2015-12-30 小米科技有限责任公司 一种设备控制方法、装置及终端
CN105563484A (zh) * 2015-12-08 2016-05-11 深圳前海达闼云端智能科技有限公司 一种云机器人系统、机器人和机器人云平台

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7501523B2 (ja) 2019-03-29 2024-06-18 ソニーグループ株式会社 情報処理装置、情報処理方法、およびプログラム

Also Published As

Publication number Publication date
CN107077844A (zh) 2017-08-18
WO2018107389A1 (zh) 2018-06-21

Similar Documents

Publication Publication Date Title
CN107077844B (zh) 语音联合协助的实现方法、装置及机器人
CN112272819B (zh) 被动唤醒用户交互设备的方法和系统
CN107135443B (zh) 一种信号处理方法及电子设备
EP3340243B1 (en) Method for performing voice control on device with microphone array, and device thereof
US11676601B2 (en) Voice assistant tracking and activation
CN110459221B (zh) 多设备协同语音交互的方法和装置
CN106782554B (zh) 基于人工智能的语音唤醒方法和装置
CN106739946B (zh) 汽车空调的启动方法及装置
CN111722824B (zh) 语音控制方法、装置及计算机存储介质
CN107026943B (zh) 语音交互方法及系统
CN108234282B (zh) 一种基于社交工具的反馈信息处理方法和车载终端
WO2016183825A1 (zh) 一种定位声音发出位置的方法和终端设备
CN104837157B (zh) 音箱添加方法、装置、移动终端和智能音箱
CN106940997B (zh) 一种向语音识别系统发送语音信号的方法和装置
CN109473097B (zh) 一种智能语音设备及其控制方法
KR102629796B1 (ko) 음성 인식의 향상을 지원하는 전자 장치
US9953630B1 (en) Language recognition for device settings
CN111613232A (zh) 多终端设备语音交互方法及系统
CN113593544A (zh) 设备的控制方法和装置、存储介质及电子装置
CN110033584B (zh) 服务器、控制方法以及计算机可读取记录介质
US20220122600A1 (en) Information processing device and information processing method
CN113314115B (zh) 终端设备的语音处理方法、终端设备及可读存储介质
CN103873682B (zh) 一种信息处理方法及电子设备
CN108459838B (zh) 信息处理方法及电子设备
CN113889116A (zh) 语音信息的处理方法和装置、存储介质及电子装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
TR01 Transfer of patent right
TR01 Transfer of patent right

Effective date of registration: 20210301

Address after: 201111 2nd floor, building 2, no.1508, Kunyang Road, Minhang District, Shanghai

Patentee after: Dalu Robot Co.,Ltd.

Address before: 518000 Room 201, building A, No. 1, Qian Wan Road, Qianhai Shenzhen Hong Kong cooperation zone, Shenzhen, Guangdong (Shenzhen Qianhai business secretary Co., Ltd.)

Patentee before: Shenzhen Qianhaida Yunyun Intelligent Technology Co.,Ltd.

CP03 Change of name, title or address
CP03 Change of name, title or address

Address after: 201111 Building 8, No. 207, Zhongqing Road, Minhang District, Shanghai

Patentee after: Dayu robot Co.,Ltd.

Address before: 201111 2nd floor, building 2, no.1508, Kunyang Road, Minhang District, Shanghai

Patentee before: Dalu Robot Co.,Ltd.