CN109979463A

CN109979463A - 一种处理方法和电子设备

Info

Publication number: CN109979463A
Application number: CN201910254428.1A
Authority: CN
Inventors: 吴鹏; 牛佩佩
Original assignee: Lenovo Beijing Ltd
Current assignee: Lenovo Beijing Ltd
Priority date: 2019-03-31
Filing date: 2019-03-31
Publication date: 2019-07-05
Anticipated expiration: 2039-03-31
Also published as: CN109979463B

Abstract

本申请实施例提供一种处理方法和电子设备，所述处理方法包括：在第一模式下，通过第一方式获得环境信息；至少处理所述环境信息；如果处理结果表明所述环境中存在满足条件的使用者，切换至第二模式；其中，在所述第一模式下，无法通过第二方式获得并响应使用者的输入；在所述第二模式下，能通过所述第二方式获得并响应使用者的输入，所述第一方式和所述第二方式不同。本申请实施例所提供方法可以提高了用户语音交互的体验感。

Description

一种处理方法和电子设备

技术领域

本申请实施例涉及智能设备领域，特别涉及一种处理方法和电子设备。

背景技术

目前，很多电子设备都具有语音助手，例如Siri或者小娜等；语音助手可以听从用户的音频信息便可以执行相应的指令，但在使用之前需要先唤醒语音助手，现有技术中往往需要语音输入关键词才能唤醒语音助手，例如，用户需要说出你好Siri或是你好小娜，语音助手获取并识别出设定的关键词之后，才能被唤醒，即进入到接受语音命令的状态，之后接收用户的语音指令，执行后续操作。

现有技术中还有一种通过或虚拟或实体的按钮等来执行唤醒。例如智能手机上的Siri语音助手可以通过指纹识别按钮识别用户的指纹来实现唤醒，但是，不论用户采用上述的何种唤醒方式，操作均较为复杂，不符合人类交流习惯，不够便利，使用户体验较差。

发明内容

本申请实施例提供了如下的技术方案：

本申请第一方面提供一种处理方法，包括：

在第一模式下，通过第一方式获得环境信息；

至少处理所述环境信息；

如果处理结果表明所述环境中存在满足条件的使用者，切换至第二模式；

其中，在所述第一模式下，无法通过第二方式获得并响应使用者的输入；在所述第二模式下，能通过所述第二方式获得并响应使用者的输入，所述第一方式和所述第二方式不同。

作为优选，所述第一方式为通过获得环境图像的方式获得所述环境信息；

所述第二方式为通过获得环境中的音频信息而获得所述输入。

作为优选，所述如果处理结果表明所述环境中存在满足条件的使用者包括下列的至少一种：

如果所述环境信息中包含使用者面部信息，且所述使用者面部信息表明所述使用者的视线满足条件；和/或

如果所述环境信息中包含使用者面部信息，且所述使用者面部信息表明所述面部信息的生物特征满足条件。

作为优选，通过第一方式获得环境信息并至少处理所述环境信息包括：

获得原始环境图像；

处理所述原始环境图像得到所述原始环境图像的边缘图像；

处理所述边缘图像以确定使用者面部信息。

作为优选，所述使用者面部信息表明所述使用者的视线满足条件包括：所述使用者的视线的对应的关注位置与用所述第一方式获得环境信息的采集装置所在位置满足匹配条件。

作为优选，所述无法通过第二方式获得并响应使用者的输入包括：

无法获得所述使用者的输入；和/或

无法响应获得的所述使用者的输入；

所述切换至第二模式包括：

启动语音采集设备；和/或

唤醒响应使用者输入的应用。

作为优选，所述方法还包括，第二模式下，判断第二方式的输入者和满足条件的使用者是否匹配，若匹配，则响应输入者的输入。

本申请第二方面提供一种电子设备，包括，

第一获得装置，其配置为通过第一方式获得环境信息；

第二获得装置，其配置为通过第二方式获得使用者的输入；

处理装置，其配置为指令所述第一获得装置在第一模式下，通过第一方式获得环境信息；至少处理所述环境信息；如果处理结果表明所述环境中存在满足条件的使用者，切换至第二模式；

作为优选，所述第一获得装置为图像获得装置；

所述第二获得装置为音频获得装置。

作为优选，所述第一获得装置设置在所述电子设备的端部，采集方向为竖直方向，所述第一获得装置进一步配置为，获得原始环境图像；处理所述原始环境图像得到所述原始环境图像的边缘图像。

作为优选，所述处理装置还配置为，判断所述环境信息中是否包含使用者面部信息，且所述使用者面部信息表明所述使用者的视线满足条件；和/或

判断所述环境信息中是否包含使用者面部信息，且所述使用者面部信息表明所述面部信息的生物特征满足条件。

作为优选，所述处理装置还配置为，判断所述使用者的视线的对应的关注位置与用所述第一方式获得环境信息的采集装置所在位置是否满足匹配条件。

作为优选，所述处理装置还配置为，在所述第一模式下，无法获得所述使用者的输入；和/或无法响应获得的所述使用者的输入。

作为优选，所述处理装置还配置为，第二模式下，判断第二方式的输入者和满足条件的使用者是否匹配，若匹配，则响应输入者的输入。

本申请提供的实施例中，可通过判断环境中是否存在满足条件的使用者从而实现对电子设备的语音助手的唤醒，比现有的方法都要便利，不会增加不必要的语音关键词的输入操作或者按钮操作，较好地提高了用户体验感。

附图说明

图1为本申请实施例提供的处理方法的逻辑框图；

图2为本申请实施例中的原始环境图像和原始环境图像的边缘图像；

图3为本申请实施例中的电子设备的示意图。

具体实施方式

下面，结合附图对本申请的具体实施例进行详细的描述，但不作为本申请的限定。

应理解的是，可以对此处公开的实施例做出各种修改。因此，上述说明书不应该视为限制，而仅是作为实施例的范例。本领域的技术人员将想到在本公开的范围和精神内的其他修改。

包含在说明书中并构成说明书的一部分的附图示出了本公开的实施例，并且与上面给出的对本公开的大致描述以及下面给出的对实施例的详细描述一起用于解释本公开的原理。

通过下面参照附图对给定为非限制性实例的实施例的优选形式的描述，本申请的这些和其它特性将会变得显而易见。

还应当理解，尽管已经参照一些具体实例对本申请进行了描述，但本领域技术人员能够确定地实现本申请的很多其它等效形式，它们具有如权利要求所述的特征并因此都位于借此所限定的保护范围内。

当结合附图时，鉴于以下详细说明，本公开的上述和其他方面、特征和优势将变得更为显而易见。

此后参照附图描述本公开的具体实施例；然而，应当理解，所公开的实施例仅仅是本公开的实例，其可采用多种方式实施。熟知和/或重复的功能和结构并未详细描述以避免不必要或多余的细节使得本公开模糊不清。因此，本文所公开的具体的结构性和功能性细节并非意在限定，而是仅仅作为权利要求的基础和代表性基础用于教导本领域技术人员以实质上任意合适的详细结构多样地使用本公开。

本说明书可使用词组“在一种实施例中”、“在另一个实施例中”、“在又一实施例中”或“在其他实施例中”，其均可指代根据本公开的相同或不同实施例中的一个或多个。

下面，结合附图详细的说明本申请实施例。

如图1所示，本申请第一个实施例提供一种处理方法，包括：

在第一模式下，通过第一方式获得环境信息；

至少处理所述环境信息；

上述处理方法可以应用于电子设备，以实现对电子设备的智能助手的唤醒。电子设备例如可以包括两种工作模式，第一模式和第二模式，例如，第一模式可以为电子设备的智能助手还未被唤醒状态，第二模式为电子设备的智能助手已经被唤醒并等待接收用户语音指令的状态，待接收到用户的语音指令后，执行与语音指令相应的操作。

在一个实施例中，例如可以在电子设备的智能助手还未被唤醒时，通过第一方式获得环境信息，处理环境信息，并且如果处理结果表明所述环境中存在满足条件的使用者，则电子设备的智能助手被唤醒并等待接收用户的语音指令。

在本申请提供的实施例中，所述环境信息例如可以为一种通过第一方式获取的图像信息，具体为一种非接触的图像信息，例如可以为周围环境的图片。

通过本申请提供的方法可以有效地对电子设备的语音助手进行唤醒，即，使语音助手进入到接受语音命令的状态，本申请实施例提供的方法可通过判断环境中是否存在满足条件的使用者从而实现对电子设备的语音助手的唤醒，比现有的方法都要便利，不会增加不必要的语音关键词的输入操作或者按钮操作。

在本申请提供的一个实施例中，所述第一方式为通过获得环境图像的方式获得所述环境信息；

本申请实施例中所提供的第一方式和第二方式为不同的方式，第一方式为通过获得环境图像的方式获得所述环境信息；第二方式为通过获得环境中的音频信息而获得所述输入。

在一个实施例中，在电子设备的智能助手还未被唤醒(处于电子设备的第一模式下)时，通过获得环境图像的方式获得所述环境信息；在本实施例中只能通过获得环境图像的方式获得所述环境信息，而不能通过获得环境中的音频信息而获得所述环境信息，即在第一模式下，只能通过第一方式获得环境信息，而不能通过第二方式获得环境信息。

在另一个实施例中，所述如果处理结果表明所述环境中存在满足条件的使用者包括下列的至少一种：

在本实施例中，如果所述环境信息中包含使用者面部信息，且所述使用者面部信息表明所述使用者的视线满足条件，则表明处理结果表明所述环境中存在满足条件的使用者。本申请中对于使用者的视线具体满足何种条件不做具体限定，可以根据需要进行限定。例如，所述使用者的视线的对应的关注位置与用所述第一方式获得环境信息的采集装置所在位置是否满足匹配条件可以作为使用者的视线是否满足条件的一种判定方式，具体地，可以判定使用者的视线的对应的关注位置与用所述第一方式获得环境信息的采集装置所在位置的距离是否小于一阈值，该阈值可以根据用户的使用需要进行设置，例如，当在一个比较开阔的空间，例如，在酒店大堂中，该阈值可以大一些，例如可以为10m；当空间相对窄小时，例如在家中时，阈值可以相应的放低，例如可以为3m，当空间继续变小时，例如在车中时可以进一步缩小阈值，例如阈值可以为0.3—0.5m。本申请提供的方法通过判断使用者的视线是否满足条件来实现判断环境中是否存在满足条件的使用者，可以有效模拟人们在互相交流的时候会盯着说话对象的自然习惯；所提供的对语音助手进行唤醒的操作，符合人类的交流习惯，使用便利，较好地提高了用户体验感。

在本申请的另一个实施例中，如果所述环境信息中包含使用者面部信息，且所述使用者面部信息表明所述面部信息的生物特征满足条件，则表明处理结果表明所述环境中存在满足条件的使用者。在本实施例中，可以将至少一个用户的头部照片上传到电子设备的存储器中，当对环境信息进行处理，且处理结果表明所述环境信息中包含使用者面部信息，将处理所获得的面部信息与预先上传到电子设备的存储器中的用户的头部照片进行匹配，若所述环境信息中包含的至少一个使用者面部信息能够与预先上传到电子设备的存储器中的至少一个用户的头部照片相匹配，则表示处理结果表明所述环境中存在满足条件的使用者。

在本申请的其他实施例中，为了提高电子设备的使用安全性，需要对用户的面部信息的生物特征进行识别，只有在其满足条件时，才能唤醒电子设备的智能助手；也就是说，只有特定的人才能够唤醒该电子设备的只能助手；同时为了在必要的时刻降低电子设备的功耗，当检测到所述使用者面部信息满足预设的面部信息的生物特征条件时，电子设备的智能助手依然不被唤醒，只有在所述使用者面部信息满足预设的面部信息的生物特征条件的同时，还检测到所述使用者的视线也满足预设条件时，电子设备的智能助手才被唤醒。

在本申请的一个实施例中，通过第一方式获得环境信息并至少处理所述环境信息包括：

获得原始环境图像；

处理所述原始环境图像得到所述原始环境图像的边缘图像；

处理所述边缘图像以确定使用者面部信息。

在本实施例中，所获取的环境信息为以电子设备为中心的周围的360°的图像信息，目前，图像获得装置或是电子设备上的图像获得装置所能摄取的图像通常为正方形、长方形或者圆形，最多能够做到的也就仅仅限于对现有环境进行广角拍摄或是超大广角拍摄，还不能做到360°的摄取环境图像，因此，本实施例中所述的通过第一方式获得环境信息，并不是简单的摄取环境的图像，而是在获得环境的图像(原始环境图像)后，还要对环境的图像(原始环境图像)进行处理，从而获得环境的图像的边缘图像(原始环境图像的边缘图像)，如图2所示，以所摄取的环境的图像为长方形图像为例，其中a为原始环境图像，b为原始环境图像的边缘图像。

在本实施例中，处理所述环境信息就是为了处理所述边缘图像以确定使用者面部信息。

在本申请的其他实施例中，所述无法通过第二方式获得并响应使用者的输入包括：

无法获得所述使用者的输入；和/或

无法响应获得的所述使用者的输入；

所述切换至第二模式包括：

启动语音采集设备；和/或

唤醒响应使用者输入的应用。

在本实施例中，在第一模式下，只能通过第一方式获得环境信息；若使用者以第二方式对电子设备进行输入，则电子设备无法获得所述使用者的输入；和/或无法响应获得的所述使用者的输入。

在另一个实施例中，电子设备的智能助手由第一模式切换至第二模式，表示智能助手已经被唤醒，即表明电子设备启动语音采集设备；和/或唤醒响应使用者输入的应用。此时，使用者可以对此电子设备进行语音指令，以使电子设备根据语音指令做出相应的操作。例如，使用者发出语音指令“播放《XXXXX》歌曲”，则电子设备就会播放相应歌曲；使用者发出语音指令“播放《XXXXX》电影”，则电子设备就会播放相应电影。

在本申请其他实施例中，所述方法还包括，第二模式下，判断第二方式的输入者和满足条件的使用者是否匹配，若匹配，则响应输入者的输入。在本实施例中，需要判断处理结果表明的环境中存在的满足条件的使用者与在第二模式下以第二方式进行输入的输入者是否为同一人，只有在两者为同一人时，才会响应输入者的输入。例如，在一个应用场景中，通过处理环境信息，得到所述环境中存在满足条件的使用者为用户A，则此时电子设备的智能助手由第一模式切换至第二模式，在此第二模式下，用户B发出语音指令，此时会判断用户A和用户B是否为同一人，若为同一人，则响应用户B所发出的语音指令，若用户A和用户B不是同一人，则不会响应用户B发出的语音指令。

在另一个应用场景中，通过处理环境信息，得到所述环境中存在多个满足条件的使用者，分别为用户A、用户B和用户C，则此时电子设备的智能助手由第一模式切换至第二模式，在此第二模式下，用户A、用户B和用户C任意一个用户发出语音指令，都会响应；若在第二模式下，发出语音指令的用户不在用户A、用户B和用户C中间，例如为用户D或是用户E发出语音指令，则不进行响应。

在本申请实施例中，在电子设备的智能助手还未被唤醒时，通过获得环境图像的方式获得原始环境图像，处理所述原始环境图像得到所述原始环境图像的边缘图像；处理所述边缘图像以确定环境信息中是否包含使用者面部信息，如果处理结果表明包含使用者面部信息，则进一步判断使用者的视线是否满足预设条件和/或使用者的面部信息的生物特征是否满足预设条件，若满足，则电子设备的智能助手被唤醒，等待接收用户的语音指令，待接收到用户的语音指令后，执行与语音指令相应的操作。

基于同一发明构思，如图3所示，本申请第二个实施例提供一种电子设备，包括，

第一获得装置，其配置为通过第一方式获得环境信息；

第二获得装置，其配置为通过第二方式获得使用者的输入；

在本申请实施例中，第一获得装置和第二获得装置分别设于所述电子设备上，以用于在电子的不同工作模式下进行输入，以实现对电子设备的智能助手的唤醒以及唤醒后的语音指令的执行。电子设备例如可以包括两种工作模式，第一模式和第二模式，例如，第一模式可以为电子设备的智能助手还未被唤醒状态，第二模式为电子设备的智能助手已经被唤醒并等待接收用户语音指令的状态，待接收到用户的语音指令后，执行与语音指令相应的操作。

本申请提供的电子设备，通过其中的第一获得装置、第二获得装置以及处理装置的配合可以有效地对电子设备的语音助手进行唤醒，即，使语音助手进入到接受语音命令的状态，本申请实施例提供的电子设备的处理器通过判断环境中是否存在满足条件的使用者从而实现对电子设备的语音助手的唤醒，比现有的方法都要便利，不会增加不必要的语音关键词的输入操作或者按钮操作。本申请提供的电子设备可以有效模拟人们在互相交流的时候会盯着说话对象的自然习惯；所提供的对语音助手进行唤醒的操作，符合人类的交流习惯，使用便利，较好地提高了用户体验感。

在本申请提供的另一个实施例中，所述第一获得装置为图像获得装置；

所述第二获得装置为音频获得装置。

本申请实施例中所提供的第一获得装置和第二获得装置不同，所述第一获得装置为图像获得装置；所述第二获得装置为音频获得装置。相对应地，第一方式和第二方式为不同的方式，第一方式为通过获得环境图像的方式获得所述环境信息；第二方式为通过获得环境中的音频信息而获得所述输入。

在一个实施例中，在电子设备的智能助手还未被唤醒(处于电子设备的第一模式下)时，通过第一获得装置来获得所述环境信息；在本实施例中只能通过第一获得装置获得所述环境信息，而不能通过第二获得装置而获得所述环境信息，即在第一模式下，只能通过第一获得装置获得环境信息，而不能通过第二获得装置获得环境信息。

在本申请提供的其他实施例中，所述第一获得装置设置在所述电子设备的端部，采集方向为竖直方向，所述第一获得装置进一步配置为，获得原始环境图像；处理所述原始环境图像得到所述原始环境图像的边缘图像。

在本实施例中，所述第一获得装置可以设置在所述电子设备的上端部，也可以设置在所述电子设备的下端部，本申请实施例中对此不作具体限定，用户可以根据具体的使用需求而选择将第一获得装置设置电子设备的上端部还是设置在电子设备的下端部。当进行图像采集时，电子设备呈竖直状态，第一获得装置设置在电子设备的上端部或下端部进行图像采集，也就是说采集方向为竖直方向。

在本申请的一个实施例中，所述处理装置还配置为，判断所述环境信息中是否包含使用者面部信息，且所述使用者面部信息表明所述使用者的视线满足条件；和/或

在本实施例中，如果所述环境信息中包含使用者面部信息，且所述使用者面部信息表明所述使用者的视线满足条件，则表明处理结果表明所述环境中存在满足条件的使用者。本申请中对于使用者的视线具体满足何种条件不做具体限定，可以根据需要进行限定。例如，所述使用者的视线的对应的关注位置与用所述第一方式获得环境信息的采集装置所在位置是否满足匹配条件可以作为使用者的视线是否满足条件的一种判定方式，具体地，可以判定使用者的视线的对应的关注位置与用所述第一方式获得环境信息的采集装置所在位置的距离是否小于一阈值，该阈值可以根据用户的使用需要进行设置，例如，当在一个比较开阔的空间，例如，在酒店大堂中，该阈值可以大一些，例如可以为10m；当空间相对窄小时，例如在家中时，阈值可以相应的放低，例如可以为3m，当空间继续变小时，例如在车中时可以进一步缩小阈值，例如阈值可以为0.3—0.5m。

在本申请的其他实施例中，所述处理装置还配置为，在所述第一模式下，无法获得所述使用者的输入；和/或无法响应获得的所述使用者的输入。

在本实施例中，在第一模式下，只能通过第一获得装置获得环境信息；若使用者以第二获得装置对电子设备进行输入，则电子设备无法获得所述使用者的输入；和/或无法响应获得的所述使用者的输入。

在另一个实施例中，电子设备的智能助手由第一模式切换至第二模式，表示智能助手已经被唤醒，即表明电子设备启动语音采集设备(即启动了第二获得装置)；和/或唤醒响应使用者输入的应用。此时，使用者可以对此电子设备进行语音指令，以使电子设备根据语音指令做出相应的操作。例如，使用者发出语音指令“播放《XXXXX》歌曲”，则电子设备就会播放相应歌曲；使用者发出语音指令“播放《XXXXX》电影”，则电子设备就会播放相应电影。

在本申请的其他实施例中，所述处理装置还配置为，第二模式下，判断第二方式的输入者和满足条件的使用者是否匹配，若匹配，则响应输入者的输入。

在本实施例中，需要判断处理结果表明的环境中存在的满足条件的使用者与在第二模式下以第二方式进行输入的输入者是否为同一人，只有在两者为同一人时，才会响应输入者的输入。例如，在一个应用场景中，通过处理环境信息，得到所述环境中存在满足条件的使用者为用户A，则此时电子设备的智能助手由第一模式切换至第二模式，在此第二模式下，用户B发出语音指令，此时会判断用户A和用户B是否为同一人，若为同一人，则响应用户B所发出的语音指令，若用户A和用户B不是同一人，则不会响应用户B发出的语音指令。

以上实施例仅为本申请的示例性实施例，不用于限制本申请，本申请的保护范围由权利要求书限定。本领域技术人员可以在本申请的实质和保护范围内，对本申请做出各种修改或等同替换，这种修改或等同替换也应视为落在本申请的保护范围内。

Claims

1.一种处理方法，包括：

在第一模式下，通过第一方式获得环境信息；

至少处理所述环境信息；

2.根据权利要求1所述的方法，其中，所述第一方式为通过获得环境图像的方式获得所述环境信息；

3.根据权利要求1所述的方法，其中，所述如果处理结果表明所述环境中存在满足条件的使用者包括下列的至少一种：

4.根据权利要求3所述的方法，其中，通过第一方式获得环境信息并至少处理所述环境信息包括：

获得原始环境图像；

处理所述原始环境图像得到所述原始环境图像的边缘图像；

处理所述边缘图像以确定使用者面部信息。

5.根据权利要求3所述的方法，其中，所述使用者面部信息表明所述使用者的视线满足条件包括：所述使用者的视线的对应的关注位置与用所述第一方式获得环境信息的采集装置所在位置满足匹配条件。

6.根据权利要求1所述方法，其中，所述无法通过第二方式获得并响应使用者的输入包括：

无法获得所述使用者的输入；和/或

无法响应获得的所述使用者的输入；

所述切换至第二模式包括：

启动语音采集设备；和/或

唤醒响应使用者输入的应用。

7.根据权利要求1所述方法，其中，所述方法还包括，第二模式下，判断第二方式的输入者和满足条件的使用者是否匹配，若匹配，则响应输入者的输入。

8.一种电子设备，包括，

第一获得装置，其配置为通过第一方式获得环境信息；

第二获得装置，其配置为通过第二方式获得使用者的输入；

9.根据权利要求8所述的电子设备，其中，所述第一获得装置为图像获得装置；

所述第二获得装置为音频获得装置。

10.根据权利要求8所述的电子设备，其中，

所述第一获得装置设置在所述电子设备的端部，采集方向为竖直方向，所述第一获得装置进一步配置为，获得原始环境图像；处理所述原始环境图像得到所述原始环境图像的边缘图像。