CN114445878A - 基于ar眼镜的信息提示方法、装置、设备及存储介质 - Google Patents

Abstract

本发明实施例公开了一种基于AR眼镜的信息提示方法、装置、设备及存储介质，其中，所述方法包括：采集AR眼镜配置的加速度传感器采集的运动信息；当运动信息在预设的时长范围内的变化值处于设定的变化范围时，连续采集至少两张初始识别图像；从所述至少两张初始识别图像中确定兴趣人物；将兴趣人物的图像发送至终端，接收终端发送的所述匹配照片的信息以及匹配照片中所述兴趣人物的图像；根据匹配照片中所述兴趣人物的图像和当前采集到兴趣人物图像生成人物变化模型，并将所述人物变化模型叠加于兴趣人物位置；将所述图像信息进行分级，得到三级提示信息，将所述一级提示信息显示于AR眼镜上。

Description

基于AR眼镜的信息提示方法、装置、设备及存储介质

技术领域

本发明涉及通信技术领域，尤其涉及一种基于AR眼镜的信息提示方法、装置、设备及存储介质。

背景技术

增强现实(Augmented Reality，简称AR)，增强现实技术也被称为扩增现实，AR增强现实技术是促使真实世界信息和虚拟世界信息内容之间综合在一起的较新的技术内容，其将原本在现实世界的空间范围中比较难以进行体验的实体信息在电脑等科学技术的基础上，实施模拟仿真处理，叠加将虚拟信息内容在真实世界中加以有效应用，并且在这一过程中能够被人类感官所感知，从而实现超越现实的感官体验。真实环境和虚拟物体之间重叠之后，能够在同一个画面以及空间中同时存在。增强现实技术不仅能够有效体现出真实世界的内容，也能够促使虚拟的信息内容显示出来。随着AR和5G技术的成熟，AR越来越多地应用于各个行业，如教育、培训、医疗、设计、广告等。

职场人士因工作关系经常会参加一些商务活动，有时候主办方会组织拍摄活动的照片进行分享，有的时候参与活动的人会自发地进行合影等，职场人之间有了交集，然而多数情况下很多人只是活动上认识一下，活动后很少联系，再见面有可能是很久以后，见面时有可能出现面熟但叫不上名字的情况，影响社交效果。

目前，可以利用AR眼镜显示人员信息，AR眼镜通过摄像头读取目标对象的图像信息，和AR眼镜佩戴者本人的手机相册数据进行智能匹配，匹配出双方的合影图片，并给出相应的提示。但基于图像识别匹配方式由于受到环境条件限制，可能会显示错误的信息，致使用户在错误提示下，出现错认情况，进而影响个人社交。

发明内容

本发明实施例提供了一种基于AR眼镜的信息提示方法、装置、设备及存储介质，以解决现有技术中利用AR眼镜提示社交信息可能存在错误的技术问题。

第一方面，本发明实施例提供了一种基于AR眼镜的信息提示方法，包括：

采集AR眼镜配置的加速度传感器采集的运动信息；

当所述运动信息在预设的时长范围内变化值处于设定的变化范围时，连续采集至少两张初始识别图像；

从所述至少两张初始识别图像中确定兴趣人物；

将所述兴趣人物的图像发送至终端，以使得终端根据兴趣人物的图像在本地图库中查找与所述兴趣人物的图像匹配的照片，并获取所述匹配照片的图像信息；

接收终端发送的所述匹配照片的信息以及匹配照片中所述兴趣人物的图像；

根据匹配照片中所述兴趣人物的图像和当前采集到兴趣人物图像生成人物变化模型，并将所述人物变化模型叠加于兴趣人物位置；

将所述图像信息进行分级，得到三级提示信息，将所述一级提示信息显示于AR眼镜上。

第二方面，本发明实施例还提供了一种基于AR眼镜的信息提示装置，包括：

运动信息采集模块，用于采集AR眼镜配置的加速度传感器采集的运动信息；

图像采集模块，用于当所述运动信息在预设的时长范围内变化值处于设定的变化范围时，连续采集至少两张初始识别图像；

兴趣人物确定模块，用于从所述至少两张初始识别图像中确定兴趣人物；

发送模块，用于将所述兴趣人物的图像发送至终端，以使得终端根据兴趣人物的图像在本地图库中查找与所述兴趣人物的图像匹配的照片，并获取所述匹配照片的图像信息；

接收模块，用于接收终端发送的所述匹配照片的信息以及匹配照片中所述兴趣人物的图像；

模型生成模块，用于根据匹配照片中所述兴趣人物的图像和当前采集到兴趣人物图像生成人物变化模型，并将所述人物变化模型叠加于兴趣人物位置；

提示模块，用于将所述图像信息进行分级，得到三级提示信息，将所述一级提示信息显示于AR眼镜上。

第三方面，本发明实施例还提供了一种设备，包括：

一个或多个处理器；

存储装置，用于存储一个或多个程序，

摄像头，用于采集图像；

拾音器，用于采集语音信息；

当所述一个或多个程序被所述一个或多个处理器执行，使得所述一个或多个处理器实现如上述实施例提供的基于AR眼镜的信息提示方法。

第四方面，本发明实施例还提供了包含计算机可执行指令的存储介质，所述计算机可执行指令在由计算机处理器执行时用于执行如上述实施例提供的基于AR眼镜的信息提示方法。

本发明实施例提供的基于AR眼镜的信息提示方法、装置、设备及存储介质，通过采集AR眼镜配置的加速度传感器采集的运动信息；当所述运动信息在预设的时长范围内变化处于设定的变化范围时，连续采集至少两张初始识别图像；从所述至少两张初始识别图像中确定兴趣人物；将所述兴趣人物的图像发送至终端，以使得终端根据兴趣人物的图像在本地图库中查找与所述兴趣人物的图像匹配的照片，并获取所述匹配照片的图像信息；接收终端发送的所述匹配照片的信息以及匹配照片中所述兴趣人物的图像；根据匹配照片中所述兴趣人物的图像和当前采集到兴趣人物图像生成人物变化模型，并将所述人物变化模型叠加于兴趣人物位置；将所述图像信息进行分级，得到三级提示信息，将所述一级提示信息显示于AR眼镜上。可以利用信息分步提示方式，为用户提供充分的回忆环境，利用大脑的记忆功能，方便使用者回忆相关信息，避免由于图像匹配错误产生的误识别影响。

附图说明

通过阅读参照以下附图所作的对非限制性实施例所作的详细描述，本发明的其它特征、目的和优点将会变得更明显：

图1是本发明实施例一提供的基于AR眼镜的信息提示方法的流程示意图；

图2是本发明实施例二提供的基于AR眼镜的信息提示方法的流程示意图；

图3是本发明实施例三提供的基于AR眼镜的信息提示方法的流程示意图；

图4是本发明实施例四提供的基于AR眼镜的信息提示方法的流程示意图；

图5是本发明实施例五提供的基于AR眼镜的信息提示装置的结构示意图；

图6是本发明实施例六提供的设备的结构图。

具体实施方式

下面结合附图和实施例对本发明作进一步的详细说明。可以理解的是，此处所描述的具体实施例仅仅用于解释本发明，而非对本发明的限定。另外还需要说明的是，为了便于描述，附图中仅示出了与本发明相关的部分而非全部结构。

实施例一

图1是本发明实施例一提供的基于AR眼镜的信息提示方法的流程图，本实施例可适用于利用AR眼镜对社交信息进行提示的情况，该方法可以由基于AR眼镜的信息提示装置来执行，并可集成于AR眼镜中，具体包括如下步骤：

S110，采集AR眼镜配置的加速度传感器采集的运动信息，当所述运动信息在预设的时长范围内变化值处于设定的变化范围时，连续采集至少两张初始识别图像。

用户可佩戴AR眼镜进入社交场所，在社交场所中，会根据观察到的人选择感兴趣的人进行交流沟通。在未找到感兴趣的人时，通常会处于运动状态或者张望状态。在找到感兴趣的人时，状态会稳定。因此，可以利用AR眼镜配置的加速度传感器采集相关的运动信息，如果在较长的时间内没有产生较大的变化，则可以确定用户已经找到兴趣人物。

在确定已经找到兴趣人物后，可以利用AR眼镜配置图像采集装置采集至少两张图像。由于用户通常会在旁边观察一段时间才会上前与兴趣人物进行交流。因此，图像中可能会包含多个人物。通过多张图像，可以确定多张图像中大多数时间处于中间位置的人为兴趣人物。

S120,将所述兴趣人物的图像发送至终端，以使得终端根据兴趣人物的图像在本地图库中查找与所述兴趣人物的图像匹配的照片，并获取所述匹配照片的图像信息。

职场人士因工作关系经常会参加一些商务活动，有时候主办方会组织拍摄活动的照片进行分享，有的时候参与活动的人会自发地进行合影等，职场人之间有了交集。AR眼镜可以通过蓝牙或者无线局域网等方式与随身携带的终端实现连接。终端在接收到兴趣人物的图像后，可以利用现有的人脸识别技术，利用兴趣人物图像的特征，在自身存储的相册中进行查找匹配。在匹配成功后，终端获取匹配的照片的信息。所述照片信息可以从EXIF信息中读取。可以包括拍摄时间、拍摄地点、图片备注等，特别的，如果相关信息中含有人员名称，可以进一步的查找手机通讯录，匹配对方的名片信息。将上述信息作为匹配的照片信息和匹配照片中兴趣人物的图像一并发送至AR眼镜。

S130,接收终端发送的所述匹配照片的信息以及匹配照片中所述兴趣人物的图像，根据匹配照片中所述兴趣人物的图像和当前采集到兴趣人物图像生成人物变化模型，并将所述人物变化模型叠加于兴趣人物位置。

由于兴趣人物和前次见面时穿着和形态上都有可能产生变化，因此，在本实施例中，可利用匹配照片中的兴趣人物图像，和当前兴趣人物图像生成人物变化模型，供用户参考查看，以便于用户进一步回忆之前与兴趣人物之间的关系。可选的，可以通过如下方式生成人物变化模型，获取提取的人物图像，将人物图像矢量化，形成的第一矢量化模型；将匹配的人物图像矢量化，形成第二矢量化模型；计算第一矢量化和第二矢量化模型的差值；根据匹配图像对应的拍摄时间与当前时间的差值计算对应的中间模型数量。将所述差值分别对应中间模型数量，生成不同的差值中间模型作为人物变化模型。并可将所述人物变化模型叠加于兴趣人物位置。用户可以根据人物变化模型和现实兴趣人物图像回忆上次会面的具体场景和信息。

S140,将所述图像信息进行分级，得到三级提示信息，将所述一级提示信息显示于AR眼镜上。

在实现本发明的过程中，发明人发现，如果一旦提供给用户所有的提示信息，通常用户不会再思考回忆，而会直接采用提示信息与兴趣人物进行交谈，这样则会大大提高失误的几率。因此，在本实施例中，可以分步提供用户相关的提示信息，促使用户回忆思考。进而提高正确的几率。因此，在本实施例中，可以先对图像信息进行分级。示例性的，可得到三级提示信息。所述三级提示信息可以包括：一级信息，包括：地点和时间信息；二级信息，包括：兴趣人物的工作信息；三级信息，包括：兴趣人物的姓名。分级的规则可以是强度由低到高，进而帮助用户充分回忆。在完成分级后，可以将所述一级提示信息显示于AR眼镜上。便于用户快速了解一级提示信息。

本发明实施例通过采集AR眼镜配置的加速度传感器采集的运动信息；在所述运动信息在预设的时长范围内变化处于设定的变化范围时，连续采集至少两张初始识别图像；从所述至少两张初始识别图像中确定兴趣人物；将所述兴趣人物的图像发送至终端，以使得终端根据兴趣人物的图像在本地图库中查找与所述兴趣人物的图像匹配的照片，并获取所述匹配照片的图像信息；接收终端发送的所述匹配照片的信息以及匹配照片中所述兴趣人物的图像；根据匹配照片中所述兴趣人物的图像和当前采集到兴趣人物图像生成人物变化模型，并将所述人物变化模型叠加于兴趣人物位置；将所述图像信息进行分级，得到三级提示信息，将所述一级提示信息显示于AR眼镜上。可以利用信息分步提示方式，为用户提供充分的回忆环境，利用大脑的记忆功能，方便使用者回忆相关信息，避免由于图像匹配错误产生的误识别影响。

实施例二

图2为本发明实施例二提供的基于AR眼镜的信息提示方法的流程示意图。本实施例以上述实施例为基础进行优化，在本实施例中，在所述一级提示信息显示于AR眼镜上后，所述方法还可增加如下步骤：继续采集图像，根据采集到的图像中的兴趣人物面部图像判断表情是否正常，在正常时，将二级提示信息显示于AR眼镜上。

相应的，本实施例所提供的基于AR眼镜的信息提示方法，具体包括：

S210，采集AR眼镜配置的加速度传感器采集的运动信息，当所述运动信息在预设的时长范围内变化值处于设定的变化范围时，连续采集至少两张初始识别图像。

S220,将所述兴趣人物的图像发送至终端，以使得终端根据兴趣人物的图像在本地图库中查找与所述兴趣人物的图像匹配的照片，并获取所述匹配照片的图像信息。

S230，接收终端发送的所述匹配照片的信息以及匹配照片中所述兴趣人物的图像，根据匹配照片中所述兴趣人物的图像和当前采集到兴趣人物图像生成人物变化模型，并将所述人物变化模型叠加于兴趣人物位置。

S240，将所述图像信息进行分级，得到三级提示信息，将所述一级提示信息显示于AR眼镜上。

S250,继续采集图像，根据采集到的图像中的兴趣人物面部图像判断表情是否正常，在正常时，将二级提示信息显示于AR眼镜上。

在本实施例中，采用逐级提示的方式不仅可以充分利用用户的记忆，构建回忆场景。同时还可避免用户直接叫错兴趣人物的名称。用户在收到一级提示信息后，如果仍然不能快速想起兴趣人物的姓名，通常会较为谨慎，会根据一级信息与兴趣人物进行初步交流。由于匹配照片可能出现误差，在交流过程中，兴趣人物可能会表现出异常状态，因此，在本实施例中，通过采集在交流过程中，兴趣人物的面部图像确定匹配照片是否存在误差。示例性的，可以通过训练完成的表情图片卷积神经网络进行判断。在判断表情正常时，可以将二级图像信息显示于AR眼镜上，便于用户与兴趣人物进一步交流。

S260,采集语音信息，根据采集到的语音信息判断语音信息中是否包括兴趣人物姓名，如果不包括，则将三级提示信息显示于AR眼镜上。

在判断兴趣人物在交谈过程中没有出现异常表情，则可以初步判断匹配无误。则在后续过程中，采集与兴趣人物交谈的语音信息，并可将语音信息转换为文字，进而判断语音信息中是否包括兴趣人物姓名。如果包括兴趣人物姓名，则无需将三级提示信息提供给用户。否则，将三级提示信息显示于AR眼镜上。便于用户准确的称呼兴趣人物，增强互动，提高社交效率。

本实施例通过在所述一级提示信息显示于AR眼镜上后，增加如下步骤：继续采集图像，根据采集到的图像中的兴趣人物面部图像判断表情是否正常，在正常时，将二级提示信息显示于AR眼镜上。可以充分利用兴趣人物的表情判断当前提供的提示信息是否存在错误，进而确定是否存在匹配图像错误。只有在确定匹配图像正确时，才向用户提示信息，不仅可以避免直接提示姓名等关键信息造成的社交尴尬场面，同时还可辅助用户与兴趣人物自然深入交谈，提升社交效果。

在本实施例的一个优选实施方式中，所述方法还包括：将查找到的匹配照片按照匹配度进行排序；在判断表情异常时，按照排序选取第二匹配照片，并获取第二匹配照片的图像信息。由于受到社交场所各种环境影响，例如光线等因素，针对采集到的兴趣人物图像，可能存在多个匹配结果。因此，可以根据匹配度对多个结果进行排序。在判断兴趣人物表情不正常时，则可以认定首次匹配结果可能存在错误，因此，可以将下一排序的匹配照片的相应图像信息提示给用户，便于用户及时调整，避免由于错误信息提示产生的不良影响。

实施例三

图3为本发明实施例三提供的基于AR眼镜的信息提示方法的流程示意图。本实施例以上述实施例为基础进行优化，在本实施例中，所述方法还可增加如下步骤：接收到终端无法匹配信息，将所述兴趣人物图像发送至私有云图库，以使得私有云根据兴趣人物的图像在本地图库中查找与所述兴趣人物的图像匹配的照片；在接收到私有云无法匹配信息时，利用私有云服务器在授权的亲密人图库中根据兴趣人物的图像在亲密人图库中查找；如果仍未查找到匹配图像，则利用私有云服务器利用网络搜索引擎进行查找。

相应的，本实施例所提供的基于AR眼镜的信息提示方法，具体包括：

S310，采集AR眼镜配置的加速度传感器采集的运动信息，当所述运动信息在预设的时长范围内变化值处于设定的变化范围时，连续采集至少两张初始识别图像。

S320，将所述兴趣人物的图像发送至终端。

S330，接收到终端无法匹配信息，将所述兴趣人物图像发送至私有云图库，以使得私有云根据兴趣人物的图像在本地图库中查找与所述兴趣人物的图像匹配的照片。

由于终端存储容量有限，用户通常会将大部分照片转存到私有云中。在终端无法在自身图库查找到相应的匹配照片时，AR眼镜可以向私有云图库发送兴趣人物图像。私有云服务器可采用上述实施例终端采用的图像匹配方法查找匹配图像，并在查找到匹配图像时向AR眼镜同样提供匹配照片的信息以及匹配照片中所述兴趣人物的图像，以使得AR眼镜生成人物变化模型及生成三级提示信息分步对用户进行提示。

S340，在接收到私有云无法匹配信息时，利用私有云服务器在授权的亲密人图库中根据兴趣人物的图像在亲密人图库中查找。

如果私有云服务器在私有云图库中仍然无法查找到对应的匹配照片时，私有云服务器向AR眼镜发送无法匹配消息。AR眼镜则可利用之前存储的授权信息，通过私有云服务器在经过授权的亲密人的私有云图库中进行查找匹配。通过关联人获取兴趣人物的相关信息，便于用户寻找话题与之交流，提高社交效率。

S350，如果仍未查找到匹配图像，则利用网络搜索引擎进行查找。

如果在经过授权的亲密人的私有云图库中仍然不能查找到匹配结果，则可认为当前用户与兴趣人物之前并无交集，此时，兴趣人物可能是业内著名人物或者是会议的重要人员。因此，可利用网络搜索引擎根据图像进行搜索。

S360，将所述查找结果通过AR眼镜进行展示。

将搜索结果提示给相应用户。用户可充分了解兴趣人物的详细信息，准备合适的话题与兴趣人物进行交谈。

本实施例通过增加如下步骤：接收到终端无法匹配信息，将所述兴趣人物图像发送至私有云图库，以使得私有云根据兴趣人物的图像在本地图库中查找与所述兴趣人物的图像匹配的照片；在接收到私有云无法匹配信息时，利用私有云服务器在授权的亲密人图库中根据兴趣人物的图像在亲密人图库中查找；如果仍未查找到匹配图像，则利用网络搜索引擎进行查找。可以在终端无法查找到匹配照片时，为用户提供更多的信息，便于用户在与兴趣人物无直接关联交集时，可以寻找合适的话题或者关联关系与兴趣人物社交交流。

实施例四

图4为本发明实施例四提供的基于AR眼镜的信息提示方法的流程示意图。本实施例以上述实施例为基础进行优化，在本实施例中，将所述根据采集到的图像中的兴趣人物面部图像判断表情是否正常，具体优化为：连续获取兴趣人物面部图像；从所述兴趣人物面部图像中提取五官特征；判断连续图像中眼、眉或者眼睛位移是否大于预设的位移阈值，在大于预设阈值时，确定表情异常。

相应的，本实施例所提供的基于AR眼镜的信息提示方法，具体包括：

S410，采集AR眼镜配置的加速度传感器采集的运动信息，当所述运动信息在预设的时长范围内变化值处于设定的变化范围时，连续采集至少两张初始识别图像。

S420,将所述兴趣人物的图像发送至终端，以使得终端根据兴趣人物的图像在本地图库中查找与所述兴趣人物的图像匹配的照片，并获取所述匹配照片的图像信息。

S430，接收终端发送的所述匹配照片的信息以及匹配照片中所述兴趣人物的图像，根据匹配照片中所述兴趣人物的图像和当前采集到兴趣人物图像生成人物变化模型，并将所述人物变化模型叠加于兴趣人物位置。

S440，将所述图像信息进行分级，得到三级提示信息，将所述一级提示信息显示于AR眼镜上。

S450,连续获取兴趣人物面部图像，从所述兴趣人物面部图像中提取五官特征。

现有普遍利用神经网络模型来确定表情是否异常。但该种方式需要设备具有较强的算力，而AR眼镜显然不具备该种能力。而传递到远程服务器判断，不仅需要一定的判断时间，同时AR眼镜也无法确定哪一张图像能够体现表情异常，因此还需要上传多张图像才能判别。严重影响效率。

由于表情异常时，面部五官会有一定的变化，利用该特征，可以快速判断表情是否异常。示例性的，可以从每张面部图像中，提取五官，特别是，眼睛、眉毛和嘴的特征。

S460,判断连续图像中五官特征位移是否大于预设的位移阈值，在大于预设阈值时，确定表情异常是否正常，在正常时，将二级提示信息显示于AR眼镜上。

基于每张图像，以面部中心点建立坐标系，并根据比例进行缩放，记录每张图像中的五官的相对位置，然后判断五官特征位移是否大于预设的位移阈值，如果大于，则可判定表情异常。

S470,采集语音信息，根据采集到的语音信息判断语音信息中是否包括兴趣人物姓名，如果不包括，则将三级提示信息显示于AR眼镜上。

本实施例通过将所述根据采集到的图像中的兴趣人物面部图像判断表情是否正常，具体优化为：连续获取兴趣人物面部图像；从所述兴趣人物面部图像中提取五官特征；判断连续图像中眼、眉或者眼睛位移是否大于预设的位移阈值，在大于预设阈值时，确定表情异常。可以快速准确的判断兴趣人物面部表情是否异常。能够更加快速的判别是否异常，并根据判别结果调整信息提示策略。有效提高了社交互动效果，提升了用户的使用体验。

实施例五

图5是本发明实施例五提供的基于AR眼镜的信息提示装置的结构示意图，如图5所示，所述装置包括：

运动信息采集模块510，用于采集AR眼镜配置的加速度传感器采集的运动信息；

图像采集模块520，用于当所述运动信息在预设的时长范围内变化值处于设定的变化范围时，连续采集至少两张初始识别图像；

兴趣人物确定模块530，用于从所述至少两张初始识别图像中确定兴趣人物；

发送模块540，用于将所述兴趣人物的图像发送至终端，以使得终端根据兴趣人物的图像在本地图库中查找与所述兴趣人物的图像匹配的照片，并获取所述匹配照片的图像信息；

接收模块550，用于接收终端发送的所述匹配照片的信息以及匹配照片中所述兴趣人物的图像；

模型生成模块560，用于根据匹配照片中所述兴趣人物的图像和当前采集到兴趣人物图像生成人物变化模型，并将所述人物变化模型叠加于兴趣人物位置；

提示模块570，用于将所述图像信息进行分级，得到三级提示信息，将所述一级提示信息显示于AR眼镜上。

本实施例提供的基于AR眼镜的信息提示装置，通过采集AR眼镜配置的加速度传感器采集的运动信息；在所述运动信息在预设的时长范围内变化处于设定的变化范围时，连续采集至少两张初始识别图像；从所述至少两张初始识别图像中确定兴趣人物；将所述兴趣人物的图像发送至终端，以使得终端根据兴趣人物的图像在本地图库中查找与所述兴趣人物的图像匹配的照片，并获取所述匹配照片的图像信息；接收终端发送的所述匹配照片的信息以及匹配照片中所述兴趣人物的图像；根据匹配照片中所述兴趣人物的图像和当前采集到兴趣人物图像生成人物变化模型，并将所述人物变化模型叠加于兴趣人物位置；将所述图像信息进行分级，得到三级提示信息，将所述一级提示信息显示于AR眼镜上。可以利用信息分步提示方式，为用户提供充分的回忆环境，利用大脑的记忆功能，方便使用者回忆相关信息，避免由于图像匹配错误产生的误识别影响。

在上述各实施例的基础上，所述装置还包括：

判断模块，用于继续采集图像，根据采集到的图像中的兴趣人物面部图像判断表情是否正常，在正常时，将二级提示信息显示于AR眼镜。

在上述各实施例的基础上，所述装置还包括：

语音采集模块，用于采集语音信息，根据采集到的语音信息判断语音信息中是否包括兴趣人物姓名，如果不包括，则将三级提示信息显示于AR眼镜上。

在上述各实施例的基础上，所述确定子单元用于：

在当前运行的应用程序对应的UDP连接数量超过预设的UDP连接数量时，确定为时延优先模式。

在上述各实施例的基础上，所述三级信息包括：

一级信息，包括：地点和时间信息；

二级信息，包括：兴趣人物的工作信息；

三级信息，包括：兴趣人物的姓名。

在上述各实施例的基础上，所述装置还包括：

私有云发送模块，用于接收到终端无法匹配信息，将所述兴趣人物图像发送至私有云图库，以使得私有云根据兴趣人物的图像在本地图库中查找与所述兴趣人物的图像匹配的照片；

亲密人图库查找模块，用于在接收到私有云无法匹配信息时，利用私有云服务器在授权的亲密人图库中根据兴趣人物的图像在亲密人图库中查找；

搜索模块，用于如果仍未查找到匹配图像，则利用利用网络搜索引擎进行查找。

在上述各实施例的基础上，所述装置还包括：

排序模块，用于将查找到的匹配照片按照匹配度进行排序；

选取模块，用于在判断表情异常时，按照排序选取第二匹配照片，并获取第二匹配照片的图像信息。

在上述各实施例的基础上，所述判断模块包括：

获取单元，用于连续获取兴趣人物面部图像；

提取单元，用于从所述兴趣人物面部图像中提取五官特征；

确定单元，用于判断连续图像中五官特征位移是否大于预设的位移阈值，在大于预设阈值时，确定表情异常。

本发明实施例所提供的基于AR眼镜的信息提示装置可执行本发明任意实施例所提供的基于AR眼镜的信息提示方法，具备执行方法相应的功能模块和有益效果。

实施例六

图6为本发明实施例六提供的一种设备，特别是AR眼镜的结构示意图。图6示出了适于用来实现本发明实施方式的示例性设备12的框图。图6显示的设备12仅仅是一个示例，不应对本发明实施例的功能和使用范围带来任何限制。

如图6所示，设备12以通用计算设备的形式表现。设备12的组件可以包括但不限于：一个或者多个处理器或者处理单元16，系统存储器28，连接不同系统组件(包括系统存储器28和处理单元16)的总线18。

总线18表示几类总线结构中的一种或多种，包括存储器总线或者存储器控制器，外围总线，图形加速端口，处理器或者使用多种总线结构中的任意总线结构的局域总线。举例来说，这些体系结构包括但不限于工业标准体系结构(ISA)总线，微通道体系结构(MAC)总线，增强型ISA总线、视频电子标准协会(VESA)局域总线以及外围组件互连(PCI)总线。

设备12典型地包括多种计算机系统可读介质。这些介质可以是任何能够被设备12访问的可用介质，包括易失性和非易失性介质，可移动的和不可移动的介质。

系统存储器28可以包括易失性存储器形式的计算机系统可读介质，例如随机存取存储器(RAM)30和/或高速缓存存储器32。设备12可以进一步包括其它可移动/不可移动的、易失性/非易失性计算机系统存储介质。仅作为举例，存储系统34可以用于读写不可移动的、非易失性磁介质(图6未显示，通常称为“硬盘驱动器”)。尽管图6中未示出，可以提供用于对可移动非易失性磁盘(例如“软盘”)读写的磁盘驱动器，以及对可移动非易失性光盘(例如CD-ROM,DVD-ROM或者其它光介质)读写的光盘驱动器。在这些情况下，每个驱动器可以通过一个或者多个数据介质接口与总线18相连。存储器28可以包括至少一个程序产品，该程序产品具有一组(例如至少一个)程序模块，这些程序模块被配置以执行本发明各实施例的功能。

具有一组(至少一个)程序模块42的程序/实用工具40，可以存储在例如存储器28中，这样的程序模块42包括但不限于操作系统、一个或者多个应用程序、其它程序模块以及程序数据，这些示例中的每一个或某种组合中可能包括网络环境的实现。程序模块42通常执行本发明所描述的实施例中的功能和/或方法。

设备12也可以与一个或多个外部设备14(例如键盘、指向设备、显示器24等)通信，还可与一个或者多个使得用户能与该设备12交互的设备通信，和/或与使得该设备12能与一个或多个其它计算设备进行通信的任何设备(例如网卡，调制解调器等等)通信。这种通信可以通过输入/输出(I/O)接口22进行。并且，设备12还可以通过网络适配器20与一个或者多个网络(例如局域网(LAN)，广域网(WAN)和/或公共网络，例如因特网)通信。如图所示，网络适配器20通过总线18与设备12的其它模块通信。应当明白，尽管图中未示出，可以结合设备12使用其它硬件和/或软件模块，包括但不限于：微代码、设备驱动器、冗余处理单元、外部磁盘驱动阵列、RAID系统、磁带驱动器以及数据备份存储系统等。

处理单元16通过运行存储在系统存储器28中的程序，从而执行各种功能应用以及数据处理，例如实现本发明实施例所提供的基于AR眼镜的信息提示方法。

实施例七

本发明实施例七还提供了一种包含计算机可执行指令的存储介质，所述计算机可执行指令在由计算机处理器执行时用于执行如上述实施例提供的基于AR眼镜的信息提示方法。

本发明实施例的计算机存储介质，可以采用一个或多个计算机可读的介质的任意组合。计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质。计算机可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的系统、装置或器件，或者任意以上的组合。计算机可读存储介质的更具体的例子(非穷举的列表)包括：具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本文件中，计算机可读存储介质可以是任何包含或存储程序的有形介质，该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。

计算机可读的信号介质可以包括在基带中或者作为载波一部分传播的数据信号，其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式，包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读的信号介质还可以是计算机可读存储介质以外的任何计算机可读介质，该计算机可读介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。

计算机可读介质上包含的程序代码可以用任何适当的介质传输，包括——但不限于无线、电线、光缆、RF等等，或者上述的任意合适的组合。

可以以一种或多种程序设计语言或其组合来编写用于执行本发明操作的计算机程序代码，所述程序设计语言包括面向对象的程序设计语言—诸如Java、Smalltalk、C++，还包括常规的过程式程序设计语言—诸如”C”语言或类似的程序设计语言。程序代码可以完全地在用户计算机上执行、部分地在用户计算机上执行、作为一个独立的软件包执行、部分在用户计算机上部分在远程计算机上执行、或者完全在远程计算机或设备上执行。在涉及远程计算机的情形中，远程计算机可以通过任意种类的网络——包括局域网(LAN)或广域网(WAN)—连接到用户计算机，或者，可以连接到外部计算机(例如利用因特网服务提供商来通过因特网连接)。

注意，上述仅为本发明的较佳实施例及所运用技术原理。本领域技术人员会理解，本发明不限于这里所述的特定实施例，对本领域技术人员来说能够进行各种明显的变化、重新调整和替代而不会脱离本发明的保护范围。因此，虽然通过以上实施例对本发明进行了较为详细的说明，但是本发明不仅仅限于以上实施例，在不脱离本发明构思的情况下，还可以包括更多其他等效实施例，而本发明的范围由所附的权利要求范围决定。

Claims (10)

1.一种基于AR眼镜的信息提示方法，其特征在于，包括：

采集AR眼镜配置的加速度传感器采集的运动信息；

当所述运动信息在预设的时长范围内变化值处于设定的变化范围时，连续采集至少两张初始识别图像；

从所述至少两张初始识别图像中确定兴趣人物；

将所述兴趣人物的图像发送至终端，以使得终端根据兴趣人物的图像在本地图库中查找与所述兴趣人物的图像匹配的照片，并获取所述匹配照片的图像信息；

接收终端发送的所述匹配照片的信息以及匹配照片中所述兴趣人物的图像；

根据匹配照片中所述兴趣人物的图像和当前采集到兴趣人物图像生成人物变化模型，并将所述人物变化模型叠加于兴趣人物位置；

将所述图像信息进行分级，得到三级提示信息，将所述一级提示信息显示于AR眼镜上。

2.根据权利要求1所述的方法，其特征在于，在所述一级提示信息显示于AR眼镜上后，所述方法还包括：

继续采集图像，根据采集到的图像中的兴趣人物面部图像判断表情是否正常，在正常时，将二级提示信息显示于AR眼镜上。

3.根据权利要求2所述的方法，其特征在于，在将二级提示信息显示于AR眼镜后，所述方法还包括：

采集语音信息，根据采集到的语音信息判断语音信息中是否包括兴趣人物姓名，如果不包括，则将三级提示信息显示于AR眼镜上。

4.根据权利要求3所述的方法，其特征在于，所述三级信息包括：

一级信息，包括：地点和时间信息；

二级信息，包括：兴趣人物的工作信息；

三级信息，包括：兴趣人物的姓名。

5.根据权利要求4所述的方法，其特征在于，所述方法还包括：

接收到终端无法匹配信息，将所述兴趣人物图像发送至私有云图库，以使得私有云根据兴趣人物的图像在本地图库中查找与所述兴趣人物的图像匹配的照片；

在接收到私有云无法匹配信息时，利用私有云服务器在授权的亲密人图库中根据兴趣人物的图像在亲密人图库中查找；

如果仍未查找到匹配图像，则利用网络搜索引擎进行查找。

6.根据权利要求5所述的方法，其特征在于，所述方法还包括：

将查找到的匹配照片按照匹配度进行排序；

在判断表情异常时，按照排序选取第二匹配照片，并获取第二匹配照片的图像信息。

7.根据权利要求2所述的方法，其特征在于，所述根据采集到的图像中的兴趣人物面部图像判断表情是否正常，包括：

连续获取兴趣人物面部图像；

从所述兴趣人物面部图像中提取五官特征；

判断连续图像中五官特征位移是否大于预设的位移阈值，在大于预设阈值时，确定表情异常。

8.一种基于AR眼镜的信息提示装置，其特征在于，包括：

运动信息采集模块，用于采集AR眼镜配置的加速度传感器采集的运动信息；

图像采集模块，用于当所述运动信息在预设的时长范围内变化值处于设定的变化范围时，连续采集至少两张初始识别图像；

兴趣人物确定模块，用于从所述至少两张初始识别图像中确定兴趣人物；

发送模块，用于将所述兴趣人物的图像发送至终端，以使得终端根据兴趣人物的图像在本地图库中查找与所述兴趣人物的图像匹配的照片，并获取所述匹配照片的图像信息；

接收模块，用于接收终端发送的所述匹配照片的信息以及匹配照片中所述兴趣人物的图像；

模型生成模块，用于根据匹配照片中所述兴趣人物的图像和当前采集到兴趣人物图像生成人物变化模型，并将所述人物变化模型叠加于兴趣人物位置；

提示模块，用于将所述图像信息进行分级，得到三级提示信息，将所述一级提示信息显示于AR眼镜上。

9.一种设备，其特征在于，所述设备包括：

一个或多个处理器；

存储装置，用于存储一个或多个程序，

摄像头，用于采集图像；

拾音器，用于采集语音信息；

当所述一个或多个程序被所述一个或多个处理器执行，使得所述一个或多个处理器实现如权利要求1-7中任一所述的基于AR眼镜的信息提示方法。

10.一种包含计算机可执行指令的存储介质，所述计算机可执行指令在由计算机处理器执行时用于执行如权利要求1-7任一所述的基于AR眼镜的信息提示方法。

Images