CN109725726A - 一种查询方法和装置 - Google Patents
一种查询方法和装置 Download PDFInfo
- Publication number
- CN109725726A CN109725726A CN201811644278.7A CN201811644278A CN109725726A CN 109725726 A CN109725726 A CN 109725726A CN 201811644278 A CN201811644278 A CN 201811644278A CN 109725726 A CN109725726 A CN 109725726A
- Authority
- CN
- China
- Prior art keywords
- user
- information
- wear
- object factory
- wearable device
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Landscapes
- User Interface Of Digital Computer (AREA)
Abstract
本申请实施例公开了一种查询方法。该方法的一具体实施方式包括:捕捉用户的视线,并结合所摄取的外部影像,从该外部影像中检测被该用户注视超过预设时长的目标对象,并从该外部影像中获取该目标对象的外在信息;将该目标对象的外在信息发送给服务设备,以供该服务设备基于该外在信息进行查询。该实施方式实现了与应用的视觉交互。
Description
技术领域
本申请实施例涉及计算机技术领域,具体涉及一种查询方法和装置。
背景技术
虚拟现实(Virtual Reality,VR)技术是一种可以创建和体验虚拟世界的计算机仿真系统,它利用计算机生成一种模拟环境,是一种多源信息融合的、交互式的三维动态视景和实体行为的系统仿真使用户沉浸到该环境中。
眼球追踪是一项科学应用技术,用户无需触摸屏幕即可与应用交互。从原理上看,眼球追踪主要是研究眼球运动信息的获取、建模和模拟,用途颇广。而获取眼球运动信息的设备除了红外设备之外,还可以是图像采集设备,甚至一般电脑或手机上的摄像头,其在软件的支持下也可以实现眼球跟踪。
发明内容
本申请实施例提出了一种查询方法和装置。
第一方面,本申请实施例提供了一种查询方法,应用于头戴式穿戴设备终端,该方法包括:捕捉用户的视线,并结合所摄取的外部影像,从外部影像中检测被用户注视超过预设时长的目标对象,并从外部影像中获取目标对象的外在信息;将目标对象的外在信息发送给服务设备,以供服务设备基于外在信息进行查询。
第二方面,本申请实施例提供了一种用于推送信息的方法,应用于服务设备,该方法包括:响应于接收到来自头戴式穿戴设备终端的、该头戴式穿戴设备终端基于穿戴其的用户的视线捕捉到的目标对象的外在信息,查找与外在信息相匹配的对象描述信息,其中,对象描述信息用于描述服务设备所服务的用户;将所查找到的对象描述信息推送给头戴式穿戴设备终端。
第三方面,本申请实施例提供了一种电子设备,包括:一个或多个处理器;存储装置,其上存储有一个或多个程序,当一个或多个程序被一个或多个处理器执行,使得一个或多个处理器实现如第一方面中任一实施例的方法。
第四方面,本申请实施例提供了一种计算机可读介质,其上存储有计算机程序,其中,程序被处理器执行时实现如第一方面中任一实施例的方法。
本申请上述实施例提供的查询方法,应用于头戴式穿戴设备终端,首先,捕捉用户的视线,并结合所摄取的外部影像,从外部影像中检测被用户注视超过预设时长的目标对象,并从外部影像中获取所述目标对象的外在信息;然后,将所述目标对象的外在信息发送给服务设备,以供所述服务设备基于所述外在信息进行查询。通过捕捉用户的视线,获取相应的外在信息以及将外在信息发送给服务设备,以供服务设备基于该外在信息进行查询。用户无需触摸屏幕即可与应用交互,也无需用户主动输入信息,即可自动发现用户潜在感兴趣的目标对象并提供该目标对象的信息。并且,在用户潜在感兴趣的目标对象为陌生用户的情况下,现有方案中并没有技术能实现有效信息的提供,而本申请的上述实施例提供的方案可通过视线捕捉并结合提取自外部影像的外在信息进行匹配查询等手段,提供现有方案中无法提供的有效信息。
附图说明
通过阅读参照以下附图所作的对非限制性实施例所作的详细描述,本申请的其它特征、目的和优点将会变得更明显:
图1是本申请的一个实施例可以应用于其中的示例性系统架构图;
图2是根据本申请的查询方法的一个实施例的流程图;
图3是根据本申请实施例的查询方法的一个应用场景的示意图;
图4是根据本申请的查询方法的又一个实施例的流程图;
图5是根据本申请的用于推送信息的方法的一个实施例的流程图;
图6是适于用来实现本申请实施例的电子设备的计算机系统的结构示意图。
具体实施方式
下面结合附图和实施例对本申请作进一步的详细说明。可以理解的是,此处所描述的具体实施例仅仅用于解释相关发明,而非对该发明的限定。另外还需要说明的是,为了便于描述,附图中仅示出了与有关发明相关的部分。
需要说明的是,在不冲突的情况下,本申请中的实施例及实施例中的特征可以相互组合。下面将参考附图并结合实施例来详细说明本申请。
图1示出了可以应用本申请实施例的查询方法或用于推送信息的方法的实施例的示例性系统架构100。
如图1所示,系统架构100可以包括终端101、102、103,网络104和服务设备105。网络104用以在终端101、102、103和服务设备105之间提供通信链路的介质。网络104可以包括各种连接类型,例如有线、无线通信链路或者光纤电缆等等。
终端101、102、103可以是硬件,也可以是软件。当终端101、102、103为硬件时,可以是各种电子设备,包括但不限于头戴式穿戴设备终端等等;该头戴式穿戴设备终端可以有多种实现方式,如该头戴式穿戴设备终端可以仅包含头戴式设备,也可以是分布式设备;该分部式设备可以包括头戴式设备以及非头戴式设备,作为示例,该非头戴式设备可以包含与头戴式设备通信的移动终端(如智能手机、平板电脑、电子书阅读器、膝上型便携式计算机等)。当终端101、102、103为软件时,可以安装在上述所列举的电子设备中。其可以实现成多个软件或软件模块(例如用来提供分布式服务的多个软件或软件模块),也可以实现成单个软件或软件模块。在此不做具体限定。
服务设备105可以是提供各种服务的服务器,例如对终端101上的外在信息进行查询处理的服务器。后台查询服务器可以对接收到的外在信息进行查询等处理,并将处理结果(例如查询到的对象描述信息)反馈给终端设备。
需要说明的是,服务设备可以是硬件,也可以是软件。当服务设备为硬件时,可以实现成多个服务器组成的分布式服务器集群,也可以实现成单个服务器。当服务设备为软件时,可以实现成多个软件或软件模块(例如用来提供分布式服务的多个软件或软件模块),也可以实现成单个软件或软件模块。在此不做具体限定。
应该理解,图1中的终端、网络和服务设备的数目仅仅是示意性的。根据实现需要,可以具有任意数目的终端设备、网络和服务器。
继续参考图2,示出了根据本申请的查询方法的一个实施例的流程200。该查询方法,应用于头戴式穿戴设备终端,包括以下步骤:
步骤201,捕捉用户的视线,并结合所摄取的外部影像,从外部影像中检测被用户注视超过预设时长的目标对象,并从外部影像中获取目标对象的外在信息。
在本实施例中,查询方法的执行主体(例如图1所示的终端101、102、103中的任一者;该终端101、102、103在本实施例中可以包括头戴式穿戴设备终端)可以利用各种方式捕捉用户的视线。作为示例,可以通过固定在执行主体上的摄像头采集图像,且该摄像头与上述执行主体通信连接。上述执行主体可以接收该摄像头采集的图像。作为又一示例,摄像头可以集成在执行主体中,执行主体可以直接得到该摄像头采集的图像。上述外部影像可以是在执行主体关联位置中的摄像头所摄取的。当用户的视线保持不变化的时长超过预设时长的时候,执行主体从此时采集到的外部影像中检测用户视线对应的目标对象,即用户注视超过预设时长的目标对象。用户注视超过预设时长的目标对象可能为任务;从外部影像中检测到的目标对象可能包括外部影像中的目标人物的影像,例如,脸部图像或身形图像。从外部影像中可以获取目标对象的外在信息,这里的外在信息通常可以包括目标人物的脸部图像或身形图像,也可以是对脸部图像进行特征提取后获得的脸部特征,或对身形图像进行特征提取后获得的身形特征,还可以是其他用以表征目标对象的外在的信息。
可选地,执行主体还可以通过摄像装置采集光源对用户瞳孔照射形成高度可见反射的图像,通过采集到的图像确定用户角膜、瞳孔反射形成的向量夹角,基于向量夹角,得出人眼注视的方向。这里的摄像装置通常可以安装在执行主体所在的硬件设备周围或者与该硬件设备固定连接。用以采集光源对用户瞳孔照射形成高度可见反射的图像。
用以捕捉用户视线的技术,即视线追踪技术,相关技术中广泛运用的方法包括“瞳孔—角膜反射方法”(the pupil center cornea reflection technique),其所利用的眼动过程中保持不变的特征,是眼球角膜外表面上的普尔钦斑(Purkinje image)——眼球角膜上的一个亮光点,由进入瞳孔的光线在角膜外表面上反射(corneal reflection)而产生。由于摄像机的位置固定、屏幕(光源)的位置固定、眼球中心位置不变(假设眼球为球状,且头部不动),普尔钦斑的绝对位置并不随眼球的转动而变化(其实,头部的小幅度运动也能通过角膜反射计算出来)。但其相对于瞳孔和眼球的位置则是在不断变化的,比如,当人物盯着摄像头时,普尔钦斑就在人物瞳孔之间;而当人物抬起头时,普尔钦斑就在人物的瞳孔下方。这样一来,只要实时定位眼睛图像上的瞳孔、和普尔钦斑的位置,计算出角膜反射向量,便能利用几何模型,估算得到用户的视线方向。再基于前期定标过程(即让用户注视电脑屏幕上特定的点)中所建立的用户眼睛特征与所关注的屏幕呈现的内容之间的关系,就能判断出用户究竟在看屏幕上的什么内容了。为了更准确地定位瞳孔中心,瞳孔和虹膜之间的分界线需要被更准确地识别。一种方案是可以使用“亮、暗瞳差分方案”,即:交替用不同方位的光源向人眼发出近红外线,然后在每两帧相邻的图像中,分别获取用户明亮的瞳孔(bright pupil,亮瞳)和暗淡的瞳孔(dark pupil,暗瞳),进行叠加差分,从而更清晰地“抠”出瞳孔,再计算瞳孔的质心和形状等参数。
需要说明的是,上述用以捕捉用户视线的技术仅为举例,而非表示限制。
需要说明的是,该该头戴式穿戴设备终端可以有多种实现方式,如该头戴式穿戴设备终端可以仅包含头戴式设备,也可以是分布式设备;该分部式设备可以包括头戴式设备以及非头戴式设备,作为示例,该非头戴式设备可以包含与头戴式设备通信的移动终端(如智能手机、平板电脑、电子书阅读器、膝上型便携式计算机等)。
步骤202,将目标对象的外在信息发送给服务设备,以供服务设备基于外在信息进行查询。
在本实施例中,执行主体将步骤201中获取的外在信息发送给服务设备,以供服务设备基于外在信息进行查询。其中,外在信息的发送方式在本申请中并不限制。例如可以通过有线的方式发送,也可以通过无线的方式发送。
本申请的上述实施例提供的方法实现了对用户视线的捕捉,通过结合所摄取的外部影像,从外部影像中检测被用户注视超过预设时长的目标对象,并从外部影像中获取该目标对象的外在信息。将所获取的外在信息发送给通信连接的服务设备,以供服务设备基于外在信息进行查询。获取相应的外在信息以及将外在信息发送给服务设备,以供服务设备基于该外在信息进行查询。用户无需触摸屏幕即可与应用交互,也无需用户主动输入信息,即可自动发现用户潜在感兴趣的目标对象并提供该目标对象的信息。并且,在用户潜在感兴趣的目标对象为陌生用户的情况下,现有方案中并没有技术能实现有效信息的提供,而本申请的上述实施例提供的方案可通过视线捕捉并结合提取自外部影像的外在信息进行匹配查询等手段,提供现有方案中无法提供的有效信息。
继续参见图3,图3是根据本实施例的查询方法的应用场景的一个示意图。在图3的应用场景300中,终端301首先捕捉用户的视线。结合所摄取的外部影像302,从外部影像302中检测被用户注视超过预设时长的目标对象3021。从外部影像中获取目标对象3021的外在信息303。将目标对象的外在信息303发送给服务设备304,以供服务设备304基于外在信息303进行查询。
本申请的上述实施例提供的方法实现了对用户感兴趣对象的查询,通过捕捉用户的视线,获取相应的外在信息以及将外在信息发送给服务设备,以供服务设备基于该外在信息进行查询,用户无需触摸屏幕即可与应用交互,无需用户输入信息,即可给用户提供用户潜在感兴趣的信息,有助于提高用户的使用体验。
进一步参考图4,其示出了查询方法的又一个实施例的流程400。该查询方法的流程400,可用于头戴式穿戴设备终端,包括以下步骤:
步骤401,捕捉用户的视线,并结合所摄取的外部影像,从外部影像中检测被用户注视超过预设时长的目标对象,并从外部影像中获取目标对象的外在信息。
步骤402,将目标对象的外在信息发送给服务设备,以供服务设备基于外在信息进行查询。
在本实施例中,步骤401到步骤402的具体操作与图2所示的实施例中步骤201到步骤202的操作基本相同,在此不再赘述。
步骤403,响应于接收到服务设备基于外在信息查询到的对象描述信息,呈现对象描述信息。
在本实施例中,上述对象描述信息用于描述对象,该对象描述信息包括但不限于以下至少一项:图像、名称、介绍信息等。上述对象描述信息还可以包括其他相关的信息,例如目标对象对应的用户所发布的相册以及动态等等。可以通过执行主体所在的屏幕进行展示上述对象描述信息从而呈现上述对象描述信息。在一些实施例中,该对象描述信息所描述的对象为用户,该对象描述信息可包括但不限于以下至少一项:用户的头像、昵称、个人信息介绍等。
可选地,服务设备可以通过外在信息中所包括的脸部图像从指定的图像数据库中查找与该脸部图像相匹配的图像,若查找到相匹配的图像,然后将该图像对应的用户信息(例如头像、昵称、个人信息介绍等)作为对象描述信息。在一些情况下,目标对象可能为服务设备所服务的用户,且服务设备存储有该用户的一些信息,因而,服务设备有可能基于外在信息而匹配到该用户。
在本实施例的一些可选的实现方式中,在呈现对象描述信息之后,该方法还可以包括:响应于接收到用户请求添加对象描述信息对应的用户为好友的请求操作,向服务设备发送好友添加请求,其中,好友添加请求用于请求将对象描述信息对应的用户添加为好友;响应于接收到服务设备反馈的好友添加通过通知,提示用户已将对象描述信息对应的用户添加为其好友。通过本可实现方式,可建立头戴式穿戴设备终端对应的用户与对象描述信息对应的用户之间的社交。
在本实施例的一些可选的实现方式中,在呈现对象描述信息之后,该方法还可以包括:响应于接收到头戴式穿戴设备终端对应的用户输入的用于发送给对象描述信息对应的用户的消息,将消息发送给服务设备,以供服务设备将消息转发给对象描述信息对应的用户;或者响应于接收到头戴式穿戴设备终端对应的用户针对对象描述信息对应的用户的音频或视频通话请求,将音频或视频通话请求发送给服务设备,以供服务设备将音频或视频通话请求转发给对象描述信息对应的用户。
本可选的实现方式的步骤,可以发生在响应于接收到服务设备反馈的好友添加通过通知,提示用户已将对象描述信息对应的用户添加为其好友之后。或者,在一些情况下,头戴式穿戴设备终端对应的用户所关注的目标对象可能已经是该头戴式穿戴设备终端对应的用户在该服务设备所支持的社交应用上的好友,在此情况下,在显示对象描述信息之后,头戴式穿戴设备终端对应的用户可直接与该目标对象通信。
可选地,该外在信息包括以下至少一项:脸部图像、身形图像、脸部特征、身形特征。
可选地,上述捕捉用户的视线,可以包括:通过摄像装置采集光源对用户瞳孔照射形成高度可见反射的图像,通过采集到的图像确定用户角膜、瞳孔反射形成的向量夹角,基于向量夹角,得出人眼注视的方向。
可选地,上述头戴式穿戴设备终端包括头戴式设备以及用于安装在移动终端中的应用。
从图4中可以看出,与图2对应的实施例相比,本实施例中的查询方法的流程400体现了接收以及呈现对象描述信息的步骤。通过捕捉用户的视线,结合所摄取的外部图像,得到用户感兴趣的目标对象,然后根据目标对象的外在信息得到对应的对象描述信息,呈现对象描述信息。
目前,若在实际生活中遇到感兴趣的陌生用户,现有方案中缺乏提供信息和交流策略的技术方案。通过本实施例提供的方案,可在穿戴头戴式穿戴设备终端的用户遇到其感兴趣的陌生用户又难以主动沟通(例如有社交障碍或者缺乏沟通机会)的情况下,基于视线捕捉、信息匹配查询(为了安全起见,优选地还包括用户授权许可)等,为穿戴头戴式穿戴设备终端的用户提供该陌生用户的信息,并在穿戴头戴式穿戴设备终端的用户的请求下以及该陌生用户的许可下,建立两者的社交关系。
进一步参考图5,示出了根据本申请的用于推送信息的方法的一个实施例的流程500。该用于推送信息的方法,应用于服务设备,包括以下步骤:
步骤501,响应于接收到来自头戴式穿戴设备终端的、该头戴式穿戴设备终端基于穿戴其的用户的视线捕捉到的目标对象的外在信息,查找与外在信息相匹配的对象描述信息。
在本实施例中,对象描述信息用于描述服务设备所服务的用户。可选地,若本实施例的执行主体(如图1所示的服务设备105)查询到目标对象,可向头戴视穿戴设备终端反馈目标对象的对象描述信息,且可选地可询问是否加好友。若上述执行主体查询不到与外在信息匹配的对象描述信息,可不向头戴式穿戴设备终端反馈任何信息,以减少对头戴式穿戴设备终端的用户的干扰,也可向头戴式穿戴设备终端反馈用于指示查询不到与外在信息匹配的对象描述信息的通知,以使头戴式穿戴设备终端的用户得知其无法获得目标对象的信息。
在本实施例中,外在信息可以仅包含从外部影像中截取的含有目标对象的外在特征的影像(如脸部图像或身形图像),也可包含从外部影像中提取的目标对象的外貌特征(如脸部特征、身形特征等)。
步骤502,将所查找到的对象描述信息推送给头戴式穿戴设备终端。由此,头戴式穿戴设备终端可呈现将该对象描述信息。
在本实施例的一些可选的实现方式中,上述外在信息包括脸部图像或脸部特征,查找与外在信息相匹配的对象描述信息,包括:查找与外在信息包括的脸部图像或脸部特征相匹配的用户,并获取所述相匹配的用户的对象描述信息。
在本实施例的一些可选的实现方式中,将所查找到的对象描述信息推送给头戴式穿戴设备终端的步骤,在所查找到的用户已授权许可将其对象描述信息提供给非好友用户的情况下执行。由此,可以保障服务设备所服务的用户的隐私。
在本实施例的一些可选的实现方式中,方法还包括:响应于接收到头戴式穿戴设备终端发送的请求添加对象描述信息对应的用户为好友的请求操作,向对象描述信息对应的用户发送好友添加请求,其中,好友添加请求用于请求将对象描述信息对应的用户添加为头戴式穿戴设备终端对应的用户的好友;响应于接收到对象描述信息对应的用户反馈的好友添加通过通知,将好友添加通过通知发送给头戴式穿戴设备终端。通过本可实现方式,可建立头戴式穿戴设备终端对应的用户与对象描述信息对应的用户之间的社交。
在本实施例的一些可选的实现方式中,对象描述信息对应的用户与头戴式穿戴设备终端对应的用户为好友,方法还包括:响应于接收到头戴式穿戴设备终端发送的、头戴式穿戴设备终端对应的用户针对对象描述信息对应的用户输入的消息,将消息转发给对象描述信息对应的用户;或者响应于接收到头戴式穿戴设备终端发送的针对对象描述信息对应的用户的音频或视频通话请求,将音频或视频通话请求发送给对象描述信息对应的用户。
在一些情况下,头戴式穿戴设备终端对应的用户所关注的目标对象可能已经是该头戴式穿戴设备终端对应的用户在该服务设备所支持的社交应用上的好友,在此情况下,头戴式穿戴设备终端对应的用户可直接与该目标对象通信。
下面参考图6,其示出了适于用来实现本申请实施例的服务器的计算机系统600的结构示意图。图6示出的服务器仅仅是一个示例,不应对本申请实施例的功能和使用范围带来任何限制。
如图6所示,计算机系统600包括中央处理单元(CPU)601,其可以根据存储在只读存储器(ROM)602中的程序或者从存储部分608加载到随机访问存储器(RAM)603中的程序而执行各种适当的动作和处理。在RAM 603中,还存储有系统600操作所需的各种程序和数据。CPU 601、ROM 602以及RAM 603通过总线604彼此相连。输入/输出(I/O)接口605也连接至总线604。
以下部件连接至I/O接口605:包括键盘、鼠标等的输入部分606;包括诸如阴极射线管(CRT)、液晶显示器(LCD)等以及扬声器等的输出部分607;包括硬盘等的存储部分608;以及包括诸如LAN卡、调制解调器等的网络接口卡的通信部分609。通信部分609经由诸如因特网的网络执行通信处理。驱动器610也根据需要连接至I/O接口605。可拆卸介质611,诸如磁盘、光盘、磁光盘、半导体存储器等等,根据需要安装在驱动器610上,以便于从其上读出的计算机程序根据需要被安装入存储部分608。
特别地,根据本公开的实施例,上文参考流程图描述的过程可以被实现为计算机软件程序。例如,本公开的实施例包括一种计算机程序产品,其包括承载在计算机可读介质上的计算机程序,该计算机程序包含用于执行流程图所示的方法的程序代码。在这样的实施例中,该计算机程序可以通过通信部分609从网络上被下载和安装,和/或从可拆卸介质611被安装。在该计算机程序被中央处理单元(CPU)601执行时,执行本申请的方法中限定的上述功能。
需要说明的是,本申请的计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质或者是上述两者的任意组合。计算机可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的系统、装置或器件,或者任意以上的组合。计算机可读存储介质的更具体的例子可以包括但不限于:具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机访问存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本申请中,计算机可读存储介质可以是任何包含或存储程序的有形介质,该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。而在本申请中,计算机可读的信号介质可以包括在基带中或者作为载波一部分传播的数据信号,其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式,包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读的信号介质还可以是计算机可读存储介质以外的任何计算机可读介质,该计算机可读介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。计算机可读介质上包含的程序代码可以用任何适当的介质传输,包括但不限于:无线、电线、光缆、RF等等,或者上述的任意合适的组合。
可以以一种或多种程序设计语言或其组合来编写用于执行本申请的操作的计算机程序代码,上述程序设计语言包括面向目标的程序设计语言—诸如Java、Smalltalk、C++,还包括常规的过程式程序设计语言—诸如”C”语言或类似的程序设计语言。程序代码可以完全地在用户计算机上执行、部分地在用户计算机上执行、作为一个独立的软件包执行、部分在用户计算机上部分在远程计算机上执行、或者完全在远程计算机或服务器上执行。在涉及远程计算机的情形中,远程计算机可以通过任意种类的网络——包括局域网(LAN)或广域网(WAN)—连接到用户计算机,或者,可以连接到外部计算机(例如利用因特网服务提供商来通过因特网连接)。
附图中的流程图和框图,图示了按照本申请各种实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上,流程图或框图中的每个方框可以代表一个模块、程序段、或代码的一部分,该模块、程序段、或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意,在有些作为替换的实现中,方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如,两个接连地表示的方框实际上可以基本并行地执行,它们有时也可以按相反的顺序执行,这依所涉及的功能而定。也要注意的是,框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合,可以用执行规定的功能或操作的专用的基于硬件的系统来实现,或者可以用专用硬件与计算机指令的组合来实现。
作为另一方面,本申请还提供了一种计算机可读介质,该计算机可读介质可以是上述实施例中描述的电子设备中所包含的;也可以是单独存在,而未装配入该电子设备中。上述计算机可读介质承载有一个或者多个程序,当上述一个或者多个程序被该电子设备执行时,使得该电子设备:捕捉用户的视线,并结合所摄取的外部影像,从外部影像中检测被用户注视超过预设时长的目标对象,并从外部影像中获取目标对象的外在信息;将目标对象的外在信息发送给服务设备,以供服务设备基于外在信息进行查询。
以上描述仅为本申请的较佳实施例以及对所运用技术原理的说明。本领域技术人员应当理解,本申请中所涉及的发明范围,并不限于上述技术特征的特定组合而成的技术方案,同时也应涵盖在不脱离上述发明构思的情况下,由上述技术特征或其等同特征进行任意组合而形成的其它技术方案。例如上述特征与本申请中公开的(但不限于)具有类似功能的技术特征进行互相替换而形成的技术方案。
Claims (14)
1.一种查询方法,应用于头戴式穿戴设备终端,所述方法包括:
捕捉用户的视线,并结合所摄取的外部影像,从所述外部影像中检测被所述用户注视超过预设时长的目标对象,并从所述外部影像中获取所述目标对象的外在信息;
将所述目标对象的外在信息发送给服务设备,以供所述服务设备基于所述外在信息进行查询。
2.根据权利要求1所述的方法,其中,所述方法还包括:
响应于接收到所述服务设备基于所述外在信息查询到的对象描述信息,呈现所述对象描述信息。
3.根据权利要求2所述的方法,其中,在呈现所述对象描述信息之后,所述方法还包括:
响应于接收到所述用户请求添加所述对象描述信息对应的用户为好友的请求操作,向所述服务设备发送好友添加请求,其中,所述好友添加请求用于请求将所述对象描述信息对应的用户添加为好友;
响应于接收到所述服务设备反馈的好友添加通过通知,提示所述用户已将所述对象描述信息对应的用户添加为其好友。
4.根据权利要求2所述的方法,其中,在呈现所述对象描述信息之后,所述方法还包括:
响应于接收到所述头戴式穿戴设备终端对应的用户输入的用于发送给所述对象描述信息对应的用户的消息,将所述消息发送给所述服务设备,以供所述服务设备将所述消息转发给所述对象描述信息对应的用户;或者
响应于接收到所述头戴式穿戴设备终端对应的用户针对所述对象描述信息对应的用户的音频或视频通话请求,将所述音频或视频通话请求发送给所述服务设备,以供所述服务设备将所述音频或视频通话请求转发给所述对象描述信息对应的用户。
5.根据权利要求1所述的方法,其中,所述外在信息包括以下至少一项:脸部图像、身形图像、脸部特征、身形特征。
6.根据权利要求1所述的方法,其中,所述捕捉用户的视线,包括:
通过摄像装置采集光源对所述用户瞳孔照射形成高度可见反射的图像,通过采集到的图像确定用户角膜、瞳孔反射形成的向量夹角,基于所述向量夹角,得出人眼注视的方向。
7.根据权利要求1所述的方法,其中,所述头戴式穿戴设备终端包括头戴式设备以及用于安装在移动终端中的应用。
8.一种用于推送信息的方法,应用于服务设备,所述方法包括:
响应于接收到来自头戴式穿戴设备终端的、该头戴式穿戴设备终端基于穿戴其的用户的视线捕捉到的目标对象的外在信息,查找与所述外在信息相匹配的对象描述信息,其中,所述对象描述信息用于描述所述服务设备所服务的用户;
将所查找到的对象描述信息推送给所述头戴式穿戴设备终端。
9.根据权利要求8所述的方法,其中,所述外在信息包括脸部图像或脸部特征,所述查找与所述外在信息相匹配的对象描述信息,包括:
查找与所述外在信息包括的脸部图像或脸部特征相匹配的用户,并获取所述相匹配的用户的对象描述信息。
10.根据权利要求8所述的方法,其中,将所查找到的对象描述信息推送给所述头戴式穿戴设备终端的步骤,在所述所查找到的用户已授权许可将其对象描述信息提供给非好友用户的情况下执行。
11.根据权利要求8所述的方法,其中,所述方法还包括:
响应于接收到所述头戴式穿戴设备终端发送的请求添加所述对象描述信息对应的用户为好友的请求操作,向所述对象描述信息对应的用户发送好友添加请求,其中,所述好友添加请求用于请求将所述对象描述信息对应的用户添加为所述头戴式穿戴设备终端对应的用户的好友;
响应于接收到所述对象描述信息对应的用户反馈的好友添加通过通知,将所述好友添加通过通知发送给所述头戴式穿戴设备终端。
12.根据权利要求8所述的方法,其中,所述对象描述信息对应的用户与所述头戴式穿戴设备终端对应的用户为好友,所述方法还包括:
响应于接收到所述头戴式穿戴设备终端发送的、所述头戴式穿戴设备终端对应的用户针对所述对象描述信息对应的用户输入的消息,将所述消息转发给所述对象描述信息对应的用户;或者
响应于接收到所述头戴式穿戴设备终端发送的针对所述对象描述信息对应的用户的音频或视频通话请求,将所述音频或视频通话请求发送给所述对象描述信息对应的用户。
13.一种电子设备,包括:
一个或多个处理器;
存储装置,用于存储一个或多个程序,
当所述一个或多个程序被所述一个或多个处理器执行,使得所述一个或多个处理器实现如权利要求1-12中任一所述的方法。
14.一种计算机可读存储介质,其上存储有计算机程序,其中,所述程序被处理器执行时实现如权利要求1-12中任一所述的方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201811644278.7A CN109725726A (zh) | 2018-12-29 | 2018-12-29 | 一种查询方法和装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201811644278.7A CN109725726A (zh) | 2018-12-29 | 2018-12-29 | 一种查询方法和装置 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN109725726A true CN109725726A (zh) | 2019-05-07 |
Family
ID=66299493
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201811644278.7A Pending CN109725726A (zh) | 2018-12-29 | 2018-12-29 | 一种查询方法和装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN109725726A (zh) |
Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102125422A (zh) * | 2010-01-12 | 2011-07-20 | 北京科技大学 | 视线追踪系统中基于瞳孔-角膜反射的视线估计方法 |
CN105651300A (zh) * | 2015-11-30 | 2016-06-08 | 东莞酷派软件技术有限公司 | 一种信息获取方法及电子设备 |
CN106095089A (zh) * | 2016-06-06 | 2016-11-09 | 郑黎光 | 一种获取感兴趣目标信息的方法 |
CN106557166A (zh) * | 2016-11-23 | 2017-04-05 | 上海擎感智能科技有限公司 | 智能眼镜及其控制方法、控制装置 |
CN107771342A (zh) * | 2016-06-20 | 2018-03-06 | 华为技术有限公司 | 一种增强现实显示方法及头戴式显示设备 |
CN108566518A (zh) * | 2018-03-29 | 2018-09-21 | 上海掌门科技有限公司 | 一种视频编辑、播放方法、设备及计算机可读介质 |
CN108615159A (zh) * | 2018-05-03 | 2018-10-02 | 百度在线网络技术(北京)有限公司 | 基于注视点检测的访问控制方法和装置 |
US20180335839A1 (en) * | 2017-05-22 | 2018-11-22 | Htc Corporation | Eye tracking method, electronic device, and non-transitory computer readable storage medium |
CN109005210A (zh) * | 2018-06-28 | 2018-12-14 | 联想(北京)有限公司 | 信息交互的方法和装置 |
-
2018
- 2018-12-29 CN CN201811644278.7A patent/CN109725726A/zh active Pending
Patent Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102125422A (zh) * | 2010-01-12 | 2011-07-20 | 北京科技大学 | 视线追踪系统中基于瞳孔-角膜反射的视线估计方法 |
CN105651300A (zh) * | 2015-11-30 | 2016-06-08 | 东莞酷派软件技术有限公司 | 一种信息获取方法及电子设备 |
CN106095089A (zh) * | 2016-06-06 | 2016-11-09 | 郑黎光 | 一种获取感兴趣目标信息的方法 |
CN107771342A (zh) * | 2016-06-20 | 2018-03-06 | 华为技术有限公司 | 一种增强现实显示方法及头戴式显示设备 |
CN106557166A (zh) * | 2016-11-23 | 2017-04-05 | 上海擎感智能科技有限公司 | 智能眼镜及其控制方法、控制装置 |
US20180335839A1 (en) * | 2017-05-22 | 2018-11-22 | Htc Corporation | Eye tracking method, electronic device, and non-transitory computer readable storage medium |
CN108566518A (zh) * | 2018-03-29 | 2018-09-21 | 上海掌门科技有限公司 | 一种视频编辑、播放方法、设备及计算机可读介质 |
CN108615159A (zh) * | 2018-05-03 | 2018-10-02 | 百度在线网络技术(北京)有限公司 | 基于注视点检测的访问控制方法和装置 |
CN109005210A (zh) * | 2018-06-28 | 2018-12-14 | 联想(北京)有限公司 | 信息交互的方法和装置 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN108305317B (zh) | 一种图像处理方法、装置及存储介质 | |
US12009089B2 (en) | System for extended reality visual contributions | |
US10223832B2 (en) | Providing location occupancy analysis via a mixed reality device | |
CN110766777A (zh) | 虚拟形象的生成方法、装置、电子设备及存储介质 | |
EP3972239A1 (en) | Method and apparatus for virtual fitting | |
KR101945082B1 (ko) | 미디어 컨텐츠 송신 방법, 미디어 컨텐츠 송신 장치, 미디어 컨텐츠 수신 방법, 및 미디어 컨텐츠 수신 장치 | |
JP2017527036A (ja) | セキュアなモバイル通信で眼信号を用いるためのシステムおよび方法 | |
CN108363995A (zh) | 用于生成数据的方法和装置 | |
EP3427233B1 (en) | Method and apparatus for providing augmented reality services | |
CN108491823A (zh) | 用于生成人眼识别模型的方法和装置 | |
CN109923509A (zh) | 虚拟现实中的对象的协同操纵 | |
CN109886955A (zh) | 用于处理眼底图像的方法和装置 | |
CN109872408A (zh) | 用于发送信息的方法和装置 | |
CN108521516A (zh) | 用于终端设备的控制方法和装置 | |
CN111340865B (zh) | 用于生成图像的方法和装置 | |
CN110111241A (zh) | 用于生成动态图像的方法和装置 | |
CN109559288A (zh) | 图像处理方法、装置、电子设备及计算机可读存储介质 | |
CN111710048A (zh) | 展示方法、装置和电子设备 | |
KR102164686B1 (ko) | 타일 영상의 영상 처리 방법 및 장치 | |
CN114422816A (zh) | 一种直播视频处理方法、装置、电子设备及存储介质 | |
CN110189364B (zh) | 用于生成信息的方法和装置,以及目标跟踪方法和装置 | |
CN109725726A (zh) | 一种查询方法和装置 | |
CN110084306A (zh) | 用于生成动态图像的方法和装置 | |
CN116228952A (zh) | 一种虚拟对象挂载方法、装置、设备及介质 | |
CN109949213A (zh) | 用于生成图像的方法和装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20190507 |
|
RJ01 | Rejection of invention patent application after publication |