一种筛选增强现实内容的方法、装置及系统
技术领域
本发明涉及通信领域,尤其涉及一种筛选增强现实内容的方法、装置及系统。
背景技术
增强现实(英文:Augmented Reality,缩写:AR)是一种用于帮助人们以更直观、更形象的方式获取关于现实世界中物体的相关信息的技术。AR系统的工作流程分为感知、识别、匹配及渲染四个步骤。
现有的地图应用可为用户提供基于位置的兴趣点(英文:Point of Interest,缩写:POI)的查询服务。安装了该地图应用的终端首先使用全球定位系统(英文:GlobalPosition System,缩写:GPS)或者蜂窝网的小区标识(英文:Cell ID)确定用户的当前位置(经纬度),然后根据该当前位置查询数据库,再从数据库中获取该当前位置附近已经注册的餐厅、银行、商场及车站等POI;用户也可在地图应用中输入一个其感兴趣的位置,而该地图应用通过搜索数据库,并在地图上定位该位置,从而搜索到该位置附近的POI。现有的问答系统在接收到用户输入的问题和相应的数据,并对该问题进行自然语言处理后,将该问题传送至查询子系统,查询子系统推断该问题的答案,并从知识库中取出相关的答案输出给用户。
然而,上述地图应用要求用户对自己请求的POI具有明确的认识,即用户需要根据自己的需求分析出自己想要到达的POI;上述问答系统只能处理单一类型的文本数据,不能处理复杂类型的数据,且若用户输入的问题不够精确,该问答系统则无法满足用户的信息需求。
发明内容
本发明的实施例提供一种筛选增强现实内容的方法、装置及系统,能够实时动态地根据用户选定的行为筛选出最能满足用户需求的增强现实内容,从而满足用户的信息需求。
为达到上述目的,本发明的实施例采用如下技术方案:
第一方面,本发明实施例提供一种筛选增强现实AR内容的方法,包括:
当终端中获取位置信息的应用被触发时,所述终端拍摄所述终端所在位置的全景照片,并根据所述全景照片确定所述终端的位置信息及第一目标的相关信息;
所述终端发送第一请求消息至服务器,所述第一请求消息中携带所述终端的标识及所述终端的位置信息;
所述终端接收来自所述服务器的携带至少一个行为的第一响应消息,所述至少一个行为是所述服务器根据所述终端的标识、所述终端的位置信息及不同行为的条件概率确定的;
所述终端在确定所述至少一个行为中的第一行为被选定时,发送第二请求消息至所述服务器,所述第二请求消息中携带所述第一行为的信息;
所述终端接收来自所述服务器的携带与所述第一行为对应的AR内容的第二响应消息;
所述终端根据所述第一目标的相关信息,将所述第一目标和所述AR内容结合后呈现。
在第一方面的第一种可能的实现方式中,所述当终端中获取位置信息的应用被触发时,所述终端拍摄所述终端所在位置的全景照片,并根据所述全景照片确定所述终端的位置信息及第一目标的相关信息,之前,所述方法还包括:
所述终端读取第二目标的标签信息;
所述终端发送第一记录事件至所述服务器,所述第一记录事件触发所述服务器根据所述终端的标识和所述终端的位置信息对所述第一记录事件进行分类并确定所述第一记录事件的概率,所述第一记录事件包含所述终端读取所述第二目标的标签信息的行为。
结合前述的第一方面或第一方面的第一种可能的实现方式,在第二种可能的实现方式中,所述终端在确定所述至少一个行为中的第一行为被选定时,发送第二请求消息至所述服务器,所述第二请求消息中携带所述第一行为的信息,之后,所述方法还包括:
所述终端发送第二记录事件至所述服务器,所述第二记录事件触发所述服务器根据所述终端的标识和所述终端的位置信息对所述第二记录事件进行分类并确定所述第二记录事件的概率及所述第二记录事件的条件概率,所述第二记录事件包含所述至少一个行为中所述第一行为被选中的行为。
结合第一方面的第二种可能的实现方式,在第三种可能的实现方式中,
所述第一目标的相关信息包括所述第一目标的位置信息,所述第二记录事件还包含所述第一目标的位置信息。
结合第一方面的第一种可能的实现方式至第三种可能的实现方式中的任一种实现方式,在第四种可能的实现方式中,在所述终端读取第二目标的标签信息之后,所述方法还包括:
所述终端根据所述第二目标的标签信息获取所述第二目标的标识;
所述终端发送携带所述第二目标的标识的第三请求消息至所述服务器;
所述终端接收所述服务器返回的携带所述第二目标的位置信息的第三响应消息。
结合第一方面的第四种可能的实现方式,在第五种可能的实现方式中,
所述第一记录事件还包含所述第二目标的位置信息。
第二方面,本发明实施例提供一种筛选AR内容的方法,包括:
服务器接收来自终端的第一请求消息,所述第一请求消息中携带所述终端的标识及所述终端的位置信息;
所述服务器根据所述终端的标识、所述终端的位置信息及不同行为的条件概率确定至少一个行为;
所述服务器发送携带所述至少一个行为的第一响应消息至所述终端;
所述服务器接收来自所述终端的第二请求消息,所述第二请求消息中携带第一行为的信息,所述第一行为是所述至少一个行为中被选定的行为;
所述服务器发送携带与所述第一行为对应的AR内容的第二响应消息至所述终端,所述第二响应消息触发所述终端根据第一目标的相关信息,将所述第一目标和所述AR内容结合后呈现,所述终端的位置信息及所述第一目标的相关信息为当所述终端中获取位置信息的应用被触发时,由所述终端拍摄所述终端所在位置的全景照片后,根据所述全景照片确定的。
在第二方面的第一种可能的实现方式中,在所述服务器接收来自终端的第一请求消息之前,所述方法还包括:
所述服务器接收来自所述终端的第一记录事件,所述第一记录事件包含所述终端读取第二目标的标签信息的行为;
所述服务器根据所述终端的标识和所述终端的位置信息对所述第一记录事件进行分类并确定所述第一记录事件的概率。
结合前述的第二方面或第二方面的第一种可能的实现方式,在第二种可能的实现方式中,所述服务器接收来自所述终端的第二请求消息之后,所述方法还包括:
所述服务器接收来自所述终端的第二记录事件,所述第二记录事件包含所述至少一个行为中所述第一行为被选定的行为;
所述服务器根据所述终端的标识和所述终端的位置信息对所述第二记录事件进行分类并确定所述第二记录事件的概率及所述第二记录事件的条件概率。
结合第二方面的第二种可能的实现方式,在第三种可能的实现方式中,
所述第一目标的相关信息包括所述第一目标的位置信息,所述第二记录事件还包含所述第一目标的位置信息。
结合第二方面的第一种可能的实现方式至第三种可能的实现方式中的任一种实现方式,在第四种可能的实现方式中,在所述服务器接收来自所述终端的第一记录事件之前,所述方法还包括:
所述服务器接收来自所述终端的携带所述第二目标的标识的第三请求消息,所述第二目标的标识为所述终端根据所述第二目标的标签信息获取的;
所述服务器发送携带所述第二目标的位置信息的第三响应消息至所述终端。
结合第二方面的第四种可能的实现方式,在第五种可能的实现方式中,
所述第一记录事件还包含所述第二目标的位置信息。
第三方面,本发明实施例提供一种终端,包括:
确定单元,用于当所述终端中获取位置信息的应用被触发时,拍摄所述终端所在位置的全景照片,并根据所述全景照片确定所述终端的位置信息及第一目标的相关信息;
发送单元,用于发送第一请求消息至服务器,所述第一请求消息中携带所述终端的标识及所述确定单元确定的所述终端的位置信息;
接收单元,用于接收来自所述服务器的携带至少一个行为的第一响应消息,所述至少一个行为是所述服务器根据所述终端的标识、所述终端的位置信息及不同行为的条件概率确定的;
所述发送单元,还用于在所述终端确定所述至少一个行为中的第一行为被选定时,发送第二请求消息至所述服务器,所述第二请求消息中携带所述第一行为的信息;
所述接收单元,还用于接收来自所述服务器的携带与所述第一行为对应的AR内容的第二响应消息;
显示单元,用于根据所述确定单元确定的所述第一目标的相关信息,将所述第一目标和所述接收单元接收的所述AR内容结合后呈现。
在第三方面的第一种可能的实现方式中,在所述确定单元当所述终端中获取位置信息的应用被触发时,拍摄所述终端所在位置的全景照片,并根据所述全景照片确定所述终端的位置信息及第一目标的相关信息,之前,
所述确定单元,还用于读取第二目标的标签信息;
所述发送单元,还用于发送第一记录事件至所述服务器,所述第一记录事件触发所述服务器根据所述终端的标识和所述终端的位置信息对所述第一记录事件进行分类并确定所述第一记录事件的概率,所述第一记录事件包含所述确定单元读取所述第二目标的标签信息的行为。
结合前述的第三方面或第三方面的第一种可能的实现方式,在第二种可能的实现方式中,在所述发送单元发送第二请求消息至所述服务器之后,
所述发送单元,还用于发送第二记录事件至所述服务器,所述第二记录事件触发所述服务器根据所述终端的标识和所述终端的位置信息对所述第二记录事件进行分类并确定所述第二记录事件的概率及所述第二记录事件的条件概率,所述第二记录事件包含所述至少一个行为中所述第一行为被选中的行为。
结合第三方面的第二种可能的实现方式,在第三种可能的实现方式中,
所述确定单元确定的所述第一目标的相关信息包括所述第一目标的位置信息,所述发送单元发送的所述第二记录事件还包含所述第一目标的位置信息。
结合第三方面的第一种可能的实现方式至第三种可能的实现方式中的任一种实现方式,在第四种可能的实现方式中,在所述确定单元读取第二目标的标签信息之后,
所述确定单元,还用于根据所述第二目标的标签信息获取所述第二目标的标识;
所述发送单元,还用于发送携带所述第二目标的标识的第三请求消息至所述服务器;
所述接收单元,还用于接收所述服务器返回的携带所述第二目标的位置信息的第三响应消息。
结合第三方面的第四种可能的实现方式,在第五种可能的实现方式中,
所述发送单元发送的所述第一记录事件还包含所述第二目标的位置信息。
第四方面,本发明实施例提供一种服务器,包括:
接收单元,用于接收来自终端的第一请求消息,所述第一请求消息中携带所述终端的标识及所述终端的位置信息;
确定单元,用于根据所述接收单元接收的所述终端的标识、所述终端的位置信息及不同行为的条件概率确定至少一个行为;
发送单元,用于发送携带所述确定单元确定的所述至少一个行为的第一响应消息至所述终端;
所述接收单元,还用于接收来自所述终端的第二请求消息,所述第二请求消息中携带第一行为的信息,所述第一行为是所述至少一个行为中被选定的行为;
所述发送单元,还用于发送携带与所述第一行为对应的AR内容的第二响应消息至所述终端,所述第二响应消息触发所述终端根据第一目标的相关信息,将所述第一目标和所述AR内容结合后呈现,所述终端的位置信息及所述第一目标的相关信息为当所述终端中获取位置信息的应用被触发时,由所述终端拍摄所述终端所在位置的全景照片后,根据所述全景照片确定的。
在第四方面的第一种可能的实现方式中,在所述接收单元接收来自所述终端的所述第一请求消息之前,
所述接收单元,还用于接收来自所述终端的第一记录事件,所述第一记录事件包含所述终端读取第二目标的标签信息的行为;
所述确定单元,还用于根据所述终端的标识和所述终端的位置信息对所述第一记录事件进行分类并确定所述第一记录事件的概率。
结合前述的第四方面或第四方面的第一种可能的实现方式,在第二种可能的实现方式中,在所述接收单元接收来自所述终端的所述第二请求消息之后,
所述接收单元,还用于接收来自所述终端的第二记录事件,所述第二记录事件包含所述至少一个行为中所述第一行为被选定的行为;
所述确定单元,还用于根据所述终端的标识和所述终端的位置信息对所述第二记录事件进行分类并确定所述第二记录事件的概率及所述第二记录事件的条件概率。
结合第四方面的第二种可能的实现方式,在第三种可能的实现方式中,
所述第一目标的相关信息包括所述第一目标的位置信息,所述接收单元接收的所述第二记录事件还包含所述第一目标的位置信息。
结合第四方面的第一种可能的实现方式至第三种可能的实现方式中的任一种实现方式,在第四种可能的实现方式中,在所述接收单元接收来自所述终端的所述第一记录事件之前,
所述接收单元,还用于接收来自所述终端的携带所述第二目标的标识的第三请求消息,所述第二目标的标识为所述终端根据所述第二目标的标签信息获取的;
所述发送单元,还用于发送携带所述第二目标的位置信息的第三响应消息至所述终端。
结合第四方面的第四种可能的实现方式,在第五种可能的实现方式中,
所述接收单元接收的所述第一记录事件还包含所述第二目标的位置信息。
第五方面,本发明实施例提供一种筛选AR内容的系统,包括:
上述第三方面所述的终端,及第四方面所述的服务器。
本发明实施例提供一种筛选AR内容的方法、装置及系统,能够实时动态地根据用户选定的行为筛选出最能满足用户需求的增强现实内容,进而满足用户的信息需求。
附图说明
为了更清楚地说明本发明实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例。
图1为本发明实施例提供的一种筛选AR内容的方法流程图一;
图2为本发明实施例提供的一种筛选AR内容的方法流程图二;
图3为本发明实施例提供的一种筛选AR内容的方法流程图三;
图4为本发明实施例提供的终端的结构示意图一;
图5为本发明实施例提供的服务器的结构示意图一;
图6为本发明实施例提供的终端的结构示意图二;
图7为本发明实施例提供的服务器的结构示意图二;
图8为本发明实施例提供的筛选AR内容的系统框图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。
本文中术语“和/或”,仅仅是一种描述关联对象的关联关系,表示可以存在三种关系,例如,A和/或B,可以表示:单独存在A,同时存在A和B,单独存在B这三种情况。另外,本文中字符“/”,一般表示前后关联对象是一种“或”的关系。
本文中描述的各种技术可用于各种无线通信系统,例如当前2G,3G通信系统和下一代通信系统,例如全球移动通信系统(英文:Global System for Mobilecommunications,缩写:GSM),码分多址(英文:Code Division Multiple Access,缩写:CDMA)系统,时分多址(英文:Time Division Multiple Access,缩写:TDMA)系统,宽带码分多址(英文:Wideband Code Division Multiple Access Wireless,缩写:WCDMA)系统,频分多址(英文:Frequency Division Multiple Addressing,缩写:FDMA)系统,正交频分多址(英文:Orthogonal Frequency-Division Multiple Access,缩写:OFDMA)系统,单载波频分多址(英文:Single Carrier Frequency Division Multiple Addressing,缩写:SC-FDMA)系统,通用分组无线业务(英文:General Packet Radio Service,缩写:GPRS)系统,长期演进(英文:Long Term Evolution,缩写:LTE)系统,以及其他此类通信系统。
终端可以是无线终端,无线终端可以是具有摄像头、陀螺仪、电子罗盘、近场通信(英文:Near Field Communication,缩写:NFC)模块(可选)、中央处理器(英文:CentralProcessing Unit,缩写:CPU)、随机存储存储器、非易失性存储器及通信模块的电子设备。无线终端可以经无线接入网(英文:Radio Access Network,缩写:RAN)与一个或多个核心网进行通信,无线终端可以是移动终端,如移动电话(或称为“蜂窝”电话)和具有移动终端的计算机,例如,可以是便携式、袖珍式、手持式和计算机内置的移动装置,它们与无线接入网交换语言和/或数据。例如,个人通信业务(英文:Personal Communication Service,缩写:PCS)电话、无绳电话、会话发起协议(SIP)话机、无线本地环路(英文:Wireless LocalLoop,缩写:WLL)站、个人数字助理(英文:Personal Digital Assistant,缩写:PDA)等设备。无线终端也可以称为系统、订户单元(英文:Subscriber Unit)、订户站(英文:Subscriber Station),移动站(英文:Mobile Station)、移动台(英文:Mobile)、远程站(英文:Remote Station)、接入点(英文:Access Point)、远程终端(英文:Remote Terminal)、接入终端(英文:Access Terminal)、用户代理(英文:User Agent)或用户设备。
实施例一
如图1所示,本发明实施例提供一种筛选AR内容的方法,涉及终端侧,该方法可以包括:
S101、当终端中获取位置信息的应用被触发时,终端拍摄终端所在位置的全景照片,并根据该全景照片确定终端的位置信息及第一目标的相关信息。
本发明实施例提供的一种筛选AR内容的方法,当用户在室内环境迷路或者不能确定自己的行为时,用户可触发终端中的获取位置信息的应用。即当终端中获取位置信息的应用被用户触发时,终端可拍摄终端所在位置的全景照片,并根据该全景照片确定终端的位置信息及第一目标的相关信息。其中,终端根据终端拍摄的全景照片确定第一目标的相关信息的技术可以包括:光学文字识别技术、图像识别技术等。
示例性的,第一目标是指终端所在室内环境中存在的、可以使用图像处理方法识别的对象,也就是AR目标;同时,在服务器中保存有一个预设的目标库,该目标库中存储了该环境中的多个目标,该目标库也可以预先从服务器下载至终端,由终端保存。例如,第一目标可以为终端所在室内环境的方向指示箭头、店铺标识、消防标志或电梯等对象中的一种。
特别的,第一目标的相关信息可以包括第一目标的图像特征值、第一目标的位置信息等。其中,第一目标的相关信息可以是由终端在S101之前预先收集的数据。
进一步地,终端还可以通过其他能够显示终端所在环境的方式确定该终端的位置信息及第一目标的相关信息,本发明不做限制。
S102、终端发送第一请求消息至服务器,第一请求消息中携带终端的标识及终端的位置信息。
终端确定终端的位置信息后,终端发送第一请求消息至服务器,其中,第一请求消息中携带终端的标识及终端的位置信息。
具体的,终端的标识可以是终端上的用户身份识别卡(英文:SubscriberIdentity Module,缩写:SIM)号码,也可以是终端的国际移动设备序列号(英文:International Mobile Equipment Identity,缩写:IMEI)等其他满足要求的标识,本发明不做限制。
S103、终端接收来自服务器的携带至少一个行为的第一响应消息,至少一个行为是服务器根据终端的标识、终端的位置信息及不同行为的条件概率确定的。
本发明实施例中,不同行为的条件概率可以为这些不同行为在某些行为发生的条件下发生的概率。
终端发送第一请求消息至服务器后,第一请求消息触发服务器根据第一请求消息中携带的终端的标识、终端的位置信息及服务器之前统计并计算的不同行为的条件概率,按照这些不同行为的条件概率的大小以及预设的概率门限值确定至少一个行为,并将该至少一个行为携带在第一响应消息中发送至终端,即终端接收来自服务器的携带至少一个行为的第一响应消息。
可以理解的是,上述服务器得到的至少一个行为可以为一个事件集合,该事件集合可以由程序开发者根据大多数用户日常发生的一些行为(例如用户寻找银行、餐馆、超市等)初始化所得。在本发明实施例提供的筛选AR内容的方法中,服务器还可以收集并分析使用该终端的用户的需求以扩充该事件集合。
S104、终端在确定至少一个行为中的第一行为被选定时,发送第二请求消息至服务器,第二请求消息中携带第一行为的信息。
终端接收到服务器发送的至少一个行为后,终端将该至少一个行为呈现给用户,用户可根据自己的需求在该至少一个行为中选择一个满足自己需求的行为,即第一行为。当终端确定至少一个行为中的第一行为被选定时,终端可发送第二请求消息至服务器,其中,第二请求消息中携带第一行为的信息。
S105、终端接收来自服务器的携带与第一行为对应的AR内容的第二响应消息。
服务器接收到终端发送的第二请求消息后,服务器可根据第二请求消息中携带的第一行为的信息,从服务器预先保存的AR内容中筛选出与该第一行为对应的AR内容,并将该AR内容携带在第二响应消息中发送至终端,即终端接收来自服务器的携带与第一行为对应的AR内容的第二响应消息。
示例性的,AR内容可以包括图文信息、视听信息、3D图像等。本发明实施例中的AR内容中可以包括一个分类信息(该分类信息可以表示为图文信息、视听信息、3D图像等),该分类信息用于表示该AR内容与用户的哪一种行为相关,例如,一组AR内容的分类是导航类,该组AR内容可用于指示被选定的第一行为是用户前往某个特定的目的地。
S106、终端根据第一目标的相关信息,将第一目标和与第一行为对应的AR内容结合后呈现。
终端接收到服务器发送的与第一行为对应的AR内容后,终端可根据第一目标的相关信息,将第一目标和该AR内容结合后呈现。例如,终端将从终端拍摄的全景照片中确定的某个显著标志物与服务器中预先保存的该显著标志物的AR内容结合后呈现出来,从而以使得用户可根据终端呈现的显示结果获取到达该显著标志物的路线,进而到达该显著标志物所处的位置。
需要说明的是,终端呈现第一目标和与第一行为对应的AR内容的方式可以为配准显示或未配准显示。其中,配准显示是指计算机生成的内容与物理世界中的某个对象对准且合并为统一的场景呈现给用户;未配准显示则是指计算机生成的内容与物理世界中的某个对象未对准,而只是简单的叠加后呈现给用户。
如图2所示,本发明实施例还提供一种筛选AR内容的方法,涉及服务器侧,该方法可以包括:
S201、服务器接收来自终端的第一请求消息,第一请求消息中携带终端的标识及终端的位置信息。
当用户需要从服务器获取帮助信息时,用户可触发终端中获取位置信息的应用,当该获取位置信息的应用被触发时,终端可拍摄终端所在位置的全景照片,并在根据该全景照片确定终端的位置信息及第一目标的相关信息后,发送第一请求消息至服务器,即服务器接收终端发送的第一请求消息,第一请求消息中携带终端的标识及终端的位置信息。
S202、服务器根据终端的标识、终端的位置信息及不同行为的条件概率确定至少一个行为。
服务器接收到终端发送的第一请求消息后,服务器可根据第一请求消息中携带的终端的标识、终端的位置信息及服务器之前统计并计算的不同行为的条件概率,按照这些不同行为的条件概率的大小以及预设的概率门限值确定至少一个行为。
S203、服务器发送携带至少一个行为的第一响应消息至终端。
服务器得到上述的至少一个行为后,服务器将该至少一个行为携带在第一响应消息中发送至终端。
S204、服务器接收来自终端的第二请求消息,第二请求消息中携带第一行为的信息,该第一行为是该至少一个行为中被选定的行为。
服务器发送第一响应消息至终端后,终端可将第一响应消息中携带的至少一个行为呈现给用户,从而用户可根据自己的需求在该至少一个行为中选择第一行为,当终端确定该至少一个行为中的第一行为被选定时,终端发送第二请求消息至服务器,即服务器接收终端发送的第二请求消息,第二请求消息中携带第一行为的信息。
S205、服务器发送携带与第一行为对应的AR内容的第二响应消息至终端,该第二响应消息触发终端根据第一目标的相关信息,将第一目标和与第一行为对应的AR内容结合后呈现,其中,终端的位置信息及第一目标的相关信息为当终端中获取位置信息的应用被触发时,由终端拍摄终端所在位置的全景照片后,根据该全景照片确定的。
服务器接收到终端发送的第二请求消息后,服务器可根据第二请求消息中携带的第一行为的信息在服务器中预先保存的AR内容中筛选出与第一行为对应的AR内容,并将该AR内容携带在第二响应消息中发送至终端,从而该第二响应消息可触发终端根据第一目标的相关信息,将第一目标和与第一行为对应的AR内容结合后呈现给用户,从而使得用户可根据终端的显示结果的指示到达用户需求的目的地,其中,终端的位置信息及第一目标的相关信息为当终端中获取位置信息的应用被触发时,由终端拍摄终端所在位置的全景照片后,根据该全景照片确定的。
本发明实施例提供一种筛选AR内容的方法,能够实时动态地根据用户选定的行为筛选出最能满足用户需求的增强现实内容,进而满足用户的信息需求。
实施例二
如图3所示,本发明实施例提供一种筛选AR内容的方法,该方法可以包括:
S301、终端读取第二目标的标签信息,并根据第二目标的标签信息获取第二目标的标识。
当用户需要获知某个物体或产品的信息时,用户首先可通过终端按照拍照、扫描或读标签等方式读取第二目标的标签信息,并根据第二目标的标签信息获取第二目标的标识,其中,第二目标为终端所在环境中设置了可读标签的物体。
S302、终端发送携带第二目标的标识的第三请求消息至服务器。
终端获取第二目标的标识后,终端可将该第二目标的标识携带在第三请求消息中发送至服务器。其中,第二目标的标识可以包括第二目标的名称、第二目标的类型或第二目标的品牌中的至少一种。
S303、服务器根据第二目标的标识查找到第二目标的位置信息。
服务器接收到来自终端的第二目标的标识后,服务器可根据第二目标的标识在服务器中预先保存的信息中查找到第二目标的位置信息。具体的,第二目标的位置信息可以包括第二目标的坐标值。
需要说明的是,第二目标的位置信息可通过预先收集的室内地图及第二目标的数据所得。由于在购物中心、超市、图书馆、博物馆、机场、车站等公共场所内,存在着大量贴有可读标签的物体,并且随着NFC标签成本的下降,NFC智能海报也将得到广泛的应用,因此,可读标签在公共场所会越来越丰富。为了便于对商品、图书等物品的管理,商场、图书馆等场所的工作人员在整理这些物品时需记录这些物品所在的区域或位置。目前,室内地图一般也是由这些场所的工作人员上传到地图应用服务提供商的。因此,在整理和布置室内环境时,工作人员可以把带有可读标签的物体,即第二目标在室内地图上的位置信息记录下来并保存到服务器,这是收集室内地图和第二目标的数据的一种实现方式。
收集第二目标的位置信息还有另外一种方法,在室内环境中,例如购物中心、图书馆等,用户可以使用自己的手机、头戴式设备或者其他移动设备读取第二目标的可读标签,如条形码、二维码或NFC标签等,获取该第二目标的编号并向服务器请求该第二目标的相关信息;与此同时,可以提供一种包含用户所在环境的室内地图的应用,以某种奖励的方式鼓励用户把扫描到的第二目标的位置信息标识在室内地图上,从而第二目标的位置信息将被保存到服务器上,通过这种方式不仅可以收集第二目标的位置信息,还可以修正已经收集到的第二目标的位置信息。
可选的,服务器还可根据第二目标的标识在服务器中预先保存的信息中查找到第二目标的描述信息,以用于为用户提供第二目标的材料、第二目标的产地、第二目标的价格及其他用户对第二目标的评论等相关信息。其中,第二目标的描述信息可用于帮助用户获知其查看的产品的相关信息。
本发明实施例提供的终端所在的室内环境中存有大量的可读标签或者可以与终端进行交互的信息设备,且这些可读标签及信息设备的位置都已经在室内地图上标识出来并保存在了服务器中。
S304、服务器返回携带第二目标的位置信息的第三响应消息至终端。
服务器查找到第二目标的位置信息后,服务器可将该第二目标的位置信息携带在第三响应消息中发送至终端,即终端获取到第二目标的位置信息。
S305、终端发送第一记录事件至服务器,其中,第一记录事件包含终端读取第二目标的标签信息的行为。
终端读取第二目标的标签信息之后,终端发送第一记录事件至服务器,其中,第一记录事件可以包含终端读取第二目标的标签信息的行为。
具体的,当终端读取第二目标的标签信息或者与第二目标发生信息交互时,终端会自动记录该事件(即第一记录事件),并会发送该第一记录事件至服务器,该第一记录事件触发服务器保存并分析该第一记录事件,其中,该第一记录事件可以包含终端的行为(如终端读取第二目标的标签信息、终端与第二目标发生信息交互等)。
进一步地,第一记录事件还可以包含第二目标的位置信息,在终端接收到来自服务器的第二目标的位置信息后,终端将终端读取第二目标的标签信息的行为和第二目标的位置信息作为第一记录事件同时发给服务器。其中,此时第一记录事件可以包含终端的行为以及终端的行为发生的位置,即第二目标的位置信息,这里由于是终端读取第二目标,因此第二目标的位置信息与此时终端的位置信息相同。
可以理解的是,终端向服务器发送第一记录事件时,服务器可根据该终端的标识获取到该终端的位置信息。
需要说明的是,若终端向服务器发送的第一记录事件不包含第二目标的位置信息,则本发明不限制S302-S304和S305的执行顺序,即本发明可以先执行S302-S304,后执行S305;也可以先执行S305,后执行S302-S304;还可以同时执行S302-S304和S305。
S306、服务器根据终端的标识和终端的位置信息对第一记录事件进行分类并确定第一记录事件的概率。
服务器接收到终端发送的终端的标识、终端的位置信息及第一记录事件后,服务器可根据终端的标识和终端的位置信息对第一记录事件进行分类,并根据大数定律计算出每一类第一记录事件发生的概率,其中,大数定律是一种描述当试验次数很大时所呈现的概率性质的定律。
具体的,终端的标识可以是终端上的用户身份识别卡(英文:SubscriberIdentity Module,缩写:SIM)号码,也可以是终端的国际移动设备序列号(英文:International Mobile Equipment Identity,缩写:IMEI)等其他满足要求的标识,本发明不做限制。终端的位置信息可以包括终端的坐标值。
举例来说,用户在某个电影院内使用二维码从自动售票机上兑换电影票、用户在售票处使用移动支付现场购买电影票,或者用户在会员服务中心购买爆米花并使用NFC移动支付功能付款等,终端会将这些事件记录为第一记录事件并发送至服务器,服务器在接收到终端发送的这些第一记录事件后,按照自动售票机/售票处/会员服务中心的标识,或自动售票机/售票处/会员服务中心的位置信息,或自动售票机/售票处/会员服务中心的标识,及自动售票机/售票处/会员服务中心的位置信息对这些第一记录事件进行分类。又如,用户使用二维码兑换电影票时,可使用电影票兑换终端或电影院官方的自动售票机进行兑换,而这一类使用不同兑换终端兑换电影票的第一记录事件都可以被服务器分为同一类第一记录事件。当服务器记录了大量第一记录事件后,服务器可根据大数定律计算出每一类第一记录事件发生的概率。上述兑换电影票的例子中,服务器可根据终端已发生过的行为,计算出用户在进入电影院后,在售票处使用移动支付现场购买电影票的概率及使用二维码从自动售票机上兑换电影票的概率。
本发明实施例中,第一记录事件发生的概率可以表示为第一记录事件在第二目标的位置发生的概率。
需要说明的是,终端及服务器可以重复执行S301至S306,以记录更多的事件及保存大量的数据,如用户逛商场时,可以使用终端读取多个第二目标的标签信息,并将读取该第二目标的标签信息的行为记录为第一记录事件发送至服务器。
S307、当终端中获取位置信息的应用被触发时,终端拍摄终端所在位置的全景照片,并根据该全景照片确定终端的位置信息及第一目标的相关信息。
当用户在室内环境迷路或者不能确定自己的行为时,用户可触发终端中的获取位置信息的应用。即当终端中获取位置信息的应用被用户触发时,终端可拍摄终端所在位置的全景照片,终端根据该全景照片确定终端的位置信息及第一目标的相关信息。其中,终端根据终端拍摄的全景照片确定第一目标的相关信息的技术可以包括:光学文字识别技术、图像识别技术等。
示例性的,第一目标是指终端所在室内环境中存在的、可以使用图像处理方法识别的对象,也就是AR目标;同时,在服务器中保存有一个预设的目标库,该目标库中存储了该环境中的多个目标,该目标库也可以预先从服务器下载至终端,由终端保存。例如,第一目标可以为终端所在室内环境的方向指示箭头、店铺标识、消防标志、电梯对象中的一种。AR内容可以包括图文信息、视听信息、3D图像等。本发明实施例中的AR内容中可以包括一个分类信息(该分类信息可以表示为图文信息、视听信息、3D图像等),该分类信息用以表示该AR内容与用户的哪一种行为相关,例如,一组AR内容的分类是导航类,该组AR内容可用于指示被选定的第一行为是用户前往某个特定的目的地。
特别的,第一目标的相关信息可以包括第一目标的图像特征值、第一目标的位置信息等。其中,第一目标的相关信息可以是由终端在S101之前预先收集的数据;第一目标的位置信息可以包括第一目标的坐标值。
具体的,终端确定第一目标的位置信息的方法可以为下述的一种:
(1)终端拍摄终端所在位置的全景照片后,终端对该全景照片进行图像处理,并对比该全景照片中提取到的对象的特征值与终端中保存的预设的第一目标库中的第一目标的特征值,若第一目标库中存在与该全景照片中提取到的对象的特征值相同的对象,那么终端可确定在该全景照片中发现了第一目标,进而可以确定第一目标的位置信息,这是由于第一目标的位置信息与第一目标的图像特征是关联在一起的。
(2)终端拍摄全景照片,并根据基于视觉的室内定位算法确定终端所在的位置,从而终端搜索此终端所在位置附近可能存在的可识别的第一目标,进而根据这些第一目标获取到这些第一目标的位置信息,这是由于这些第一目标的位置信息是提前预设保存在终端中的。
需要说明的是,本发明实施例提供的筛选AR内容的方法中,在服务器中保存有一个预设的第一目标库,此第一目标库也可以预先下载到终端;第一目标及其相关的图像特征值、位置信息等是有意识的预先收集的,在部署应用之前就可以收集这些数据。
进一步地,终端还可以通过其他能够显示终端所在环境的方式确定该终端的位置信息及第一目标的相关信息,本发明不做限制。
S308、终端发送第一请求消息至服务器,第一请求消息中携带终端的标识及终端的位置信息。
终端确定终端的位置信息后,终端发送第一请求消息至服务器,其中,第一请求消息中携带终端的标识及终端的位置信息。
S309、服务器根据终端的标识、终端的位置信息及不同行为的条件概率确定至少一个行为。
服务器接收到终端发送的第一请求消息后,服务器可根据第一请求消息中携带的终端的标识、终端的位置信息及服务器之前统计并计算的不同行为的条件概率,按照这些不同行为的条件概率的大小以及预设的概率门限值确定至少一个行为。
可以理解的是,上述服务器得到的至少一个行为可以为一个事件集合,该事件集合可以由程序开发者根据大多数用户日常发生的一些行为(例如用户寻找银行、餐馆、超市等)初始化所得。在本发明实施例提供的筛选AR内容的方法中,服务器还可以收集并分析使用该终端的用户的需求以扩充该事件集合。具体的不同行为的条件概率后续会进行详细的说明。
S310、服务器发送携带至少一个行为的第一响应消息至终端。
服务器得到上述的至少一个行为后,服务器将该至少一个行为携带在第一响应消息中发送至终端。
S311、终端在确定至少一个行为中的第一行为被选定时,发送第二请求消息至服务器,第二请求消息中携带第一行为的信息。
终端接收到服务器发送的至少一个行为后,终端将该至少一个行为呈现给用户,用户可根据自己的需求在该至少一个行为中选择一个满足自己需求的行为,即第一行为。当终端确定至少一个行为中的第一行为被选定时,终端可发送第二请求消息至服务器,其中,第二请求消息中携带第一行为的信息。
本领域普通技术人员可以理解,至少一个行为或第一行为呈现在终端上显示为锚链文本(英文:archor text)形式,锚链文本是指带有统一资源定位符(英文:UniformResource Locator,缩写:URL)链接的文本,即当用户点击或触摸某一段文本时,可以触发访问一个URL链接。
S312、终端发送第二记录事件至服务器,第二记录事件包含至少一个行为中第一行为被选中的行为。
终端确定至少一个行为中的第一行为被选定时,终端发送第二记录事件至服务器,其中,第二记录事件包含至少一个行为中第一行为被选中的行为。
可选的,第一目标的相关信息包括第一目标的位置信息,其中,第二记录事件还包含第一目标的位置信息。终端获取到第一目标的位置信息后,终端将至少一个行为中第一行为被选中的行为和第一目标的位置信息作为第二记录事件同时发给服务器。其中,此时第二记录事件可以包含至少一个行为中第一行为被选中的行为以及终端从全景照片中确定的第一目标的位置信息。
需要说明的是,本发明不限制S311和S312的执行顺序,即本发明可以先执行S311后执行S312,也可以先执行S312后执行S311,还可以同时执行S311和S312。
S313、服务器根据终端的标识和终端的位置信息对第二记录事件进行分类并确定第二记录事件的概率及第二记录事件的条件概率。
服务器接收到终端发送的第二记录事件后,服务器可根据终端的标识和终端的位置信息对第二记录事件进行分类,并根据大数定律计算出每一类第二记录事件的概率,以及根据第一记录事件的概率、第二记录事件的概率确定第二记录事件的条件概率,即第一记录事件发生的条件下,第二记录事件发生的概率。其中,本发明实施例提供的筛选AR内容的方法中,可将第一记录事件发生的频率记为第一记录事件的概率;将第二记录事件发生的频率记为第二记录事件的概率。
本发明实施例中,第二记录事件的条件概率可以为第二记录事件在第一记录事件发生的条件下发生的概率。具体的,服务器在已获知第二记录事件发生的条件下,可再统计该条件下第一记录事件发生的概率,即第一记录事件的条件概率,并根据第一记录事件的条件概率,第一记录事件的概率,及第二记录事件的概率,通过贝叶斯公式计算得到第二记录事件的条件概率,即第一记录事件发生的条件下,第二记录事件发生的概率。
可以理解的是,对于多类第一记录事件和多类第二记录事件,可以计算出每一类第一记录事件发生的条件下,有可能发生的每一类第二记录事件发生的概率,即上述的不同行为的条件概率。
特别的,下面对计算不同行为的条件概率的方法及过程进行详细地说明。
贝叶斯定理是概率论中一条重要的定理,后验概率P(A|B)和先验概率P(A)的关系可以表示为:
其中,事件B是观测到的事件,事件A是可能导致事件B发生的事件。在事件A已经发生的条件下,假设可能发生的后续事件事件集Bj(j=1,2,...k)中每一个Bj的概率为P(Bj),根据贝叶斯定理可以得到在给定事件A已经发生的条件下,任何事件Bj发生的概率,即事件Bj的条件概率为:
由上述公式可以看出,根据贝叶斯定理,已知事件A、事件B发生的概率和事件B发生时事件A发生的概率,则可以计算出事件A发生的条件下,事件B发生的条件概率。
假设服务器保存的第一记录事件的集合为{Ai,i=1,2,...,N},其中,Ai表示第i类第一记录事件,N类第一记录事件的并集Ai=Ω,则服务器可以计算出第i类第一记录事件发生的概率P(Ai);又假设服务器保存的第二记录事件的集合为{Bj,j=1,2,...,M},Bj表示第j类第二记录事件,M类第二记录事件的并集Bj=Ω,则服务器可以计算出第j类第二记录事件发生的概率P(Bj);当服务器接收到第二记录事件的数量不够多时,可假设第二记录事件Bj为等概率事件。
服务器根据终端标识进行统计,可以得到某个终端做过第一记录事件Ai之后执行第二记录事件Bj的样本,从而从足够的样本中计算得到第二记录事件Bj发生的条件下,第一记录事件Ai发生的概率为P(Ai|Bj)。
根据贝叶斯公式,可以计算得到第一记录事件Ai发生的条件下,第二记录事件Bj发生的条件概率为:
进一步地,如果同一个终端在向服务器发送请求消息之前,服务器保存的该终端上报的第一记录事件分别为A1和A2,假设用户通过该终端选择某条帮助信息的行为,即第二记录事件Bj记为事件E1,该用户未选择某条帮助信息的行为记为事件E2,则如表1所示:
表1
事件 |
A1 |
A2 |
Bj |
E1 |
A1发生 |
A2发生 |
Bj发生 |
E2 |
A1发生但Bj未发生 |
A2发生但Bj未发生 |
Bj未发生 |
由表1可知,E1表示A1、A2发生之后,Bj发生;E2表示A1、A2发生之后,Bj未发生。假设A1、A2是独立事件,则可得表2:
表2
事件 |
A1 |
A2 |
Bj |
E1 |
P(Bj|A1) |
P(Bj|A2) |
P(Bj) |
E2 |
1-P(Bj|A1) |
1-P(Bj|A2) |
1-P(Bj) |
综上,在A1、A2发生之后,Bj发生的概率可以通过如下公式计算得到:
由此可以计算出当某个用户通过终端连续被记录做了A1、A2两件事之后,该用户希望获得某条帮助信息的行为Bj的概率P,即不同行为的条件概率,从而服务器可根据该不同行为的条件概率中最大的条件概率得到用户最有可能发生的至少一个行为。且服务器将服务器得到的该至少一个行为发送至终端,从而终端可将该至少一个行为呈现给用户,以便于用户选择自己所需的某个行为,进而根据该行为获取帮助信息。
S314、服务器发送携带与第一行为对应的AR内容的第二响应消息至终端。
服务器接收到终端发送的第二请求消息后,服务器可根据第二请求消息中携带的第一行为的信息在服务器中预先保存的AR内容中筛选出与第一行为对应的AR内容,并将该AR内容携带在第二响应消息中发送至终端。
S315、终端根据第一目标的相关信息,将第一目标和与第一行为对应的AR内容结合后呈现。
终端接收到服务器发送的与第一行为对应的AR内容后,终端可根据第一目标的相关信息,将第一目标和该AR内容结合后呈现。例如,终端将从终端拍摄的全景照片中确定的某个显著标志物与服务器中预先保存的该显著标志物的AR内容结合后呈现出来,从而以使得用户可根据终端呈现的显示结果获取到达该显著标志物的路线,进而到达该显著标志物所处的位置。
需要说明的是,终端结合呈现第一目标和与第一行为对应的AR内容的方式可以为配准显示或未配准显示。其中,配准显示是指计算机生成的内容与物理世界中的某个对象对准且合并为统一的场景呈现给用户;未配准显示则是指计算机生成的内容与物理世界中的某个对象未对准,而只是简单的叠加后呈现给用户。具体的,当终端发送至服务器的第二记录事件中包含第一目标的位置信息时,终端则以配准显示的方式结合显示与第一行为对应的AR内容和第一目标;相反的,当终端发送至服务器的第二记录事件中不包含第一目标的位置信息时,终端则以未配准显示的方式结合显示与第一行为对应的AR内容和第一目标。
本发明实施例提供一种筛选AR内容的方法,能够实时动态地根据用户选定的行为筛选出最能满足用户需求的增强现实内容,进而满足用户的信息需求。
实施例三
如图4所示,本发明实施例提供一种终端1,包括:
确定单元10,用于当所述终端中获取位置信息的应用被触发时,拍摄所述终端所在位置的全景照片,并根据所述全景照片确定所述终端的位置信息及第一目标的相关信息。
发送单元11,用于发送第一请求消息至服务器,所述第一请求消息中携带所述终端的标识及所述确定单元10确定的所述终端的位置信息。
接收单元12,用于接收来自所述服务器的携带至少一个行为的第一响应消息,所述至少一个行为是所述服务器根据所述终端的标识、所述终端的位置信息及不同行为的条件概率确定的。
所述发送单元11,还用于在所述终端确定所述至少一个行为中的第一行为被选定时,发送第二请求消息至所述服务器,所述第二请求消息中携带所述第一行为的信息。
所述接收单元12,还用于接收来自所述服务器的携带与所述第一行为对应的AR内容的第二响应消息。
显示单元13,用于根据所述确定单元10确定的所述第一目标的相关信息,将所述第一目标和所述接收单元12接收的所述AR内容结合后呈现。
可选的,在所述确定单元10当所述终端中获取位置信息的应用被触发时,拍摄所述终端所在位置的全景照片,并根据所述全景照片确定所述终端的位置信息及第一目标的相关信息,之前,所述确定单元10,还用于读取第二目标的标签信息,以及所述发送单元11,还用于发送第一记录事件至所述服务器,所述第一记录事件触发所述服务器根据所述终端的标识和所述终端的位置信息对所述第一记录事件进行分类并确定所述第一记录事件的概率,所述第一记录事件包含所述确定单元10读取所述第二目标的标签信息的行为。
可选的,在所述发送单元11发送第二请求消息至所述服务器之后,所述发送单元11,还用于发送第二记录事件至所述服务器,所述第二记录事件触发所述服务器根据所述终端的标识和所述终端的位置信息对所述第二记录事件进行分类并确定所述第二记录事件的概率及所述第二记录事件的条件概率,所述第二记录事件包含所述至少一个行为中所述第一行为被选中的行为。
可选的,所述确定单元10确定的所述第一目标的相关信息包括所述第一目标的位置信息,所述发送单元11发送的所述第二记录事件还包含所述第一目标的位置信息。
可选的,在所述确定单元10读取第二目标的标签信息之后,
所述确定单元10,还用于根据所述第二目标的标签信息获取所述第二目标的标识,所述发送单元11,还用于发送携带所述第二目标的标识的第三请求消息至所述服务器,以及所述接收单元12,还用于接收所述服务器返回的携带所述第二目标的位置信息的第三响应消息。
可选的,所述发送单元11发送的所述第一记录事件还包含所述第二目标的位置信息。
本发明实施例提供一种终端,能够实时动态地根据用户选定的行为筛选出最能满足用户需求的增强现实内容,进而满足用户的信息需求。
如图5所示,本发明实施例提供一种服务器2,包括:
接收单元20,用于接收来自终端的第一请求消息,所述第一请求消息中携带所述终端的标识及所述终端的位置信息。
确定单元21,用于根据所述接收单元20接收的所述终端的标识、所述终端的位置信息及不同行为的条件概率确定至少一个行为。
发送单元22,用于发送携带所述确定单元21确定的所述至少一个行为的第一响应消息至所述终端。
所述接收单元20,还用于接收来自所述终端的第二请求消息,所述第二请求消息中携带第一行为的信息,所述第一行为是所述至少一个行为中被选定的行为。
所述发送单元22,还用于发送携带与所述第一行为对应的AR内容的第二响应消息至所述终端,所述第二响应消息触发所述终端根据第一目标的相关信息,将所述第一目标和所述AR内容结合后呈现,所述终端的位置信息及所述第一目标的相关信息为当所述终端中获取位置信息的应用被触发时,由所述终端拍摄所述终端所在位置的全景照片后,根据所述全景照片确定的。
可选的,在所述接收单元20接收来自所述终端的所述第一请求消息之前,
所述接收单元20,还用于接收来自所述终端的第一记录事件,所述第一记录事件包含所述终端读取第二目标的标签信息的行为,所述确定单元21,还用于根据所述终端的标识和所述终端的位置信息对所述第一记录事件进行分类并确定所述第一记录事件的概率。
可选的,在所述接收单元20接收来自所述终端的所述第二请求消息之后,
所述接收单元20,还用于接收来自所述终端的第二记录事件,所述第二记录事件包含所述至少一个行为中所述第一行为被选定的行为,所述确定单元21,还用于根据所述终端的标识和所述终端的位置信息对所述第二记录事件进行分类并确定所述第二记录事件的概率及所述第二记录事件的条件概率。
可选的,所述第一目标的相关信息包括所述第一目标的位置信息,所述接收单元20接收的所述第二记录事件还包含所述第一目标的位置信息。
可选的,在所述接收单元20接收来自所述终端的所述第一记录事件之前,
所述接收单元20,还用于接收来自所述终端的携带所述第二目标的标识的第三请求消息,所述第二目标的标识为所述终端根据所述第二目标的标签信息获取的,所述发送单元22,还用于发送携带所述第二目标的位置信息的第三响应消息至所述终端。
可选的,所述接收单元20接收的所述第一记录事件还包含所述第二目标的位置信息。
本发明实施例提供一种服务器,能够使终端实现实时动态地根据用户选定的行为筛选出最能满足用户需求的增强现实内容,进而满足用户的信息需求。
实施例四
如图6所示,本发明实施例提供一种终端,包括CPU17、存储器18以及摄像头19,其中,
CPU17为终端的控制以及处理中心,通过运行存储在存储器18中的软件程序,并调用及处理存储在存储器18中的数据,从而控制终端进行收发信号,以及实现终端的其他功能。
存储器18可用于存储软件程序及数据,以使得CPU17可通过运行存储在存储器18中的软件程序,从而实现终端的收发信号以及其他功能。
摄像头19,可用于在CPU17的触发下拍摄照片。
具体的,CPU17至少可执行如下步骤:
(1)所述CPU17可用于当所述终端中获取位置信息的应用被触发时,触发所述摄像头19拍摄所述终端所在位置的全景照片,并根据所述全景照片确定所述终端的位置信息及第一目标的相关信息。
(2)所述CPU17还可用于发送第一请求消息至服务器,所述第一请求消息中携带所述终端的标识及所述CPU17确定的所述终端的位置信息。
(3)所述CPU17还可用于接收来自所述服务器的携带至少一个行为的第一响应消息,所述至少一个行为是所述服务器根据所述终端的标识、所述终端的位置信息及不同行为的条件概率确定的。
(4)所述CPU17还可用于在所述终端确定所述至少一个行为中的第一行为被选定时,发送第二请求消息至所述服务器,所述第二请求消息中携带所述第一行为的信息。
(5)所述CPU17还可用于接收来自所述服务器的携带与所述第一行为对应的AR内容的第二响应消息。
(6)所述CPU17还可用于根据所述第一目标的相关信息,将所述第一目标和所述AR内容结合后呈现。
其中,所述存储器18可用于存储所述CPU17获取位置信息的应用的软件代码、所述拍摄全景照片的软件代码、所述确定终端的位置信息的软件代码及确定所述第一目标的相关信息的软件代码、获取所述终端的标识的软件代码、显示所述至少一个行为的软件、确定所述第一行为的信息的软件代码、显示所述AR内容的软件代码及控制所述终端完成上述过程的软件程序,从而使得所述CPU17通过执行上述软件程序并调用上述软件代码完成上述过程。
本发明实施例中,所述存储器18具体可为双倍速率同步动态随机存储器(英文:Double Data Rate Synchronous Dynamic Random Access Memory,缩写:DDR SDRAM)、静态随机存储器(英文:Static Random Access Memory,缩写:SRAM)、闪存(英文:FLASH)、固态硬盘(英文:Solid State Disk,缩写:SSD)、随机存储器(英文:Random Access Memory,缩写:RAM)、只读存储器(英文:Read-Only Memory,缩写:ROM)等,其主要包括程序存储区和数据存储区,其中,程序存储区可存储操作系统,以及至少一个功能所需的应用程序(例如上述各个软件代码)等;数据存储区可存储根据CPU17的执行情况而最终产生的数据,对于CPU17执行上述步骤的过程中所产生的中间数据,则存储在内存中。需要说明的是,CPU17和存储器18可集成于同一芯片内,也可为独立的两个器件。
可选的,在所述CPU17当所述终端中获取位置信息的应用被触发时,拍摄所述终端所在位置的全景照片,并根据所述全景照片确定所述终端的位置信息及第一目标的相关信息,之前,所述CPU17,还用于读取第二目标的标签信息,以及发送第一记录事件至所述服务器,所述第一记录事件触发所述服务器根据所述终端的标识和所述终端的位置信息对所述第一记录事件进行分类并确定所述第一记录事件的概率,所述第一记录事件包含所述CPU17读取所述第二目标的标签信息的行为。
可选的,在所述CPU17发送第二请求消息至所述服务器之后,所述CPU17,还用于发送第二记录事件至所述服务器,所述第二记录事件触发所述服务器根据所述终端的标识和所述终端的位置信息对所述第二记录事件进行分类并确定所述第二记录事件的概率及所述第二记录事件的条件概率,所述第二记录事件包含所述至少一个行为中所述第一行为被选中的行为。
可选的,所述CPU17确定的所述第一目标的相关信息包括所述第一目标的位置信息,所述CPU17发送的所述第二记录事件还包含所述第一目标的位置信息。
可选的,在所述CPU17读取第二目标的标签信息之后,
所述CPU17,还用于根据所述第二目标的标签信息获取所述第二目标的标识,并发送携带所述第二目标的标识的第三请求消息至所述服务器,以及接收所述服务器返回的携带所述第二目标的位置信息的第三响应消息。
可选的,所述CPU17发送的所述第一记录事件还包含所述第二目标的位置信息。
本发明实施例提供一种终端,能够实时动态地根据用户选定的行为筛选出最能满足用户需求的增强现实内容,进而满足用户的信息需求。
如图7所示,本发明实施例提供一种服务器,包括CPU25以及存储器26,其中,
CPU25为服务器的控制以及处理中心,通过运行存储在存储器26中的软件程序,并调用及处理存储在存储器26中的数据,从而控制服务器进行收发信号,以及实现服务器的其他功能。
存储器26可用于存储软件程序及数据,以使得CPU25可通过运行存储在存储器26中的软件程序,从而实现服务器的收发信号以及其他功能。
具体的,CPU25至少可执行如下步骤:
(1)所述CPU25可用于接收来自终端的第一请求消息,所述第一请求消息中携带所述终端的标识及所述终端的位置信息。
(2)所述CPU25还可用于根据所述终端的标识、所述终端的位置信息及不同行为的条件概率确定至少一个行为。
(3)所述CPU25还可用于发送携带所述至少一个行为的第一响应消息至所述终端。
(4)所述CPU25还可用于接收来自所述终端的第二请求消息,所述第二请求消息中携带第一行为的信息,所述第一行为是所述至少一个行为中被选定的行为。
(5)所述CPU25还可用于发送携带与所述第一行为对应的AR内容的第二响应消息至所述终端,所述第二响应消息触发所述终端根据第一目标的相关信息,将所述第一目标和所述AR内容结合后呈现,所述终端的位置信息及所述第一目标的相关信息为当所述终端中获取位置信息的应用被触发时,由所述终端拍摄所述终端所在位置的全景照片后,根据所述全景照片确定的。
其中,所述存储器26可用于存储所述终端的标识的软件代码、发送所述终端的位置信息的软件代码、发送不同行为的条件概率、接收至少一个行为的软件代码、发送第一行为的信息的软件代码、发送与所述第一行为对应的AR内容的软件代码及控制所述服务器完成上述过程的软件程序,从而使得所述CPU25可通过执行上述软件程序并调用上述软件代码完成上述过程。
本发明实施例中,所述存储器26具体可为DDR SDRAM、SRAM、FLASH、SSD、RAM、ROM等,其主要包括程序存储区和数据存储区,其中,程序存储区可存储操作系统,以及至少一个功能所需的应用程序(例如上述各个软件代码)等;数据存储区可存储根据CPU25的执行情况而最终产生的数据,对于CPU25执行上述步骤的过程中所产生的中间数据,则存储在内存中。需要说明的是,CPU25和存储器26可集成于同一芯片内,也可为独立的两个器件。
可选的,在所述CPU25接收来自终端的第一请求消息之前,
所述CPU25,还用于接收来自所述终端的第一记录事件,并根据所述终端的标识和所述终端的位置信息对所述第一记录事件进行分类并确定所述第一记录事件的概率,所述第一记录事件包含所述终端读取第二目标的标签信息的行为。
可选的,在所述CPU25接收来自所述终端的第二请求消息之后,
所述CPU25,还用于接收来自所述终端的第二记录事件,并根据所述终端的标识和所述终端的位置信息对所述第二记录事件进行分类并确定所述第二记录事件的概率及所述第二记录事件的条件概率,所述第二记录事件包含所述至少一个行为中所述第一行为被选定的行为。
可选的,所述第一目标的相关信息包括所述第一目标的位置信息,所述CPU25接收的所述第二记录事件还包含所述第一目标的位置信息。
可选的,在所述CPU25接收来自所述终端的第一记录事件之前,
所述CPU25,还用于接收来自所述终端的携带所述第二目标的标识的第三请求消息,并返回携带所述第二目标的位置信息的第三响应消息至所述终端,所述第二目标的标识为所述终端根据所述第二目标的标签信息获取的。
可选的,所述CPU25接收的所述第一记录事件还包含所述第二目标的位置信息。
本发明实施例提供一种服务器,可以使终端能够实时动态地根据用户选定的行为筛选出最能满足用户需求的增强现实内容,进而满足用户的信息需求。
实施例五
如图8所示,本发明实施例提供一种筛选AR内容的系统,包括上述实施例一至实施例四所描述的终端及服务器。
为了更加确切地了解本发明技术方案的实施方式,对应于本发明实施例提供的筛选AR内容的方法,下面分别以购物中心和博物馆为例来描述本发明实施例提供的筛选AR内容的方法的实施场景,即在购物中心和博物馆内筛选需增强显示的AR内容的过程。
实施场景一:购物中心
(1)某购物中心在装修、布置和摆放物品时均按照上述实施例中提供的方法收集了该购物中心的室内地图及该购物中心中的POI的数据。
(2)用户来到该购物中心后,首先进入女装品牌店X内选购衣服,由于该用户携带的终端中安装了本发明技术方案提供的获取位置信息的应用,且该应用可以读取该购物中心内任何一款商品的条码或二维码,并推送与读取的商品相关的商品的描述信息,如商品的品牌、商品的材料、商品的号码、商品的价格、商品的库存等信息到终端,因此,该用户一边漫步一边使用终端查询该女装品牌店X内的衣服的描述信息。最终,该用户选中了某件衣服,并找店员开票,店员登记了该用户选中的衣服,并将对应的交易信息写入该用户携带的终端。当该用户携带的终端获取到该交易信息时,该终端将该用户选择衣服这一事件记录下来并将该事件上传到服务器。
(3)该用户又来到礼品店Y和化妆品店Z,并分别在这两个店内选购了礼品和化妆品,同时店员也将相应的交易信息写入该用户携带的终端。同样的,当该用户携带的终端获取到这两个交易信息时,该终端分别将该用户选择礼品和选择化妆品这两个事件记录下来并将这两个事件上传到服务器。
(4)该用户从化妆品店Z出来后找到离化妆品店Z最近的收银台进行缴费,缴费完成后,收银台的工作人员将付费凭证和电子发票分别写入该用户携带的终端。
(5)当该用户需回到女装品牌店X、礼品店Y及化妆品店Z出示付费凭证并领取自己选购的衣服、礼品及化妆品时,该用户只记得离收银台最近的化妆品店Z的位置,而对女装品牌店X及礼品店Y的位置已经记不清楚了。
(4)该用户使用终端中安装的上述获取位置信息的应用拍摄了一张终端所在位置的全景照片,终端根据用户拍摄的全景照片确定到化妆品店Z的标识、收银台的标识以及其他若干个可识别的标识,并根据这些标识推断出了该终端所在的位置,即终端的位置信息,同时终端发送一个包括终端的标识和终端的位置信息的第一请求消息至服务器,当服务器接收到该第一请求消息后,服务器根据已经保存的与该终端有关的上述三个事件和对应的条件概率(其中,条件概率为服务器根据收集到的终端上传的大量数据计算所得),得到该用户最有可能的下一行为可能是:
a、最近的自动扶梯在哪里?
b、最近的餐厅在哪里?
c、返回去过的店铺?
(5)该用户选择了“c、返回去过的店铺?”这个选项对应的行为。当服务器接收到该用户选择的这个行为后,服务器根据“返回去过的店铺”这个行为,从预先保存的AR内容中筛选出了导航类AR内容,该导航类AR内容包括该用户去过的店铺附近的显著标志物,从而服务器可根据记录的与该用户相关的事件、该购物中心的室内地图及该购物中心内POI的数据,生成一张从用户所在位置分别前往女装品牌店X、礼品店Y及化妆品店Z的路线图,并标识出了任何两家店铺之间的显著标志物,之后,服务器将这些信息发送至终端,且终端会将路线图上的显著标志物、转弯信息等以AR的形式显示出来展示给该用户。
(6)该用户在该应用程序的帮助下找到了女装品牌店X、礼品店Y及化妆品店Z,并分别领取了自己选购的衣服、礼品及化妆品。
(7)终端将该用户选择返回去过的店铺这一事件记录下来,并将该事件发送至服务器,从而服务器再对该事件进行分类并统计分析。
实施场景二:博物馆
(1)某博物馆为了缓解工作人员不足、参观者越来越多带来的压力,依据本发明提供的技术方案部署了一套自助帮助系统,以用于为游客提供自助的帮助,该自助帮助系统可以包括安装在终端上的获取位置信息的应用以及运行在后台的服务器。
(2)外地游客来到博物馆后,由于该游客携带的终端中安装了本发明技术方案提供的获取位置信息的应用,因此,该游客首先在服务台使用终端取到了提前预约的博物馆的门票,同时终端将该游客取门票这一事件记录下来,并将该事件发送至服务器,从而服务器可对该事件进行分类并统计分析。
(3)该游客使用终端在一楼大厅入口处读取了一张NFC海报,终端根据读取的海报获得了博物馆最新的展览信息和讲座信息,并将该展览信息和讲座信息展示给用户,同时终端将该游客读取NFC海报这一事件记录下来,并将该事件发送至服务器,从而服务器可对该事件进行分类并统计分析。
(4)该游客进入一楼大厅后,被博物馆的宏大所震感,因此,该游客困惑的不知道应该从哪个地方开始参观,于是,该游客使用终端中安装的获取位置信息的应用拍摄了一张终端所在位置的全景照片,终端从游客拍摄的全景照片中提取到了足够的特征,从而判断该终端位于一楼大厅,同时终端发送一个包括终端的标识和终端所在位置,即终端的位置信息的第一请求消息至服务器,当服务器接收到该第一请求消息后,服务器根据已经保存的与该终端有关的上述两个事件和对应的条件概率(其中,条件概率为服务器根据收集到的终端的大量数据计算所得),推断出该游客最有可能的下一行为可能是:
a、参观博物馆正在举办的展品最丰富的展览—古代中国展。
b、参观博物馆正在举办的免费展览:玉器展、钱币展、中国传统书画展等。
c、参观博物馆正在举办的收费展览:佛罗伦萨与文艺复兴—名家作品展。
d、参加博物馆正在举办的免费讲座:瓷器鉴定入门。
(5)该游客对古董鉴定比较感兴趣,感觉机会难得,于是,该游客选中了“d、参加博物馆正在举办的免费讲座:瓷器鉴定入门。”这个选项,服务器根据该游客选择的行为,发送与该行为相关的信息,如关于该讲座的专家的相关介绍、该讲座的内容、该讲座举办的地点以及该讲座举办的具体位置在顶层露天茶座等至终端,且终端将上述与该讲座相关的信息和前往该讲座举办位置的路线图都以AR的形式显示出来展示给该游客。
(6)该游客在该应用程序的指引下前往顶层并参加该瓷器鉴定入门讲座。
(7)终端将该游客选择参加博物馆正在举办的免费讲座这一事件记录下来,并将该事件发送至服务器,从而服务器再对该事件进行分类并统计分析。
本发明实施例提供的筛选AR内容的系统,能够实时动态地根据用户选定的行为筛选出最能满足用户需求的增强现实内容,进而满足用户的信息需求。
所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,仅以上述各功能模块的划分进行举例说明,实际应用中,可以根据需要而将上述功能分配由不同的功能模块完成,即将装置的内部结构划分成不同的功能模块,以完成以上描述的全部或者部分功能。上述描述的系统,装置和单元的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
在本申请所提供的几个实施例中,应该理解到,所揭露的系统,装置和方法,可以通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如,所述模块或单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本发明各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)或处理器(processor)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器、随机存取存储器、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述,仅为本发明的具体实施方式,但本发明的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本发明揭露的技术范围内,可轻易想到变化或替换,都应涵盖在本发明的保护范围之内。因此,本发明的保护范围应以所述权利要求的保护范围为准。