CN102843349B - 实现移动增强现实业务的方法及系统、终端及服务器 - Google Patents

实现移动增强现实业务的方法及系统、终端及服务器 Download PDF

Info

Publication number
CN102843349B
CN102843349B CN201110290310.8A CN201110290310A CN102843349B CN 102843349 B CN102843349 B CN 102843349B CN 201110290310 A CN201110290310 A CN 201110290310A CN 102843349 B CN102843349 B CN 102843349B
Authority
CN
China
Prior art keywords
augmented reality
content
mobile
target
server
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201110290310.8A
Other languages
English (en)
Other versions
CN102843349A (zh
Inventor
黄成�
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
ZTE Corp
Original Assignee
ZTE Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ZTE Corp filed Critical ZTE Corp
Priority to CN201110290310.8A priority Critical patent/CN102843349B/zh
Priority to EP12802331.4A priority patent/EP2712213A4/en
Priority to PCT/CN2012/076175 priority patent/WO2012174974A1/zh
Priority to US14/125,123 priority patent/US20140120887A1/en
Publication of CN102843349A publication Critical patent/CN102843349A/zh
Application granted granted Critical
Publication of CN102843349B publication Critical patent/CN102843349B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/131Protocols for games, networked simulations or virtual reality
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W4/00Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/02Services making use of location information
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/50Network services
    • H04L67/55Push-based network services

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Information Transfer Between Computers (AREA)
  • Telephonic Communication Services (AREA)
  • Processing Or Creating Images (AREA)

Abstract

本发明公开了一种实现移动增强现实业务的方法,包括:移动增强现实服务器选择增强现实目标和/或增强现实内容;移动增强现实服务器递送增强现实目标和/或增强现实内容至移动增强现实客户端。本发明还公开了一种实现移动增强现实业务的系统,移动增强现实客户端,以及,移动增强现实服务器。本发明克服了现有AR解决方案中应用开发难度大,业务部署成本高,以及用户体验不一致的问题,对AR市场的发展起到良好的推动作用。本发明中移动增强现实业务实现方法适应不同类型的增强现实目标识别、增强现实内容获取,具有良好的可扩展性,在不同应用场景为用户提供统一的业务体验。

Description

实现移动增强现实业务的方法及系统、终端及服务器
技术领域
本发明涉及实现移动增强现实业务的技术,尤其涉及一种实现移动增强现实业务的方法及系统,以及,移动增强现实终端、移动增强现实服务器。
背景技术
随着智能终端、移动互联网技术的成熟与发展,曾经局限于实验室的增强现实(AR,Augmented Reality)技术开始走进大众视野,一大批以图像识别、终端定位技术为基础的互联网/移动互联网AR应用开始涌现,称为移动增强现实(Mobile AR)应用,这引起了业界较大关注,逐渐成为技术研究的热点。
移动增强现实技术的研究与应用,将虚拟的增强现实信息应用到真实世界,改变了用户观察周围世界的方式——由传统的基于文本输入的WEB页面浏览查询模式,转变为基于摄像头拍摄,捕获热点并实时浏览增强信息的全新模式。
Mobile AR用户利用移动终端如智能手机等在拍摄周围景物的同时可以得到增强现实业务体验,主要存在以下业务场景:移动终端上运行的增强现实应用(ARApplication)基于用户当前位置捕获AR业务提供商部署的增强现实目标(AR Target),如与地理位置相关兴趣点(POI,Point of Interest),并根据用户选择获取增强现实内容(ARContent),包括文字、图片、语音、视频,最终结合用户终端地理指纹信息如经纬度、朝向等,将获取的增强现实内容与终端摄像头实时拍摄的周围实景在屏幕融合显示,获取不同寻常的增强现实业务体验。
当前市场增强现实解决方案中,不同的增强现实业务提供商各自独立开发AR应用,不同AR应用是基于不同的增强现实技术实现的,目前的增强现实技术主要包括以下几种:AR目标识别技术、AR内容获取技术、AR内容展示技术等。如此以来,AR应用开发者为不同AR业务提供商开发的AR应用必须使用不同技术实现,这无疑增加了AR应用开发难度。AR用户必须根据所订购AR业务提供商的不同而选择安装不同AR应用运行环境,这非常不利于用户对终端的更换,这是因为,AR业务提供商各自发布的AR应用互不兼容,用户一旦更换终端,就需要重新安装所有AR应用的运行环境,这无疑极大地阻碍了AR应用的市场普及。
在现有增强现实解决方案中,由于AR业务提供商各自的AR应用互不兼容,因此AR应用也就无法集中上线销售,这会大大减少AR业务提供商的签约用户群体。另外,AR业务提供商不仅需要部署AR业务服务器,还需要独自承担AR内容的设计工作,这也增加了AR业务提供商的业务运营成本。
综上所知,传统AR业务提供商根据各自实现技术开展各自AR业务,其结果是不仅割裂了AR应用市场,还对广大AR用户造成了极大的不便,目前这已成为阻碍AR业务市场发展的一个重要因素。
发明内容
有鉴于此,本发明的主要目的在于提供一种实现移动增强现实业务的方法及系统,以及,移动增强现实终端、移动增强现实服务器,能强化用户体验效果。
为达到上述目的,本发明的技术方案是这样实现的:
一种实现移动增强现实业务的方法,包括:
移动增强现实服务器根据接收到的移动增强现实客户端的请求或者与递送增强现实目标和/或增强现实内容相关的推送请求,搜索增强现实目标,选择并获取增强现实内容;
移动增强现实服务器递送增强现实目标和/或增强现实内容至移动增强现实客户端。
优选地,所述移动增强现实服务器搜索增强现实目标,为:
根据所述移动增强现实客户端的请求或推送请求中的参数,和/或用户增强现实个性化及上下文,搜索增强现实目标。
优选地,所述选择并获取增强现实内容,为:
搜索增强现实目标,同时获取与所述增强现实目标对应的增强现实内容。
优选地,所述移动增强现实服务器基于以下信息的至少一项搜索增强现实目标:
用户位置、用户设置、增强现实目标特征;所述用户设置至少包括增强现实目标的搜索半径和/或搜索类别。
优选地,所述移动增强现实服务器选择并获取增强现实内容,为:
根据所述移动增强现实客户端的请求或推送请求中的参数,和/或用户增强现实个性化及上下文,选择并获取增强现实内容。
优选地,所述移动增强现实服务器基于以下信息的至少一项选择并获取增强现实内容:
增强现实内容标识、增强现实内容特征、增强现实目标标识、
用户终端能力、增强现实内容部署规则、增强现实内容访问控制策略。
优选地,所述移动增强现实服务器选择并获取增强现实内容,为:
移动增强现实服务器从增强现实内容服务器获取增强现实内容,或者从本地缓存中获取增强现实内容。
优选地,所述接收与递送增强现实目标和/或增强现实内容相关的推送请求,为,
移动增强现实服务器根据增强现实目标和/或增强现实内容推送设置,接收所述与递送增强现实目标和/或增强现实内容相关的推送请求。
优选地,所述增强现实目标和/或增强现实内容推送设置,为:
用户上下文,所述用户上下文包括:用户位置、终端呈现状态;
和/或,预先设定的推送时间间隔。
优选地,所述方法还包括:
移动增强现实服务器根据用户增强现实个性化及上下文,过滤所述增强现实目标和/或增强现实内容。
优选地,所述用户增强现实个性化及上下文包括以下信息的至少一项:
增强现实目标类型、增强现实目标类别、增强现实目标特征、增强现实内容类型、用户位置、终端能力。
优选地,所述方法还包括:
移动增强现实服务器根据以下信息的至少一项,聚合所述增强现实目标和/或增强现实内容:
增强现实目标和/或增强现实内容的位置、方向、相互关系。
优选地,所述方法还包括:
移动增强现实服务器根据用户增强现实个性化及上下文,触发第三方应用服务器业务逻辑,获取额外的第三方增值应用业务内容;
所述用户增强现实个性化及上下文包括以下信息的指示一项:
用户位置,业务访问时间,第三方增值应用业务类别。
优选地,所述方法还包括:
移动增强现实服务器指示移动增强现实客户端删除或者替换之前获取的增强现实目标和/或增强现实内容。
优选地,所述指示通过针对移动增强现实客户端请求的响应下发,或者通过发往移动增强现实客户端的推送请求下发;
移动增强现实服务器根据增强现实内容服务器的请求,向移动增强现实客户端发送之前已获取增强现实目标和/或增强现实内容删除或者替换请求。
优选地,所述移动增强现实服务器递送增强现实目标和/或增强现实内容至移动增强现实客户端,为:
响应移动增强现实客户端的请求返回增强现实目标和/或增强现实内容;
或者,主动向移动增强现实客户端推送增强现实目标和/或增强现实内容。
优选地,所述方法包括:
移动增强现实服务器选择递送下列信息至移动增强现实客户端:
增强现实目标和/或增强现实内容;
增强现实目标和/或增强现实内容的引用;
无信息的指示。
优选地,所述方法还包括:
移动增强现实服务器根据用户增强现实个性化及上下文,暂停或者恢复递送增强现实目标和/或增强现实内容至移动增强现实客户端;
所述用户增强现实个性化及上下文包括以下信息的指示一项:
用户终端状态发生变化,用户位置发生变化。
优选地,所述方法还包括:
移动增强现实服务器接收增强现实内容服务器发送的增强现实内容管理请求,更新与管理请求相对应的增强现实目标信息,和/或增强现实内容信息。
优选地,所述增强现实内容管理请求至少包括:
增强现实目标与增强现实内容关联管理请求、或增强现实内容发布管理请求、或增强现实内容部署规则管理请求,增强现实测度报告订阅通知请求。
优选地,所述方法还包括:
移动增强现实服务器接收移动增强现实客户端上报的增强现实测度数据及用户反馈,创建增强现实测度报告;
移动增强现实服务器根据增强现实测度报告的订阅通知关系,以及用户增强现实个性化及上下文,发送所述增强现实测度报告至增强现实内容服务器。
一种移动增强现实服务器,包括:
增强现实内容/目标选择功能,用于根据接收的移动增强现实客户端请求,或者与递送增强现实目标和/或增强现实内容相关的推送请求,搜索增强现实目标,选择并获取增强现实内容;
增强现实内容/目标递送功能,用于通过响应移动增强现实客户端的请求,递送增强现实目标和/或增强现实内容至移动增强现实客户端;
或者,发起请求递送增强现实目标和/或增强现实内容至移动增强现实客户端;
增强现实内容/目标管理功能,用于存储并管理增强现实目标部署信息,增强现实内容发布信息,增强现实内容缓存策略,以及本地缓存增强现实内容;
增强现实测度处理功能,用于收集来自移动增强现实客户端的增强现实测度数据及用户与增强现实内容交互反馈;
增强现实个性化及上下文管理功能,用于收集并管理用户个性化偏好以及用户上下文信息。
优选地,还包括提供给增强现实内容服务器的第四接口;
移动增强现实服务器通过第四接口接收增强现实内容服务器发送的增强现实内容管理请求,其中,增强现实内容管理请求包括:增强现实内容与增强现实目标关联/去关联请求,增强现实内容可获取状态发布请求,增强现实内容部署规则设置请求,增强现实测度和用户反馈访问请求。
一种移动增强现实终端,包括:终端能力部件、移动增强现实客户端、增强现实应用和支撑业务客户端;其特征在于,所述移动增强现实客户端,用于访问用户/终端个性化及上下文信息,请求移动增强现实服务器搜索增强现实目标,选择并获取增强现实内容,并控制增强现实目标和/或增强现实内容与终端能力部件拍摄实景融合展示。
优选地,还包括:
增强现实内容/目标获取功能,用于根据增强现实应用的请求,向移动增强现实服务器请求获取增强现实内容和/或增强现实目标;
增强现实内容/目标展示功能,用于根据增强现实应用请求,提供增强现实内容显示机制;
用户交互支持功能,用于支持用户与终端显示屏幕上增强现实目标及相关增强现实内容的交互;
增强现实测度处理功能,用于根据用户偏好及运营商策略,收集并上报增强现实测度数据及用户反馈至移动增强现实服务器;
用户/终端数据管理功能,用于收集并管理用户增强现实个性化及上下文相关信息。
优选地,移动增强现实客户端和增强现实应用之间还设置有第一接口;
所述第一接口,用于访问移动增强现实客户端提供的增强现实目标和/或增强现实内容,以及访问移动增强现实客户端提供的其他增强现实业务功能,至少包括:向移动增强现实客户端上报增强现实测度数据。
优选地,移动增强现实客户端和移动增强现实服务器之间设置有第二接口;
移动增强现实服务器通过第二接口,
接收移动增强现实客户端的增强现实目标搜索请求,并返回响应;
接收移动增强现实客户端的增强现实内容获取请求,并返回响应;
接收移动增强现实客户端的增强现实测度和用户反馈上报请求,并返回响应;
接收移动增强现实客户端的用户偏好设置或更新请求,并返回响应;
通知移动增强现实客户端删除本地缓存的增强现实内容;
移动增强现实客户端通过第二接口,
请求移动增强现实服务器发现增强现实目标,请求移动增强现实服务器获取增强现实内容,请求设置或更新用户偏好设置,以及请求上报增强现实测度和用户反馈至移动增强现实服务器。
优选地,移动增强现实客户端和移动增强现实服务器之间设置有第三接口;
移动增强现实客户端通过第三接口接收移动增强现实服务器推送的增强现实内容和/或增强现实目标;
移动增强现实服务器通过第三接口直接推送增强现实内容和/或增强现实目标至移动增强现实客户端;或者,推送增强现实内容和/或增强现实目标间接获取通知至移动增强现实客户端。
一种移动增强现实系统,所述系统包括:
移动增强现实客户端,用于访问用户终端能力,请求移动增强现实服务器搜索增强现实目标,获取增强现实内容,并控制增强现实目标和/或增强现实内容的展示;
移动增强现实服务器,用于根据接收的移动增强现实客户端请求,或者与递送增强现实目标和/或增强现实内容相关的推送请求,搜索增强现实目标、选择并获取增强现实内容,递送增强现实目标和/或增强现实内容至移动增强现实客户端;
增强现实内容服务器,用于提供增强现实内容的存储与管理。
优选地,移动增强现实服务器搜索增强现实目标、选择并获取增强现实内容,为:
移动增强现实服务器对增强现实目标和/或增强现实内容进行过滤;
移动增强现实服务器对增强现实目标和/或增强现实内容进行聚合。
优选地,移动增强现实服务器为增强现实内容服务器提供增强现实内容发布管理;
移动增强现实服务器为移动增强现实客户端提供增强现实测度处理上报。
本发明克服了现有AR解决方案中应用开发难度大,业务部署成本高,以及用户体验不一致的问题,对AR市场的发展起到良好的推动作用。本发明移动增强现实系统(服务器、客户端)为增强现实应用开发开放API,提供增强现实业务底层能力支撑,包括:目标搜索、内容获取等,从而降低增强现实应用开发难度;移动增强现实服务器为增强现实内容服务器提供增强现实内容发布管理接口,降低增强现实业务部署成本;本发明中移动增强现实业务实现方法适应不同类型的增强现实目标识别、增强现实内容获取,具有良好的可扩展性,在不同应用场景为用户提供统一的业务体验。
附图说明
图1为本发明移动增强现实系统的组成结构示意图;
图2为本发明移动增强现实客户端120的逻辑功能示意图;
图3为本发明移动增强现实服务器200的逻辑功能示意图;
图4为本发明增强现实内容/目标选择功能210的组成结构示意图;
图5为本发明增强现实内容/目标管理功能230的组成结构示意图;
图6为本发明实现移动增强现实业务的方法的流程图;
图7为本发明应用例一实现移动增强现实业务的方法的流程图;
图8为本发明应用例二实现移动增强现实业务的方法的流程图;
图9为本发明应用例三实现移动增强现实业务的方法的流程图;
图10为本发明应用例四实现移动增强现实业务的方法的流程图;
图11为本发明应用例五实现移动增强现实业务的方法的流程图。
具体实施方式
为使本发明的目的、技术方案和优点更加清楚明白,以下举实施例并参照附图,对本发明进一步详细说明。
图1为本发明实现移动增强现实业务的系统组成结构示意图,如图1所示,本发明实现移动增强现实业务的系统包括移动增强现实终端100、移动增强现实服务器200、增强现实内容服务器300、支撑业务服务器400和第三方增值应用服务器500;其中,移动增强现实终端100、移动增强现实服务器200、增强现实内容服务器300是实现本发明移动增强现实业务的基本核心网元,支撑业务服务器400和第三方增值应用服务器500用于支撑并优化本发明的移动增强现实业务。移动增强现实服务器200、增强现实内容服务器300、支撑业务服务器400和第三方增值应用服务器500均为网络侧网元。移动增强现实终端100是移动用户用于获取增强现实内容的应用终端,该移动增强现实终端100用于接收用户的输入指令,向移动增强现实服务器200发送增强现实内容和/或增强现实目标请求;移动增强现实服务器200搜索增强现实目标,选择并获取增强现实内容;递送增强现实目标和/或增强现实内容至移动增强现实终端100。移动增强现实服务器200选择并获取增强现实内容,对增强现实内容进行过滤、聚合以及管理等。增强现实内容服务器300用于存储增强现实内容,并发布增强现实内容。
以下,对上述各网元所实现的功能以及其之间是如何实现交互的,进行详细描述。
移动增强现实终端100是用户使用的具备增强现实业务功能的移动终端,除了提供基本的通信功能以外,还可以为用户提供增强现实业务体验,具体还包括以下功能模块:终端能力部件110、移动增强现实客户端120、增强现实应用130、支撑业务客户端140;其中,移动增强现实客户端120和增强现实应用130之间通过MobAR-1接口连接。
终端能力部件110,负责移动增强现实业务实现所需信息的采集与展示,包括:摄像头111,用来实时拍摄用户周围物理世界的实景信息(Camera View)。也可以使用具备显存功能的摄像头,以实时缓存拍摄到的实景信息。显示屏幕112,为用户呈现摄像头531拍摄实景信息在增强现实内容修饰渲染下的增强现实内容视图(AR View,Augmented RealityView);具体的,显示屏幕主要用于展示根据从网络侧的增强现实内容服务器230获取的增强现实内容对对应的增强现实目标进行渲染,并展示给移动增强现实终端100的用户。也就是说,终端能力部件110需要在摄像头所拍摄的实景信息中定位出待进行特别显示的增强现实目标,利用所获取的增强现实目标的对应的增强现实内容对该现实目标进行渲染,然后展示给用户。全球卫星定位系统(GPS,Global Positioning System)模块、指南针、传感器等113,其中GPS模块与GPS卫星通讯,实时提供终端位置信息(如经纬度信息)。指南针、传感器,用来采集用户终端状态,包括:摄像头朝向、与地面夹角等;射频识别(RHD,RARARioFrequency Identification)阅读器、二维码扫描器、图像识别、计算机视觉处理等模块114,实现备选增强现实目标特征进行扫描、输入与提取等。
图2为本发明实现移动增强现实客户端120的逻辑功能组成示意图,如图2所示,移动增强现实客户端120,是移动增强现实业务系统终端侧功能实体,负责向移动增强现实终端上增强现实应用提供移动增强现实业务支撑能力。
移动增强现实客户端120访问终端能力部件110(如GPS、指南针、传感器等)采集的移动增强现实终端100实时状态,请求移动增强现实服务器200获取增强现实目标和/或增强现实内容,并控制所获取增强现实内容与摄像头拍摄实景的融合展示。移动增强现实客户端120向增强现实应用返回所请求的信息,提供用户交互支持、增强现实测度上报等能力。
包括以下功能模块:
增强现实内容/目标获取功能121,负责接收运行在移动增强现实终端100上增强现实应用130的请求,联系移动增强现实服务器200,请求搜索增强现实目标,并获取相关增强现实内容,具体包括:
1)接收增强现实应用130发送增强现实目标搜索请求,或者增强现实内容获取请求;
2)向移动增强现实服务器200请求获取,或者接收移动增强现实服务器200推送,下列信息:
增强现实目标和/或增强现实内容;
增强现实目标和/或增强现实内容的引用;
3)缓存来自移动增强现实服务器200的增强现实目标或者增强现实内容;
4)管理(譬如:更新、删除)缓存的增强现实目标或者增强现实内容;
5)返回所请求的增强现实目标或者增强现实内容至增强现实应用130;
增强现实内容/目标获取功能121可以通过下述方式获取增强现实目标和/或增强现实内容:
PULL模式:增强现实内容/目标获取功能121主动请求移动增强现实服务器200搜索增强现实目标,或者获取增强现实内容;
PUSH模式:移动增强现实服务器200根据用户增强现实业务设置推送增强现实目标,或者增强现实内容至增强现实内容/目标获取功能121。
增强现实内容/目标展示功能122,负责根据终端能力部件110采集的移动增强现实终端100实时状态,控制所述增强现实内容/目标获取功能121获取的增强现实内容与摄像头拍摄实景在显示屏幕112融合显示。
用户接口支持
用户接口功能用于使能显示的增强现实标签和增强现实内容的用户接口。
用户接口功能提供至少下列的用户交互支持:
增强现实标签和增强现实内容的选择;
点击以得到所选择的增强现实标签和增强现实内容的细节;
点击以与相关信息进行交互;
订制显示的增强现实内容消费方式。
使用相关信息动态改变增强现实目标跟踪行为。
使能或去使能度量数据的收集和在服务提供者策略控制下的用户的反馈。
指定、更新设置和参数选择,诸如搜索增强现实目标和/或增强现实内容的半径,确定增强现实目标类型的类别,增强现实内容递送的推送设置,第三方VAS调用的触发条件。
允许或不允许用户用于增强现实内容选择的相关信息。
用户交互支持功能123,用于实现与用户的人机交互,如接受用户输入的增强现实内容和/或增强现实目标相关指令。用于显示增强现实目标和增强现实内容;向用户提供增强现实标签和增强现实内容的选择;使用户获取所选择的增强现实标签和增强现实内容的细节;用户对相关信息进行交互;使用户订制显示的增强现实内容消费方式等。
增强现实测度处理功能124,负责根据移动增强现实终端100上运行的增强现实应用130的反馈,联系移动增强现实服务器200,执行增强现实测度收集与上报相关功能,包括:
1)接收增强现实应用130反馈的增强现实测度数据,包括:
用户在显示屏幕对所显示增强现实标记、增强现实内容的操作(譬如:选择、查看详细信息);
增强现实内容访问历史,包括:访问时间、所访问增强现实内容的属性(譬如:增强现实内容标识、增强现实目标位置等)。
2)在增强现实应用130所反馈的增强现实测度数据中添加其他移动增强现实客户端120已知的测度信息,包括:
增强现实内容访问历史,譬如:时间戳、增强现实内容属性(相关增强现实目标位置、标识、描述等);
增强现实内容/目标获取功能121所缓存增强现实目标或者增强现实内容管理信息(譬如:更新、删除);
所请求增强现实目标或者增强现实内容返回增强现实应用130状态信息(成功或者失败)。
3)收集增强现实用户反馈,譬如:增强现实内容评分等;
4)利用所收集的增强现实测度和用户反馈优化后续业务,譬如:聚合增强现实内容,优先显示经常访问的内容;
5)验证所收集增强现实测度数据的准确性,并根据增强现实业务设置或者运营策略进行处理,包括:
在上报增强现实测度报告至移动增强现实服务器200前丢弃不准确的增强现实测度数据;
在所上报得增强现实测度报告中包含不准确的增强现实测度数据。
6)上报增强现实测度报告至移动增用户/业务/终端现实服务器200,包括:
按照不同增强现实测度数据类型,上报多个增强现实测度报告;
聚合增强现实测度数据,上报一个增强现实测度报告。
用户/终端数据管理功能125,负责管理移动增强现实用户、终端相关信息,包括:
1)设置并管理用户个性化偏好,譬如:增强现实目标和/或增强现实内容获取偏好、增强现实目标和/或增强现实内容展示偏好;
2)收集并处理用户上下文信息,譬如:用户位置信息、增强现实终端状态信息(譬如:终端电量、存储状态);
3)管理增强现实目标或者增强现实内容缓存。
增强现实应用130,提供移动增强现实业务实现的终端侧应用程序,通过本发明移动增强现实接口MobAR-1访问移动增强现实客户端120提供的增强现实业务底层支撑能力,在此基础上提供不同形式的增强现实业务体验,如增强现实多媒体广告应用、增强现实导航应用、增强现实游戏应用等。
支撑业务客户端140,提供移动增强现实业务实现所需支撑业务的客户端能力实现,具体包括:
设备管理客户端141,基于DM协议,实现设备管理客户端与设备管理服务器之间的通信,为用户移动增强现实终端提供设备管理功能;
可扩展标记语言(XML,Extensible Markup Language)文档管理客户端142,基于XML配置访问协议(XCAP,XML Configuration Access Protoco1)实现X显示管理器(XDM,XDisplay Manager)客户端与XDM服务器之间的通信,为用户增强现实业务提供用户偏好和业务设置管理功能;
呈现客户端143,基于会话初始协议(SIP,Session Initiation Protoco1),用于呈现客户端与呈现服务器(包含于支撑业务服务器400中)之间的通信,为用户移动增强现实终端提供呈现信息推送功能。
图3为本发明实现移动增强服务器200的逻辑功能组成示意图,如图3所示,移动增强现实服务器200,是移动增强现实业务系统网络侧的功能实体,负责根据移动增强现实客户端120请求,以及用户增强现实个性化及上下文设置,为用户提供增强现实目标和/或增强现实内容发布管理、增强现实目标搜索、增强现实内容获取选择、增强现实目标和/或增强现实内容递送、增强现实测度上报等服务,主要包括以下功能实体:
增强现实内容/目标选择功能210,在移动增强现实服务器200中根据接收的移动增强现实客户端120请求,或者与增强现实目标、增强现实内容递送相关推送请求,负责搜索增强现实目标,选择并获取增强现实内容。
增强现实内容/目标选择功能210提供下列子功能:
1)增强现实目标和/或增强现实内容获取;
2)增强现实目标和/或增强现实内容过滤;
3)增强现实目标和/或增强现实内容聚合;
4)增强现实目标和/或增强现实内容消费展现;
5)触发第三方增值应用;
6)增强现实目标和/或增强现实内容删除或者替换。
增强现实内容/目标选择功能210在下述情况下提供服务:
1)移动增强现实服务器200接收移动增强现实客户端120发送的增强现实业务请求,包括:增强现实目标搜索请求、增强现实内容获取请求;
2)移动增强现实服务器200判断已满足预先设置增强现实目标和/或增强现实内容推送设置条件,包括:
增强现实目标和/或增强现实内容推送时间间隔到来,譬如:某天或某周特定时刻;
移动增强现实用户上下文符合预先设置推送条件,譬如:用户进入某特定区域,或者用户呈现状态(Presence)显示其所使用的移动增强现实终端摄像头处于开启状态。
(一)增强现实内容/目标选择功能210负责根据移动增强现实客户端120的请求,选择并获取增强现实目标和/或增强现实内容,具体步骤包括:
1)对于增强现实目标搜索请求,根据请求携带的增强现实目标搜索参数以及增强现实个性化及上下文,构造增强现实目标搜索条件,并向增强现实内容/目标管理功能230发送增强现实目标搜索请求,获取符合条件增强现实目标集合,所述搜索参数,至少包括:
移动增强现用户位置信息,譬如:经纬度;
增强现实目标类型,譬如:POI(兴趣点);
增强现实目标搜索半径、搜索类别,对于POI,譬如:建筑;
增强现实目标特征,譬如:开放时间、价格区间;
增强现实目标之间关系信息,譬如:被包含、包含、相邻;
多媒体内容,譬如:图像、视频、音频。
如果增强现实目标搜索参数是用户位置信息,则增强现实内容/目标选择功能210根据增强现实个性化及上下文管理功能250中用户个性化偏好,以及用户当前上下文判断是否同时获取在所搜索增强现实目标中与用户位置比较接近目标所对应的增强现实内容,以供移动增强现实客户端120缓存。若是,则增强现实内容/目标选择功能210请求获取相应的增强现实内容。
2)对于增强现实内容获取请求,根据请求中携带的增强现实内容获取参数以及增强现实个性化及上下文,构造增强现实内容获取条件,并向增强现实内容/目标管理功能230发送增强现实内容获取请求,获取符合条件增强现实内容集合,所述获取参数,至少包括:
增强现实内容标识,或相关联增强现实目标标识;
增强现实内容特征,譬如:媒体类型、收费价格;
增强现实内容部署规则;
增强现实内容访问控制策略。
如果移动增强现实服务器200本地已缓存所述增强现实内容,则增强现实内容/目标选择功能210直接向增强现实内容/目标管理功能230请求获取所述增强现实内容,否则,向对应的增强现实内容服务器300请求获取所述增强现实内容;
(二)增强现实内容/目标选择功能210负责根据增强现实个性化及上下文管理功能250中预先设置的推送条件,选择并获取增强现实目标和/或增强现实内容,具体步骤包括:
1)对于增强现实目标推送请求,根据请求携带的增强现实目标搜索参数以及增强现实个性化及上下文,构造增强现实目标搜索条件,并向增强现实内容/目标管理功能230发送增强现实目标搜索请求,获取符合条件增强现实目标集合;
2)对于增强现实内容推送请求,根据请求中携带的增强现实内容获取参数以及增强现实个性化及上下文,构造增强现实内容获取条件,并向增强现实内容/目标管理功能230发送增强现实内容获取请求,获取符合条件增强现实内容集合,所述获取参数,至少包括:
增强现实内容标识,或相关联增强现实目标标识;
增强现实内容特征,譬如:媒体类型、收费价格;
增强现实内容部署规则;
增强现实内容访问控制策略。
如果移动增强现实服务器200已缓存所述增强现实内容,则增强现实内容/目标选择功能210直接获取所述增强现实内容,否则,向对应的增强现实内容服务器300请求获取增强现实内容。
(三)增强现实内容/目标选择功能210负责过滤获取的增强现实目标和/或增强现实内容,具体方式包括:
根据增强现实个性化及上下文管理功能250中的用户个性化偏好,过滤获取的增强现实目标和/或增强现实内容,所述个性化偏好,至少包括:
增强现实目标类型,譬如:POI(兴趣点);
增强现实目标类别,对于POI,譬如:建筑;
用户终端能力,譬如:屏幕分辨率;
增强现实目标特征,譬如:开放时间、价格区间;
增强现实内容类型,譬如:图像、视频、音频。
根据增强现实个性化及上下文管理功能250中的用户当前上下文,过滤获取的增强现实目标和/或增强现实内容,所述用户当前上下文,至少包括:
移动增强现用户位置信息,譬如:经纬度;
用户终端能力,譬如:剩余存储空间、剩余电量。
(四)增强现实内容/目标选择功能210负责聚合获取的增强现实目标和/或增强现实内容,具体方式包括:
根据增强现实目标和/或增强现实内容自身的特征,聚合获取的增强现实目标和/或增强现实内容,所述特征,至少包括:
增强现实目标和/或增强现实内容的位置;
增强现实目标和/或增强现实内容的方向;
增强现实目标和/或增强现实内容的相互关系。
根据增强现实个性化及上下文管理功能250中的用户个性化偏好,聚合获取的增强现实目标和/或增强现实内容,所述用户个性化偏好,至少包括:
增强现实目标和/或增强现实内容的访问历史,譬如:访问时间。
(五)增强现实内容/目标选择功能210支持针对所获取增强现实目标和/或增强现实内容的不同消费展现方式,具体方式包括:
指示按照列表模式展现增强现实目标和/或增强现实内容;
指示按照地图模式展现增强现实目标和/或增强现实内容。
经过以上处理,增强现实内容/目标选择功能210将返回以下信息:
增强现实目标和/或增强现实内容;
增强现实目标和/或增强现实内容的引用;
如果无法获取符合请求条件的增强现实目标和/或增强现实内容,将返回默认增强现实目标和/或默认增强现实内容,或者,返回无法获取增强现实目标和/或增强现实内容的指示。
(六)增强现实内容/目标选择功能210负责触发第三方增值应用服务器500的业务逻辑,为移动增强现实客户端120提供额外信息,具体方式包括:
在前述步骤,增强现实内容/目标选择功能210根据增强现实个性化及上下文管理功能250中用户个性化偏好,以及用户当前上下文判断是否满足第三方增值应用服务器500业务触发条件。若是,则增强现实内容/目标选择功能210请求触发第三方增值应用,向相应的第三方增值应用服务器500发送业务触发请求,以获取第三方增值应用服务器500提供的增值服务内容。
(七)增强现实内容/目标选择功能220负责指示移动增强现实客户端120删除或者替换之前获取的增强现实目标和/或增强现实内容,具体方式包括:
根据增强现实内容提供商300请求,增强现实内容/目标选择功能220向移动增强现实客户端120发送之前已获取增强现实目标和/或增强现实内容删除或者替换请求;
根据移动增强现实服务器200内部增强现实内容/目标管理功能230的请求,增强现实内容/目标选择功能220向移动增强现实客户端120发送之前已获取增强现实目标和/或增强现实内容删除或者替换请求;
所述请求可以在PULL模式下经由响应消息携带,或者PUSH模式下直接推送下发。
增强现实内容/目标递送功能220,在移动增强现实服务器200中负责递送以下信息至移动增强现实客户端120:
增强现实目标和/或增强现实内容;
增强现实目标和/或增强现实内容的引用;
无法获取增强现实目标和/或增强现实内容的指示。
增强现实内容/目标递送功能220通过以下方式实现增强现实目标和/或增强现实内容的递送服务:
PULL模式:增强现实内容/目标递送功能220通过响应移动增强现实客户端120的请求,递送增强现实目标和/或增强现实内容;
PUSH模式:增强现实内容/目标递送功能220主动推送增强现实目标和/或增强现实内容至移动增强现实客户端120;
增强现实内容/目标递送功能220负责为移动增强现实客户端120提供增强现实目标和/或增强现实内容获取的暂停、恢复服务,具体包括:
根据移动增强现实终端100状态变化,暂停向移动增强现实客户端120递送正在获取的增强现实目标和/或增强现实内容,譬如:终端的电量较低,或者终端失去通信网络信号;
根据移动增强现实终端100状态变化,恢复向移动增强现实客户端120递送之前暂停的增强现实目标和/或增强现实内容,譬如:对递送造成影响的终端状态得到恢复,并且仍然满足递送条件。
增强现实内容/目标管理功能230,在移动增强现实服务器200中负责增强现实目标部署、增强现实内容发布相关信息的存储与管理,主要包括:
增强现实目标部署信息管理,至少包括:增强现实目标标识、增强现实目标类型、分类、描述,相关增强现实内容标识,与其他增强现实目标之间关系等;
相关联增强现实内容发布信息管理,至少包括:增强现实内容标识、相关增强现实目标标识、增强现实内容发布状态、增强现实内容部署规则、以及增强现实内容访问地址、访问控制策略等;
增强现实内容缓存策略管理;
增强现实内容本地缓存管理。
1)增强现实内容/目标管理功能230接收增强现实内容服务器300发送增强现实内容管理请求,执行增强现实内容管理权限控制验证。若通过验证,更新与管理请求相对应增强现实内容信息。所述增强现实内容管理请求包括:
增强现实内容与增强现实目标关联请求;
增强现实内容状态发布请求;
增强现实内容部署规则设置请求。
2)增强现实内容/目标管理功能230接收增强现实内容/目标选择功能210发送的增强现实目标搜索请求,根据搜索条件查询增强现实内容信息中的增强现实目标部署信息,并返回符合搜索条件的增强现实目标集合;
3)增强现实内容/目标管理功能230接收增强现实内容/目标选择功能210发送的增强现实内容获取请求,根据内容标识查询增强现实内容信息中的增强现实内容发布信息,并返回相应的增强现实内容访问地址或者缓存的增强现实内容;
4)增强现实内容/目标管理功能230根据增强现实内容管理请求执行结果向增强现实内容/目标选择功能210发送增强现实内容信息变化通知,至少包括:
增强现实内容与增强现实目标关联关系变化通知;
增强现实内容发布状态通知;
增强现实内容部署规则变化通知。
增强现实测度处理功能240,在移动增强现实服务器200中负责增强现实测度数据的收集与处理,主要包括:
1)接收移动增强现实客户端120上报的增强现实测度数据,包括:
用户在显示屏幕112对所显示增强现实标记、增强现实内容的操作(譬如:选择、查看详细信息);
增强现实内容访问历史,包括:访问时间、所访问增强现实内容属性(譬如:增强现实内容标识、增强现实目标位置等);
在移动增强现实客户端120上报的增强现实测度数据中添加移动增强现实服务器200已知其他的测度信息,包括:
增强现实测度数据所对应增强现实目标和/或增强现实内容其他属性(譬如:发布状态、部署规则);
增强现实测度数据所对应移动增强现实用户个性化偏好(譬如:搜索半径、搜索类别),上下文(譬如:用户位置、终端状态)。
2)接收移动增强现实客户端120上报的用户反馈,譬如:增强现实内容评分等;
3)利用所收集的增强现实测度和用户反馈优化后续业务,譬如:优化增强现实内容选择、过滤;
4)为所有收集到的增强现实测度和用户反馈提供安全保护(譬如:加密);
5)处理接收到的以及增添的增强现实测度数据,创建增强现实测度报告,包括:
基于增强现实应用,创建增强现实测度报告;
基于增强现实目标和/或增强现实内容,创建增强现实测度报告;
基于增强现实内容服务器,创建增强现实测度报告。
6)管理增强现实测度报告的订阅通知,包括:
接收增强现实内容服务器300订阅请求,建立增强现实测度数据订阅通知关系;
接收增强现实内容服务器300取消订阅请求,取消增强现实测度数据订阅通知关系;
增强现实个性化及上下文功能250,在移动增强现实服务器200负责管理用户个性化偏好以及用户上下文,主要包括:
1)用户个性化偏好的设置与管理
用户个性化偏好是指用户使用增强现实业务过程中选择的业务设置,至少包括:
增强现实目标搜索偏好,譬如:搜索半径,搜索类别、增强现实目标特征等;
增强现实内容获取偏好,譬如:增强现实内容特征等;
增强现实目标和/或增强现实内容推送设置,譬如:预先设定推送条件中的用户上下文(用户位置、终端状态);
预先设定推送条件中的推送时间;
增强现实目标和/或增强现实内容过滤偏好,譬如:根据增强现实目标类型、增强现实目标类别、增强现实目标特征、增强现实内容类型、用户位置、终端能力执行过滤;
增强现实目标和/或增强现实内容聚合偏好,譬如:按照增强现实目标和/或增强现实内容特征(譬如:方向、位置)执行聚合;
第三方增值应用触发偏好,譬如:按照用户位置,业务访问时间,第三方增值应用类别,判断是否符合触发条件。
用户个性化偏好可以存储在移动增强现实服务器200,也可以存储于其他外部存储实体,譬如请求OMA Shared Preference XDMS获取。
2)用户上下文的采集与使用
用户上下文是指与用户及其使用终端当前状态信息,包括:
用户当前状态,譬如:用户地理位置、用户呈现信息;
移动增强现实终端100状态,譬如:屏幕尺寸、剩余电量、存储空间、媒体播放能力等;
用户上下文通常动态更新,可以由移动增强现实客户端120上报移动增强现实服务器200,也可以通过请求其他外部支撑功能实体获取,譬如,请求OMA Presence服务器或者OMA DPE服务器获取。
增强现实个性化及上下文管理功能250在接收到用户上下文更新后,将根据用户个性化偏好中增强现实目标和/或增强现实内容推送偏好设置判断是否发起增强现实目标和/或增强现实内容推送流程。若是,则向增强现实内容/目标选择功能210发送增强现实目标和/或增强现实内容推送请求,所述请求中携带增强现实目标和/或增强现实内容推送偏好中设置的增强现实目标搜索条件,或增强现实内容获取条件。
增强现实内容服务器300,增强现实内容提供商部署在网络侧的功能实体,提供与移动增强现实服务器200中已推送增强现实目标,如兴趣点POI,相关联的增强现实内容,包括:文字、图像、音频、视频等多媒体信息。
为更好地实现移动增强现实业务,本发明的移动增强现实系统还包括以下功能实体:
支撑业务服务器400,提供移动增强现实业务实现所需支撑业务的服务器端能力实现,具体包括以下功能实体:
设备管理服务器,为用户移动增强现实终端提供终端管理服务;
XDM服务器,存储用户增强现实业务偏好并接收移动增强现实服务器查询;
呈现服务器,向移动增强现实服务器发送与用户增强现实业务状态相关的呈现信息变化通知;
计费服务器,接收移动增强现实服务器上报的计费信息并提供收费依据。
第三方增值应用服务器500,用于为增强现实用户提供第三方增值服务,具体包括以下功能实体:
增强现实广告应用、增强现实游戏应用、增强现实社交应用等。
另外,本发明的移动增强现实系统还涉及了一些各功能实体之间的通信接口,进行详细描述,具体如下:
第一接口(MobAR-1),是移动增强现实客户端开放给增强现实应用的接口,具体支持下述功能:
增强现实应用通过MobAR-1接口实现下述功能:
访问移动增强现实客户端提供的增强现实内容,具体包括:基于位置获取增强现实内容,或者,基于增强现实目标特征匹配获取增强现实内容。
访问移动增强现实客户端提供的其他增强现实业务功能,具体包括:增强现实目标特征识别,增强现实目标搜索与跟踪,增强现实内容展示,增强现实内容存储以及增强现实测度上报等。
第二接口(MobAR-2),是移动增强现实服务器开放给移动增强现实客户端的接口,具体支持下述功能:
移动增强现实服务器通过MobAR-2接口实现下述功能:
接收移动增强现实客户端的增强现实目标搜索请求,并返回响应;
接收移动增强现实客户端的增强现实内容获取请求(PULL),并返回响应;
接收移动增强现实客户端的增强现实测度上报请求,并返回响应;
通知移动增强现实客户端删除本地缓存的一些增强现实内容;
移动增强现实客户端通过MobAR-2接口实现下述功能:请求发现增强现实目标,请求获取增强现实内容,以及请求上报增强现实测度。
第三接口(MobAR-3):移动增强现实客户端开放给移动增强现实服务器的接口,具体支持下述功能:
移动增强现实客户端通过MobAR-3接口实现功能:接收移动增强现实服务器推送的增强现实内容(或者目标)(PUSH);
移动增强现实服务器通过MobAR-3接口实现功能:推送(单播)增强现实内容(或目标)至移动增强现实客户端;推送(单播)增强现实内容(或目标)获取通知至移动增强现实客户端;推送广播增强现实内容(或者目标)至移动增强现实客户端;
第四接口(MobAR-4),是移动增强现实服务器开放给增强现实内容服务器的接口,具体支持下述功能:
移动增强现实服务器通过MobAR-4接口实现功能:接收增强现实内容服务器发送的增强现实内容管理请求,其中,增强现实内容管理请求包括:增强现实内容与增强现实目标关联请求,增强现实内容状态发布请求,增强现实内容部署规则设置请求,增强现实测度订阅请求等;
增强现实内容服务器通过MobAR-4接口实现功能:发送增强现实内容管理请求至移动增强现实服务器。
图4为本发明增强现实内容/目标选择功能210的组成结构示意图,如图4所示,增强现实内容/目标选择功能210包括下述处理单元:
增强现实目标搜索单元211,负责根据移动增强现实客户端120增强现实目标搜索请求,以及增强现实个性化及上下文功能230增强现实目标推送请求,处理执行增强现实目标搜索业务逻辑,包括:
提取请求中携带的增强现实目标匹配参数;
查询增强现实个性化及上下文功能250中用户个性化偏好及当前上下文;
生成增强现实目标搜索条件,向增强现实内容/目标管理功能230发送增强现实目标搜索请求,并接收搜索结果;
如果增强现实目标匹配参数是用户位置信息,且用户增强现实个性化及上下文允许同时获取所发现增强现实目标中与用户终端位置比较接近目标所对应增强现实内容,则增强现实目标搜索单元211向增强现实内容获取单元212发送与用户当前位置接近增强现实目标对应增强现实内容获取请求;
增强现实内容获取单元212,负责根据移动增强现实客户端120增强现实内容获取请求,以及增强现实个性化及上下文功能230增强现实内容推送请求,处理执行增强现实内容获取、选择业务逻辑,包括:
提取请求中携带的增强现实内容获取参数;
查询增强现实个性化及上下文功能250中用户个性化偏好及当前上下文;
查询增强现实内容/目标管理功能230增强现实内容发布信息;
通过增强现实内容/目标管理功能230本地缓存获取增强现实内容,或者向增强现实内容服务器300发送增强现实内容获取请求,获取增强现实内容;
增强现实内容/目标过滤单元213,负责根据用户增强现实个性化及上下文过滤增强现实目标搜索单元211搜索的增强现实目标,以及增强现实内容获取单元212选择并获取的增强现实内容;
增强现实内容/目标聚合单元214,负责根据所获取增强现实目标和/或增强现实内容自身特征,以及用户增强现实个性化及上下文,执行增强现实目标和/或增强现实内容聚合处理,并将处理结果返回增强现实内容递送单元220;
图5为本发明增强现实内容/目标管理功能230的组成结构示意图,如图5所示,增强现实内容/目标管理功能230包括以下处理单元:
增强现实目标信息存储单元231,负责存储增强现实目标部署信息,接收增强现实内容/目标选择功能210的查询请求。支持不同类型的增强现实目标,包括:兴趣点(POI)、人、建筑物、自然景物(山川、河流)等。
所存储的增强现实目标部署信息包括:
1)增强现实目标属性,包括:增强现实目标的地理位置、名称、标识、类别、元数据(创建时间、作者、是否可见),以及增强现实目标之间关系等;
2)相关联增强现实内容属性,包括:增强现实内容的名称、标识等;
3)增强现实目标测度访问控制列表,包括:增强现实目标测度上报通知的合法接收者标识;
增强现实内容信息存储单元232,负责存储增强现实内容发布信息,接收增强现实内容/目标选择功能210的查询请求。支持不同类型的增强现实内容,包括:兴趣点(POI)、人、建筑物、自然景物(山川、河流)等。
所存储的增强现实内容发布信息包括:
1)增强现实内容属性,包括:增强现实内容的名称、标识、格式、尺寸、发布时间、发布者、访问地址等;
2)相关联增强现实目标属性,包括:增强现实目标名称、标识、类别等;
3)增强现实内容部署规则,包括:增强现实内容部署开始时间、部署周期,基于用户设置的相同增强现实目标与不同增强现实内容之间的关联,基于时间设置的相同增强现实目标与不同增强现实内容之间的关联,针对额外增强现实内容的访问控制规则等;
4)增强现实内容测度访问控制列表,包括:增强现实内容测度上报通知的合法接收者标识;
增强现实内容发布单元233,负责接收增强现实内容服务器400发送的增强现实内容管理请求,执行访问权限控制验证,验证请求的合法性。识别管理请求类型,并根据请求中携带的增强现实内容管理对象信息更新增强现实目标信息存储单元中增强现实目标部署信息,以及增强现实内容信息存储单元中增强现实内容发布信息。
以下通过具体的示例应用,对本发明的实现移动增强现实业务的系统及其相应网元,以及各网元之间如何实现交互而实现移动增强现实业务的,进行详细的描述。
图6为本发明实现移动增强现实业务的方法的流程图,如图6所示,本发明实现移动增强现实业务的方法具体包括以下步骤:
步骤610,移动增强现实服务器根据接收到的移动增强现实客户端的请求或者与递送增强现实目标和/或增强现实内容相关的推送请求,搜索增强现实目标,选择并获取增强现实内容。
步骤620,移动增强现实服务器递送增强现实目标和/或增强现实内容至移动增强现实客户端。
以下通过具体的示例,进一步阐明本发明实现移动增强现实业务的方法的技术方案的实质。
图7为本发明应用例一实现移动增强现实业务的方法的流程图,如图7所示,本示例是实现移动增强现实服务器200根据移动增强现实客户端120的请求,搜索增强现实目标,选择并获取相应增强现实内容的流程图,即PULL模式;本示例实现移动增强现实业务的方法具体包括以下步骤:
步骤F1,用户启动移动增强现实终端上的增强现实应用,增强现实应用请求移动增强现实客户端发现可获取的增强现实目标;
步骤F2,移动增强现实客户端通过移动增强现实终端能力部件采集终端上下文(譬如:经纬度信息)和/或备选增强现实目标特征(RFID标识、图像特征码),生成增强现实目标匹配参数,并向移动增强现实服务器发送增强现实目标搜索请求;
步骤F3,移动增强现实服务器中增强现实内容/目标递送功能将该请求转发至增强现实内容/目标选择功能;
步骤F4-F5,增强现实内容/目标选择功能提取所述请求中的增强现实目标匹配参数(譬如:用户终端位置参数、备选增强现实目标特征参数),并向增强现实个性化及上下文功能查询用户个性化及上下文信息,构造符合用户个性化偏好、目标匹配参数要求的增强现实目标搜索条件;
步骤F6-F7,增强现实内容/目标选择功能向增强现实内容/目标管理功能发送增强现实目标搜索请求,增强现实内容/目标管理功能根据目标搜索条件检索增强现实目标信息存储,并返回匹配到的增强现实目标信息集合;
步骤F8至步骤F9,如果增强现实目标匹配参数是用户终端位置信息,则增强现实内容/目标选择功能根据增强现实个性化及上下文判断是否同时获取所匹配增强现实目标中与用户终端位置比较接近目标所对应的增强现实内容,以供移动增强现实客户端缓存。若是,则增强现实内容/目标选择功能及聚合功能进一步请求获取对应增强现实内容,譬如,向增强现实内容服务器发送增强现实内容获取请求,获取对应增强现实内容。若否,则不执行本步骤;
步骤F10,针对上述步骤获取的增强现实目标,以及增强现实内容(可选),增强现实内容/目标选择功能还将执行过滤、聚合操作,包括:
增强现实内容/目标选择功能根据增强现实个性化及上下文过滤所获取的增强现实目标(内容),譬如,过滤特定类别增强现实目标(广告类别),或者过滤不符合增强现实终端能力(屏幕分辨率)的增强现实内容。
增强现实内容/目标选择功能根据增强现实目标(内容)特征,和/或增强现实个性化及上下文聚合所获取的增强现实目标(内容),譬如,聚合同一方向的增强现实目标(内容)。
增强现实内容/目标选择功能向增强现实内容/目标递送功能返回符合用户增强现实个性化及上下文的增强现实目标(内容);
步骤F11,增强现实内容/目标递送功能向移动增强现实客户端返回应答,携带所获取的增强现实目标(或目标及内容);
步骤F12,移动增强现实客户端向增强现实应用返回已发现的增强现实目标元数据,包括:增强现实目标标识、名称、描述等信息。此外,移动增强现实客户端还将缓存同时获取的增强现实内容。增强现实应用则根据自身业务逻辑在终端屏幕上展示与已发现增强现实目标对应的增强现实标签;
步骤F13,根据用户选择操作,增强现实应用请求移动增强现实客户端获取与某个增强现实目标对应的增强现实内容;
步骤F14,移动增强现实客户端根据所选择增强现实目标生成增强现实内容获取参数,向移动增强现实服务器发送增强现实内容获取请求;步骤F15,移动增强现实服务器中增强现实内容/目标递送功能将该请求转发增强现实内容/目标选择功能;
步骤F16-F17,增强现实内容/目标选择功能提取所述请求中增强现实内容获取参数。可选地,若增强现实内容获取参数为相关联增强现实目标标识,增强现实内容/目标选择功能请求查询增强现实个性化及上下文;
步骤F18-F19,增强现实内容/目标选择功能根据增强现实内容获取参数,向增强现实内容/目标管理功能发送增强现实内容信息查询请求,得到对应增强现实内容访问地址。其中,对于存在多个增强现实内容对应于同一增强目标的情况,增强现实内容/目标选择功能将根据增强现实个性化及上下文进行选择;
步骤F20至步骤F21,增强现实内容/目标选择功能根据访问地址向提供该内容的增强现实内容服务器发送增强现实内容获取请求,获取对应增强现实内容。若增强现实内容/目标管理功能本地缓存有所请求增强现实内容,则可以直接获取;
步骤F22,针对上述步骤获取的增强现实内容,增强现实内容/目标选择功能还将执行过滤、聚合操作,包括:
增强现实内容/目标选择功能根据增强现实个性化及上下文过滤所获取的增强现实内容,譬如,过滤不符合增强现实终端能力(屏幕分辨率)的增强现实内容。
增强现实内容/目标选择功能根据增强现实内容特征,和/或增强现实个性化及上下文聚合所获取的增强现实内容,譬如,聚合同一方向的增强现实内容。
增强现实内容/目标选择功能向增强现实内容/目标递送功能返回符合用户增强现实个性化及上下文的增强现实内容;
步骤F23,增强现实内容/目标递送功能向移动增强现实客户端返回应答,携带所获取的增强现实内容;
步骤F24,移动增强现实客户端向增强现实应用返回已获取的增强现实内容。增强现实应用则根据自身业务逻辑在终端屏幕上展示该内容。
图8为本发明应用例二实现移动增强现实业务的方法的流程图,如图8所示,本示例是实现移动增强现实服务器200根据推送设置自动递送增强现实目标和/或增强现实内容至移动增强现实客户端120的流程图,即PUSH模式;本示例实现移动增强现实业务的方法具体包括以下步骤:
步骤F1-F2,移动增强现实服务器接收外部支撑业务服务器关于用户增强现实上下文更新消息,譬如基于位置服务(LBS,Location Based Service)Server发送的用户位置变化信息(进入某一位置区域),以及呈现业务服务器(Presence Server)发送的用户终端呈现状态(打开摄像头拍摄功能),或者第三方图形图像识别服务器发送的根据用户移动增强现实终端拍摄图像计算分析出的备选增强现实目标特征;
步骤F3-F4,增强现实个性化及上下文功能根据增强现实目标(内容)推送设置,判断是否执行增强现实目标(内容)推送流程。本实施例假定根据预先设置,推送增强现实目标。则增强现实个性化及上下文功能提取所述更新消息中增强现实目标搜索参数(用户终端位置参数、备选增强现实目标特征参数),以及增强现实个性化及上下文信息,并据此向增强现实内容/目标选择功能发送增强现实目标推送请求;
步骤F5-F6,增强现实内容/目标选择功能提取所述请求中的增强现实目标匹配参数(譬如:用户终端位置参数、备选增强现实目标特征参数),构造符合用户个性化偏好、目标匹配参数要求的增强现实目标搜索条件,并向增强现实内容/目标管理功能发送增强现实目标搜索请求,返回匹配到的增强现实目标信息集合;
增强现实内容管理模块根据目标搜索参数检索增强现实目标存储,并返回匹配到的增强现实目标元数据集合;
步骤F7-F8,如果增强现实目标匹配参数是用户终端位置信息,则增强现实内容/目标选择功能根据增强现实个性化及上下文判断是否同时获取所匹配增强现实目标中与用户终端位置比较接近目标所对应的增强现实内容,以供移动增强现实客户端缓存。若是,则增强现实内容/目标选择功能进一步请求获取对应增强现实内容,譬如,向增强现实内容服务器发送增强现实内容获取请求,获取对应增强现实内容。若否,则不执行本步骤;
步骤F9-F10,针对上述步骤获取的增强现实目标,以及增强现实内容(可选),增强现实内容/目标选择功能还将执行过滤、聚合操作,包括:
增强现实内容/目标选择功能根据增强现实个性化及上下文过滤所获取的增强现实目标(内容),譬如,过滤特定类别增强现实目标(广告类别),或者过滤不符合增强现实终端能力(屏幕分辨率)的增强现实内容。
增强现实内容/目标选择功能根据增强现实目标(内容)特征,和/或增强现实个性化及上下文聚合所获取的增强现实目标(内容),譬如,聚合同一方向的增强现实目标(内容)。
增强现实内容/目标选择功能请求增强现实内容/目标递送功能,推送所述符合用户增强现实个性化及上下文的增强现实目标(内容)至移动增强现实客户端;
步骤F11-F12,增强现实内容/目标递送功能向移动增强现实客户端推送所获取的增强现实目标(或目标及内容);
步骤F13-F14,移动增强现实客户端向增强现实应用提供获取的的增强现实目标信息,包括:增强现实目标标识、名称、描述等信息。此外,移动增强现实客户端还将缓存同时获取的增强现实内容。增强现实应用则根据自身业务逻辑在终端屏幕上展示与已发现增强现实目标对应的增强现实标签;
步骤F15-F218,与前述步骤类似,移动增强现实服务器接收外部支撑业务服务器关于用户增强现实上下文更新消息,增强现实个性化及上下文功能根据推送设置得出增强现实内容推送判断,并向增强现实内容/目标选择功能发送增强现实内容推送请求;
步骤F19-F22,增强现实内容/目标选择功能提取所述请求中增强现实内容获取参数。与应用例一中步骤F16-F21类似,查询并获取对应增强现实内容。执行类似增强现实内容过滤、聚合操作;
步骤F23-F24,增强现实内容/目标选择功能请求增强现实内容/目标递送功能,推送所述符合增强现实个性化及上下文增强现实内容至移动增强现实客户端;
步骤F25-F28,增强现实内容/目标递送功能向移动增强现实客户端推送所获取的增强现实内容。移动增强现实客户端向增强现实应用提供已获取的增强现实内容,增强现实应用则根据自身业务逻辑在终端屏幕上展示该内容。
图9为本发明应用例三实现移动增强现实业务的方法的流程图,如图9所示,本示例是实现移动增强现实服务器200接收增强现实内容服务器300的请求执行增强现实内容发布管理的流程图,本示例实现移动增强现实业务的方法具体包括以下步骤:
步骤F1,增强现实内容服务器发送增强现实内容管理请求至移动增强现实服务器,所述请求携带增强现实内容管理请求类型字段:“Type=Association”,表示希望建立增强现实目标与增强现实内容之间联系,以及相应管理对象信息,包括:增强现实目标标识“AR Target ID”,增强现实内容标识“AR Content ID”,以及当前增强现实内容发布状态“Available”或“Unavailable”;
步骤F2,增强现实内容管理模块执行增强现实内容服务器访问权限控制,判断是否具备相关增强现实内容管理权限。若通过验证,则增强现实内容管理功能触发增强现实内容发布单元更新增强现实目标信息存储单元中与所述请求管理对象相对应的增强现实目标信息,即建立所述请求中增强现实目标与增强现实内容之间的联系;
步骤F3至步骤F4,移动增强现实服务器向增强现实内容服务器返回增强现实内容管理请求应答;
步骤F5,增强现实内容服务器发送增强现实内容管理请求至移动增强现实服务器,所述请求携带增强现实内容管理请求类型字段:“Type=Publication”,表示请求更新与增强现实目标相联系的增强现实内容发布状态,以及相应管理对象信息,包括:增强现实目标标识“AR Target ID”,增强现实内容标识“AR Content ID”,以及当前增强现实内容发布状态“Available”或“Unavailable”;
步骤F6,增强现实内容管理模块执行增强现实内容服务器访问权限控制,判断是否具备相关增强现实内容管理权限。若通过验证,则增强现实内容管理功能触发增强现实内容发布单元更新增强现实内容信息存储单元中与所述请求管理对象相对应的增强现实内容信息,即更新所述请求中增强现实内容发布状态;
步骤F7至步骤F8,移动增强现实服务器向增强现实内容服务器返回增强现实内容管理请求应答;
步骤F9至步骤F10,增强现实内容/目标管理功能向增强现实内容/目标选择功能发送增强现实内容发布状态变化通知,其中携带相关增强现实目标标识、增强现实内容标识、增强现实内容当前发布状态、访问地址等;
步骤F11,增强现实内容/目标选择功能根据增强现实个性化及上下文向相关用户移动增强现实客户端发送增强现实内容发布状态变化通知。可以向已经发现对应增强现实目标的移动增强现实客户端发送通知,也可能向已经获取相关增强现实内容的移动增强现实客户端发送通知,所述通知中携带对应增强现实目标标识、增强现实内容标识、增强现实内容当前发布状态、访问地址等。
移动增强现实客户端根据接收到的通知执行相应增强现实业务控制流程,包括:
如果增强现实内容发布状态变为不可用,或者在增强现实目标展示标签中显示提示信息,或者删除本地缓存的增强现实内容;
如果与某个增强现实目标相关联的增强现实内容发生改变,或者在增强现实目标展示标签中显示提示信息,或者请求获取变化后的增强现实内容;
步骤F12,增强现实内容服务器发送增强现实内容管理请求至移动增强现实服务器,所述请求携带增强现实内容管理请求类型字段:“Type=Deployment”,表示希望设置增强现实内容的部署规则,以及相应管理对象信息,包括:增强现实目标标识“AR TargetID”,增强现实内容标识“AR Content ID”,以及与增强现实内容部署访问相关控制规则,至少包括:增强现实内容部署开始时间“Start time”及部署周期“duration”,基于用户设置的同一增强现实目标与不同增强现实内容之间的关联“association based on user”,基于时间设置的同一增强现实目标与不同增强现实内容之间的关联“association based ontime”,针对额外增强现实内容的访问控制规则“Access control to premium content”;
步骤F13-F16,增强现实内容管理模块执行增强现实内容服务器访问权限控制,判断是否具备相关增强现实内容管理权限。若通过验证,则增强现实内容管理功能触发增强现实内容发布单元同时更新增强现实目标信息存储单元中与所述请求管理对象相对应的增强现实目标信息,以及增强现实内容信息存储单元中与所述请求管理对象相对应的增强现实内容信息,即建立所述请求中增强现实内容部署规则;
步骤F17,移动增强现实服务器向增强现实内容服务器返回增强现实内容管理请求应答;
步骤F18至步骤F19,增强现实内容/目标管理功能向增强现实内容/目标选择功能发送增强现实内容部署规则变化通知,其中携带相关增强现实目标标识、增强现实内容标识、增强现实内容部署规则等;
步骤F20,增强现实内容/目标选择功能根据增强现实个性化及上下文向相关用户移动增强现实客户端发送增强现实内容部署规则变化通知。移动增强现实客户端根据接收到的通知执行相应增强现实业务控制流程。
步骤F21,增强现实内容服务器发送增强现实内容管理请求至移动增强现实服务器,所述请求携带增强现实内容管理请求类型:“Type=Subscription”或“Type=Unsubscribe”,表示希望订阅或者取消订阅与增强现实目标和/或增强现实内容相关的测度上报通知,以及相应管理对象信息,包括:增强现实目标标识“AR Target ID”,增强现实内容标识“AR Content ID”,以及订阅周期“duration”;
步骤F22-F23,增强现实内容管理模块执行增强现实内容服务器访问权限控制,判断是否具备相关增强现实内容管理权限。若通过验证,则增强现实内容管理功能触发增强现实内容发布单元更新增强现实目标信息存储中与所述请求管理对象相对应的增强现实目标信息,即增加或删除增强现实目标和/或增强现实内容测度上报通知对象;
步骤F24,移动增强现实服务器向增强现实内容服务器返回增强现实内容管理请求应答。
图10为本发明应用例四实现移动增强现实业务的方法的流程图,如图10所示,本示例是实现移动增强现实服务器200接收移动增强现实客户端120增强现实测度上报的流程图,本示例实现移动增强现实业务的方法具体包括以下步骤:
步骤F1-F2,增强现实应用根据用户使用增强现实业务过程的反馈信息,构造生成增强现实测度数据(AR Metrics data),包括:用户所选择操作的增强现实标签,用户增强现实内容访问历史,譬如:访问时间、增强现实目标位置、对应增强现实内容标识等,以及用户反馈,譬如,针对特定增强现实内容的评价增强现实应用上报所述增强现实测度数据及用户反馈至移动增强现实客户端;
步骤F3至步骤F4,移动增强现实客户端向移动增强现实服务器发送增强现实测度上报请求,增强现实测度处理功能提取增强现实测度上报参数;
步骤F5至步骤F6,增强现实测度处理功能根据测度上报参数向增强现实内容/目标管理功能发送查询请求,获取增强现实测度补充信息,包括:增强现实目标(内容)标识、类型、描述等,以及增强现实测度处理信息,包括:增强现实测度报告订阅通知列表,即针对所述增强现实测度报告合法接收方地址;
步骤F7至步骤F8,增强现实测度处理功能根据测度上报参数向增强现实个性化及上下文功能发送查询请求,获取增强现实测度补充信息,包括:用户个性化设置,当前上下文,以及增强现实测度处理信息,包括:增强现实测度数据隐私保护设置等;
步骤F9至步骤F10,增强现实测度处理功能根据获取的增强现实测度补充信息生成增强现实测度报告,并根据增强现实个性化及上下文过滤不符合用户偏好及业务设置的增强现实测度数据、及报告接收方地址。增强现实测度处理功能向合法增强现实内容服务器发送所述增强现实测度报告通知。
图11为本发明应用例五实现移动增强现实业务的方法的流程图,如图11所示,本示例是实现移动增强现实服务器200触发第三方增值应用服务的流程图,本示例实现移动增强现实业务的方法具体包括以下步骤:
本发明中,第三方增值应用服务提供商通过与移动增强现实服务提供商达成合作协议可以为移动增强现实用户提供额外增值应用服务,包括:多媒体广告,公共安全指南,社交网络服务等。
步骤F1至步骤F7,参照图10所示应用例中对应的F1至步骤F7;
步骤F8至步骤F9,增强现实内容/目标选择功能根据增强现实目标搜索参数及增强现实个性化及上下文判断是否额外提供第三方增值应用,判断条件包括:用户的增强现实目标搜索参数(如用户地理位置信息、备选增强现实目标特征等)是否符合该第三方增值应用触发条件,并且用户增强现实个性化及上下文是否允许移动增强现实服务器自动触发第三方增值应用。
若判断需要触发第三方增值应用,则增强现实内容/目标选择功能向对应第三方增值应用服务器发送触发请求,携带增强现实目标搜索参数和/或用户标识;
步骤F10至步骤F11,第三方增值应用服务器根据触发请求中携带的增强现实目标搜索参数和/或用户标识选择执行相应业务逻辑,从而为用户提供额外增值应用信息,如选择符合用户当前位置的广告内容,或者搜索与用户相关的社交网络信息。第三方增值应用服务器将获取的第三方增值应用内容或者内容标识返回移动增强现实服务器;
步骤F12至步骤F13,可选地,如果第三方增值应用服务器返回内容标识,则增强现实内容/目标选择功能根据该标识向增强现实内容服务器或者其他内容存储实体发送第三方增值应用内容获取请求,获取相应内容;
步骤F14,增强现实内容/目标选择功能根据增强现实个性化及上下文过滤、聚合所获取的增强现实目标(内容)以及第三方增值应用内容,并返回增强现实内容/目标递送功能;
步骤F15,增强现实内容/目标递送功能向移动增强现实客户端返回应答,携带所获取的增强现实目标(内容,可选),以及第三方增值应用内容;
步骤F16,移动增强现实客户端向增强现实应用返回已发现的增强现实目标以及第三方增值应用内容,并在终端屏幕上展示。
以上所述,仅为本发明的较佳实施例而已,并非用于限定本发明的保护范围。

Claims (30)

1.一种实现移动增强现实业务的方法,其特征在于,所述方法包括:
移动增强现实服务器根据接收到的移动增强现实客户端的请求或者与递送增强现实目标和/或增强现实内容相关的推送请求,搜索增强现实目标,选择并获取增强现实内容;
移动增强现实服务器递送增强现实目标和/或增强现实内容至移动增强现实客户端;
其中,所述方法还包括:移动增强现实服务器根据用户增强现实个性化及上下文,暂停或者恢复递送增强现实目标和/或增强现实内容至移动增强现实客户端;所述用户增强现实个性化及上下文包括以下信息至少之一:用户终端状态发生变化,用户位置发生变化。
2.根据权利要求1所述的方法,其特征在于,所述移动增强现实服务器搜索增强现实目标,为:
根据所述移动增强现实客户端的请求或推送请求中的参数,和/或用户增强现实个性化及上下文,搜索增强现实目标。
3.根据权利要求1或2所述的方法,其特征在于,所述选择并获取增强现实内容,为:
搜索增强现实目标,同时获取与所述增强现实目标对应的增强现实内容。
4.根据权利要求1或2所述的方法,其特征在于,所述移动增强现实服务器基于以下信息的至少一项搜索增强现实目标:
用户位置、用户设置、增强现实目标特征;所述用户设置至少包括增强现实目标的搜索半径和/或搜索类别。
5.根据权利要求1所述的方法,其特征在于,所述移动增强现实服务器选择并获取增强现实内容,为:
根据所述移动增强现实客户端的请求或推送请求中的参数,和/或用户增强现实个性化及上下文,选择并获取增强现实内容。
6.根据权利要求1或5所述的方法,其特征在于,所述移动增强现实服务器基于以下信息的至少一项选择并获取增强现实内容:
增强现实内容标识、增强现实内容特征、增强现实目标标识、
用户终端能力、增强现实内容部署规则、增强现实内容访问控制策略。
7.根据权利要求1所述的方法,其特征在于,所述移动增强现实服务器选择并获取增强现实内容,为:
移动增强现实服务器从增强现实内容服务器获取增强现实内容,或者从本地缓存中获取增强现实内容。
8.根据权利要求1所述的方法,其特征在于,所述接收与递送增强现实目标和/或增强现实内容相关的推送请求,为,
移动增强现实服务器根据增强现实目标和/或增强现实内容推送设置,接收所述与递送增强现实目标和/或增强现实内容相关的推送请求。
9.根据权利要求8所述的方法,其特征在于,所述增强现实目标和/或增强现实内容推送设置,为:
用户上下文,和/或,预先设定的推送时间间隔;
其中,所述用户上下文包括:用户位置、终端呈现状态。
10.根据权利要求1所述的方法,其特征在于,所述方法还包括:
移动增强现实服务器根据用户增强现实个性化及上下文,过滤所述增强现实目标和/或增强现实内容。
11.根据权利要求10所述的方法,其特征在于,
所述用户增强现实个性化及上下文包括以下信息的至少一项:
增强现实目标类型、增强现实目标类别、增强现实目标特征、增强现实内容类型、用户位置、终端能力。
12.根据权利要求1所述的方法,其特征在于,所述方法还包括:
移动增强现实服务器根据以下信息的至少一项,聚合所述增强现实目标和/或增强现实内容:
增强现实目标和/或增强现实内容的位置、方向、相互关系。
13.根据权利要求1所述的方法,其特征在于,所述方法还包括:
移动增强现实服务器根据用户增强现实个性化及上下文,触发第三方应用服务器业务逻辑,获取额外的第三方增值应用业务内容;
所述用户增强现实个性化及上下文包括以下信息的指示一项:
用户位置,业务访问时间,第三方增值应用业务类别。
14.根据权利要求1所述的方法,其特征在于,所述方法还包括:
移动增强现实服务器指示移动增强现实客户端删除或者替换之前获取的增强现实目标和/或增强现实内容。
15.根据权利要求14所述的方法,其特征在于,所述指示通过针对移动增强现实客户端请求的响应下发,或者通过发往移动增强现实客户端的推送请求下发;
移动增强现实服务器根据增强现实内容服务器的请求,向移动增强现实客户端发送之前已获取增强现实目标和/或增强现实内容删除或者替换请求。
16.根据权利要求1所述的方法,其特征在于,所述移动增强现实服务器递送增强现实目标和/或增强现实内容至移动增强现实客户端,为:
响应移动增强现实客户端的请求返回增强现实目标和/或增强现实内容;
或者,主动向移动增强现实客户端推送增强现实目标和/或增强现实内容。
17.根据权利要求16所述的方法,其特征在于,所述方法包括:
移动增强现实服务器选择递送下列信息至移动增强现实客户端:
增强现实目标和/或增强现实内容;
增强现实目标和/或增强现实内容的引用;
无信息的指示。
18.根据权利要求1所述的方法,其特征在于,所述方法还包括:
移动增强现实服务器接收增强现实内容服务器发送的增强现实内容管理请求,更新与管理请求相对应的增强现实目标信息,和/或增强现实内容信息。
19.根据权利要求18所述的方法,其特征在于,所述增强现实内容管理请求至少包括:
增强现实目标与增强现实内容关联管理请求、或增强现实内容发布管理请求、或增强现实内容部署规则管理请求,或增强现实测度报告订阅通知请求。
20.根据权利要求1所述的方法,其特征在于,所述方法还包括:
移动增强现实服务器接收移动增强现实客户端上报的增强现实测度数据及用户反馈,创建增强现实测度报告;
移动增强现实服务器根据增强现实测度报告的订阅通知关系,以及用户增强现实个性化及上下文,发送所述增强现实测度报告至增强现实内容服务器。
21.一种移动增强现实服务器,其特征在于,包括:
增强现实内容/目标选择功能,用于根据接收的移动增强现实客户端请求,或者与递送增强现实目标和/或增强现实内容相关的推送请求,搜索增强现实目标,选择并获取增强现实内容;
增强现实内容/目标递送功能,用于通过响应移动增强现实客户端的请求,递送增强现实目标和/或增强现实内容至移动增强现实客户端;
或者,发起请求递送增强现实目标和/或增强现实内容至移动增强现实客户端;
增强现实内容/目标管理功能,用于存储并管理增强现实目标部署信息,增强现实内容发布信息,增强现实内容缓存策略,以及本地缓存增强现实内容;
增强现实测度处理功能,用于收集来自移动增强现实客户端的增强现实测度数据及用户与增强现实内容交互反馈;
增强现实个性化及上下文管理功能,用于收集并管理用户个性化偏好以及用户上下文信息;
其中,所述移动增强现实服务器还用于根据用户增强现实个性化及上下文,暂停或者恢复递送增强现实目标和/或增强现实内容至移动增强现实客户端;所述用户增强现实个性化及上下文包括以下信息至少之一:用户终端状态发生变化,用户位置发生变化。
22.根据权利要求21所述的移动增强现实服务器,其特征在于,还包括提供给增强现实内容服务器的第四接口;
移动增强现实服务器通过第四接口接收增强现实内容服务器发送的增强现实内容管理请求,其中,增强现实内容管理请求包括:增强现实内容与增强现实目标关联/去关联请求,增强现实内容可获取状态发布请求,增强现实内容部署规则设置请求,增强现实测度和用户反馈访问请求。
23.一种移动增强现实终端,包括终端能力部件、移动增强现实客户端、增强现实应用和支撑业务客户端;其特征在于,所述移动增强现实客户端,用于访问用户/终端个性化及上下文信息,请求移动增强现实服务器搜索增强现实目标,选择并获取增强现实内容,并控制增强现实目标和/或增强现实内容与终端能力部件拍摄实景融合展示;
其中,所述移动增强现实服务器还用于根据用户增强现实个性化及上下文,暂停或者恢复递送增强现实目标和/或增强现实内容至移动增强现实客户端;所述用户增强现实个性化及上下文包括以下信息至少之一:用户终端状态发生变化,用户位置发生变化。
24.根据权利要求23所述的移动增强现实终端,其特征在于,所述移动增强现实客户端包括:
增强现实内容/目标获取功能,用于根据增强现实应用的请求,向移动增强现实服务器请求获取增强现实内容和/或增强现实目标;
增强现实内容/目标展示功能,用于根据增强现实应用请求,提供增强现实内容显示机制;
用户交互支持功能,用于支持用户与终端显示屏幕上增强现实目标及相关增强现实内容的交互;
增强现实测度处理功能,用于根据用户偏好及运营商策略,收集并上报增强现实测度数据及用户反馈至移动增强现实服务器;
用户/终端数据管理功能,用于收集并管理用户增强现实个性化及上下文相关信息。
25.根据权利要求23所述的移动增强现实终端,其特征在于,移动增强现实客户端和增强现实应用之间还设置有第一接口;
所述第一接口,用于访问移动增强现实客户端提供的增强现实目标和/或增强现实内容,以及访问移动增强现实客户端提供的其他增强现实业务功能,至少包括:向移动增强现实客户端上报增强现实测度数据。
26.根据权利要求23所述的移动增强现实终端,其特征在于,
移动增强现实客户端和移动增强现实服务器之间设置有第二接口;
移动增强现实服务器通过第二接口,
接收移动增强现实客户端的增强现实目标搜索请求,并返回响应;
接收移动增强现实客户端的增强现实内容获取请求,并返回响应;
接收移动增强现实客户端的增强现实测度和用户反馈上报请求,并返回响应;
接收移动增强现实客户端的用户偏好设置或更新请求,并返回响应;
通知移动增强现实客户端删除本地缓存的增强现实内容;
移动增强现实客户端通过第二接口,
请求移动增强现实服务器发现增强现实目标,请求移动增强现实服务器获取增强现实内容,请求设置或更新用户偏好设置,以及请求上报增强现实测度和用户反馈至移动增强现实服务器。
27.根据权利要求23所述的移动增强现实终端,其特征在于,
移动增强现实客户端和移动增强现实服务器之间设置有第三接口;
移动增强现实客户端通过第三接口接收移动增强现实服务器推送的增强现实内容和/或增强现实目标;
移动增强现实服务器通过第三接口直接推送增强现实内容和/或增强现实目标至移动增强现实客户端;或者,推送增强现实内容和/或增强现实目标间接获取通知至移动增强现实客户端。
28.一种移动增强现实系统,其特征在于,所述系统包括:
移动增强现实客户端,用于访问用户终端能力,请求移动增强现实服务器搜索增强现实目标,获取增强现实内容,并控制增强现实目标和/或增强现实内容的展示;
移动增强现实服务器,用于根据接收的移动增强现实客户端请求,或者与递送增强现实目标和/或增强现实内容相关的推送请求,搜索增强现实目标、选择并获取增强现实内容,递送增强现实目标和/或增强现实内容至移动增强现实客户端;
增强现实内容服务器,用于提供增强现实内容的存储与管理;
其中,所述移动增强现实服务器还用于根据用户增强现实个性化及上下文,暂停或者恢复递送增强现实目标和/或增强现实内容至移动增强现实客户端;所述用户增强现实个性化及上下文包括以下信息至少之一:用户终端状态发生变化,用户位置发生变化。
29.根据权利要求28所述的移动增强现实系统,其特征在于,移动增强现实服务器搜索增强现实目标、选择并获取增强现实内容,为:
移动增强现实服务器对增强现实目标和/或增强现实内容进行过滤;
移动增强现实服务器对增强现实目标和/或增强现实内容进行聚合。
30.根据权利要求28所述的移动增强现实系统,其特征在于,
移动增强现实服务器为增强现实内容服务器提供增强现实内容发布管理;
移动增强现实服务器为移动增强现实客户端提供增强现实测度处理上报。
CN201110290310.8A 2011-06-24 2011-09-16 实现移动增强现实业务的方法及系统、终端及服务器 Active CN102843349B (zh)

Priority Applications (4)

Application Number Priority Date Filing Date Title
CN201110290310.8A CN102843349B (zh) 2011-06-24 2011-09-16 实现移动增强现实业务的方法及系统、终端及服务器
EP12802331.4A EP2712213A4 (en) 2011-06-24 2012-05-28 METHOD, SYSTEM, TERMINAL AND SERVER FOR IMPLEMENTING MOBILE AUGMENTED REALITY SERVICE
PCT/CN2012/076175 WO2012174974A1 (zh) 2011-06-24 2012-05-28 实现移动增强现实业务的方法及系统、终端及服务器
US14/125,123 US20140120887A1 (en) 2011-06-24 2012-05-28 Method, system, terminal, and server for implementing mobile augmented reality service

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
CN2011101735590 2011-06-24
CN201110173559.0 2011-06-24
CN201110173559 2011-06-24
CN201110290310.8A CN102843349B (zh) 2011-06-24 2011-09-16 实现移动增强现实业务的方法及系统、终端及服务器

Publications (2)

Publication Number Publication Date
CN102843349A CN102843349A (zh) 2012-12-26
CN102843349B true CN102843349B (zh) 2018-03-27

Family

ID=47370412

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201110290310.8A Active CN102843349B (zh) 2011-06-24 2011-09-16 实现移动增强现实业务的方法及系统、终端及服务器

Country Status (4)

Country Link
US (1) US20140120887A1 (zh)
EP (1) EP2712213A4 (zh)
CN (1) CN102843349B (zh)
WO (1) WO2012174974A1 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11776253B2 (en) * 2020-03-27 2023-10-03 Snap Inc. Displaying object names in association with augmented reality content

Families Citing this family (60)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10281915B2 (en) 2011-01-05 2019-05-07 Sphero, Inc. Multi-purposed self-propelled device
US9090214B2 (en) 2011-01-05 2015-07-28 Orbotix, Inc. Magnetically coupled accessory for a self-propelled device
US9218316B2 (en) 2011-01-05 2015-12-22 Sphero, Inc. Remotely controlling a self-propelled device in a virtualized environment
US9114838B2 (en) 2011-01-05 2015-08-25 Sphero, Inc. Self-propelled device for interpreting input from a controller device
US9429940B2 (en) 2011-01-05 2016-08-30 Sphero, Inc. Self propelled device with magnetic coupling
US9292758B2 (en) * 2012-05-14 2016-03-22 Sphero, Inc. Augmentation of elements in data content
US9827487B2 (en) 2012-05-14 2017-11-28 Sphero, Inc. Interactive augmented reality using a self-propelled device
EP2850512A4 (en) 2012-05-14 2016-11-16 Sphero Inc OPERATION OF A CALCULATION DEVICE BY DETECTING ROUNDED OBJECTS IN A PICTURE
US20130328930A1 (en) * 2012-06-06 2013-12-12 Samsung Electronics Co., Ltd. Apparatus and method for providing augmented reality service
US10056791B2 (en) 2012-07-13 2018-08-21 Sphero, Inc. Self-optimizing power transfer
US20140210857A1 (en) * 2013-01-28 2014-07-31 Tencent Technology (Shenzhen) Company Limited Realization method and device for two-dimensional code augmented reality
TWI506563B (zh) * 2013-01-28 2015-11-01 Tencent Tech Shenzhen Co Ltd A method and apparatus for enhancing reality of two - dimensional code
WO2014145069A1 (en) * 2013-03-15 2014-09-18 Ahad Rana Apparatus, systems, and methods for providing location information
CN103297544B (zh) * 2013-06-24 2015-06-17 杭州泰一指尚科技有限公司 一种基于增强现实的即时通讯应用方法
US9942295B2 (en) * 2013-06-28 2018-04-10 Intel Corporation Live crowdsourced media streaming
US9829882B2 (en) 2013-12-20 2017-11-28 Sphero, Inc. Self-propelled device with center of mass drive system
WO2015160515A1 (en) * 2014-04-16 2015-10-22 Exxonmobil Upstream Research Company Methods and systems for providing procedures in real-time
CN105025052B (zh) * 2014-04-24 2018-07-27 宇龙计算机通信科技(深圳)有限公司 一种感知活动通知系统及方法
CN105429847A (zh) * 2014-09-22 2016-03-23 中国移动通信集团天津有限公司 客户端显示头像设置方法与装置
CN105872961A (zh) * 2015-01-21 2016-08-17 耀腾资讯股份有限公司 以无线区域网络信号定位的适地性传讯系统以及方法
CN105635716B (zh) * 2015-02-04 2019-01-15 苏州梦想人软件科技有限公司 基于增强现实的聚合媒体方法
WO2017075539A1 (en) * 2015-10-28 2017-05-04 Voke Inc. Apparatus and method for distributing multimedia events from a client
CN107632824B (zh) 2016-07-18 2019-01-01 腾讯科技(深圳)有限公司 一种增强现实模块的生成方法、生成装置以及生成系统
CN106250187A (zh) * 2016-07-29 2016-12-21 宇龙计算机通信科技(深圳)有限公司 一种增强现实ar的信息处理方法、装置及系统
CN106981000B (zh) * 2016-10-13 2020-06-09 阿里巴巴集团控股有限公司 基于增强现实的多人线下交互、点餐方法及系统
CN107979572A (zh) * 2016-10-25 2018-05-01 鄂尔多斯市赛博购商贸有限公司 提供增强现实服务的方法及使用端
CN106547874A (zh) * 2016-10-26 2017-03-29 广州酷狗计算机科技有限公司 多媒体推荐方法及装置
US11223629B2 (en) * 2016-12-12 2022-01-11 Samsung Electronics Co., Ltd. Electronic device and method for providing location data
CN108282449B (zh) * 2017-01-06 2020-10-09 华为技术有限公司 一种应用于虚拟现实技术的流媒体的传输方法和客户端
US10812543B1 (en) * 2017-02-27 2020-10-20 Amazon Technologies, Inc. Managed distribution of data stream contents
EP4017041B1 (en) * 2017-03-20 2023-09-27 InterDigital Patent Holdings, Inc. Service capability exposure at the user equipment
US20180300917A1 (en) * 2017-04-14 2018-10-18 Facebook, Inc. Discovering augmented reality elements in a camera viewfinder display
US20180300916A1 (en) * 2017-04-14 2018-10-18 Facebook, Inc. Prompting creation of a networking system communication with augmented reality elements in a camera viewfinder display
CN107222529B (zh) * 2017-05-22 2022-04-26 北京邮电大学 增强现实处理方法、web模块、终端和云端服务器
CN107229706A (zh) * 2017-05-25 2017-10-03 广州市动景计算机科技有限公司 一种基于增强现实的信息获取方法及其装置
CN107230237A (zh) * 2017-06-19 2017-10-03 歌尔科技有限公司 信息处理方法及装置
CN107483583B (zh) * 2017-08-17 2020-12-22 王勤志 服务体验感知数据采集和服务优化方法
CN111052045B (zh) 2017-09-29 2022-07-15 苹果公司 计算机生成的现实平台
KR102549822B1 (ko) 2018-02-19 2023-06-30 애플 인크. 조건부 의존적 합성 현실 콘텐츠 스레드들을 제시하고 조작하기 위한 방법 및 디바이스들
CN108881611A (zh) * 2018-04-27 2018-11-23 努比亚技术有限公司 用户个人信息更换方法、终端及计算机可读存储介质
CN108932632A (zh) * 2018-06-01 2018-12-04 北京市商汤科技开发有限公司 广告互动方法及装置、电子设备和存储介质
US11077365B2 (en) 2018-06-27 2021-08-03 Niantic, Inc. Low latency datagram-responsive computer network protocol
CN112514418B (zh) * 2018-08-03 2022-09-16 华为技术有限公司 用于提供位置相关程序内容的用户节点、网络节点和方法
CN109040289A (zh) * 2018-08-27 2018-12-18 百度在线网络技术(北京)有限公司 兴趣点信息推送方法、服务器、终端和存储介质
US11157739B1 (en) 2018-08-31 2021-10-26 Apple Inc. Multi-user computer generated reality platform
EP3877831A4 (en) 2018-11-09 2022-08-03 Beckman Coulter, Inc. MAINTENANCE GOGGLES WITH SELECTIVE DATA SUPPLY
US11625806B2 (en) * 2019-01-23 2023-04-11 Qualcomm Incorporated Methods and apparatus for standardized APIs for split rendering
CN109829964B (zh) * 2019-02-11 2021-08-13 北京邮电大学 Web增强现实的渲染方法和装置
JP6720365B1 (ja) * 2019-02-15 2020-07-08 株式会社電通グループ 広告接触判定システム、広告接触判定装置及びプログラム
US11420116B2 (en) 2019-02-25 2022-08-23 Niantic, Inc. Augmented reality mobile edge computing
CN113168676A (zh) 2019-04-18 2021-07-23 贝克曼库尔特有限公司 保护实验室环境中对象的数据
US11206505B2 (en) * 2019-05-06 2021-12-21 Universal City Studios Llc Systems and methods for dynamically loading area-based augmented reality content
US11361559B2 (en) * 2019-11-18 2022-06-14 GM Global Technology Operations LLC System and method for cargo management in a motor vehicle
US11489763B2 (en) 2019-12-20 2022-11-01 Niantic, Inc. Data hierarchy protocol for data transmission pathway selection
CN116347475A (zh) * 2020-03-31 2023-06-27 瑞典爱立信有限公司 用于订阅网络功能的变化通知的方法及装置
KR20230058712A (ko) * 2020-09-03 2023-05-03 삼성전자주식회사 통신 시스템에서 컨텐츠와 디바이스들의 성능 차이 완화를 위한 방법 및 장치
CN116420172A (zh) * 2020-11-05 2023-07-11 计算机生成解决方案股份有限公司 用于集成和使用增强现实技术的系统和方法
CN113658297A (zh) * 2021-08-17 2021-11-16 百度在线网络技术(北京)有限公司 信息展现方法、装置、设备、存储介质以及程序产品
CN114666493B (zh) * 2021-12-22 2024-01-26 杭州易现先进科技有限公司 一种ar观览服务系统和终端
WO2023184195A1 (zh) * 2022-03-29 2023-10-05 北京小米移动软件有限公司 支持增强现实业务能力协商方法及装置、网元、ue及存储介质

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101911128A (zh) * 2007-12-27 2010-12-08 星克跃尔株式会社 用于提供使用增强现实的三维网络地图服务的方法和系统

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7343408B2 (en) * 2000-12-05 2008-03-11 Mformation Technologies, Inc. System and method for wireless data terminal management using telecommunication signaling network
WO2003054654A2 (en) * 2001-12-21 2003-07-03 Nokia Corporation Location-based novelty index value and recommendation system and method
US8023941B2 (en) * 2003-12-17 2011-09-20 Interdigital Technology Corporation Method and apparatus for independent and efficient delivery of services to wireless devices capable of supporting multiple radio interfaces and network infrastructure
GB2420044B (en) * 2004-11-03 2009-04-01 Pedagog Ltd Viewing system
EP1839193A1 (en) * 2004-12-31 2007-10-03 Nokia Corporation Provision of target specific information
US8909210B2 (en) * 2008-08-06 2014-12-09 Bindu Rama Rao Mobile device for access to agricultural services by non-literate and semi-literate users
US20080268876A1 (en) * 2007-04-24 2008-10-30 Natasha Gelfand Method, Device, Mobile Terminal, and Computer Program Product for a Point of Interest Based Scheme for Improving Mobile Visual Searching Functionalities
US7844229B2 (en) * 2007-09-21 2010-11-30 Motorola Mobility, Inc Mobile virtual and augmented reality system
US8180396B2 (en) * 2007-10-18 2012-05-15 Yahoo! Inc. User augmented reality for camera-enabled mobile devices
US20100008265A1 (en) * 2008-07-14 2010-01-14 Carl Johan Freer Augmented reality method and system using logo recognition, wireless application protocol browsing and voice over internet protocol technology
CN101551732A (zh) * 2009-03-24 2009-10-07 上海水晶石信息技术有限公司 带有交互功能的增强现实的方法及其系统
JP2011055250A (ja) * 2009-09-02 2011-03-17 Sony Corp 情報提供方法及び装置、情報表示方法及び携帯端末、プログラム、並びに情報提供システム

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101911128A (zh) * 2007-12-27 2010-12-08 星克跃尔株式会社 用于提供使用增强现实的三维网络地图服务的方法和系统

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11776253B2 (en) * 2020-03-27 2023-10-03 Snap Inc. Displaying object names in association with augmented reality content

Also Published As

Publication number Publication date
CN102843349A (zh) 2012-12-26
EP2712213A1 (en) 2014-03-26
EP2712213A4 (en) 2015-07-29
US20140120887A1 (en) 2014-05-01
WO2012174974A1 (zh) 2012-12-27

Similar Documents

Publication Publication Date Title
CN102843349B (zh) 实现移动增强现实业务的方法及系统、终端及服务器
CN102843347B (zh) 实现移动增强现实业务的系统及方法、终端及服务器
US20200410022A1 (en) Scalable visual search system simplifying access to network and device functionality
US10430976B2 (en) Method and apparatus for producing and reproducing augmented reality contents in mobile terminal
US20160084670A1 (en) Systems and method for determination and display of personalized distance
US10721334B2 (en) Trigger event based data feed of virtual universe data
CN103155477B (zh) 分布式计算环境中的数据同步
US8108778B2 (en) System and method for context enhanced mapping within a user interface
CN104123316B (zh) 资源收藏方法、装置和设备
US20110065451A1 (en) Context-triggered systems and methods for information and services
CN103733177A (zh) 增强实时视图
CN101018137A (zh) 一种向即时通信用户界面推送聊天场景的方法
WO2010039378A2 (en) System and method for context enhanced ad creation
CN102958009B (zh) 增强现实信息的传输方法和移动增强现实服务器
CN102929483A (zh) 终端和资源分享方法
CN106790268A (zh) 访问增强现实用户上下文的方法
CN106403971A (zh) 信息交互方法及装置
CN107873100A (zh) 从当前应用状态访问广告应用状态
CN102810099A (zh) 增强现实视图的存储方法和装置
CN104380768A (zh) 通讯录信息服务系统及用于通讯录信息服务的方法和装置
CN106791912A (zh) 一种海报图片匹配方法及系统
KR101544889B1 (ko) 가상 세계에서의 이벤트를 관리하는 장치 및 그 방법
CN103020324B (zh) 一种基于应用的搜索方法及设备和系统
CN113220814B (zh) 一种将地摊信息与地理空间相连接形成地摊地图的方法
CN101287149A (zh) 基于移动用户属性的增值业务提供方法及系统

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant