CN107678538A - 增强现实系统和其中的信息处理方法、存储介质、处理器 - Google Patents

增强现实系统和其中的信息处理方法、存储介质、处理器 Download PDF

Info

Publication number
CN107678538A
CN107678538A CN201710792023.4A CN201710792023A CN107678538A CN 107678538 A CN107678538 A CN 107678538A CN 201710792023 A CN201710792023 A CN 201710792023A CN 107678538 A CN107678538 A CN 107678538A
Authority
CN
China
Prior art keywords
information
scene information
mobile terminal
augmented reality
user
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201710792023.4A
Other languages
English (en)
Inventor
林征胜
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Wei Xiaogang
Original Assignee
BEIJING FORCE INNOVATION TECHNOLOGY Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by BEIJING FORCE INNOVATION TECHNOLOGY Inc filed Critical BEIJING FORCE INNOVATION TECHNOLOGY Inc
Priority to CN201710792023.4A priority Critical patent/CN107678538A/zh
Publication of CN107678538A publication Critical patent/CN107678538A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/10Protocols in which an application is distributed across nodes in the network

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Processing Or Creating Images (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本发明公开了一种增强现实系统和其中的信息处理方法、存储介质、处理器。其中,该增强现实系统包括:移动终端,用于采集真实场景信息;云数据中心,用于存储虚拟场景信息;以及图像处理模块,用于获取真实场景信息和虚拟场景信息,将真实场景信息和虚拟场景信息进行集成,得到集成信息,并将集成信息发送给移动终端进行展示。本发明解决了现有技术中一个平台难以满足不同用户和运营商的多层次需求的技术问题。

Description

增强现实系统和其中的信息处理方法、存储介质、处理器
技术领域
本发明涉及分布式计算领域,具体而言,涉及一种增强现实系统和其中的信息处理方法、存储介质、处理器。
背景技术
增强现实(Augmented Reality,简称AR)是通过摄像头、传感器、实时计算以及智能匹配技术,将真实世界信息与虚拟世界信息“无缝”融合的一种技术。它通过计算机系统提供的信息增加用户对现实世界感知的技术,将虚拟的信息应用到真实世界,并将计算机生成的虚拟物体、场景或系统提示信息叠加到真实场景中,两种信息相互补充、叠加,实现真实的环境和虚拟的物体在同一个画面或空间的同时存在。其基本特点是:一是真实世界和虚拟的信息集成,二是具有实时交互性,三是在三维尺度空间中增添定位虚拟物体。
增强现实技术最早于1990年提出,随着随身电子设备运算能力的提升,输入和输出设备价格的不断下降、视频显示质量的提高以及功能很强大但易于使用的软件的实用化,AR的应用日益广泛。由于增强现实技术具有能够对真实环境进行增强显示输出的特性,在娱乐与艺术、飞行器研制与开发、虚拟训练、医疗研究与解剖训练、精密仪器制造和维修、军用飞机导航、工程设计和远程机器人控制等领域有着广泛应用,同时对人工智能、CAD、图形仿真、虚拟通讯、遥感、娱乐、模拟训练等许多领域带来了革命性的变化。
然而随着增强现实应用需求日益增加,增强现实平台的扩展性、交互性、个性化成为制约服务的重要因素。一方面如何支持用户随着携带的便携式智能设备,另一方面如何在智能终端计算能力有限的情况下满足用户更加复杂的应用需求,平台的性能成为瓶颈。随着增强现实应用的社交化,用户更愿意承担“参与者”而不仅仅是“观看者”的角色,支持交互式、个性化应用成为增强现实平台需要不断提升的功能。此外,越来越多的企业在独立构建增强现实应用时需付出大量的开发、运营、带宽成本。随着交互式增强现实应用的不断深化,海量信息的产生,增强现实运营要能满足日益增加的用户规模,海量化的数据传输需求,传统的以成本实现规模的模式不再可行,必须实现成本可控的可扩展性。同时,在满足可扩展性的同时,服务质量也不随用户数量和传输数据的增加而下降。此外,在社交化应用层出不穷的时代,一次搭建的运营平台往往难以及时响应不同终端用户不同层次不同形式的增强现实需求,实现平台服务的可定制化和服务可扩展化成为增强现实运营商面临的紧迫问题。
现有的移动增强现实相关平台设计和发明设计往往只针对增强现实服务的某个环节或技术进行优化,难以作为一个平台满足不同用户和增强现实运营商多层次的需求,难以实现平台的扩展性、交互性、个性化的整体支持。
针对现有技术中一个平台难以满足不同用户和运营商的多层次需求的问题,目前尚未提出有效的解决方案。
发明内容
本发明实施例提供了一种增强现实系统和其中的信息处理方法、存储介质、处理器,以至少解决现有技术中一个平台难以满足不同用户和运营商的多层次需求的技术问题。
根据本发明实施例的一个方面,提供了一种增强现实系统,包括:移动终端,用于采集真实场景信息;云数据中心,用于存储虚拟场景信息;以及图像处理模块,用于获取所述真实场景信息和所述虚拟场景信息,将所述真实场景信息和所述虚拟场景信息进行集成,得到集成信息,并将所述集成信息发送给所述移动终端进行展示。
进一步地,所述云数据中心包括:云数据资源模块,用于查找与所述移动终端所采集的所述真实场景信息相对应的所述虚拟场景信息,并将所述虚拟场景信息发送给所述图像处理模块;云计算资源模块,用于为所述移动终端、所述图像处理模块以及所述云数据资源模块提供计算能力支撑。
进一步地,所述云数据资源模块包括:用户数据中心,用于存储所述移动终端的用户信息;应用中心,用于存储应用的信息;网络资源中心,用于存储网络资源信息。
进一步地,所述云数据中心包括:基础设施层,用于提供计算资源服务;数据资源层,用于提供虚拟的图像素材以及虚拟现实模块化应用;应用支撑层,包括以下组件中的至少之一:语音识别组件、传感融合组件、三维建模组件、场景融合组件、机器学习组件、交互操作组件、实时跟踪组件、实时计算组件。
根据本发明实施例的另一方面,还提供了一种增强现实系统中的信息处理方法,包括:获取移动终端采集的真实场景信息;获取云数据中心存储的虚拟场景信息;将所述真实场景信息与所述虚拟场景信息进行集成,得到集成信息;将所述集成信息发送给所述移动终端进行展示。
进一步地,在获取移动终端采集的真实场景信息之前,所述方法还包括:接收所述移动终端用户发起的资源请求,其中,所述资源请求用于请求所述云数据中心中的所述虚拟场景信息;对所述移动终端用户的信息进行安全验证;在所述移动终端用户的信息通过安全验证的情况下,允许所述移动终端用户请求所述云数据中心存储的所述虚拟场景信息。
进一步地,在所述移动终端用户的信息通过安全验证的情况下,允许所述移动终端用户请求所述云数据中心存储的所述虚拟场景信息之后,所述方法还包括:在所述云数据中心中分配用户数据中心,其中,所述用户数据中心用于存储所述移动终端用户的用户数据,所述用户数据包括:用户信息、资源请求记录;根据所述资源请求记录向所述移动终端用户推送目标虚拟场景信息,其中,所述目标虚拟场景信息与所述资源请求记录相关。
进一步地,将所述真实场景信息与所述虚拟场景信息进行集成,得到集成信息包括:按照预定条件将所述真实场景信息与所述虚拟场景信息进行集成,得到集成信息,其中,所述预定条件包括以下至少之一:预定业务类型、预定计费模式、预定应用发布需求、所述移动终端预定需求;输出标识码,其中,所述标识码用于指示获取所述集成信息。
为了实现上述目的,根据本发明的另一方面,提供了一种存储介质,所述存储介质包括存储的程序,其中,在所述程序运行时控制所述存储介质所在设备执行上述所述的增强现实系统中的信息处理方法。
为了实现上述目的,根据本发明的另一方面,提供了一种处理器,所述处理器用于运行程序,其中,所述程序运行时执行上述所述的增强现实系统中的信息处理方法。
在本发明实施例中,通过移动终端采集系统环境的真实场景信息,再通过图像处理模块根据采集到的真实场景信息以及云数据中心存储的虚拟场景信息进行集成,得到集成信息,并将集成后的信息发送给移动终端展示,从而根据本发明上述实施例提供的图形化、模块化增强现实运营组件和行业深度定制系统模板,便于多元化增强现实运营的快速个性化构建和及时动态调整,进而解决了现有技术中一个平台难以满足不同用户和运营商的多层次需求的技术问题。
附图说明
此处所说明的附图用来提供对本发明的进一步理解,构成本申请的一部分,本发明的示意性实施例及其说明用于解释本发明,并不构成对本发明的不当限定。在附图中:
图1是根据本发明实施例的一种增强现实系统的示意图;
图2是根据本发明实施例的一种可选的平台逻辑功能的示意图;
图3是根据本发明实施例的一种可选的AR智能云数据中心功能模块的示意图;
图4是根据本发明实施例的一种增强现实系统中的信息处理方法的流程图;
图5是根据本发明实施例的一种可选的基于云数据中心的增强现实平台逻辑架构图。
具体实施方式
为了使本技术领域的人员更好地理解本发明方案,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分的实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都应当属于本发明保护的范围。
需要说明的是,本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的本发明的实施例能够以除了在这里图示或描述的那些以外的顺序实施。此外,术语“包括”和“具有”以及他们的任何变形,意图在于覆盖不排他的包含,例如,包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
图1是根据本发明实施例的一种增强现实系统的示意图,如图1所示,该系统可以包括:移动终端11,用于采集真实场景信息;云数据中心13,用于存储虚拟场景信息;以及图像处理模块15,用于获取真实场景信息和虚拟场景信息,将真实场景信息和虚拟场景信息进行集成,得到集成信息,并将集成信息发送给移动终端进行展示。
根据本发明上述实施例,通过移动终端采集系统环境的真实场景信息,再通过图像处理模块根据采集到的真实场景信息以及云数据中心存储的虚拟场景信息进行集成,得到集成信息,并将集成后的信息发送给移动终端展示,从而根据本发明上述实施例提供的图形化、模块化增强现实运营组件和行业深度定制系统模板,便于多元化增强现实运营的快速个性化构建和及时动态调整,进而解决了现有技术中一个平台难以满足不同用户和运营商的多层次需求的技术问题。
在上述实施例中,移动终端可以是移动智能终端模块,用于实现真实世界信息的采集、用户位置的定位、用户交互指令的输入和合成后信息的展示。随着智能终端设备能力的不断提升,可逐步包括传统增强现实头戴式显示器、跟踪系统、移动计算等相关功能。
在上述实施例中,图像处理可以是增强现实图形处理模块,用于实现对用户自然语言信息的识别,指令的发出,对移动终端设备采集的真实世界信息进行模拟仿真处理,根据用户指令调用智能云数据中心提供的虚拟信息进行集成,两种信息相互补充、叠加,合成后的信息发送到移动智能终端设备进行演示。
在上述实施例中,云数据中心可以是公用云平台,利用公共云平台弹性可扩展计算资源,降低自主建设平台的运营成本。
图2是根据本发明实施例的一种可选的平台逻辑功能的示意图,如图2所示,云数据中心可以包括:云数据资源模块21,用于查找与移动终端所采集的真实场景信息相对应的虚拟场景信息,并将虚拟场景信息发送给图像处理模块;云计算资源模块23,用于为移动终端、图像处理模块以及云数据资源模块提供计算能力支撑。
可选地,云数据资源模块,可以根据用户指令,检索出用户所需的增强现实资源,并将检索结果发送给图像处理模块,由图像处理模块进行后续处理。
可选地,云计算资源模块,具备可扩展的移动计算能力,为增强现实图像处理平台和移动智能终端设备提供按需的计算能力支撑,还可以通过IT基础设施资源的虚拟化和全局资源云调度,将软硬件计算资源进行统一管理和调度,按主题针对增强现实运营需求进行模块化配置,为不同规模和类型的增强现实运营商提供可定制、易扩展的基础设施层和平台层增强现实应用运营服务。
作为一种可选地实施例,云数据资源模块可以包括:用户数据中心,用于存储移动终端的用户信息;应用中心,用于存储应用的信息;网络资源中心,用于存储网络资源信息。
在上述实施例中,云数据资源模块中包括用户数据中心、应用中心、以及网络资源中心。其中,用户数据中心,可以存储用户偏好的用于增强现实合成的图片、视频、文字等原始素材源;应用中心,可以存储用户对于偏好应用的设置信息;网络资源中心,可以存储符合格式要求的公共素材资源,使增强现实系统可以使用该公共素材资源进行增强现实处理。
采用本发明上述实施例,增强现实系统可以使用用户数据中心、第三方应用中心和互联网资源,对相关图像视频信息进行模拟仿真处理,以达到可虚拟化应用的需求。
图3是根据本发明实施例的一种可选的AR智能云数据中心功能模块的示意图,如图3所示,云数据中心可以包括:基础设施层31,用于提供计算资源服务;数据资源层33,用于提供虚拟的图像素材以及虚拟现实模块化应用;应用支撑层35,包括以下组件中的至少之一:语音识别组件、传感融合组件、三维建模组件、场景融合组件、机器学习组件、交互操作组件、实时跟踪组件、实时计算组件。
可选地,基础设施层,用于对外提供基础计算资源服务,通过虚拟化技术将服务器、存储、网络等资源进行虚拟化,按需提供给请求的普通智能终端设备、图像合成系统和AR运营商,满足增强现实实时计算的需要。
可选地,数据资源层可以包括基础数据资源池和模块化的应用池,其中,基础数据资源池可以为用户提供可供虚拟的图像素材,应用池可以为用户和运营商提供已合成的虚拟现实模块化应用。
可选地,数据资源层可以包括用户个人数据中心、公共数据中心、第三方运营商数据中心,以及互联网其他数据素材源。
可选地,应用支撑层,用于支撑实现互动式增强现实应用全程的功能组建,可以包括但不局限于语音识别组件、机器学习组件、交互操作组件、实时跟踪组件、实时计算组件、三维建模组件、传感融合组件、场景融合组件。
根据本发明实施例,提供了一种增强现实系统中的信息处理方法实施例,需要说明的是,在附图的流程图示出的步骤可以在诸如一组计算机可执行指令的计算机系统中执行,并且,虽然在流程图中示出了逻辑顺序,但是在某些情况下,可以以不同于此处的顺序执行所示出或描述的步骤。
图4是根据本发明实施例的一种增强现实系统中的信息处理方法的流程图,如图4所示,该方法包括如下步骤:
步骤S202,获取移动终端采集的真实场景信息;
步骤S204,获取云数据中心存储的虚拟场景信息;
步骤S206,将真实场景信息与虚拟场景信息进行集成,得到集成信息;
步骤S208,将集成信息发送给移动终端进行展示。
通过上述步骤,获取移动终端采集系统环境的真实场景信息,再通过根据采集到的真实场景信息以及云数据中心存储的虚拟场景信息进行集成,得到集成信息,并将集成后的信息发送给移动终端展示,从而根据本发明上述实施例提供的图形化、模块化增强现实运营组件和行业深度定制系统模板,便于多元化增强现实运营的快速个性化构建和及时动态调整,进而解决了现有技术中一个平台难以满足不同用户和运营商的多层次需求的技术问题。
作为一种可选地实施例,在获取移动终端采集的真实场景信息之前,该实施例还可以包括:接收移动终端用户发起的资源请求,其中,资源请求用于请求云数据中心中的虚拟场景信息;对移动终端用户的信息进行安全验证;在移动终端用户的信息通过安全验证的情况下,允许移动终端用户请求云数据中心存储的虚拟场景信息。
采用本发明上述实施例,在接收移动终端用户发起的资源请求后,需要对移动终端的用户信息进行安全验证,在通过验证的情况下,允许移动终端用户请求云数据中心存储的虚拟场景信息,从而可以确保增强现实系统的安全性,避免增强现实系统被非法盗用。
作为一种可选地实施例,在移动终端用户的信息通过安全验证的情况下,允许移动终端用户请求云数据中心存储的虚拟场景信息之后,该实施例还可以包括:在云数据中心中分配用户数据中心,其中,用户数据中心用于存储移动终端用户的用户数据,用户数据包括:用户信息、资源请求记录;根据资源请求记录向移动终端用户推送目标虚拟场景信息,其中,目标虚拟场景信息与资源请求记录相关。
采用本发明上述实施例,可以在移动终端用户的信息通过安全验证的情况下,在云数据中心为通过验证的移动终端用户分配相应的用户数据中心,使用户可以在该用户数据中心内存储用户信息以及用户的资源请求记录;增强现实系统可以根据用户数据内记录的用户信息以及用户的资源访问请求,为用户推送用相应的目标虚拟场景信息,从而可以是向用户推送的信息更加符合用户的需求,进而满足用户个性化定制增强现实系统的需求。
作为一种可选地实施例,将真实场景信息与虚拟场景信息进行集成,得到集成信息可以包括:按照预定条件将真实场景信息与虚拟场景信息进行集成,得到集成信息,其中,预定条件包括以下至少之一:预定业务类型、预定计费模式、预定应用发布需求、移动终端预定需求;输出标识码,其中,标识码用于指示获取集成信息。
采用本发明上述实施例,可以根据预定业务类型、预定计费模式、预定应用发布需求、移动终端预定需求等预定条件,将真实场景信息与虚拟场景信息进行集成,得到集成后的信息,从而,可以按照用户的需求,实现增强现实的效果;得到的集成信息中还可以包括输出标识码,使用户可以通过该标识码,获取集成信息。
可选地,输出标识码可以是二维码。
作为一种可选地实施例,在获取移动终端采集的真实场景信息的同时或者在获取移动终端采集的真实场景信息之前,该实施例还可以包括:接收移动终端所采集到的控制指令和/或获取移动终端所在的位置信息;获取云数据中心存储的虚拟场景信息包括:获取与控制指令和/或位置信息相对应的虚拟场景信息。
采用本发明上述实施例,通过获取移动终端采集到的控制指令以及移动终端的位置信息,从云数据中心获取包括获取与控制指令以及位置信息相对应的虚拟场景信息,从而使获取的虚拟场景信息更加准确。
本发明还提供了一种优选实施例,该优选实施例提供了一种基于云数据中心的个性化、智能化的移动增强现实(AR)平台设计方案。
本发明将云计算、人工智能技术融入到传统的移动增强现实平台设计中,通过构建汇聚丰富数据资源和实时计算能力的云数据中心,按关键词针对用户语音提出的增强现实需求进行指令识别、智能检索、应用生成、场景匹配,为普通用户提供按需获取的多终端支持、交互式的、个性化、移动式、便捷式的增强现实服务,同时支持不同规模和类型的增强现实运营商利用平台提供可定制化的增强现实应用服务和商业推广服务。相对于传统的移动增强现实平台,本方案可实现:
1)利用云平台解决移动终端设备处理能力瓶颈,支持更加复杂的增强现实应用。2)利用智能处理技术,支持语音、动作等输入选择,变用户被动观看为主动交互式选择;3)基于用户访问行为大数据分析,构建用户云数据中心,支撑用户个性化增强现实应用;4)突破头戴式显示器的物理局限,支持AR眼镜、智能手机、平板电脑、智能手表等智能设备方便快捷接入平台,访问不同层级的增强现实应用,实现多终端的支持;5)利用公共云平台弹性可扩展计算资源,降低自主建设平台的运营成本。提供图形化、模块化增强现实运营组件和行业深度定制系统模版,便于多元化增强现实运营的快速个性化构建和及时动态调整。
本发明的技术方案如下:
一、平台逻辑功能构成
如图2所示,包括:移动智能终端模块、增强现实图像处理模块、智能云数据资源模块、云计算资源模块。
本发明提出的平台包括以下组件:
1)移动智能终端模块。实现真实世界信息的采集、用户位置的定位、用户交互指令的输入和合成后信息的展示。随着智能终端设备能力的不断提升,可逐步包括传统增强现实头戴式显示器、跟踪系统、移动计算等相关功能。
2)增强现实图像处理模块。实现对用户自然语言信息的识别,指令的发出,对移动终端设备采集的真实世界信息进行模拟仿真处理,根据用户指令调用智能云数据中心提供的虚拟信息进行集成,两种信息相互补充、叠加,合成后的信息发送到移动智能终端设备进行演示。
3)智能云数据资源模块。根据用户指令,搜索数据中心中用户所需的增强现实资源提供给图像处理平台。数据中心包括用户数据中心、第三方应用中心和互联网资源,并可对相关图像视频信息进行模拟仿真处理,以达到可虚拟化应用的需求。
4)智能云计算资源模块。具备可扩展的移动计算能力,为增强现实图像处理平台和移动智能终端设备提供按需的计算能力支撑。同时,通过IT基础设施资源的虚拟化和全局资源云调度,将软硬件计算资源进行统一管理和调度,按主题针对增强现实运营需求进行模块化配置,为不同规模和类型的增强现实运营商提供可定制、易扩展的基础设施层和平台层增强现实应用运营服务。
其中,智能云数据资源模块和云计算资源模块共同构成了智能云数据中心。
二、平台业务逻辑和流程
图5是根据本发明实施例的一种可选的基于云数据中心的增强现实平台逻辑架构图,如图5所示,平台服务对象包括普通用户和增强现实运营商,下面详细介绍业务流程和相关技术实现。
(一)普通用户业务流程
1.用户注册。用户向智能云数据中心注册,并将注册的用户名与增强现实终端设备进行绑定(单个用户可绑定多个终端设备)。平台对不同认证等级和会员等级的用户赋予不同的应用权限,实现实名认证或拥有数字证书的用户可使用所有免费资源权限,付费用户可使用付费资源权限。
2.用户个人数据中心。用户注册后,智能云数据中心给用户分配一个用户独有的个人数据中心,可供用户存储用于增强现实合成的图片、视频、文字等原始素材源,同时用户可对应用偏好进行设置。用户素材源可设为私有和公共,设为公共的部分需符合进行增强现实技术处理的格式等要求,并共享到公共数据中心。
3.真实世界信息输入。用户利用增强现实眼镜、智能手机、手表等设备中嵌入的摄像机和定位跟踪器(简单应用可通过app直接调用智能终端自带的相关功能实现,复杂应用需配置专用硬件设备)实时采集真实世界的声音、图像、视频、位置等信息,输入到增强现实图像处理系统。
4.用户指令输入。利用增强现实眼镜、智能手机、手表等设备中嵌入的互动设备,接受用户的语言或动作指令,经自然语言处理后转化成计算机可识别的基于关键字的指令集。
5.图像处理。增强现实图像处理系统对真实世界信息进行模拟仿真处理,为与虚拟现实图像的叠加做好准备,同时将处理后的真实世界图像传给云数据中心调用。
6.云数据中心资源搜索。根据用户的关键字(如XX人)指令,在云数据中心中进行用户设定的关键字素材搜索,按优先级分别搜素用户数据中心、公共数据中心、第三方应用中心、互联网素材,自动去除不能进行增强现实处理的数据类型,合并相同的素材。
7.虚拟图像生成。云数据中心根据用户指令(如跳舞),基于用户选到的素材和真实世界图像,对图像进行立体化、动态化虚拟生成。
8.真实图像和虚拟图像合成。增强现实图像处理系统对计算机虚拟图像和真实世界图像进行场景图像合成,两种信息相互补充叠加。
9.图像显示。合成后的图像通过无线网络传输到用户的智能终端设备,用户通过智能终端设备即可看到合成后的增强现实图像。
10.实时交互及优化迭代。基于云数据中心强大的实时计算能力,对用户的指令需求快速响应,实时生成图像后传输到用户界面,并根据用户反馈不断优化迭代,通过机器学习逐步调整后满足用户的需求。
11.基于用户数据的个性化。用户数据中心记录用户每一次访问行为,对相关数据进行分析,形成用户偏好,实时为用户推荐。用户自定义使用偏好,并根据实际使用情况不断矫正优化。
(二)AR服务提供商业务流程
1.请求发送。AR服务提供商根据平台提供的运营模版,向平台发送资源请求。请求可包括基础的计算资源、网络带宽资源等,也可包括某个平台模版化的应用(如出现商家关键字后可在商家真实图像基础上叠加跳舞者、节日装饰等)
2.任务分配。平台控制中心对运营商进行认证、计费,并将平台的资源根据运营商的请求进行分配,将指令下达给云数据资源模块和云计算资源模块;
3.专属控制中心。平台控制中心分配一个子控制中心给AR服务提供商,负责处理该AR服务提供商用户的请求,AR服务提供商可自行管理此子控制中心以动态满足运营需求;
4.计算资源定制。云计算资源模块为AR服务提供商定制运营所需的网络基础设施资源(带宽、服务器、存储等);提供实时计算能力预估和功能配置。
5.数据资源定制。云数据资源模块为AR服务提供商定制所需的基础增强现实素材(图像、视频、文字等);
6.虚拟图像定制。基于AR服务提供商选定的素材和应用场景,云数据中心根据可实现的动作组合,对选定素材进行立体化、动态化,合成虚拟图像。
7.运营模式定制。AR服务提供商定制所需运营的个性化业务类型(行业需求、用户终端需求、计费模式需求、发布需求等)。平台通过模块化行业方案定制生成符合AR服务提供商需求的虚拟视频管理服务平台。AR服务提供商可以直接利用该平台进行虚拟现实应用运营,也可将平台API轻松接入原有运营平台。
8.应用发布。AR服务提供商向用户公布服务app或二维码,并将其与平台分配的地址进行关联。
9.动态优化。AR服务提供商根据运营需要实时调整所需发布的内容和所需要的计算资源,云平台通过智能调度满足用AR服务提供商需求。云平台不断汇聚该AR服务提供商的运营数据和用户数据,通过大数据挖掘,实现平台资源配置的动态调整和用户体验的不断提升,实现云端架构不断迭代优化。
三、AR智能云数据中心功能设计
图5是根据本发明实施例的一种可选的AR智能云数据中心功能模块的示意图,如图5所示,AR智能云数据中心主要包括三层:基础设施层,数据资源层,应用支撑层。
(一)基础设施层
基础设施层对外提供基础计算资源服务,通过虚拟化技术将服务器、存储、网络等资源进行虚拟化,按需提供给请求的普通智能终端设备、图像合成系统和AR运营商,满足增强现实实时计算的需要。
(二)数据资源层
由基础数据资源池和模块化的应用池组成。其中基础数据资源池为用户提供可供虚拟的图像素材,应用池为用户和运营商提供已合成的虚拟现实模块化应用。数据资源层包括用户个人数据中心、公共数据中心、第三方运营商数据中心,以及互联网其他数据素材源。
(三)应用支撑层
支撑实现互动式增强现实应用全程的功能组建,包括但不局限于语音识别组件、机器学习组件、交互操作组件、实时跟踪组件、实时计算组件、三维建模组件、传感融合组件、场景融合组件。各组件采用现有成熟技术实现。
为了实现上述目的,根据本发明的另一方面,本发明实施例还提供了一种存储介质,所述存储介质包括存储的程序,其中,在所述程序运行时控制所述存储介质所在设备执行上述所述的增强现实系统中的信息处理方法。
为了实现上述目的,根据本发明的另一方面,本发明实施例还提供了一种处理器,所述处理器用于运行程序,其中,所述程序运行时执行上述所述的增强现实系统中的信息处理方法。
上述本发明实施例序号仅仅为了描述,不代表实施例的优劣。
在本发明的上述实施例中,对各个实施例的描述都各有侧重,某个实施例中没有详述的部分,可以参见其他实施例的相关描述。
在本申请所提供的几个实施例中,应该理解到,所揭露的技术内容,可通过其它的方式实现。其中,以上所描述的装置实施例仅仅是示意性的,例如所述单元的划分,可以为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,单元或模块的间接耦合或通信连接,可以是电性或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本发明各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可为个人计算机、服务器或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、移动硬盘、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述仅是本发明的优选实施方式,应当指出,对于本技术领域的普通技术人员来说,在不脱离本发明原理的前提下,还可以做出若干改进和润饰,这些改进和润饰也应视为本发明的保护范围。

Claims (10)

1.一种增强现实系统,其特征在于,包括:
移动终端,用于采集真实场景信息;
云数据中心,用于存储虚拟场景信息;以及
图像处理模块,用于获取所述真实场景信息和所述虚拟场景信息,将所述真实场景信息和所述虚拟场景信息进行集成,得到集成信息,并将所述集成信息发送给所述移动终端进行展示。
2.根据权利要求1所述的增强现实系统,其特征在于,所述云数据中心包括:
云数据资源模块,用于查找与所述移动终端所采集的所述真实场景信息相对应的所述虚拟场景信息,并将所述虚拟场景信息发送给所述图像处理模块;
云计算资源模块,用于为所述移动终端、所述图像处理模块以及所述云数据资源模块提供计算能力支撑。
3.根据权利要求2所述的增强现实系统,其特征在于,所述云数据资源模块包括:
用户数据中心,用于存储所述移动终端的用户信息;
应用中心,用于存储应用的信息;
网络资源中心,用于存储网络资源信息。
4.根据权利要求1所述的增强现实系统,其特征在于,所述云数据中心包括:
基础设施层,用于提供计算资源服务;
数据资源层,用于提供虚拟的图像素材以及虚拟现实模块化应用;
应用支撑层,包括以下组件中的至少之一:语音识别组件、传感融合组件、三维建模组件、场景融合组件、机器学习组件、交互操作组件、实时跟踪组件、实时计算组件。
5.一种增强现实系统中的信息处理方法,其特征在于,包括:
获取移动终端采集的真实场景信息;
获取云数据中心存储的虚拟场景信息;
将所述真实场景信息与所述虚拟场景信息进行集成,得到集成信息;
将所述集成信息发送给所述移动终端进行展示。
6.根据权利要求5所述的方法,其特征在于,在获取移动终端采集的真实场景信息之前,所述方法还包括:
接收所述移动终端用户发起的资源请求,其中,所述资源请求用于请求所述云数据中心中的所述虚拟场景信息;
对所述移动终端用户的信息进行安全验证;
在所述移动终端用户的信息通过安全验证的情况下,允许所述移动终端用户请求所述云数据中心存储的所述虚拟场景信息。
7.根据权利要求6所述的方法,其特征在于,在所述移动终端用户的信息通过安全验证的情况下,允许所述移动终端用户请求所述云数据中心存储的所述虚拟场景信息之后,所述方法还包括:
在所述云数据中心中分配用户数据中心,其中,所述用户数据中心用于存储所述移动终端用户的用户数据,所述用户数据包括:用户信息、资源请求记录;
根据所述资源请求记录向所述移动终端用户推送目标虚拟场景信息,其中,所述目标虚拟场景信息与所述资源请求记录相关。
8.根据权利要求5所述的方法,其特征在于,将所述真实场景信息与所述虚拟场景信息进行集成,得到集成信息包括:
按照预定条件将所述真实场景信息与所述虚拟场景信息进行集成,得到集成信息,其中,所述预定条件包括以下至少之一:预定业务类型、预定计费模式、预定应用发布需求、所述移动终端预定需求;
输出标识码,其中,所述标识码用于指示获取所述集成信息。
9.一种存储介质,其特征在于,所述存储介质包括存储的程序,其中,在所述程序运行时控制所述存储介质所在设备执行权利要求5至8中任意一项所述的增强现实系统中的信息处理方法。
10.一种处理器,其特征在于,所述处理器用于运行程序,其中,所述程序运行时执行权利要求5至8中任意一项所述的增强现实系统中的信息处理方法。
CN201710792023.4A 2017-09-05 2017-09-05 增强现实系统和其中的信息处理方法、存储介质、处理器 Pending CN107678538A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201710792023.4A CN107678538A (zh) 2017-09-05 2017-09-05 增强现实系统和其中的信息处理方法、存储介质、处理器

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710792023.4A CN107678538A (zh) 2017-09-05 2017-09-05 增强现实系统和其中的信息处理方法、存储介质、处理器

Publications (1)

Publication Number Publication Date
CN107678538A true CN107678538A (zh) 2018-02-09

Family

ID=61135762

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710792023.4A Pending CN107678538A (zh) 2017-09-05 2017-09-05 增强现实系统和其中的信息处理方法、存储介质、处理器

Country Status (1)

Country Link
CN (1) CN107678538A (zh)

Cited By (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108550190A (zh) * 2018-04-19 2018-09-18 腾讯科技(深圳)有限公司 增强现实数据处理方法、装置、计算机设备和存储介质
CN108874153A (zh) * 2018-08-23 2018-11-23 上海机器人产业技术研究院有限公司 一种基于ar眼镜云机器人全息评审系统及方法
CN108961424A (zh) * 2018-07-04 2018-12-07 百度在线网络技术(北京)有限公司 虚拟信息处理方法、设备及存储介质
CN109064416A (zh) * 2018-07-10 2018-12-21 Oppo广东移动通信有限公司 图像处理方法、装置、存储介质及电子设备
CN109978945A (zh) * 2019-02-26 2019-07-05 浙江舜宇光学有限公司 一种增强现实的信息处理方法和装置
CN110288717A (zh) * 2019-06-19 2019-09-27 塔普翊海(上海)智能科技有限公司 一种混合现实应用处理系统
CN110766802A (zh) * 2018-07-24 2020-02-07 中国移动通信集团河南有限公司 有线宽带中网络设备故障处理方法及装置
CN111193841A (zh) * 2018-11-14 2020-05-22 深圳晨芯时代科技有限公司 一种增强现实系统
CN111385627A (zh) * 2018-12-29 2020-07-07 中兴通讯股份有限公司 一种增强现实设备及其控制方法、计算机可读存储介质
CN111752511A (zh) * 2019-03-27 2020-10-09 优奈柯恩(北京)科技有限公司 Ar眼镜远程交互方法、装置和计算机可读介质
CN112446799A (zh) * 2019-09-03 2021-03-05 全球能源互联网研究院有限公司 一种基于ar设备虚拟交互的电网调度方法和系统
CN113409474A (zh) * 2021-07-09 2021-09-17 上海哔哩哔哩科技有限公司 基于增强现实的对象展示方法及装置
CN113971047A (zh) * 2021-10-22 2022-01-25 中国联合网络通信集团有限公司 分级平行系统的构建方法、应用方法、计算机设备及介质
CN114265330A (zh) * 2021-12-17 2022-04-01 中国人民解放军空军特色医学中心 一种基于模拟飞行的增强现实显示效果评估系统及方法
CN115439195A (zh) * 2022-11-07 2022-12-06 杭州脸脸会网络技术有限公司 虚拟账户创建方法、系统、服务器及计算机可读存储介质
CN115686224A (zh) * 2023-01-03 2023-02-03 杭州脸脸会网络技术有限公司 虚拟现实交互方法、系统、服务器及存储介质
CN116071134A (zh) * 2023-03-07 2023-05-05 网思科技股份有限公司 一种智能用户体验显示方法、系统和存储介质
CN117235395A (zh) * 2023-11-10 2023-12-15 山东捷瑞数字科技股份有限公司 一种基于云平台的展品信息展示方法、装置、设备及介质

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103164518A (zh) * 2013-03-06 2013-06-19 杭州九树网络科技有限公司 移动终端增强现实应用系统及方法
CN105635716A (zh) * 2015-02-04 2016-06-01 苏州梦想人软件科技有限公司 基于增强现实的聚合媒体方法
CN105809739A (zh) * 2016-02-14 2016-07-27 潘志君 基于云技术的景区实时全息虚拟现实系统
CN106127844A (zh) * 2016-06-22 2016-11-16 民政部零研究所 移动终端用户实时交互访问远程3d场景的渲染交互方法
CN106302132A (zh) * 2016-09-14 2017-01-04 华南理工大学 一种基于增强现实的3d即时通讯系统与方法

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103164518A (zh) * 2013-03-06 2013-06-19 杭州九树网络科技有限公司 移动终端增强现实应用系统及方法
CN105635716A (zh) * 2015-02-04 2016-06-01 苏州梦想人软件科技有限公司 基于增强现实的聚合媒体方法
CN105809739A (zh) * 2016-02-14 2016-07-27 潘志君 基于云技术的景区实时全息虚拟现实系统
CN106127844A (zh) * 2016-06-22 2016-11-16 民政部零研究所 移动终端用户实时交互访问远程3d场景的渲染交互方法
CN106302132A (zh) * 2016-09-14 2017-01-04 华南理工大学 一种基于增强现实的3d即时通讯系统与方法

Cited By (26)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108550190A (zh) * 2018-04-19 2018-09-18 腾讯科技(深圳)有限公司 增强现实数据处理方法、装置、计算机设备和存储介质
CN108961424B (zh) * 2018-07-04 2023-04-18 百度在线网络技术(北京)有限公司 虚拟信息处理方法、设备及存储介质
CN108961424A (zh) * 2018-07-04 2018-12-07 百度在线网络技术(北京)有限公司 虚拟信息处理方法、设备及存储介质
CN109064416A (zh) * 2018-07-10 2018-12-21 Oppo广东移动通信有限公司 图像处理方法、装置、存储介质及电子设备
CN110766802A (zh) * 2018-07-24 2020-02-07 中国移动通信集团河南有限公司 有线宽带中网络设备故障处理方法及装置
CN110766802B (zh) * 2018-07-24 2023-08-01 中国移动通信集团河南有限公司 有线宽带中网络设备故障处理方法及装置
CN108874153A (zh) * 2018-08-23 2018-11-23 上海机器人产业技术研究院有限公司 一种基于ar眼镜云机器人全息评审系统及方法
CN111193841A (zh) * 2018-11-14 2020-05-22 深圳晨芯时代科技有限公司 一种增强现实系统
CN111385627A (zh) * 2018-12-29 2020-07-07 中兴通讯股份有限公司 一种增强现实设备及其控制方法、计算机可读存储介质
CN109978945A (zh) * 2019-02-26 2019-07-05 浙江舜宇光学有限公司 一种增强现实的信息处理方法和装置
CN109978945B (zh) * 2019-02-26 2021-08-31 浙江舜宇光学有限公司 一种增强现实的信息处理方法和装置
CN111752511A (zh) * 2019-03-27 2020-10-09 优奈柯恩(北京)科技有限公司 Ar眼镜远程交互方法、装置和计算机可读介质
CN110288717A (zh) * 2019-06-19 2019-09-27 塔普翊海(上海)智能科技有限公司 一种混合现实应用处理系统
CN112446799A (zh) * 2019-09-03 2021-03-05 全球能源互联网研究院有限公司 一种基于ar设备虚拟交互的电网调度方法和系统
CN112446799B (zh) * 2019-09-03 2024-03-19 全球能源互联网研究院有限公司 一种基于ar设备虚拟交互的电网调度方法和系统
CN113409474A (zh) * 2021-07-09 2021-09-17 上海哔哩哔哩科技有限公司 基于增强现实的对象展示方法及装置
CN113409474B (zh) * 2021-07-09 2023-08-08 上海哔哩哔哩科技有限公司 基于增强现实的对象展示方法及装置
CN113971047B (zh) * 2021-10-22 2023-06-23 中国联合网络通信集团有限公司 分级平行系统的构建方法、应用方法、计算机设备及介质
CN113971047A (zh) * 2021-10-22 2022-01-25 中国联合网络通信集团有限公司 分级平行系统的构建方法、应用方法、计算机设备及介质
CN114265330A (zh) * 2021-12-17 2022-04-01 中国人民解放军空军特色医学中心 一种基于模拟飞行的增强现实显示效果评估系统及方法
CN115439195A (zh) * 2022-11-07 2022-12-06 杭州脸脸会网络技术有限公司 虚拟账户创建方法、系统、服务器及计算机可读存储介质
CN115686224A (zh) * 2023-01-03 2023-02-03 杭州脸脸会网络技术有限公司 虚拟现实交互方法、系统、服务器及存储介质
CN116071134A (zh) * 2023-03-07 2023-05-05 网思科技股份有限公司 一种智能用户体验显示方法、系统和存储介质
CN116071134B (zh) * 2023-03-07 2023-10-13 网思科技股份有限公司 一种智能用户体验显示方法、系统和存储介质
CN117235395A (zh) * 2023-11-10 2023-12-15 山东捷瑞数字科技股份有限公司 一种基于云平台的展品信息展示方法、装置、设备及介质
CN117235395B (zh) * 2023-11-10 2024-03-08 山东捷瑞数字科技股份有限公司 一种基于云平台的展品信息展示方法、装置、设备及介质

Similar Documents

Publication Publication Date Title
CN107678538A (zh) 增强现实系统和其中的信息处理方法、存储介质、处理器
Xu et al. Unleashing the power of edge-cloud generative ai in mobile networks: A survey of aigc services
CN105338117B (zh) 用于生成ar应用和呈现ar实例的方法、设备与系统
US10950020B2 (en) Real-time AR content management and intelligent data analysis system
Estrin et al. Participatory sensing: applications and architecture [internet predictions]
CN107632824B (zh) 一种增强现实模块的生成方法、生成装置以及生成系统
CN103890749B (zh) 协作式移动分析
CN107623714A (zh) 数据共享方法、装置及计算机可读存储介质
CN108027664A (zh) 统一的虚拟现实平台
CN105069219A (zh) 一种基于云设计的家居设计系统
Parthasarathy Globalization and agglomeration in newly industrializing countries: the state and the information technology industry in Bangalore, India
CN107547545A (zh) 视频云平台系统、视频请求处理方法及存储介质、处理器
CN102508848B (zh) 一种人机智能交互方法及系统
CN106527695B (zh) 一种信息输出方法及装置
Ali et al. Metaverse communications, networking, security, and applications: Research issues, state-of-the-art, and future directions
CN104205157A (zh) 合作媒体收集系统和方法
CN102855209B (zh) 凭借客户端计算装置二维或三维表示的虚拟空间单实例
WO2021178630A1 (en) Content and context morphing avatars
CN110162667A (zh) 视频生成方法、装置及存储介质
De Kare-Silver e-shock 2020: how the digital technology revolution is changing business and all our lives
Meng [Retracted] Application of VR Technology in Brand IP Image Design
CN103607445A (zh) 一种基于物联网的数字媒体创作系统和方法
US20210248789A1 (en) Intelligent Real-time Multiple-User Augmented Reality Content Management and Data Analytics System
CN108496149A (zh) 主题数据
CN103473303A (zh) 基于模型数据库实现三维网站生成控制的系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
TA01 Transfer of patent application right
TA01 Transfer of patent application right

Effective date of registration: 20200617

Address after: No. 263, Fudong street, Yanhu District, Yuncheng City, Shanxi Province

Applicant after: Wei Xiaogang

Address before: 100094 room 2173, room 2C, incubator, Zhongguancun Software Park, Haidian District, Beijing

Applicant before: FORCE INNOVATION TECHNOLOGY Co.

RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20180209