CN116185203A - 旅游场景交互系统 - Google Patents

旅游场景交互系统 Download PDF

Info

Publication number
CN116185203A
CN116185203A CN202310300863.XA CN202310300863A CN116185203A CN 116185203 A CN116185203 A CN 116185203A CN 202310300863 A CN202310300863 A CN 202310300863A CN 116185203 A CN116185203 A CN 116185203A
Authority
CN
China
Prior art keywords
virtual
scene
information
perception
real
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202310300863.XA
Other languages
English (en)
Inventor
请求不公布姓名
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Moore Threads Technology Co Ltd
Original Assignee
Moore Threads Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Moore Threads Technology Co Ltd filed Critical Moore Threads Technology Co Ltd
Priority to CN202310300863.XA priority Critical patent/CN116185203A/zh
Publication of CN116185203A publication Critical patent/CN116185203A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00Systems or methods specially adapted for specific business sectors, e.g. utilities or tourism
    • G06Q50/10Services
    • G06Q50/14Travel agencies
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T17/00Three dimensional [3D] modelling, e.g. data description of 3D objects
    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02DCLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D10/00Energy efficient computing, e.g. low power processors, power management or thermal management

Abstract

本公开涉及一种旅游场景交互系统,包括:算力处理中心、交互系统以及物理世界感知系统;物理世界感知系统用于:感知现实场景中的环境信息,获得感知信息;算力处理中心用于:根据预设的虚拟场景模型构建虚拟场景,并根据物理世界感知系统获取的感知信息,构建虚拟场景中的交互场景;交互系统用于展示交互场景。本公开实施例的旅游场景交互系统,可以构建虚拟三维立体的旅游环境,更高效更真实地模拟现实世界中的旅游景观。

Description

旅游场景交互系统
技术领域
本公开涉及计算机技术领域,尤其涉及一种旅游场景交互系统。
背景技术
随着大数据、网络技术、信息技术的不断发展,数字孪生(Digital Twin)的应用也从工业领域拓展到各行各业。数字孪生是充分利用物理模型、传感器更新、运行历史等数据,集成多学科、多物理量、多尺度、多概率的仿真过程,在虚拟空间中完成映射,从而反映相对应的实体对象的全生命周期过程。
当前还没有旅游业孪生世界实时体验终端,以打破空间的物理限制,使用户足不出户,就可以体验到亲临现场的旅游感觉。
发明内容
本公开提出了一种旅游场景交互系统的技术方案。
根据本公开的一方面,提供了一种旅游场景交互系统,包括:算力处理中心、交互系统以及物理世界感知系统;所述物理世界感知系统用于:感知现实场景中的环境信息,获得感知信息;所述算力处理中心用于:根据预设的虚拟场景模型,构建虚拟场景;根据所述物理世界感知系统获取的所述感知信息,构建所述虚拟场景中的交互场景;所述交互系统用于展示所述交互场景。
在一种可能的实现方式中,所述交互系统包括穿戴组件、虚拟现实VR组件、增强现实AR组件、混合现实MR组件、扩展现实XR组件、裸眼3D组件、全息图组件、脑机接口组件、全息组件中的至少一种;所述展示所述交互场景包括:通过所述穿戴组件、虚拟现实VR组件、增强现实AR组件、混合现实MR组件、扩展现实XR组件、裸眼3D组件、全息图组件、脑机接口组件、全息组件中的至少一种,展示所述交互场景的五感信息,其中,所述五感信息包括视觉信息、触觉信息、听觉信息、嗅觉信息和味觉信息中的至少一种。
在一种可能的实现方式中,所述展示所述交互场景,还包括:在预设的现实区域中,设置虚拟阻隔设施,所述虚拟阻隔设施用于阻隔所述五感信息。
在一种可能的实现方式中,所述算力处理中心包括虚拟世界引擎,其中,所述虚拟世界引擎包括材料模拟引擎、力学模拟引擎、运动模拟引擎、流体模拟引擎、规律模拟引擎、光线模拟引擎、热力模拟引擎、声音模拟引擎、电力模拟引擎中的至少一种;所述构建虚拟场景包括:通过所述虚拟世界引擎包括的材料模拟引擎、力学模拟引擎、运动模拟引擎、流体模拟引擎、规律模拟引擎、光线模拟引擎、热力模拟引擎、声音模拟引擎、电力模拟引擎中的至少一种,构建用于模拟现实场景的虚拟场景;其中,所述材料模拟引擎,用于使所述虚拟场景中的虚拟材料的属性信息与现实场景中的现实材料的属性信息一致;所述力学模拟引擎,用于使所述虚拟场景中的虚拟物体的力学表现与现实场景中的现实物体的力学表现一致;所述运动模拟引擎,用于使所述虚拟场景中的虚拟物体的运动表现与现实场景中的现实物体的运动表现一致;所述流体模拟引擎,用于使所述虚拟场景中的虚拟流体的流动规律与现实场景中的现实流体的流动规律一致;所述规律模拟引擎,用于使所述虚拟场景中的物理规律与现实场景中的物理规律一致;所述光线模拟引擎,用于使虚拟场景中光线传播规律与现实场景中的光线传播规律一致;所述热力模拟引擎,用于使虚拟场景中的热量传导规律与现实场景中的热量传导规律一致;所述声音模拟引擎,用于使虚拟场景中的声音传播规律与现实场景中的声音传播规律一致;所述电力模拟引擎,用于使虚拟场景中的电力运行规律与现实场景中的电力运行规律一致。
在一种可能的实现方式中,所述算力处理中心包括世界建立模块,所述世界建立模块用于对现实世界进行数字化映射,构建与现实世界对应的静态数字孪生世界;其中,所述静态数字孪生世界包括至少一种虚拟场景,所述虚拟场景用于模拟所述现实世界中的现实场景。
在一种可能的实现方式中,所述世界建立模块还用于:根据与所述虚拟场景对应的现实场景,获得所述虚拟场景模型的场景信息,所述场景信息用于表征虚拟场景的特征信息;根据所述虚拟场景模型的所述场景信息,获取所述虚拟场景模型的模型参数;根据所述虚拟场景模型和所述模型参数,构建所述虚拟场景。
在一种可能的实现方式中,所述世界建立模块包括感知数据库模块、模型工厂模块、模型审批模块中的至少一种,所述感知数据库模块用于:存储所述现实场景的感知数据,所述感知数据包括所述现实场景中多个物体的物理模型、动态视频、环境信息、五感信息、生物信息中的至少一种;根据所述感知数据,提供用于构建虚拟场景的数据库;所述模型工厂模块用于:提供构建虚拟场景的虚拟场景模型库,所述虚拟场景模型库包括系统预设的虚拟场景模型、历史构建的虚拟场景模型;以及对所述虚拟场景模型库中的虚拟场景模型进行增加、删除、修改及查询操作;所述模型审批模块用于:对新建立的所述虚拟场景模型进行审核,获得审核结果;其中,所述审核结果为审核通过的虚拟场景模型用于构建所述虚拟场景。
在一种可能的实现方式中,所述物理世界感知系统包括空间感知模块,生物感知模块、三维扫描成像模块中的至少一种,所述空间感知模块用于感知场景目标在现实场景中的空间位置信息、空间运动轨迹信息中的至少一种,所述算力处理中心用于:根据所述物理世界感知系统的空间感知模块感知到的所述场景目标的空间位置信息、空间运动轨迹信息中的至少一种,确定所述场景目标对应的虚拟目标在所述虚拟场景中的第一场景信息,所述第一场景信息包括位置信息、速度信息、视角信息中的至少一种;根据所述第一场景信息,确定所述虚拟目标在所述虚拟场景中的感知信息;根据所述感知信息,构建所述交互场景;所述物理世界感知系统包括生物感知模块,所述生物感知模块用于感知交互场景的五感信息和/或生物信息,所述算力处理中心用于:获取所述物理世界感知系统的生物感知模块感知到的所述交互场景的五感信息和/或生物信息,其中,所述五感信息包括视觉信息、听觉信息、嗅觉信息、触觉信息和味觉信息中的至少一种;述交互系统用于展示所述交互场景的五感信息和/或生物信息;所述物理世界感知系统包括三维扫描成像模块,所述三维扫描成像模块用于获取现实场景的三维扫描数据,所述三维扫描数据用于承载三维结构信息,所述算力处理中心用于:根据所述三维扫描成像模块感知到的所述现实场景的三维扫描数据,构建与所述现实场景对应的虚拟场景。
在一种可能的实现方式中,所述物理世界感知系统包括感知子模块,所述感知子模块包括在所述现实场景中的游客所携带的感知子模块,和/或,在所述现实场景中的预设位置处的感知子模块,所述预设位置包括所述现实场景的空中、陆地、水中中的至少一种的预设位置;所述算力处理中心进一步用于:通过所述游客所携带的感知子模块,获得所述游客的感知信息,所述感知信息包括位置信息、三维空间结构信息、五感信息、生物信息中的至少一种;根据所述游客的实时或非实时的感知信息,构建所述交互场景;和/或,通过所述预设位置处的感知子模块,获得所述预设位置处的场景感知信息,所述场景感知信息包括三维空间结构信息、五感信息、生物信息中的至少一种;根据所述预设位置处的场景感知信息,构建所述交互场景。
在一种可能的实现方式中,所述物理世界感知系统包括通信组件,用于将位于所述现实场景中的物理世界感知系统获取的感知信息发送至所述算力处理中心;所述物理世界感知系统还包括感知平台,所述感知平台用于承载至少一个传感器,所述至少一个传感器用于采集位置信息、三维空间结构信息、五感信息、生物信息中的至少一种。
在一种可能的实现方式中,所述算力处理中心还包括漫游模块,所述漫游模块用于:获取现实场景中的至少一位游客的感知信息构建的交互场景,在所述至少一位游客的感知信息构建的交互场景中漫游;和/或,获取多个预设位置处的感知信息构建的交互场景,在所述多个预设位置处的感知信息构建的交互场景之间漫游;和/或,在所述现实场景中的预设位置处的所述感知子模块获取的交互场景,与所述现实场景中的游客所携带的所述感知子模块获取的交互场景之间漫游,其中,所述交互场景包括设置在现实场景中的预设位置处的物理世界感知系统的感知子模块获取的场景信息,以及在所述现实场景中的游客所携带的物理世界感知系统的感知子模块获取的场景信息;和/或,在根据所述交互系统的使用者对应的虚拟目标在所述虚拟场景中的感知信息构建的交互场景、设置在现实场景中的预设位置处的物理世界感知系统的感知子模块获取的交互场景、在所述现实场景中的游客所携带的物理世界感知系统的感知子模块获取的交互场景之间漫游。漫游模块可以用于实现以上功能中的任意一种,或者任意多种的组合。
在一种可能的实现方式中,所述交互场景包括历史场景,所述历史场景包括设置在现实场景中的预设位置处所述感知子模块在历史时刻所感知的历史场景信息,以及在所述现实场景中的游客所携带的所述感知子模块在历史时刻所感知到的历史场景信息;所述漫游模块进一步用于实现:在所述现实场景中的预设位置处的历史场景,与所述现实场景中的游客所携带的感知子模块感知过的历史场景之间漫游;和/或,在根据所述交互系统的使用者对应的虚拟目标在所述虚拟场景中的感知信息构建的交互场景、设置在现实场景中的预设位置处的历史场景、所述现实场景中的游客所携带的感知子模块感知过的历史场景之间漫游。
在一种可能的实现方式中,所述算力处理中心还包括客服模块,所述客服模块用于实现:对虚拟客服目标进行验证,在验证通过的情况下,允许所述虚拟客服目标与所述交互系统的使用者在虚拟场景中的虚拟目标进行交互;和/或,生成与现实场景中的客服空间中的客服人员对应的虚拟客服目标,为所述虚拟客服目标提供用于工作和\或休息的虚拟场景;和/或,在现实客服人员与虚拟客服目标的信息同步的情况下,响应于数字人游客在虚拟场景中对应的虚拟目标与所述虚拟客服目标的交互,使所述数字人游客与所述客服人员建立面对面的交互,所述数字人游客包括交互系统的使用者。客服模块可以用于实现以上功能中的任意一种,或者任意多种的组合。
在一种可能的实现方式中,所述现实场景包括游乐项目场景,所述物理世界感知系统包括设置在所述游乐项目场景内的物理世界感知系统,所述算力处理中心包括动态乐园模块,用于:获取所述物理世界感知系统检测到的所述游乐项目场景的实时现实世界信息,其中,所述实时现实世界信息包括所述游乐项目场景的交通状况信息、客流状况信息、营业信息、天气信息、环境信息中的至少一种;根据所述实时现实世界信息,获得所述虚拟场景。
在一种可能的实现方式中,,所述算力处理中心还包括全息广场模块,所述全息广场模块用于:在所述虚拟场景中添加虚拟显示设备矩阵,通过所述虚拟显示设备显示所述实时现实世界信息,以及与所述游乐项目场景对应的介绍信息、娱乐项目的演绎场景画面中的至少一种;和/或,获取所述虚拟显示设备矩阵处的五感信息,使得交互系统的使用者能够与所述虚拟显示设备矩阵进行交互,响应于交互系统的使用者在虚拟场景中对应的虚拟目标与所述虚拟显示设备矩阵的交互,在所述虚拟显示设备矩阵中展示交互画面;和/或,获取所述虚拟显示设备矩阵的通信接口,使得交互系统的使用者能够与所述虚拟显示设备矩阵进行交互,响应于交互系统的使用者在虚拟场景中对应的虚拟目标与所述虚拟显示设备矩阵的交互,交互系统的使用者在所述虚拟显示设备对应的虚拟场景中完成交互。全息广场模块可以用于实现以上功能中的任意一种,或者任意多种的组合。
在一种可能的实现方式中,所述物理世界感知系统包括在所述现实场景中的游客所携带的物理世界感知系统的感知子模块;所述算力处理中心还包括同步体验系统,用于:响应于交互系统的使用者在虚拟场景中对应的虚拟目标,与所述游客在所述虚拟场景中对应的虚拟目标之间的交互,通过所述交互系统向所述使用者展示交互信息;和/或,响应于交互系统的使用者在虚拟场景中对应的虚拟目标,与所述游客在所述虚拟场景中对应的虚拟目标之间的交互,通过所述感知子模块向所述游客展示交互信息;和/或,响应于多个交互系统的使用者在虚拟场景中对应的虚拟目标之间的交互,通过所述交互系统向所述使用者展示交互信息;和/或,响应于多个游客在所述虚拟场景中对应的虚拟目标之间的交互,通过所述感知子模块向所述游客展示交互信息;其中,所述交互信息包括五感信息、生物信息。同步体验系统可以用于实现以上功能中的任意一种,或者任意多种的组合。
在一种可能的实现方式中,所述算力处理中心还包括票务系统,所述票务系统用于:在数字人游客对应的虚拟目标进入游乐项目场景对应的虚拟场景的情况下,获取使用者的支付信息并生成虚拟凭证;对所述支付信息以及虚拟凭证进行验证;在对所述支付信息以及虚拟凭证验证通过的情况下,允许所述虚拟目标获取对应的虚拟服务;其中,所述票务系统还用于生成虚拟票务人员,所述虚拟票务人员用于对所述支付信息和所述虚拟凭证进行验证。
在一种可能的实现方式中,所述算力处理中心还包括虚拟事务系统,用于:在所述虚拟场景中生成虚拟事务办理机构,所述虚拟事务办理机构用于设置所述虚拟场景中的虚拟社会运行规则;和/或,根据所述虚拟社会运行规则,生成数字人游客对应的虚拟目标对所述虚拟场景中的虚拟事务的办理结果信息;和/或,生成与虚拟事务办理机构对应的虚拟事务办理数字人,所述虚拟事务办理数字人用于根据所述虚拟社会运行规则,对使用者对应的虚拟目标的需求信息进行响应,生成所述办理结果信息;和/或,在所述虚拟场景中生成虚拟纠纷处理机构,所述虚拟纠纷处理机构用于获取两个或多个所述交互系统的使用者对应的虚拟目标在虚拟场景中的纠纷信息,并根据所述纠纷信息和预设的虚拟社会运行规则,获得纠纷处理结果;和/或,在所述虚拟场景中生成虚拟治安机构,所述虚拟治安机构用于,对于违反预设的虚拟社会运行规则的所述交互系统的使用者对应的虚拟目标,生成处罚信息。虚拟事务系统可以用于实现以上功能中的任意一种,或者任意多种的组合。
在一种可能的实现方式中,所述算力处理中心还包括认证系统,用于:对所述交互系统的使用者在虚拟场景中对应的虚拟目标进行注册;和/或,对所述虚拟场景中的虚拟商业机构进行注册;和/或,对所述虚拟场景中的虚拟事务办理机构、虚拟治安机构和/或虚拟纠纷处理机构进行注册;和/或,对所述虚拟场景中的多个位置处展示的信息进行注册;和/或,对所述虚拟场景中预设的虚拟人物目标、虚拟动物目标、虚拟植物目标、虚拟建筑目标、虚拟设施目标中的至少一种进行注册。认证系统可以用于实现以上功能中的任意一种,或者任意多种的组合。
本公开实施例的旅游场景交互系统,包括:算力处理中心、交互系统以及物理世界感知系统;物理世界感知系统用于:感知现实场景中的环境信息,获得感知信息;算力处理中心用于:根据预设的虚拟场景模型构建虚拟场景,并根据物理世界感知系统获取的感知信息,构建虚拟场景中的交互场景;交互系统用于展示交互场景。通过本公开实施例的旅游场景交互系统,可以构建虚拟三维立体的旅游环境,更高效更真实地模拟现实世界中的旅游景观,打破了空间的物理限制,使用户足不出户,就可以体验到亲临现场的感觉。
应当理解的是,以上的一般描述和后文的细节描述仅是示例性和解释性的,而非限制本公开。根据下面参考附图对示例性实施例的详细说明,本公开的其它特征及方面将变得清楚。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分,这些附图示出了符合本公开的实施例,并与说明书一起用于说明本公开的技术方案。
图1示出根据本公开实施例的旅游场景交互系统的框图。
图2示出根据本公开实施例的旅游场景交互系统的应用场景的示意图。
图3示出根据本公开实施例的物理世界感知系统的示意图。
图4示出根据本公开实施例的算力处理中心的示意图。
图5示出根据本公开实施例的虚拟世界引擎的示意图。
图6示出根据本公开实施例的世界建立模块的示意图。
图7示出根据本公开实施例的漫游模块的示意图。
图8示出根据本公开实施例的客服模块的示意图。
图9示出根据本公开实施例的动态乐园模块的示意图。
图10示出根据本公开实施例的全息广场模块的示意图。
图11示出根据本公开实施例的同步体验系统的示意图。
图12示出根据本公开实施例的票务系统的示意图。
图13示出根据本公开实施例的虚拟事务系统的示意图。
图14示出根据本公开实施例的认证系统的示意图。
图15示出根据本公开实施例的交互系统的示意图。
图16示出根据本公开实施例的旅游场景交互系统的数据流的示意图。
图17示出根据本公开实施例的一种电子设备的框图。
具体实施方式
以下将参考附图详细说明本公开的各种示例性实施例、特征和方面。附图中相同的附图标记表示功能相同或相似的元件。尽管在附图中示出了实施例的各种方面,但是除非特别指出,不必按比例绘制附图。
在这里专用的词“示例性”意为“用作例子、实施例或说明性”。这里作为“示例性”所说明的任何实施例不必解释为优于或好于其它实施例。
本文中术语“和/或”,仅仅是一种描述关联对象的关联关系,表示可以存在三种关系,例如,A和/或B,可以表示:单独存在A,同时存在A和B,单独存在B这三种情况。另外,本文中术语“至少一种”表示多种中的任意一种或多种中的至少两种的任意组合,例如,包括A、B、C中的至少一种,可以表示包括从A、B和C构成的集合中选择的任意一个或多个元素。
另外,为了更好地说明本公开,在下文的具体实施方式中给出了众多的具体细节。本领域技术人员应当理解,没有某些具体细节,本公开同样可以实施。在一些实例中,对于本领域技术人员熟知的方法、手段、元件和电路未作详细描述,以便于凸显本公开的主旨。
图1示出根据本公开实施例的旅游场景交互系统的框图,如图1所示,所述旅游场景交互系统包括:算力处理中心2、交互系统3以及物理世界感知系统1;所述物理世界感知系统1用于:感知现实场景中的环境信息,获得感知信息;所述算力处理中心2用于:根据预设的虚拟场景模型,构建虚拟场景;根据所述物理世界感知系统1获取的所述感知信息,构建所述虚拟场景中的交互场景;所述交互系统3用于展示所述交互场景。
示例性地,算力处理中心2可包括一个或多个处理器,处理器的类型包括但不限于中央处理器(Central Processing Unit,CPU)、图形处理器(Graphics Processing Unit,GPU)、张量处理器(Tensor Processing Unit,TPU)、专用集成电路(Application SpecificIntegrated Circuit,ASIC)、可编程门阵列(Field Programmable Gate Array,FPGA)、数字处理器(Digital Signal Processor,DSP)、可编程逻辑器件(Programmable LogicDevice,PLD)、控制器、微控制器、微处理器、嵌入式芯片等,本公开对处理器的类型不作限制。
示例性地,算力处理中心2可以是服务器集群,将多个服务器集中起来一起进行同一种服务,即:根据预设的虚拟场景模型构建虚拟场景,并根据物理世界感知系统1获取的感知信息,构建虚拟场景中的交互场景;其中,本公开对服务器集群包含的服务器数量不作限制,可根据实际的应用场景,确定服务器集群包含的服务器的数量。
在一种可能的实现方式中,可以根据预设的虚拟场景模型构建虚拟场景,所述虚拟场景用于模拟所述现实世界中的现实场景,该虚拟场景为静态场景,可以是不包含动态角色(运动的车辆、行人)的静态场景,也可以是动态角色按照预设轨迹变化的静态场景,本公开对此不作限制。示例性地,可以根据一个或多个预设的虚拟场景模型构建用于模拟现实世界的静态数字孪生世界,该静态数字孪生世界包括一种或多种虚拟场景。
在一种可能的实现方式中,可以根据物理世界感知系统1获取的感知信息,构建虚拟场景中的交互场景。示例性地,假设虚拟场景为过山车场景,物理世界感知系统1可以获取过山车中一个或多个乘客的感知信息,可以根据一个或多个乘客的感知信息,构建与一个或多个乘客相关的交互场景,以便于数字人游客以乘客的视角和感官体验果过山车项目。
在一种可能的实现方式中,用于构建交互场景的感知信息可以是实时的感知信息,也可以是非实时的感知信息。算力处理中心2可根据物理世界感知系统1获取的实时的感知信息构建交互场景,构建出的交互场景与现实场景完全同步,现实场景中发生的任何改变都会同步到交互场景;算力处理中心2也可根据非实时的感知信息(例如物理世界感知系统1在某一历史时刻所感知到的感知信息)构建交互场景,构建出的交互场景不会与现实场景同步,现实场景中发生的任何改变也不会影响交互场景。
图2示出根据本公开实施例的旅游场景交互系统的应用场景的示意图,如图2所示,物理世界感知系统1可实时采集现实旅游景观的感知信息,并将采集到的感知信息发送至算力处理中心2,以使算力处理中心2根据物理世界感知系统1采集到的现实旅游景观的感知信息,构建所述虚拟场景中的交互场景,并通过交互系统3向用户展示该交互场景,使用户足不出户,就能在三维立体的虚拟环境中游览自然风光、名胜古迹等旅游景观。
本公开实施例的旅游场景交互系统,可以构建虚拟三维立体的旅游环境,更高效更真实地模拟现实世界中的旅游景观,打破了空间的物理限制,使用户足不出户,就可以体验到亲临现场的感觉。
下面对本公开实施例的旅游场景交互系统进行展开说明。
图3示出根据本公开实施例的物理世界感知系统的示意图,如图3所示,所述物理世界感知系统1包括但不限于:空间感知模块11、生物感知模块12、三维扫描成像模块13、感知子模块14、通信组件15、感知平台16。
在一种可能的实现方式中,所述物理世界感知系统1包括空间感知模块11,所述空间感知模块11用于感知场景目标在现实场景中的空间位置信息、空间运动轨迹信息中的至少一种,所述算力处理中心2进一步用于:根据所述物理世界感知系统1的空间感知模块11感知到的所述场景目标的空间位置信息、空间运动轨迹信息中的至少一种,确定所述场景目标对应的虚拟目标在所述虚拟场景中的第一场景信息,所述第一场景信息包括位置信息、速度信息、视角信息中的至少一种;根据所述第一场景信息,确定所述虚拟目标在所述虚拟场景中的感知信息;根据所述感知信息,构建所述交互场景。
示例性地,对于现实场景中静止的场景目标,例如公园中建筑物,空间感知模块11可感知建筑物在公园的空间位置信息,并将该建筑物在公园的空间位置信息传输至算力处理中心2,以使算力处理中心2根据建筑物在公园的空间位置信息,确定该建筑物对应的虚拟建筑物在虚拟公园场景中的位置信息,并根据虚拟建筑物在虚拟公园场景中的位置信息,确定虚拟建筑物在虚拟公园场景中的感知信息,并基于该感知信息,构建虚拟建筑物相关的交互场景。
示例性地,对于现实场景中运动的场景目标,例如游乐园中的过山车,空间感知模块11可感知过山车的空间运动轨迹信息(可包括一段时间内每个时刻的空间位置信息),并将该过山车在游乐园的空间运动轨迹信息传输至算力处理中心2,以使算力处理中心2根据过山车在游乐园的空间运动轨迹信息,确定该过山车对应的虚拟过山车的位置信息和速度信息,并根据虚拟过山车在虚拟游乐园场景中的位置信息、速度信息、视角信息,确定虚拟过山车在虚拟游乐园场景中的感知信息,并基于该感知信息,构建虚拟过山车相关的交互场景。
通过空间感知模块11,可实现高效地空间位置感知,有利于构建更加真实的交互场景。
在一种可能的实现方式中,所述物理世界感知系统1包括生物感知模块12,所述生物感知模块12用于感知交互场景的五感信息和/或生物信息,所述算力处理中心2进一步用于:获取所述物理世界感知系统1的生物感知模块12感知到的所述交互场景的五感信息和/或生物信息,其中,所述五感信息包括视觉信息、听觉信息、嗅觉信息、触觉信息和味觉信息中的至少一种;所述交互系统3用于展示所述交互场景的五感信息和/或生物信息。
示例性地,生物感知模块12可以感知交互场景中游客A的五感信息和/或生物信息(例如心动信息、脉搏信息、体温信息等),并将游客A的五感信息和/或生物信息传输至算力处理中心2,以使算力处理中心2根据游客A的五感信息和/或生物信息,构建的交互场景更加真实,交互系统3可展示构建好的交互场景,交互场景中的游客A的虚拟目标会具有五感信息和/或生物信息。这样,在交互场景中,游客B的虚拟目标与游客A的虚拟目标进行交互时,会感受到游客A的虚拟目标的五感信息和/或生物信息。
通过生物感知模块12,可实现生物信息的感知,有利于构建更加真实的交互场景。
在一种可能的实现方式中,所述物理世界感知系统1包括三维扫描成像模块13,所述三维扫描成像模块13用于获取现实场景的三维扫描数据,所述三维扫描数据用于承载三维结构信息,根据所述三维扫描成像模块13感知到的所述现实场景的三维扫描数据,构建与所述现实场景对应的虚拟场景。
示例性地,对于某一石碑,三维扫描成像模块13可扫描石碑的三维扫描数据,并将该石碑的三维扫描数据传输至算力处理中心2,以使算力处理中心2根据石碑的三维扫描数据,确定该石碑三维结构信息,并根据该石碑三维结构信息构建虚拟石碑。
通过三维扫描成像模块13,可实现三维空间结构扫描和感知,有利于构建更加真实的交互场景。
在一种可能的实现方式中,所述物理世界感知系统1包括在所述现实场景中的游客所携带的感知子模块14;所述算力处理中心2进一步用于:通过所述游客所携带的感知子模块14,获得所述游客的感知信息,所述感知信息包括位置信息、三维空间结构信息、五感信息、生物信息中的至少一种;根据所述游客的实时或非实时的感知信息,构建所述交互场景。
示例性地,每个游客可以携带一个感知子模块14,可以实时或按照预设频率将感知子模块14获取的游客视角的感知信息传输至算力处理中心2,以使算力处理中心2根据游客视角的感知信息,构建游客视角的交互场景。
通过感知子模块14,可获取每个游客视角的感知信息,大大丰富了感知信息,有利于构建更加真实的交互场景。
在一种可能的实现方式中,所述物理世界感知系统1包括在所述现实场景中的预设位置处的感知子模块14,所述预设位置包括所述现实场景的空中、陆地、水中中的至少一种的预设位置,所述算力处理中心2进一步用于:通过所述预设位置处的感知子模块14,获得所述预设位置处的场景感知信息,所述场景感知信息包括三维空间结构信息、五感信息、生物信息中的至少一种;根据所述预设位置处的场景感知信息,构建所述交互场景。
示例性地,空中的感知子模块14可以设置在悬停或在空中飞行的无人机,通过无人机部署在空中的预设位置处;水中的传感器可以通过支架、导轨等装置部署在水中的预设位置处,也可以将传感器放置在无人船中,通过无人船部署在水中的预设位置处;陆地的传感器可以通过支架、导轨等装置部署在陆地的预设位置处,本公开对此不作具体限制,可根据空中、陆地、水中具体的现实环境,进行传感器的部署。
感知子模块14可以将获得的预设位置处的场景感知信息传输至算力处理中心2,以使算力处理中心2根据预设位置处的场景感知信息,构建与预设位置处现实场景对应的虚拟化的交互场景。
通过预设位置处的感知子模块14,有利于获取海、陆、空各种环境的感知信息,有利于构建更加丰富的交互场景。
在一种可能的实现方式中,所述物理世界感知系统1包括通信组件15,用于将位于所述现实场景中的物理世界感知系统1获取的感知信息发送至所述算力处理中心2。
示例性地,通信组件15可以包括数据处理器(Data Processing Unit,DPU)和/或网络接口控制器(Network Interface Controller,NIC)。DPU可用于网络数据的处理,例如包括网络协议处理、交换路由计算、数据的加密解密、数据压缩等。NIC作为连接设备和传输介质的接口,不仅可以实现与网络传输介质之间的物理连接和电信号匹配,还可以涉及数据帧的发送与接收、数据帧的封装与拆封、介质访问控制、数据的编码与解码、数据缓存等。
通过通信组件15,物理世界感知系统1与算力处理中心2之间可以进行高效通信。
在一种可能的实现方式中,所述物理世界感知系统1还包括感知平台16,所述感知平台16用于承载至少一个传感器,所述至少一个传感器用于采集位置信息、三维空间结构信息、五感信息、生物信息中的至少一种。
示例性地,物理世界感知系统1可包括一个或多个感知平台16,每个感知平台16可以通过有线网络或无线网络的方式连接一个或多个传感器。
其中,可以按照传感器的功能,构建不用功能的感知平台16。例如感知平台16可以连接一个或多个五感传感器,获取五感信息。例如,可通过对应视觉的光敏传感器采集视觉信息,通过对应听觉的声敏传感器采集听觉信息,通过对应嗅觉的气敏传感器采集嗅觉信息,通过对应味觉的化学传感器采集味觉信息,通过对应触觉的压敏、温敏、流体传感器采集触觉信息。又例如感知平台16可以连接一个或多个生物传感器,例如基于酶、抗体、和激素等分子识别功能的传感器,测量体温的温度传感器,心电图传感器等,通过生物传感器采集生物信息。再例如感知平台16可以连接一个或多个摄像头,根据拍摄的图像信息获取待测对象的位置信息、三维空间结构信息。
其中,可以按照应用场景,构建不用功能的感知平台16。例如,针对海洋场景,感知平台16可以连接一个或多个部署在海洋环境的传感器(传感器具有防水防潮功能),以实现采集海洋环境中的位置信息、三维空间结构信息、五感信息、生物信息中的至少一种。又例如,针对陆地场景,感知平台16可以连接一个或多个部署在陆地环境的传感器,以实现采集陆地环境中的位置信息、三维空间结构信息、五感信息、生物信息中的至少一种。再例如,针对天空场景,感知平台16可以连接一个或多个部署在天空环境的传感器(例如可通过无人机携带传感器),以实现采集天空环境中的位置信息、三维空间结构信息、五感信息、生物信息中的至少一种。
通过感知平台16可以承载多个传感器,采集更多的传感信息,有利于构建更加真实的交互场景。
图4示出根据本公开实施例的算力处理中心的示意图,如图4所示,所述算力处理中心2包括但不限于:虚拟世界引擎21、世界建立模块22、漫游模块23、客服模块24、动态乐园模块25、全息广场模块26、同步体验系统27、票务系统28、虚拟事务系统29、认证系统210。
在一种可能的实现方式中,所述算力处理中心2包括虚拟世界引擎21,图5示出根据本公开实施例的虚拟世界引擎21的示意图,如图5所示,所述虚拟世界引擎21可包括材料模拟引擎211、力学模拟引擎212、运动模拟引擎213、流体模拟引擎214、规律模拟引擎215、光线模拟引擎216、热力模拟引擎217、声音模拟引擎218、电力模拟引擎219中的至少一种;通过所述虚拟世界引擎21包括的材料模拟引擎211、力学模拟引擎212、运动模拟引擎213、流体模拟引擎214、规律模拟引擎215、光线模拟引擎216、热力模拟引擎217、声音模拟引擎218、电力模拟引擎219中的至少一种,构建用于模拟现实场景的虚拟场景。
应当理解,本公开的实施例对虚拟世界引擎21包括但不限于上述模拟引擎,可根据实际的应用场景进行设置。
在一种可能的实现方式中,所述材料模拟引擎211,用于使所述虚拟场景中的虚拟材料的属性信息与现实场景中的现实材料的属性信息一致。
示例性地,材料模拟引擎211可模拟的材料的类别包括但不限于:塑料、木头、玻璃、陶瓷、纤维、金属、合金、橡胶、符合材料(例如水泥)、天然材料(例如棉花)、石材(例如大理石)等。其中,材料模拟引擎211可以对现实场景中的现实材料在虚拟场景中进行模拟,使虚拟场景中的虚拟材料的属性信息与现实场景中的现实材料的属性信息一致,该属性信息包括但不限于:温度信息、颜色信息、纹理信息、形状信息、抗压强度信息、抗拉强度信息、硬度信息、强度信息、导热信息、导电信息、光学信息、耐腐蚀性信息、平整度信息、光滑度信息、比热容等。
材料模拟引擎211可模拟现实世界中材料(例如玻璃)的属性信息,使其在虚拟场景中具有其在现实世界的表现,提高了虚拟材料的真实性。例如,材料模拟引擎211可以使虚拟场景中的虚拟玻璃更加真实,具有坚硬、易碎、透明、不易燃烧、比较耐高温、不导电的属性信息。例如,材料模拟引擎211可以模拟虚拟场景中衣服的褶皱。
在一种可能的实现方式中,所述力学模拟引擎212,用于使所述虚拟场景中的虚拟物体的力学表现与现实场景中的现实物体的力学表现一致。
示例性地,虚拟物体的力学表现可包括静力学表现、运动学表现和动力学表现。其中,力学表现考虑的是力的平衡、物体的静止或形变;运动学表现考虑的是物体的运动状态;动力学表现考虑的是物体运动和所受力的关系。
虚拟场景中的虚拟物体在受到重力、弹力、摩擦力、压力、拉力、支持力、浮力、阻力、动力、电磁力、分子力、万有引力等一种或多种力的情况下,该虚拟物体的力学表现(运动状态、形变状态)与现实场景中的现实物体的力学表现一致,模拟不同物体在物理世界的力学表现,提高了虚拟物体的真实性。例如,虚拟树叶受到水的浮力作用,可漂浮在虚拟湖面上;又例如,虚拟气球受到压力会发生形状变化。
在一种可能的实现方式中,所述运动模拟引擎213,用于使所述虚拟场景中的虚拟物体的运动表现与现实场景中的现实物体的运动表现一致。
示例性地,运动模拟引擎213可以模拟不同虚拟物体在物理世界的运动表现,例如包括运动学性能(包括位置、速度和加速度)和动力学性能(包括接点反作用力、惯性力和功率)。这样,运动模拟引擎213可用于模拟虚拟物理的自由落体运动、加速运动、减速运动、均速运动、抛物运动、曲线运动、直线运动、圆周运动、向心运动等一种或多种类型的运动,使虚拟场景中的虚拟物体的运动表现与现实场景中的现实物体的运动表现一致,提高了虚拟物体的真实性。例如,虚拟游乐园中的虚拟过山车的运动表现与现实游乐园中过山车的运动表现一样,在曲线轨道上进行曲线运动,在直线轨道上进行直线运动,在坡度大的轨道上上坡速度慢,在坡度大的轨道上下坡速度快。
在一种可能的实现方式中,所述流体模拟引擎214,用于使所述虚拟场景中的虚拟流体的流动规律与现实场景中的现实流体的流动规律一致。其中,流体是可以流动的物质,在微小剪切力的持续作用下可以连续变形的物质,例如水流(包括河流、海流、波浪流、潮汐流、等深流等)和大气流,其具有易流动性,可压缩性,黏性。
示例性地,流体模拟引擎214可通过基于纹理变换的流体模拟、基于二维高度场网格的流体模拟以、基于真实物理方程的流体模拟等方法,在虚拟场景中进行流体模拟,使虚拟场景中的虚拟流体的流动规律与现实场景中的现实流体的流动规律一致,例如,虚拟河流会在地势落差大、流域面积狭小的位置比较湍急;在地势落差小、流域面积宽广的位置流速缓慢。通过流体模拟引擎214,可以模拟不同流体(例如河流)在物理世界的流体表现,提高了虚拟流体的真实性。
在一种可能的实现方式中,所述规律模拟引擎215,用于使所述虚拟场景中的物理规律与现实场景中的物理规律一致。其中,物理规律包括牛顿经典力学理论、爱因斯坦的相对论、波义尔气体定律、守恒律、热力定律、欧姆定律、焦耳定律、折射规律等物理世界中存在的物理规律。通过规律模拟引擎215,可以在使虚拟场景中的力、热、电、磁、光、核的物理规律与现实场景中的力、热、电、磁、光、核物理规律一致,有利于构成出与物理场景孪生的虚拟场景,提高虚拟场景的真实性。
在一种可能的实现方式中,所述光线模拟引擎216,用于使虚拟场景中光线传播规律与现实场景中的光线传播规律一致。其中,光线为光能量传播方向的几何线,也即光的传播路径和方向的直线,例如包括入射光线、反射光线、折射光线。光线传播规律包括但不限于:光沿直线传播规律(光在同种均匀介质中总是沿着直线传播且传播的速度恒定)、光的独立传播规律(两束光在传播过程中相遇时互不干扰,仍按各自途径继续传播,当两束光会聚同一点时,在该点上的光能量是两者的加和)、光的反射和折射定律(光传播途中遇到两种不同介质的分界面时,一部分反射,一部分折射,其中,反射光线遵循反射定律,折射光线遵循折射定律)。
通过光线模拟引擎216,可以在虚拟场景中模拟日光、月光、星光、极光、灯光、环境杂散光、可见光、激光、荧光、火光、烛光等光线,不仅有利于提高了虚拟景点的真实性,而且可以为同一虚拟景点提供不同的光照场景。
在一种可能的实现方式中,所述热力模拟引擎217,用于使虚拟场景中的热量传导规律与现实场景中的热量传导规律一致。其中,虚拟场景中的热量传导规律与现实场景中的热量传导规律一致,在虚拟场景中任一虚拟物体中温度不同的部分或者任意两个温度不同的虚拟物体相互接触的情况下,热量从高温部分向低温部分传递。通过热力模拟引擎217,可以模拟不同物体在物理世界的热量传导表现,提高虚拟场景的真实性,例如,在虚拟场景中,阳光照射区域的体感温度会高于没有阳光区域的体感温度。
在一种可能的实现方式中,所述声音模拟引擎218,用于使虚拟场景中的声音传播规律与现实场景中的声音传播规律一致。其中,声音传播规律可包括:声波的干涉、衍射、折射和反射规律;声波的传播速度与介质有关等。例如,声音在虚拟场景传播过程中,如果碰到虚拟场景中存在大的虚拟反射面(例如虚拟的建筑物的墙壁、虚拟大山),会在虚拟反射面发生反射,发生回声现象。
通过声音模拟引擎218,可以模拟不同声音在物理世界的传播表现,可以使虚拟场景中的声音更加真实。
在一种可能的实现方式中,所述电力模拟引擎219,用于使虚拟场景中的电力运行规律与现实场景中的电力运行规律一致。其中,电力运行规律可包括欧姆定律、焦耳定律、串联电路规律、并联电路规律等。电力模拟引擎219可模拟不同电子设备在物理世界的电力运行表现。
通过电力模拟引擎219,用户可以在虚拟世界正常使用虚拟电子设备(例如虚拟移动电话),进一步提高虚拟场景的真实性。
在一种可能的实现方式中,所述算力处理中心2包括世界建立模块22,所述世界建立模块22用于对现实世界进行数字化映射,构建与现实世界对应的静态数字孪生世界;其中,所述静态数字孪生世界包括至少一种虚拟场景,所述虚拟场景用于模拟所述现实世界中的现实场景。
其中,数字孪生(Digital Twins)是利用物理模型、传感器更新、运行历史等数据,集成多学科、多物理量、多尺度、多概率的仿真过程,在虚拟空间中完成映射,从而反映相对应的实体装备的全生命周期过程。静态数字孪生世界作为数字孪生体,是在计算机虚拟空间存在的与物理实体完全等价的信息模型,可以基于静态数字孪生世界对现实世界进行仿真分析和优化。
图6示出根据本公开实施例的世界建立模块的示意图,如图6所示,世界建立模块22可包括但不限于:感知数据库模块221、模型工厂模块222、模型审批模块223、定制模块224。
在一种可能的实现方式中,所述世界建立模块22包括感知数据库模块221,所述感知数据库模块221用于:存储所述现实场景的感知数据,所述感知数据包括所述现实场景中多个物体的物理模型、动态视频、环境信息、五感信息、生物信息中的至少一种;根据所述感知数据,提供用于构建虚拟场景的数据库。
在一种可能的实现方式中,所述世界建立模块22包括模型工厂模块222,所述模型工厂模块222用于提供构建虚拟场景的虚拟场景模型库,所述虚拟场景模型库222包括系统预设的虚拟场景模型、历史构建的虚拟场景模型。
示例性地,可根据与所述虚拟场景对应的现实场景,获得所述虚拟场景模型的场景信息,所述场景信息用于表征虚拟场景的特征信息;根据所述虚拟场景模型的所述场景信息,获取所述虚拟场景模型的模型参数;根据所述虚拟场景模型和所述模型参数,构建所述虚拟场景。
其中,虚拟场景模型可以是训练好的用于构建虚拟场景的神经网络模型,例如包括卷积神经网络(Convolutional Neural Networks,CNN)、反向传播神经网络(BackPropagation,BP)、骨干神经网络(Backbone Neural Network)等,本公开对神经网络模型的网络结构不作具体限制。
通过模型工厂模块222,可以利用虚拟场景模型,用于快速构建虚拟场景。
在一种可能的实现方式中,所述模型工厂模块222还用于:对所述虚拟场景模型库中的虚拟场景模型进行增加、删除、修改及查询操作。
示例性地,在虚拟场景模型库中任意两个虚拟场景模型的相似度大于第一预设阈值的情况下,可删除一个虚拟场景模型;在当前待增加的虚拟场景模型与虚拟场景模型库中任一虚拟场景模型的相似度小于第二预设阈值的情况下,可增加该虚拟场景模型。在虚拟场景模型库中的虚拟场景模型不能满足当前构建虚拟场景的需求,可以对虚拟场景模型库中任一虚拟场景模型进行修改,得到满足当前构建虚拟场景的需求的虚拟场景模型;在获取到虚拟场景模型的查询编号或模型特征的情况下,可以对虚拟场景模型库中的虚拟场景模型进行查询处理,确定虚拟场景模型库中是否存在查询编号或模型特征对应的虚拟场景模型。
通过模型工厂模块222,可以高效管理虚拟场景模型库中的虚拟场景模型。
在一种可能的实现方式中,所述世界建立模块包括模型审批模块223,所述模型审批模块223用于:对新建立的所述虚拟场景模型进行审核,获得审核结果;其中,所述审核结果为审核通过的虚拟场景模型用于构建所述虚拟场景。
示例性地,假设某一虚拟场景为胡同场景,该场景中的建筑物需要小于第一预设高度。在此情况下,如果新建立的虚拟场景模型是用于构建高于第一预设高度的高层建筑,模型审批模块223对该虚拟场景模型进行审核,会获得不合格的审核结果;这样,就不可以使用该虚拟场景模型构建虚拟场景。
相反地,如果新建立的虚拟场景模型是用于构建小于第一预设高度的仿古建筑,模型审批模块223对该虚拟场景模型进行审核,会获得合格的审核结果;这样,就可以使用该虚拟场景模型构建虚拟场景。
通过模型审批模块223,可以实现对新建立模型的管理和审批。
在一种可能的实现方式中,所述世界建立模块包括定制模块224,所述定制模块224用于:接收对所述虚拟场景模型的定制信息;根据所述定制信息,构建所述虚拟场景模型。
示例性地,定制模块224可以通过文本信息、图画信息、语音信息等接收用户对虚拟场景模型的定制信息,并基于定制信息构建所述虚拟场景模型。
通过定制模块224,可根据用户的要求实现虚拟场景的个性化定制,提高个性化的虚拟场景。
图7示出根据本公开实施例的漫游模块的示意图,如图7所示,漫游模块23可包括同步世界切换模块231、数字世界切换模块232。其中,世界切换模块231用于切换到物理世界同步状态;数字世界切换模块232用于切换到虚拟世界状态。漫游模块23可以通过同步世界切换模块231与数字世界切换模块232的相互配合,实现多种方式的交互场景漫游。
在一种可能的实现方式中,所述算力处理中心2还包括漫游模块23,所述漫游模块23用于获取现实场景中的至少一位游客的感知信息构建的交互场景;在所述至少一位游客的感知信息构建的交互场景中漫游。
示例性地,假设游客A游览了某一现实景点F,游客A想将该现实景点F分享给距离现实景点F很远的朋友B,游客A可以通过交互系统3向漫游模块23发送构建现实景点F对应的交互场景F’的请求,漫游模块23可以响应于该请求,控制物理世界感知系统1感知现实景点F的环境信息(例如,可以沿着游客A的旅游路线感知现实景点F的环境信息),获得感知信息,并基于该感知信息构建现实景点F对应的交互场景F’。构建好交互场景F’,游客A可以将该交互场景F’通过网络发送至朋友B的交互系统,是朋友B可以在游客A的感知信息构建的交互场景F’中漫游。
示例性地,假设游客A和游客B想共同游览某一现实景点F,在游客A距离现实景点F比较近,游客B距离现实景点F比较远的情况下,游客A可以将游览现实景点F对应的虚拟的交互场景实时分享给朋友B。响应于游客A在现实景点F的位置变化,游客A携带的物理世界感知系统1的感知子模块14可实时感知现实景点F的环境信息,获得游客A在当前位置处的感知信息,并将其实时传输给漫游模块23,漫游模块23可基于获取到的感知信息,为现实景点F的当前位置构建对应的交互场景F’,并将该交互场景F’通过网络实时发送至朋友B的交互系统,使游客B可以在游客A的感知信息构建的交互场景F’中漫游。这样,虽然在现实世界中游客A和游客B是位于不同的地方,但却可以通过漫游模块23同时体验同一视角的景点。
漫游模块23便于不同的游客之间分享各自的游览场景,可以为游客带来不同视角的全景沉浸式体验,有利于增强代入感和互动性。
和/或,所述漫游模块23进一步用于:获取多个预设位置处的感知信息构建的交互场景;在所述多个预设位置处的感知信息构建的交互场景之间漫游。
示例性地,物理世界感知系统1可包括N个感知子模块14,例如包括设置在预设位置1处的感知子模块141,设置在预设位置2处的感知子模块142,以此类推,设置在预设位置N处的感知子模块14N。各个预设位置处的感知子模块14可以分别感知各种预设位置处的环境信息,获取各自预设位置处的感知信息,并分别将各自的感知信息传输至漫游模块23。漫游模块23可以根据预设位置1~N处的N个感知信息构建N个交互场景,即:预设位置1对应的交互场景1~预设位置N对应的交互场景N。通过漫游模块23,数字人游客可以从交互场景1~交互场景N中选择任一场景进行漫游,就可以从当前的交互场景1切换至交互场景2~交互场景N中的任意场景。
漫游模块23便于游客在不同位置处的虚拟景点之间进行切换,提高了游览的便利性,有利于花费更少的时间,游览更多位置处的景点。
和/或,所述漫游模块23进一步用于:在所述现实场景中的预设位置处的所述感知子模块14获取的交互场景,与所述现实场景中的游客所携带的所述感知子模块14获取的交互场景之间漫游,其中,所述交互场景包括设置在现实场景中的预设位置处的物理世界感知系统1的感知子模块14获取的场景信息,以及在所述现实场景中的游客所携带的物理世界感知系统1的感知子模块14获取的场景信息。
示例性地,景区的工作人员可以在景区推荐景点的预设位置处设置物理世界感知系统1的感知子模块14,感知推荐景点的环境信息,获得推荐景点的感知信息。预设位置处的感知子模块14可以将感知信息传输至漫游模块23,以使漫游模块23根据预设位置处的感知信息,构建可模拟推荐景点的虚拟化的交互场景。于此同时,景区的游客可以携带物理世界感知系统1的感知子模块14,按照游客的个人喜好,以游客的视角感知景区任一景点的环境信息,获取游客视角的感知信息。游客携带的物理世界感知系统1的感知子模块14,可以将当前游客视角的感知信息传输至漫游模块23,以使漫游模块23根据游客视角的感知信息,构建游客视角的虚拟化的交互场景。
利用漫游模块23,数字人游客登录本公开实施例的旅游场景交互系统,就可以在景区推荐景点对应预设位置处的感知子模块14获取的交互场景,与景区中游客所携带的感知子模块14获取的交互场景之间漫游,有利于为数字人游客提供更多的选择,既可以选择在景区中推荐景点的交互场景中漫游,也可以在游客视角构建的交互场景中漫游。
和/或,所述漫游模块23进一步用于:在根据所述交互系统3的使用者对应的虚拟目标在所述虚拟场景中的感知信息构建的交互场景、设置在现实场景中的预设位置处的物理世界感知系统1的感知子模块14获取的交互场景、在所述现实场景中的游客所携带的物理世界感知系统1的感知子模块14获取的交互场景之间漫游。
示例性地,景区的工作人员可以在景区推荐景点的预设位置处设置物理世界感知系统1的感知子模块14,感知推荐景点的环境信息,获得推荐景点的感知信息。预设位置处的感知子模块14可以将感知信息传输至漫游模块23,以使漫游模块23根据预设位置处的感知信息,构建可模拟推荐景点对应的交互场景。
景区的游客可以携带物理世界感知系统1的感知子模块14,按照游客的个人喜好,以游客的视角感知景区任一景点的环境信息,获取游客视角的感知信息。游客携带的物理世界感知系统1的感知子模块14,可以将当前游客视角的感知信息传输至漫游模块23,以使漫游模块23根据游客视角的感知信息,构建游客视角的虚拟化的交互场景。
进一步,交互系统3的使用者对应的虚拟目标(例如包括虚拟人,使用者可具有虚拟目标的视角和体感),可以进入任一已构建好的交互场景,虚拟目标可携带虚拟感知子模块14,感知虚拟化的交互场景的环境信息,获得虚拟目标对该虚拟化的交互场景的感知信息。漫游模块23可以获取虚拟目标的感知信息,并根据虚拟目标的感知信息,构建虚拟场景中的感知信息构建的交互场景
利用漫游模块23,数字人游客登录本公开实施例的旅游场景交互系统,就可以在景区推荐景点对应预设位置处的感知子模块14获取的交互场景、景区中游客所携带的感知子模块14获取的交互场景、以及虚拟目标在虚拟场景中的感知信息构建的交互场景之间漫游,有利于进一步为数字人游客提供更多的选择,既可以选择在景区中推荐景点的交互场景中漫游,也可以在游客视角构建的交互场景中漫游,还可以在虚拟目标视角构建的交互场景中漫游。
在一种可能的实现方式中,所述交互场景包括历史场景,所述历史场景包括设置在现实场景中的预设位置处所述感知子模块14在历史时刻所感知的历史场景信息,以及在所述现实场景中的游客所携带的所述感知子模块14在历史时刻所感知到的历史场景信息;所述漫游模块23进一步用于:在所述现实场景中的预设位置处的历史场景,与所述现实场景中的游客所携带的感知子模块14感知过的历史场景之间漫游。
示例性地,受气候、日照角度的影响,某些旅游景点只有在某些时间段和/或某些气候条件下才会出现具有特色的景观(例如峨眉山佛光、香山红叶、颐和园十七孔桥金光穿洞等)。为了记录在某些时间段和/或某些气候条件下才会出现的具有特色的景观,可以在景点的预设位置处设置物理世界感知系统1的感知子模块14,感知子模块14可以将在历史时刻感知到的场景信息传输至漫游模块23,漫游模块23可记录该历史场景信息,并可以基于记录的历史场景信息构建预设位置对应的历史场景。类似地,游客所携带的感知子模块14可以将在历史时刻所感知到的场景信息传输至漫游模块23,漫游模块23可记录该历史场景信息,并可以基于记录的历史场景信息构建游客视角对应的历史场景。
漫游模块23可以提供现实场景中的预设位置处的历史场景,以及现实场景中游客视角感知过的历史场景,使数字人游客可以在这两个历史场景之间漫游,有利于进一步为数字人游客提供更多的漫游选择,扩展旅游场景交互系统的适用性。
和/或,所述漫游模块23进一步用于:在根据所述交互系统3的使用者对应的虚拟目标在所述虚拟场景中的感知信息构建的交互场景、设置在现实场景中的预设位置处的历史场景、所述现实场景中的游客所携带的感知子模块14感知过的历史场景之间漫游。
示例性地,可以在某景点的预设位置处设置物理世界感知系统1的感知子模块14,感知子模块14可以将在历史时刻感知到的场景信息传输至漫游模块23,漫游模块23可记录该历史场景信息,并可以基于记录的历史场景信息构建预设位置对应的历史场景。
游客所携带的感知子模块14可以将在历史时刻所感知到的场景信息传输至漫游模块23,漫游模块23可记录该历史场景信息,并可以基于记录的历史场景信息构建游客视角对应的历史场景。
交互系统3的使用者对应的虚拟目标(例如包括虚拟人,使用者可具有虚拟目标的视角和体感),可以进入任一已构建好的交互场景,虚拟目标可携带虚拟感知子模块14,感知虚拟化的交互场景的环境信息,获得虚拟目标对该虚拟化的交互场景的感知信息。漫游模块23可以获取虚拟目标的感知信息,并根据虚拟目标的感知信息,构建虚拟场景中的感知信息构建的交互场景。
利用漫游模块23,数字人游客登录本公开实施例的旅游场景交互系统,就可以在景点预设位置处对应的历史场景、游客视角的历史场景、以及虚拟目标在虚拟场景中的感知信息构建的交互场景之间漫游,有利于进一步为数字人游客提供更多的选择,扩展旅游场景交互系统的适用性。
应当理解,漫游模块23可以实现以上功能中的任意一种,或者任意多种的组合。
图8示出根据本公开实施例的客服模块的示意图,如图8所示,客服模块24可包括但不限于:客服认证模块241、客服空间模块242和客服交互模块243。
在一种可能的实现方式中,所述算力处理中心2还包括客服模块24,所述客服模块24用于:对虚拟客服目标进行验证;在验证通过的情况下,允许所述虚拟客服目标与所述交互系统3的使用者在虚拟场景中的虚拟目标进行交互。
示例性地,可以对虚拟客服目标进行人脸验证、虹膜验证、视网膜验证、指纹验证、掌纹验证、账号密码验证、语音验证、指静脉验证、笔迹验证、行为特征验证中的一种或多种,并在验证通过的情况下,允许虚拟客服目标与交互系统3的使用者在虚拟场景中的虚拟目标进行交互;在验证没有通过的情况下,拒绝虚拟客服目标与交互系统3的使用者在虚拟场景中的虚拟目标进行交互。
通过客服模块24的客服认证模块241,可以实现对虚拟客服目标进行认证,提高系统的安全性,减少恶意人员伪装虚拟客服目标。
和/或,所述客服模块24还可以包括客服空间模块242,用于:生成与现实场景中的客服空间中的客服人员对应的虚拟客服目标;为所述虚拟客服目标提供用于工作和\或休息的虚拟场景。
其中,虚拟客服目标的形象可包括真人形象、卡通形象、机器人形象、动物形象、植物形象等,本公开对此不作限制。用于工作和\或休息的虚拟场景可以是现实世界中存在的任一真实场景投射的虚拟场景、也可以是虚构的其他虚拟场景(例如虚拟宇宙场景、虚拟科幻场景、虚拟动漫场景等),本公开对虚拟场景的大小、颜色、样式不作限制。
通过客服模块24的客服空间模块242,可以为虚拟客服目标提供工作以及休息空间,有利于提高虚拟客服目标的工作积极性,以更好的为数字人游客提供服务。
和/或,所述客服模块24还可以包括客服交互模块243,用于:在现实客服人员与虚拟客服目标的信息同步的情况下,响应于数字人游客在虚拟场景中对应的虚拟目标与所述虚拟客服目标的交互,使所述数字人游客与所述客服人员建立面对面的交互,所述数字人游客包括交互系统3的使用者。
通过客服模块24的客服交互模块243,实现现实世界与数字孪生世界的交互以及数字世界与游客的交互功能。
应当理解,客服模块24可以实现以上功能中的任意一种,或者任意多种的组合。
在一种可能的实现方式中,所述现实场景包括游乐项目场景,所述物理世界感知系统1包括设置在所述游乐项目场景内的物理世界感知系统1,所述算力处理中心2包括动态乐园模块25,用于:获取所述物理世界感知系统1检测到的所述游乐项目场景的实时现实世界信息,其中,所述实时现实世界信息包括所述游乐项目场景的交通状况信息、客流状况信息、营业信息、天气信息、环境信息中的至少一种;根据所述实时现实世界信息,获得所述虚拟场景。
图9示出根据本公开实施例的动态乐园模块的示意图,如图9所示,所述动态乐园模块25可包括但不限于:实时状况更新模块251、乐园动态显示模块252和孪生世界同步模块253。
其中,实时状况更新模块251用于获取所述物理世界感知系统1检测到的所述游乐项目场景的实时现实世界信息,例如包括所述游乐项目场景的交通状况信息、客流状况信息、营业信息、天气信息、环境信息等。
其中,乐园动态显示模块252用于将获取到的实时现实世界信息渲染到虚拟场景。例如,实时现实世界信息指示出当前天气为大雾,乐园动态显示模块252可以在虚拟场景中渲染大雾天气。
其中,孪生世界同步模块253,用于提供同步功能,在物理世界感知系统1检测到的游乐项目场景的实时现实世界信息与虚拟场景不同步的情况下,利用乐园动态显示模块252,将实时现实世界信息渲染至虚拟场景,实现虚拟场景与现实世界同步。
图10示出根据本公开实施例的全息广场模块的示意图,如图10所示,所述全息广场模块26可包括但不限于:游乐项目演绎模块261、虚拟显示设备矩阵262、全息模块263、同步体验入口模块264。
其中,游乐项目演绎模块261用于实现动态渲染游乐项目的演绎功能;虚拟显示设备矩阵262用于提供巨屏显示不同游乐项目动态演绎视频;全息模块263用于根据游乐项目演绎模块261,进行全息显示,增加与数字人游客或者非数字人游客进行交互,提供游乐项目演绎体验;同步体验入口模块264,用于提供同步体验模块入口,供数字人游客或者非数字人游客实现同步体验。
在一种可能的实现方式中,在所述虚拟场景中添加虚拟显示设备矩阵262;通过所述虚拟显示设备262显示所述实时现实世界信息,以及与所述游乐项目场景对应的介绍信息、娱乐项目的演绎场景画面中的至少一种。
示例性地,虚拟显示设备矩阵262可包括多个单元,每个单元可以显示不同的内容,例如,拟显示设备矩阵262的单元1可以显示现实世界的天气信息,拟显示设备矩阵262的单元2可以显示现实世界的路况信息,拟显示设备矩阵262的单元3可以显示摩天轮项目的介绍信息,拟显示设备矩阵262的单元4可以显示过山车的演绎场景画面,本公开对虚拟显示设备矩阵262的显示单元数量、显示内容不作限制。
其中,虚拟显示设备矩阵262可以表现为虚拟屏幕,例如包括虚拟液晶屏,虚拟3D投影屏、虚拟水幕屏、虚拟全息屏等,本公开对虚拟显示设备矩阵262的表现形式不作限制。其中,娱乐项目的演绎场景画面可以由游乐项目演绎模块261生成,可以是游乐项目场景对应的虚拟场景的动态视频,也可以是现实世界中游乐项目场景的动态视频,本公开对此不作限制。
和/或,获取所述虚拟显示设备矩阵262处的五感信息,使得交互系统3的使用者能够与所述虚拟显示设备矩阵262进行交互;响应于交互系统3的使用者在虚拟场景中对应的虚拟目标与所述虚拟显示设备矩阵262的交互,在所述虚拟显示设备矩阵262中展示交互画面。
示例性地,假设交互系统3的使用者为数字人游客,当数字人游客在虚拟世界的虚拟显示设备矩阵262中看到娱乐项目的演绎场景画面,数字人游客可以操作(例如点击操作)虚拟显示设备矩阵262,获取虚拟显示设备矩阵262处对应当前娱乐项目的演绎场景画面的五感信息,再将五感信息输入至游乐项目演绎模块261,通过游乐项目演绎模块261构建出当前娱乐项目的演绎场景画面的交互场景,使数字人游客可以进入当前娱乐项目的演绎场景画面的交互场景。并且,虚拟显示设备矩阵262还可以同步展示数字人游客的交互画面。通过这种方式,可以增加当前数字人游客与其他数字人游客或者非数字人游客进行交互,为数字人游客提供了更好的游乐项目演绎体验。
和/或,获取所述虚拟显示设备矩阵262的通信接口,使得交互系统3的使用者能够与所述虚拟显示设备矩阵262进行交互;响应于交互系统3的使用者在虚拟场景中对应的虚拟目标与所述虚拟显示设备矩阵262的交互,交互系统3的使用者在所述虚拟显示设备矩阵对应的虚拟场景中完成交互。
示例性地,假设交互系统3的使用者为数字人游客,当数字人游客在虚拟世界的虚拟显示设备矩阵262中看到过山车的演绎场景画面,数字人游客可以通过操作(例如点击操作)虚拟显示设备矩阵262,选择过山车中任一排的任意乘客。响应于数字人游客对虚拟显示设备矩阵262的操作,不仅可以获取虚拟显示设备矩阵262处对应当前过山车的演绎场景画面的五感信息,以构建出当前过山车的演绎场景画面的虚拟场景中的交互场景,而且,虚拟显示设备矩阵262可以调用同步体验入口模块264,获取虚拟显示设备矩阵262的通信接口(例如IP地址),使得数字人游客可以直接进入过山车的演绎场景画面对应的交互场景,以所选乘客的视角和感官体验过山车项目。进一步,数字人游客进入过山车的演绎场景画面对应的交互场景,数字人游客可以与周围的其他虚拟乘客(例如其他数字人游客或者非数字人游客)进行交互。其中,在上述过程中,数字人游客可以对虚拟显示设备矩阵262进行其他操作,获取其他位置的乘客的视角和感官体验过山车项目,或者,更改为进入其他娱乐项目的虚拟场景,本公开对此不作具体限制。
应当理解,所述全息广场模块26实现以上功能中的任意一种,或者任意多种的组合。
图11示出根据本公开实施例的同步体验系统的示意图,如图11所示,同步体验系统27可包括但不限于:视角切换模块271、感知系统控制模块272、感知系统采集模块273、同步渲染模块274、穿戴接口模块275、数字人体验模块276。
其中,视角切换模块271用于实现在不同物理世界感知系统1以及不同游客之间的数字人漫游功能,也即实现自由切换到不同物理世界感知系统1视角或者游客视角的功能;感知系统控制模块272用于实现对物理世界感知系统1的实时或者非实时控制,实现同步体验功能,例如可以通过当前正在参与游乐项目的物理世界中的物理世界感知系统1或者游客身上携带的物理世界感知系统1的感知子模块14,实现同步体验功能;感知系统采集模块273用于接收物理世界感知系统1采集的各种感知信息,例如可接收传感服装(在服装的不同位置设置有各种传感器,用于感知身体的位置和运动)采集的感知数据;同步渲染模块274用于根据感知信息,渲染出对应的交互场景;穿戴接口模块275用于将物理世界感知系统1的真实体验(例如携带有真实体验的五感信息)通过穿戴接口控制穿戴设备执行相应的动作(例如震动动作、加热动作、降温动作、电刺激动作等),提供更真实的感受给用户;数字人体验模块276用于提供用户的数字人进入同步体验系统27进行体验。本公开对同步体验系统27的构成不作具体限制。
在一种可能的实现方式中,所述物理世界感知系统1包括在所述现实场景中的游客所携带的物理世界感知系统1的感知子模块14;所述同步体验系统27用于:响应于交互系统3的使用者在虚拟场景中对应的虚拟目标,与所述游客在所述虚拟场景中对应的虚拟目标之间的交互,通过所述交互系统3向所述使用者展示交互信息。
和/或,响应于交互系统的使用者在虚拟场景中对应的虚拟目标,与所述游客在所述虚拟场景中对应的虚拟目标之间的交互,通过所述感知子模块向所述游客展示交互信息;
和/或,响应于多个交互系统3的使用者在虚拟场景中对应的虚拟目标之间的交互,通过所述交互系统3向所述使用者展示交互信息,其中,所述交互信息包括五感信息、生物信息。示例性地,假设存在N个位于不同空间的游客想一起去冲浪,这N个游客可以在同一虚拟的海滩场景创建N个虚拟目标,即数字人游客1~数字人游客N。在这个过程中,每个游客的交互系统3的穿戴组件向游客展示交互信息,例如可以通过语音播报、画面投影、震动反馈等方法,向游客展示五感信息(例如可利用穿戴组件上设置的音响模拟海浪音效,利用穿戴组件上设置的风扇模拟海风)、生物信息(例如心跳信息)等交互信息。本公开对感知子模块14向游客展示交互信息的方式不作具体限制。
和/或,响应于多个游客在所述虚拟场景中对应的虚拟目标之间的交互,通过所述感知子模块14向所述游客展示交互信息,其中,所述交互信息包括五感信息、生物信息。示例性地,假设存在N个位于不同空间的游客想一起去冲浪,这N个游客可以在同一虚拟的海滩场景创建N个虚拟目标,即数字人游客1~数字人游客N。在这个过程中,每个游客携带的感知子模块14可配置一个提示模块,可以通过每个游客携带的感知子模块14向游客展示交互信息,其中,提示模块可以通过语音播报、画面投影、震动反馈等方法,向游客展示五感信息(例如可利用提示模块的音响模拟海浪音效,利用提示模块的风扇模拟海风)、生物信息(例如心跳信息)等交互信息。本公开对感知子模块14向游客展示交互信息的方式不作具体限制。
应当理解,同步体验系统27可实现以上功能中的任意一种,或者任意多种的组合。
通过这种方式,可以通过交互系统3以及游客所携带的物理世界感知系统1的感知子模块14,向游客展示交互信息,有利于进一步提高交互场景的真实度。
在一种可能的实现方式中,所述算力处理中心2还包括票务系统,图12示出根据本公开实施例的票务系统的示意图,如图12所示,所述票务系统28可包括但不限于:售票数字人模块281,虚拟门票模块282、门票验证模块283。
在一种可能的实现方式中,票务系统28中的虚拟门票模块282可用于在数字人游客对应的虚拟目标进入游乐项目场景对应的虚拟场景的情况下,获取使用者的支付信息并生成虚拟凭证。其中,虚拟凭证可以是虚拟门票、虚拟卡,也可以是ID编号、二维码,本公开对此不作限制。
在一种可能的实现方式中,票务系统28中的门票验证模块283可用于对所述支付信息以及虚拟凭证进行验证;在对所述支付信息以及虚拟凭证验证通过的情况下,允许所述虚拟目标获取对应的虚拟服务;在所述支付信息和/或虚拟凭证验证不通过的情况下,拒绝所述虚拟目标获取对应的虚拟服务。
在一种可能的实现方式中,票务系统28中的售票数字人模块281可用于生成虚拟票务人员,所述虚拟票务人员用于对所述支付信息和所述虚拟凭证进行验证。示例性地,虚拟票务人员可以是利用人工智能(Artificial Intelligence,AI)技术实现的机器人客服,也可以是由真人客服控制的虚拟票务人员,还可以是两者结合的虚拟票务人员,例如,在每天的预设时段(比如早8:00-晚8:00),为数字人游客服务的是由真人客服控制的虚拟票务人员;在预设时段以外的时间段,为数字人游客服务的是机器人客服。其中,虚拟票务人员的形象可以包括真人形象、卡通形象、机器人形象、动物形象、植物形象等,本公开对此不作限制。通过售票数字人模块281,可提供票务服务的数字人员工。
应当理解,票务系统28可包括售票数字人模块281,虚拟门票模块282、门票验证模块283中的任意一种,或者任意多者的组合,实现以上功能中的任意一种,或者任意多种的组合。
图13示出根据本公开实施例的虚拟事务系统的示意图,如图13所示,所述虚拟事务系统29可包括但不限于:虚拟事务办理机构291、办理结果模块292、办理数字人293、虚拟纠纷处理器机构294、虚拟治安机构295。
在一种可能的实现方式中,虚拟事务办理机构291用于:在所述虚拟场景中生成虚拟事务办理机构,所述虚拟事务办理机构用于设置所述虚拟场景中的虚拟社会运行规则。
在一种可能的实现方式中,办理结果模块292用于:根据所述虚拟社会运行规则,生成数字人游客对应的虚拟目标对所述虚拟场景中的虚拟事务的办理结果信息。例如,在数字人游客向系统提交开店请求,办理结果模块292可根据预设的虚拟社会运行规则,确定数字人游客的开店请求是否通过的办理结果信息。
在一种可能的实现方式中,办理数字人293用于:生成与虚拟事务办理机构对应的虚拟事务办理数字人,所述虚拟事务办理数字人用于根据所述虚拟社会运行规则,对使用者对应的虚拟目标的需求信息进行响应,生成所述办理结果信息。
示例性地,在数字人游客向虚拟事务办理数字人提交开店请求,虚拟事务办理数字人可根据预设的虚拟社会运行规则,确定数字人游客的开店请求是否通过的办理结果信息。其中,虚拟事务办理数字人可以是利用人工智能(Artificial Intelligence,AI)技术实现的机器人,也可以是由工作人员控制的虚拟事务办理数字人,本公开对此不作限制。其中,虚拟事务办理数字人的形象可以包括真人形象、卡通形象、机器人形象、动物形象、植物形象等,本公开对此不作限制。
在一种可能的实现方式中,虚拟纠纷处理器机构294用于:在所述虚拟场景中生成虚拟纠纷处理机构,所述虚拟纠纷处理机构用于获取两个或多个所述交互系统3的使用者对应的虚拟目标在虚拟场景中的纠纷信息,并根据所述纠纷信息和预设的虚拟社会运行规则,获得纠纷处理结果。示例性地,数字人游客A和数字人游客B在虚拟场景中发生纠纷,可以请求虚拟纠纷处理机构帮忙处理数字人游客A和数字人游客B之间的纠纷,虚拟纠纷处理机构可以根据获取的数字人游客A和数字人游客B之间的纠纷信息,以及预设的虚拟社会运行规则,获得纠纷处理结果。本公开对纠纷信息的具体内容不作限制。
在一种可能的实现方式中,虚拟治安机构295用于:在所述虚拟场景中生成虚拟治安机构,所述虚拟治安机构用于,对于违反预设的虚拟社会运行规则的所述交互系统3的使用者对应的虚拟目标,生成处罚信息,例如,可以限制交互系统3的使用者对应的虚拟目标在虚拟世界的部分或全部权限。
应当理解,虚拟事务系统29可包括虚拟事务办理机构291、办理结果模块292、办理数字人293、虚拟纠纷处理器机构294、虚拟治安机构295中的任意一种,或者任意多者的组合,实现以上功能中的任意一种,或者任意多种的组合。
通过虚拟事务系统29,可以进一步扩展旅游场景交互系统的适用范围,提升用户体验。
图14示出根据本公开实施例的认证系统的示意图,如图14所示,所述认证系统210可以包括但不限于:组织结构认证模块2101、数字人认证模块2102、信息认证模块2103、自定义认证模块2104。
在一种可能的实现方式中,数字人认证模块2102,可用于对所述交互系统3的使用者在虚拟场景中对应的虚拟目标进行注册。
在一种可能的实现方式中,组织结构认证模块2101用于:对所述虚拟场景中的虚拟商业机构进行注册。
在一种可能的实现方式中,组织结构认证模块2101还用于:对所述虚拟场景中的虚拟事务办理机构、虚拟治安机构和/或虚拟纠纷处理机构进行注册。
在一种可能的实现方式中,信息认证模块2103用于:对所述虚拟场景中的多个位置处展示的信息进行注册。
在一种可能的实现方式中,自定义认证模块2104用于:对所述虚拟场景中预设的虚拟人物目标、虚拟动物目标、虚拟植物目标、虚拟建筑目标、虚拟设施目标中的至少一种进行注册。应当理解,定义认证模块2104可根据实际的需求进行设定,本公开对此不作限制。
应当理解,所述认证系统210可以包括组织结构认证模块2101、数字人认证模块2102、信息认证模块2103、自定义认证模块2104中的任意一种,或者任意多者的组合,实现以上功能中的任意一种,或者任意多种的组合。
通过认证系统210,可以对虚拟世界中的各类虚拟目标进行注册,实现对虚拟世界中的各类虚拟目标的认证,有利于提高旅游场景交互系统的安全性。
图15示出根据本公开实施例的交互系统3的示意图,如图15所示,交互系统3可以包括但不限于:穿戴组件31、交互组件32、脑机接口组件33、全息组件34。
在一种可能的实现方式中,所述交互系统3包括穿戴组件31,所述展示所述交互场景包括:通过所述穿戴组件31,展示所述交互场景的五感信息,其中,所述五感信息包括视觉信息、触觉信息、听觉信息、嗅觉信息和味觉信息中的至少一种。其中,穿戴组件31的形式可以包括服装、眼镜、帽子、手套、手表、项链、手链、服饰及鞋等,本公开对此不作限制。
在一种可能的实现方式中,所述交互系统3包括交互组件32,所述交互组件32可包括虚拟现实VR组件、增强现实AR组件、混合现实MR组件、扩展现实XR组件、裸眼3D组件、全息图组件中的至少一种;所述展示所述交互场景包括:通过所述虚拟现实VR组件、所述增强现实AR组件、混合现实MR组件、扩展现实XR组件、裸眼3D组件、全息图组件中的至少一种,展示所述交互场景的视觉信息和听觉信息中的至少一种。
示例性地,虚拟现实VR组件可以是采用虚拟现实技术(Virtual Reality,VR)的电子设备,用于模拟产生一个虚拟世界,提供用户关于视觉、听觉等感官的模拟,用户戴上虚拟现实VR组件就看不到现实世界,看到的所有东西都是计算机生成的,都是虚拟的。
示例性地,增强现实AR组件是采用增强现实技术(Augmented Reality,AR)的电子设备,用于将真实世界信息和虚拟世界信息进行集成,将在现实世界的一定时间空间范围内很难体验到的实体信息(视觉信息、声音、味道、触觉等),通过电脑等科学技术,模拟仿真后再叠加,将虚拟的信息应用到真实世界,被人类感官所感知,从而达到超越现实的感官体验。例如,增强现实AR组件可以实现真实的环境和虚拟的物体实时地叠加到同一个画面或空间,真实与虚拟同时存在,但是,增强现实AR组件无法使真实环境与虚拟内容发生交互。
示例性地,混合现实MR组件可以是采用混合现实技术(Mediated Reality,MR)的电子设备,混合现实MR组件可以在虚拟世界、现实世界和用户之间,利用数字技术实现实时交互的复杂环境。通过混合现实MR组件,可以将真实世界和虚拟世界混合在一起,混合现实MR组件产生的可视化环境可以同时包含物理实体与虚拟内容,并且,物理实体可以与虚拟内容发生交互。
示例性地,扩展现实XR组件可以是采用扩展现实技术(Extended Reality,XR)的电子设备,展现实技术(Extended Reality,XR)包含了虚拟现实技术(Virtual Reality,VR)、增强现实技术(Augmented Reality,AR)、混合现实技术(Mediated Reality,MR),可利用硬件设备结合多种技术手段,将虚拟的内容和真实场景融合。例如,扩展现实XR组件可通过计算机技术和可穿戴设备产生一个真实与虚拟组合的、可人机交互的环境。
示例性地,裸眼3D组件可以不借助偏振光眼镜等外部工具,实现立体视觉效果。例如,裸眼3D组件可以包括基于光屏障技术的电子设备,以及基于柱状透镜技术的电子设备。其中,光屏障技术可使用一个开关液晶屏、偏振膜和高分子液晶层,利用液晶层和偏振膜制造出一系列方向为90°的垂直条纹。这些条纹宽几十微米,通过它们的光就形成了垂直的细条栅模式的视差障壁。光屏障技术可利用安置在背光模块及液晶面板间的视差障壁,通过将左眼和右眼的可视画面分开,使用户看到3D影像。柱状透镜技术可以使液晶屏的像平面位于透镜的焦平面上,这样在每个柱透镜下面的图像的像素被分成几个子像素,这样透镜就能以不同的方向投影每个子像素。于是用户的双眼从不同的角度观看显示屏,就可以看到不同的子像素。
示例性地,全息图组件,用于实现真实的三维图像的记录和再现的硬件设备,全息图组件可以提供视差,使用户可以通过前后、左右和上下移动来观察图像的不同形象。
为了提高虚拟旅游的真实感,可通过虚拟现实VR组件、增强现实AR组件、混合现实MR组件、扩展现实XR组件、裸眼3D组件、全息图组件中的至少一种,展示交互场景的视觉信息和听觉信息中的至少一种。
在一种可能的实现方式中,所述交互系统3包括脑机接口组件33,所述展示所述交互场景包括:通过脑机接口组件33,生成与所述交互场景对应的刺激信号;通过所述刺激信号,展示所述交互场景的五感信息,其中,所述五感信息包括视觉信息、触觉信息、听觉信息、嗅觉信息和味觉信息中的至少一种。
示例性地,大脑是人体的信息中枢,人体的五感器官会将搜集到的信息反馈给大脑,大脑将这些信息转化成相应的视觉信号、触觉信息、听觉信号、嗅觉信息和味觉信号。例如,在人的视野范围内,以一定强度的闪光或图形刺激视网膜,可在视觉皮层记录到电位变化,也即视觉信息。利用脑机接口(Brain Computer Interface,BCI)组件,可以在人与外部设备之间创建连接,实现脑与设备的信息交换。这样通过交互系统3的脑机接口组件33,建立与用户大脑的连接,直接通过交互场景对应的刺激信号,向用户展示交互场景的五感信息。
在一种可能的实现方式中,所述交互系统3包括全息组件34,所述展示所述交互场景包括:通过所述全息组件34,在预设的现实区域中,展示所述交互场景的五感信息,所述五感信息包括视觉信息、听觉信息、触觉信息、嗅觉信息和味觉信息中的至少一种。
示例性地,所述全息组件3可包括一个或多个投影设备,可利用投影线之间的干涉和衍射原理记录并再现物体真实的三维图像,在预设的现实区域中展示交互场景的视觉信息。所述全息组件3可包括音响,在预设的现实区域中展示交互场景的听觉信息;所述全息组件3可包括基于空气的触觉反馈设备和/或空气喷射设备,在预设的现实区域中展示交互场景的触觉信息;所述全息组件3可包括物理气味模拟识别,可用于提供实时的气味合成,在预设的现实区域中展示交互场景的嗅觉信息;所述全息组件3可包括味觉模拟电极(Digital Taste Interface),用于对味觉进行数字化模拟,在预设的现实区域中展示交互场景的味觉信息。应当理解,本公开对全息组件34的具体构成不作限制。
在一种可能的实现方式中,通过所述全息组件,在所述预设的现实区域中,设置虚拟阻隔设施,所述虚拟阻隔设施用于阻隔所述五感信息,所述五感信息包括视觉信息、听觉信息、触觉信息、嗅觉信息和味觉信息中的至少一种。
示例性地,假设存在现实区域A和现实区域B相邻,现实区域A的空间用于为用户A展示景点A的虚拟场景,现实区域B的空间用于为用户B展示景点B的虚拟场景。为了使景点A的虚拟场景与景点B的虚拟场景之间不会相互干扰,可以在现实区域A的边界,以及现实区域B的边界设置虚拟阻隔设施(例如虚拟阻隔墙),用于阻隔当前虚拟化场景的五感信息。这样,现实区域A的空间不会出现景点B的虚拟场景,现实区域B的空间不会出现景点A的虚拟场景。
通过设置虚拟阻隔设施,可以减少不同交虚拟场景之间发生相互干扰的概率。
图16示出根据本公开实施例的旅游场景交互系统的数据流的示意图,如图16所示,如图16所示,用户可以登录交互系统3(例如包括穿戴组件、实VR组件、增强现实AR组件、混合现实MR组件、扩展现实XR组件、脑机接口组件等),可以进入交互系统3展示出的交互场景,例如,用户可以进入虚拟事务系统29办理虚拟事务,进入认证系统210对虚拟场景中的各类虚拟目标进行注册,进入动态乐园模块25沉浸式体验各类虚拟游乐项目,进入客服模块24进行服务咨询,进入票务系统28获取各类沉浸式体验的权限,以及进入由世界建立模块22建立的用于模拟现实世界的静态数字孪生世界。
其中,通过物理世界感知系统1对现实世界的当前环境进行扫描,可获取到现实场景的感知信息。世界建立模块22可根据物理世界感知系统1扫描到的感知信息建立静态数字孪生世界。
其中,用户进入动态乐园模块25,还可以在全息广场模块26的虚拟显示设备矩阵262中看到各类娱乐项目的演绎场景画面,选择感兴趣的娱乐项目,并且可以利用同步体验系统27(例如可通过全息广场模块26的同步体验入口模块264调用同步体验系统27),将用户在虚拟世界中的数字人游客的视角与娱乐项目中任一目标对象(例如娱乐项目的任一参与者)的视角同步,然后利用虚拟世界引擎21构建对应的交互场景。进一步,用户还可以通过漫游模块23选择在静态数字孪生世界中漫游,还是在与物理世界同步的数字孪生世界漫游。
通过旅游场景交互系统,可以构建虚拟三维立体的旅游环境,更高效更真实地模拟现实世界中的旅游景观,打破了空间的物理限制,使用户足不出户,就可以体验到亲临现场的感觉。其中,本公开实施例的旅游场景交互系统不仅可以非实时地体验系统固有的静态数字孪生世界,还可以实时体验与物理世界同步的数字孪生世界。
可以理解,本公开提及的上述各个方法实施例,在不违背原理逻辑的情况下,均可以彼此相互结合形成结合后的实施例,限于篇幅,本公开不再赘述。本领域技术人员可以理解,在具体实施方式的上述方法中,各步骤的具体执行顺序应当以其功能和可能的内在逻辑确定。
本公开实施例的物理世界感知系统、算力处理中心、以及交互系统等电子设备可以被提供为终端、服务器或其它形态的设备。
本公开涉及增强现实领域,通过获取现实环境中的目标对象的图像信息,进而借助各类视觉相关算法实现对目标对象的相关特征、状态及属性进行检测或识别处理,从而得到与具体应用匹配的虚拟与现实相结合的AR效果。示例性的,目标对象可涉及与人体相关的脸部、肢体、手势、动作等,或者与物体相关的标识物、标志物,或者与场馆或场所相关的沙盘、展示区域或展示物品等。视觉相关算法可涉及视觉定位、SLAM、三维重建、图像注册、背景分割、对象的关键点提取及跟踪、对象的位姿或深度检测等。具体应用不仅可以涉及跟真实场景或物品相关的导览、导航、讲解、重建、虚拟效果叠加展示等交互场景,还可以涉及与人相关的特效处理,比如妆容美化、肢体美化、特效展示、虚拟模型展示等交互场景。可通过卷积神经网络,实现对目标对象的相关特征、状态及属性进行检测或识别处理。上述卷积神经网络是基于深度学习框架进行模型训练而得到的网络模型。
图17示出根据本公开实施例的一种电子设备1900的框图。例如,电子设备1900可以被提供为一服务器或终端设备。参照图17,电子设备1900包括算力处理中心1922,其进一步包括一个或多个处理器,以及由存储器1932所代表的存储器资源,用于存储可由算力处理中心1922的执行的指令,例如应用程序。存储器1932中存储的应用程序可以包括一个或一个以上的每一个对应于一组指令的模块。此外,算力处理中心1922被配置为执行指令,以执行上述方法。
电子设备1900还可以包括一个电源组件1926被配置为执行电子设备1900的电源管理,一个有线或无线网络接口1950被配置为将电子设备1900连接到网络,和一个输入输出(I/O)接口1958。电子设备1900可以操作基于存储在存储器1932的操作系统,例如微软服务器操作系统(Windows ServerTM),苹果公司推出的基于图形用户界面操作系统(Mac OSXTM),多用户多进程的计算机操作系统(UnixTM),自由和开放原代码的类Unix操作系统(LinuxTM),开放原代码的类Unix操作系统(FreeBSDTM)或类似。
在示例性实施例中,还提供了一种非易失性计算机可读存储介质,例如包括计算机程序指令的存储器1932,上述计算机程序指令可由电子设备1900的算力处理中心1922执行以完成上述方法。
本公开可以是系统、方法和/或计算机程序产品。计算机程序产品可以包括计算机可读存储介质,其上载有用于使处理器实现本公开的各个方面的计算机可读程序指令。
计算机可读存储介质可以是可以保持和存储由指令执行设备使用的指令的有形设备。计算机可读存储介质例如可以是(但不限于)电存储设备、磁存储设备、光存储设备、电磁存储设备、半导体存储设备或者上述的任意合适的组合。计算机可读存储介质的更具体的例子(非穷举的列表)包括:便携式计算机盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、静态随机存取存储器(SRAM)、便携式压缩盘只读存储器(CD-ROM)、数字多功能盘(DVD)、记忆棒、软盘、机械编码设备、例如其上存储有指令的打孔卡或凹槽内凸起结构、以及上述的任意合适的组合。这里所使用的计算机可读存储介质不被解释为瞬时信号本身,诸如无线电波或者其他自由传播的电磁波、通过波导或其他传输媒介传播的电磁波(例如,通过光纤电缆的光脉冲)、或者通过电线传输的电信号。
这里所描述的计算机可读程序指令可以从计算机可读存储介质下载到各个计算/处理设备,或者通过网络、例如因特网、局域网、广域网和/或无线网下载到外部计算机或外部存储设备。网络可以包括铜传输电缆、光纤传输、无线传输、路由器、防火墙、交换机、网关计算机和/或边缘服务器。每个计算/处理设备中的网络适配卡或者网络接口从网络接收计算机可读程序指令,并转发该计算机可读程序指令,以供存储在各个计算/处理设备中的计算机可读存储介质中。
用于执行本公开操作的计算机程序指令可以是汇编指令、指令集架构(ISA)指令、机器指令、机器相关指令、微代码、固件指令、状态设置数据、或者以一种或多种编程语言的任意组合编写的源代码或目标代码,所述编程语言包括面向对象的编程语言—诸如Smalltalk、C++等,以及常规的过程式编程语言—诸如“C”语言或类似的编程语言。计算机可读程序指令可以完全地在用户计算机上执行、部分地在用户计算机上执行、作为一个独立的软件包执行、部分在用户计算机上部分在远程计算机上执行、或者完全在远程计算机或服务器上执行。在涉及远程计算机的情形中,远程计算机可以通过任意种类的网络—包括局域网(LAN)或广域网(WAN)—连接到用户计算机,或者,可以连接到外部计算机(例如利用因特网服务提供商来通过因特网连接)。在一些实施例中,通过利用计算机可读程序指令的状态信息来个性化定制电子电路,例如可编程逻辑电路、现场可编程门阵列(FPGA)或可编程逻辑阵列(PLA),该电子电路可以执行计算机可读程序指令,从而实现本公开的各个方面。
这里参照根据本公开实施例的方法、装置(系统)和计算机程序产品的流程图和/或框图描述了本公开的各个方面。应当理解,流程图和/或框图的每个方框以及流程图和/或框图中各方框的组合,都可以由计算机可读程序指令实现。
这些计算机可读程序指令可以提供给通用计算机、专用计算机或其它可编程数据处理装置的处理器,从而生产出一种机器,使得这些指令在通过计算机或其它可编程数据处理装置的处理器执行时,产生了实现流程图和/或框图中的一个或多个方框中规定的功能/动作的装置。也可以把这些计算机可读程序指令存储在计算机可读存储介质中,这些指令使得计算机、可编程数据处理装置和/或其他设备以特定方式工作,从而,存储有指令的计算机可读介质则包括一个制造品,其包括实现流程图和/或框图中的一个或多个方框中规定的功能/动作的各个方面的指令。
也可以把计算机可读程序指令加载到计算机、其它可编程数据处理装置、或其它设备上,使得在计算机、其它可编程数据处理装置或其它设备上执行一系列操作步骤,以产生计算机实现的过程,从而使得在计算机、其它可编程数据处理装置、或其它设备上执行的指令实现流程图和/或框图中的一个或多个方框中规定的功能/动作。
附图中的流程图和框图显示了根据本公开的多个实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上,流程图或框图中的每个方框可以代表一个模块、程序段或指令的一部分,所述模块、程序段或指令的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。在有些作为替换的实现中,方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如,两个连续的方框实际上可以基本并行地执行,它们有时也可以按相反的顺序执行,这依所涉及的功能而定。也要注意的是,框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合,可以用执行规定的功能或动作的专用的基于硬件的系统来实现,或者可以用专用硬件与计算机指令的组合来实现。
该计算机程序产品可以具体通过硬件、软件或其结合的方式实现。在一个可选实施例中,所述计算机程序产品具体体现为计算机存储介质,在另一个可选实施例中,计算机程序产品具体体现为软件产品,例如软件开发包(Software Development Kit,SDK)等等。
上文对各个实施例的描述倾向于强调各个实施例之间的不同之处,其相同或相似之处可以互相参考,为了简洁,本文不再赘述。
本领域技术人员可以理解,在具体实施方式的上述方法中,各步骤的撰写顺序并不意味着严格的执行顺序而对实施过程构成任何限定,各步骤的具体执行顺序应当以其功能和可能的内在逻辑确定。
若本申请技术方案涉及个人信息,应用本申请技术方案的产品在处理个人信息前,已明确告知个人信息处理规则,并取得个人自主同意。若本申请技术方案涉及敏感个人信息,应用本申请技术方案的产品在处理敏感个人信息前,已取得个人单独同意,并且同时满足“明示同意”的要求。例如,在摄像头等个人信息采集装置处,设置明确显著的标识告知已进入个人信息采集范围,将会对个人信息进行采集,若个人自愿进入采集范围即视为同意对其个人信息进行采集;或者在个人信息处理的装置上,利用明显的标识/信息告知个人信息处理规则的情况下,通过弹窗信息或请个人自行上传其个人信息等方式获得个人授权;其中,个人信息处理规则可包括个人信息处理者、个人信息处理目的、处理方式以及处理的个人信息种类等信息。
以上已经描述了本公开的各实施例,上述说明是示例性的,并非穷尽性的,并且也不限于所披露的各实施例。在不偏离所说明的各实施例的范围和精神的情况下,对于本技术领域的普通技术人员来说许多修改和变更都是显而易见的。本文中所用术语的选择,旨在最好地解释各实施例的原理、实际应用或对市场中的技术的改进,或者使本技术领域的其它普通技术人员能理解本文披露的各实施例。

Claims (19)

1.一种旅游场景交互系统,其特征在于,包括:算力处理中心、交互系统以及物理世界感知系统;
所述物理世界感知系统用于:
感知现实场景中的环境信息,获得感知信息;
所述算力处理中心用于:
根据预设的虚拟场景模型,构建虚拟场景;
根据所述物理世界感知系统获取的所述感知信息,构建所述虚拟场景中的交互场景;
所述交互系统用于展示所述交互场景。
2.根据权利要求1所述的系统,其特征在于,所述交互系统包括穿戴组件、虚拟现实VR组件、增强现实AR组件、混合现实MR组件、扩展现实XR组件、裸眼3D组件、全息图组件、脑机接口组件、全息组件中的至少一种;
所述展示所述交互场景包括:
通过所述穿戴组件、虚拟现实VR组件、增强现实AR组件、混合现实MR组件、扩展现实XR组件、裸眼3D组件、全息图组件、脑机接口组件、全息组件中的至少一种,展示所述交互场景的五感信息,其中,所述五感信息包括视觉信息、触觉信息、听觉信息、嗅觉信息和味觉信息中的至少一种。
3.根据权利要求2所述的系统,其特征在于,所述展示所述交互场景,还包括:在预设的现实区域中,设置虚拟阻隔设施,所述虚拟阻隔设施用于阻隔所述五感信息。
4.根据权利要求1所述的系统,其特征在于,所述算力处理中心包括虚拟世界引擎,其中,所述虚拟世界引擎包括材料模拟引擎、力学模拟引擎、运动模拟引擎、流体模拟引擎、规律模拟引擎、光线模拟引擎、热力模拟引擎、声音模拟引擎、电力模拟引擎中的至少一种;
所述构建虚拟场景包括:通过所述虚拟世界引擎包括的材料模拟引擎、力学模拟引擎、运动模拟引擎、流体模拟引擎、规律模拟引擎、光线模拟引擎、热力模拟引擎、声音模拟引擎、电力模拟引擎中的至少一种,构建用于模拟现实场景的虚拟场景;
其中,所述材料模拟引擎,用于使所述虚拟场景中的虚拟材料的属性信息与现实场景中的现实材料的属性信息一致;所述力学模拟引擎,用于使所述虚拟场景中的虚拟物体的力学表现与现实场景中的现实物体的力学表现一致;所述运动模拟引擎,用于使所述虚拟场景中的虚拟物体的运动表现与现实场景中的现实物体的运动表现一致;所述流体模拟引擎,用于使所述虚拟场景中的虚拟流体的流动规律与现实场景中的现实流体的流动规律一致;所述规律模拟引擎,用于使所述虚拟场景中的物理规律与现实场景中的物理规律一致;所述光线模拟引擎,用于使虚拟场景中光线传播规律与现实场景中的光线传播规律一致;所述热力模拟引擎,用于使虚拟场景中的热量传导规律与现实场景中的热量传导规律一致;所述声音模拟引擎,用于使虚拟场景中的声音传播规律与现实场景中的声音传播规律一致;所述电力模拟引擎,用于使虚拟场景中的电力运行规律与现实场景中的电力运行规律一致。
5.根据权利要求1所述的系统,其特征在于,所述算力处理中心包括世界建立模块,所述世界建立模块用于对现实世界进行数字化映射,构建与现实世界对应的静态数字孪生世界;其中,所述静态数字孪生世界包括至少一种虚拟场景,所述虚拟场景用于模拟所述现实世界中的现实场景。
6.根据权利要求5所述的系统,其特征在于,所述世界建立模块还用于:
根据与所述虚拟场景对应的现实场景,获得所述虚拟场景模型的场景信息,所述场景信息用于表征虚拟场景的特征信息;
根据所述虚拟场景模型的所述场景信息,获取所述虚拟场景模型的模型参数;
根据所述虚拟场景模型和所述模型参数,构建所述虚拟场景。
7.根据权利要求5所述的系统,其特征在于,所述世界建立模块包括感知数据库模块、模型工厂模块、模型审批模块中的至少一种,
所述感知数据库模块用于:存储所述现实场景的感知数据,所述感知数据包括所述现实场景中多个物体的物理模型、动态视频、环境信息、五感信息、生物信息中的至少一种;根据所述感知数据,提供用于构建虚拟场景的数据库;
所述模型工厂模块用于:提供构建虚拟场景的虚拟场景模型库,所述虚拟场景模型库包括系统预设的虚拟场景模型、历史构建的虚拟场景模型;以及对所述虚拟场景模型库中的虚拟场景模型进行增加、删除、修改及查询操作;
所述模型审批模块用于:对新建立的所述虚拟场景模型进行审核,获得审核结果;其中,所述审核结果为审核通过的虚拟场景模型用于构建所述虚拟场景。
8.根据权利要求1所述的系统,其特征在于,所述物理世界感知系统包括空间感知模块,生物感知模块、三维扫描成像模块中的至少一种,
所述空间感知模块用于感知场景目标在现实场景中的空间位置信息、空间运动轨迹信息中的至少一种,所述算力处理中心用于:根据所述物理世界感知系统的空间感知模块感知到的所述场景目标的空间位置信息、空间运动轨迹信息中的至少一种,确定所述场景目标对应的虚拟目标在所述虚拟场景中的第一场景信息,所述第一场景信息包括位置信息、速度信息、视角信息中的至少一种;根据所述第一场景信息,确定所述虚拟目标在所述虚拟场景中的感知信息;根据所述感知信息,构建所述交互场景;
所述物理世界感知系统包括生物感知模块,所述生物感知模块用于感知交互场景的五感信息和/或生物信息,所述算力处理中心用于:获取所述物理世界感知系统的生物感知模块感知到的所述交互场景的五感信息和/或生物信息,其中,所述五感信息包括视觉信息、听觉信息、嗅觉信息、触觉信息和味觉信息中的至少一种;述交互系统用于展示所述交互场景的五感信息和/或生物信息;
所述物理世界感知系统包括三维扫描成像模块,所述三维扫描成像模块用于获取现实场景的三维扫描数据,所述三维扫描数据用于承载三维结构信息,所述算力处理中心用于:根据所述三维扫描成像模块感知到的所述现实场景的三维扫描数据,构建与所述现实场景对应的虚拟场景。
9.根据权利要求1所述的系统,其特征在于,所述物理世界感知系统包括感知子模块,所述感知子模块包括在所述现实场景中的游客所携带的感知子模块,和/或,在所述现实场景中的预设位置处的感知子模块,所述预设位置包括所述现实场景的空中、陆地、水中中的至少一种的预设位置;
所述算力处理中心进一步用于:
通过所述游客所携带的感知子模块,获得所述游客的感知信息,所述感知信息包括位置信息、三维空间结构信息、五感信息、生物信息中的至少一种;
根据所述游客的实时或非实时的感知信息,构建所述交互场景;
和/或,
通过所述预设位置处的感知子模块,获得所述预设位置处的场景感知信息,所述场景感知信息包括三维空间结构信息、五感信息、生物信息中的至少一种;
根据所述预设位置处的场景感知信息,构建所述交互场景。
10.根据权利要求8或9所述的系统,其特征在于,所述物理世界感知系统包括通信组件,用于将位于所述现实场景中的物理世界感知系统获取的感知信息发送至所述算力处理中心;
所述物理世界感知系统还包括感知平台,所述感知平台用于承载至少一个传感器,所述至少一个传感器用于采集位置信息、三维空间结构信息、五感信息、生物信息中的至少一种。
11.根据权利要求9所述的系统,其特征在于,所述算力处理中心还包括漫游模块,所述漫游模块用于:
获取现实场景中的至少一位游客的感知信息构建的交互场景,在所述至少一位游客的感知信息构建的交互场景中漫游;
和/或,
获取多个预设位置处的感知信息构建的交互场景,在所述多个预设位置处的感知信息构建的交互场景之间漫游;
和/或,
在所述现实场景中的预设位置处的所述感知子模块获取的交互场景,与所述现实场景中的游客所携带的所述感知子模块获取的交互场景之间漫游,其中,所述交互场景包括设置在现实场景中的预设位置处的物理世界感知系统的感知子模块获取的场景信息,以及在所述现实场景中的游客所携带的物理世界感知系统的感知子模块获取的场景信息;
和/或,
在根据所述交互系统的使用者对应的虚拟目标在所述虚拟场景中的感知信息构建的交互场景、设置在现实场景中的预设位置处的物理世界感知系统的感知子模块获取的交互场景、在所述现实场景中的游客所携带的物理世界感知系统的感知子模块获取的交互场景之间漫游。
12.根据权利要求11所述的系统,其特征在于,所述交互场景包括历史场景,所述历史场景包括设置在现实场景中的预设位置处所述感知子模块在历史时刻所感知的历史场景信息,以及在所述现实场景中的游客所携带的所述感知子模块在历史时刻所感知到的历史场景信息;
所述漫游模块进一步用于:
在所述现实场景中的预设位置处的历史场景,与所述现实场景中的游客所携带的感知子模块感知过的历史场景之间漫游;
和/或,
在根据所述交互系统的使用者对应的虚拟目标在所述虚拟场景中的感知信息构建的交互场景、设置在现实场景中的预设位置处的历史场景、所述现实场景中的游客所携带的感知子模块感知过的历史场景之间漫游。
13.根据权利要求1所述的系统,其特征在于,所述算力处理中心还包括客服模块,所述客服模块用于:
对虚拟客服目标进行验证,在验证通过的情况下,允许所述虚拟客服目标与所述交互系统的使用者在虚拟场景中的虚拟目标进行交互;
和/或,
生成与现实场景中的客服空间中的客服人员对应的虚拟客服目标,为所述虚拟客服目标提供用于工作和\或休息的虚拟场景;
和/或,
在现实客服人员与虚拟客服目标的信息同步的情况下,响应于数字人游客在虚拟场景中对应的虚拟目标与所述虚拟客服目标的交互,使所述数字人游客与所述客服人员建立面对面的交互,所述数字人游客包括交互系统的使用者。
14.根据权利要求1所述的系统,其特征在于,所述现实场景包括游乐项目场景,所述物理世界感知系统包括设置在所述游乐项目场景内的物理世界感知系统,
所述算力处理中心包括动态乐园模块,用于:
获取所述物理世界感知系统检测到的所述游乐项目场景的实时现实世界信息,其中,所述实时现实世界信息包括所述游乐项目场景的交通状况信息、客流状况信息、营业信息、天气信息、环境信息中的至少一种;
根据所述实时现实世界信息,获得所述虚拟场景。
15.根据权利要求14所述的系统,其特征在于,所述算力处理中心还包括全息广场模块,所述全息广场模块用于:
在所述虚拟场景中添加虚拟显示设备矩阵,通过所述虚拟显示设备显示所述实时现实世界信息,以及与所述游乐项目场景对应的介绍信息、娱乐项目的演绎场景画面中的至少一种;
和/或,
获取所述虚拟显示设备矩阵处的五感信息,使得交互系统的使用者能够与所述虚拟显示设备矩阵进行交互,响应于交互系统的使用者在虚拟场景中对应的虚拟目标与所述虚拟显示设备矩阵的交互,在所述虚拟显示设备矩阵中展示交互画面;
和/或,
获取所述虚拟显示设备矩阵的通信接口,使得交互系统的使用者能够与所述虚拟显示设备矩阵进行交互,响应于交互系统的使用者在虚拟场景中对应的虚拟目标与所述虚拟显示设备矩阵的交互,交互系统的使用者在所述虚拟显示设备对应的虚拟场景中完成交互。
16.根据权利要求1所述的系统,其特征在于,所述物理世界感知系统包括在所述现实场景中的游客所携带的物理世界感知系统的感知子模块;
所述算力处理中心还包括同步体验系统,用于:
响应于交互系统的使用者在虚拟场景中对应的虚拟目标,与所述游客在所述虚拟场景中对应的虚拟目标之间的交互,通过所述交互系统向所述使用者展示交互信息;
和/或,
响应于交互系统的使用者在虚拟场景中对应的虚拟目标,与所述游客在所述虚拟场景中对应的虚拟目标之间的交互,通过所述感知子模块向所述游客展示交互信息;
和/或,
响应于多个交互系统的使用者在虚拟场景中对应的虚拟目标之间的交互,通过所述交互系统向所述使用者展示交互信息;
和/或,
响应于多个游客在所述虚拟场景中对应的虚拟目标之间的交互,通过所述感知子模块向所述游客展示交互信息;
其中,所述交互信息包括五感信息、生物信息。
17.根据权利要求1所述的系统,其特征在于,所述算力处理中心还包括票务系统,所述票务系统用于:
在数字人游客对应的虚拟目标进入游乐项目场景对应的虚拟场景的情况下,获取使用者的支付信息并生成虚拟凭证;
对所述支付信息以及虚拟凭证进行验证;
在对所述支付信息以及虚拟凭证验证通过的情况下,允许所述虚拟目标获取对应的虚拟服务;
其中,所述票务系统还用于生成虚拟票务人员,所述虚拟票务人员用于对所述支付信息和所述虚拟凭证进行验证。
18.根据权利要求1所述的系统,其特征在于,所述算力处理中心还包括虚拟事务系统,用于:
在所述虚拟场景中生成虚拟事务办理机构,所述虚拟事务办理机构用于设置所述虚拟场景中的虚拟社会运行规则;
和/或,
根据所述虚拟社会运行规则,生成数字人游客对应的虚拟目标对所述虚拟场景中的虚拟事务的办理结果信息;
和/或,
生成与虚拟事务办理机构对应的虚拟事务办理数字人,所述虚拟事务办理数字人用于根据所述虚拟社会运行规则,对使用者对应的虚拟目标的需求信息进行响应,生成所述办理结果信息;
和/或,
在所述虚拟场景中生成虚拟纠纷处理机构,所述虚拟纠纷处理机构用于获取两个或多个所述交互系统的使用者对应的虚拟目标在虚拟场景中的纠纷信息,并根据所述纠纷信息和预设的虚拟社会运行规则,获得纠纷处理结果;
和/或,
在所述虚拟场景中生成虚拟治安机构,所述虚拟治安机构用于,对于违反预设的虚拟社会运行规则的所述交互系统的使用者对应的虚拟目标,生成处罚信息。
19.根据权利要求1所述的系统,其特征在于,所述算力处理中心还包括认证系统,用于:
对所述交互系统的使用者在虚拟场景中对应的虚拟目标进行注册;
和/或,
对所述虚拟场景中的虚拟商业机构进行注册;
和/或,
对所述虚拟场景中的虚拟事务办理机构、虚拟治安机构和/或虚拟纠纷处理机构进行注册;
和/或,
对所述虚拟场景中的多个位置处展示的信息进行注册;
和/或,
对所述虚拟场景中预设的虚拟人物目标、虚拟动物目标、虚拟植物目标、虚拟建筑目标、虚拟设施目标中的至少一种进行注册。
CN202310300863.XA 2023-03-24 2023-03-24 旅游场景交互系统 Pending CN116185203A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202310300863.XA CN116185203A (zh) 2023-03-24 2023-03-24 旅游场景交互系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202310300863.XA CN116185203A (zh) 2023-03-24 2023-03-24 旅游场景交互系统

Publications (1)

Publication Number Publication Date
CN116185203A true CN116185203A (zh) 2023-05-30

Family

ID=86434648

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202310300863.XA Pending CN116185203A (zh) 2023-03-24 2023-03-24 旅游场景交互系统

Country Status (1)

Country Link
CN (1) CN116185203A (zh)

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107895330A (zh) * 2017-11-28 2018-04-10 特斯联(北京)科技有限公司 一种面向智慧旅游实现场景构建的游客服务平台
CN110018742A (zh) * 2019-04-03 2019-07-16 北京八亿时空信息工程有限公司 一种网络虚拟旅游系统及其构建方法

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107895330A (zh) * 2017-11-28 2018-04-10 特斯联(北京)科技有限公司 一种面向智慧旅游实现场景构建的游客服务平台
CN110018742A (zh) * 2019-04-03 2019-07-16 北京八亿时空信息工程有限公司 一种网络虚拟旅游系统及其构建方法

Similar Documents

Publication Publication Date Title
Nayyar et al. Virtual Reality (VR) & Augmented Reality (AR) technologies for tourism and hospitality industry
Balakrishnan et al. Interaction of Spatial Computing In Augmented Reality
US11663789B2 (en) Recognizing objects in a passable world model in augmented or virtual reality systems
US10637897B2 (en) System and method for augmented and virtual reality
Kawai et al. Tsunami evacuation drill system using smart glasses
Sünger et al. Augmented reality: historical development and area of usage
JP2019509540A (ja) マルチメディア情報を処理する方法及び装置
Stanney et al. Virtual environments in the 21st century
CN116185203A (zh) 旅游场景交互系统
JP7245890B1 (ja) 情報処理システム、情報処理方法、情報処理プログラム
JP2023075879A (ja) 情報処理システム、情報処理方法、情報処理プログラム
Soliman et al. Artificial intelligence powered Metaverse: analysis, challenges and future perspectives
CN106358104A (zh) 一种具备隐藏视像屏及多种传感器的耳机
Wang High-Performance Many-Light Rendering
Kramar et al. Peculiarities of Augmented Reality Usage in a Mobile Application: the Case of the Ivan Puluj Digital Museum.
Charalampos et al. EnDiCE: Enhanced digital cultural experience
Wolfenstetter Applications of augmented reality technology for archaeological purposes
Harish et al. Augmented Reality Applications in Gaming
Neupane et al. Experiences with a Virtual Reality System for Immersive Decision Making and Learning
Alpat Augmented reality wayfinding: A systematic literature review
Silion Institutional Mixed Reality Digital Transformation using Digital Twins
CN116342842A (zh) 一种虚拟世界的数据传输系统
Liarokapis Habilitation Thesis
Partarakis et al. Mixed Reality Gamified Presence and Storytelling for Virtual Museums
NZ765499B2 (en) System and method for augmented and virtual reality

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination