CN112379769A - 虚拟场景业务信息的处理方法、系统以及云管理平台 - Google Patents

虚拟场景业务信息的处理方法、系统以及云管理平台 Download PDF

Info

Publication number
CN112379769A
CN112379769A CN202010278466.3A CN202010278466A CN112379769A CN 112379769 A CN112379769 A CN 112379769A CN 202010278466 A CN202010278466 A CN 202010278466A CN 112379769 A CN112379769 A CN 112379769A
Authority
CN
China
Prior art keywords
scene
service information
processing
interaction
rendering
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202010278466.3A
Other languages
English (en)
Inventor
林劲松
何真元
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Pisx Shanghai Co ltd
Original Assignee
Pisx Shanghai Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Pisx Shanghai Co ltd filed Critical Pisx Shanghai Co ltd
Priority to CN202010278466.3A priority Critical patent/CN112379769A/zh
Publication of CN112379769A publication Critical patent/CN112379769A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • G06T19/006Mixed reality

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Graphics (AREA)
  • Computer Hardware Design (AREA)
  • Software Systems (AREA)
  • Human Computer Interaction (AREA)
  • Processing Or Creating Images (AREA)

Abstract

本发明公开了一种虚拟场景业务信息的处理方法、系统以及云管理平台,处理方法包括:预设不同的场景互动需求的第一执行指令;在虚拟场景交互过程中,实时获取当前场景的场景内容以及输入的当前场景业务信息;对当前场景业务信息进行分析得到与目标场景互动需求;根据目标场景互动需求获取对应的第一目标执行指令;根据第一目标执行指令触发调取当前场景中的目标场景区域;对目标场景区域中的场景内容进行云渲染处理得到第一渲染结果并发送至终端设备以便于进行实时交互。本发明中实现了对AR/VR业务内容的强互动功能,同时基于5G网络保证了低时延、数据传输稳定、不易丢包等指标要求,能够满足用户的更高使用需求,提升了用户体验感。

Description

虚拟场景业务信息的处理方法、系统以及云管理平台
技术领域
本发明涉及数据通信技术领域,特别涉及一种虚拟场景业务信息的处理方法、系统以及云管理平台。
背景技术
AR(增强现实)/VR(虚拟现实)体验具有3I的特征,分别是沉浸感(Immersion)、交互性(Interaction)和想象性(Imagination)。近年来,AR/VR产业一般都是基于本地AR/VR。但是,随着AR/VR产业发展迅速,用户对AR/VR的真实感、交互感和愉悦感的需要也越来越高;因此,在降低用户AR/VR消费成本、提升用户体验、普及AR/VR商业场景以及保护AR/VR业务内容版权等四大需求的驱动下,支持云渲染的Cloud(云端)AR/VR已成为AR/VR发展的必然趋势。
但是,针对虚拟场景实时互动的使用需求,现有的方案普遍存在交互性不够、响应迟滞即时延问题、数据传输不稳定、易造成丢包等情况,从而造成无法满足用户的实际需求,用户体验感不够理想等。
发明内容
本发明要解决的技术问题是为了克服现有技术中虚拟场景实时互动的方案存在无法满足用户的实际需求,用户体验感不够理想的缺陷,目的在于提供一种虚拟场景业务信息的处理方法、系统以及云管理平台。
本发明是通过下述技术方案来解决上述技术问题:
本发明提供一种虚拟场景交互中场景业务信息的处理方法,所述处理方法包括:
预设不同的场景互动需求对应的第一执行指令;
在虚拟场景交互过程中,实时获取当前场景的场景内容以及输入的当前场景业务信息;
其中,所述场景内容包括AR业务内容或VR业务内容;
对所述当前场景业务信息进行分析处理得到与对应的目标场景互动需求;
根据所述目标场景互动需求获取对应的第一目标执行指令;
根据所述第一目标执行指令触发调取所述当前场景中的目标场景区域;
对所述目标场景区域中的所述场景内容进行云渲染处理得到第一渲染结果并发送至终端设备;
其中,通过所述终端设备在所述第一渲染结果对应的所述目标场景区域中根据所述场景内容进行实时交互。
较佳地,所述对所述当前场景业务信息进行分析处理得到与对应的目标场景互动需求的步骤包括:
对所述当前场景业务信息进行识别处理,获取与所述当前场景业务信息对应的第一特征信息;
其中,所述第一特征信息为用于表征用户需要参与所述当前场景的内容;
根据所述第一特征信息确定所述当前场景业务信息所属的所述目标场景互动需求。
较佳地,所述实时获取当前场景的场景内容以及输入的当前场景业务信息的步骤之前还包括:
预设不同的场景业务类型对应的第二执行指令;
所述实时获取当前场景的场景内容以及输入的当前场景业务信息的步骤之后包括:
对所述当前场景业务信息进行分析处理得到所述当前场景业务信息所属的当前场景业务类型;
获取与所述当前场景业务类型对应的第二目标执行指令;
根据所述第二目标执行指令对所述当前场景中的所述场景内容进行云渲染处理得到第二渲染结果并实时发送至所述终端设备;
其中,通过所述终端设备对所述第二渲染结果实时进行动态显示。
较佳地,所述对所述当前场景业务信息进行分析处理得到所述当前场景业务信息所属的当前场景业务类型的步骤包括:
对所述当前场景业务信息进行识别处理,获取与所述当前场景业务信息对应的第二特征信息;
其中,所述第二特征信息为用于表征会触发所述当前场景发生变化的内容;
根据所述第二特征信息确定所述当前场景业务信息所属的所述当前场景业务类型。
较佳地,所述对所述目标场景区域中的所述场景内容进行云渲染处理得到第一渲染结果并发送至终端设备的步骤包括:
对所述目标场景区域中的所述场景内容进行云渲染处理得到第一渲染结果,并基于5G(第五代移动通信技术)网络将所述第一渲染结果实时发送至终端设备;和/或,
所述根据所述第二目标执行指令对所述当前场景中的所述场景内容进行云渲染处理得到第二渲染结果并实时发送至所述终端设备的步骤包括:
根据所述第二目标执行指令对所述当前场景中的所述场景内容进行云渲染处理得到第二渲染结果,并基于5G网络将所述第二渲染结果实时发送至所述终端设备。
较佳地,所述当前场景业务信息包括音频信息和/或文本信息。
较佳地,所述处理方法还包括:
将所述场景互动需求与所述第一执行指令之间的对应关系,以及将所述场景业务类型与所述第二执行指令之间的对应关系存储至数据库中;
采用自学习算法对所述数据库进行更新。
本发明还提供一种虚拟场景交互中场景业务信息的处理系统,所述处理系统包括预设模块、业务信息获取模块、互动需求获取模块、第一指令获取模块、场景区域调取模块和第一渲染处理模块;
所述预设模块用于预设不同的场景互动需求对应的第一执行指令;
所述业务信息获取模块用于在虚拟场景交互过程中,实时获取当前场景的场景内容以及输入的当前场景业务信息;
其中,所述场景内容包括AR业务内容或VR业务内容;
所述互动需求获取模块用于对所述当前场景业务信息进行分析处理得到与对应的目标场景互动需求;
所述第一指令获取模块用于根据所述目标场景互动需求获取对应的第一目标执行指令;
所述场景区域调取模块用于根据所述第一目标执行指令触发调取所述当前场景中的目标场景区域;
所述第一渲染处理模块用于对所述目标场景区域中的所述场景内容进行云渲染处理得到第一渲染结果并发送至终端设备;
其中,通过所述终端设备在所述第一渲染结果对应的所述目标场景区域中根据所述场景内容进行实时交互。
较佳地,所述场景区域调取模块包括第一特征信息获取单元和第一确定单元;
所述第一特征信息获取单元用于对所述当前场景业务信息进行识别处理,获取与所述当前场景业务信息对应的第一特征信息;
其中,所述第一特征信息为用于表征用户需要参与所述当前场景的内容;
所述第一确定单元用于根据所述第一特征信息确定所述当前场景业务信息所属的所述目标场景互动需求。
较佳地,所述预设模块还用于预设不同的场景业务类型对应的第二执行指令;
所述处理系统还包括业务类型获取模块、第二指令获取模块和第二渲染处理模块;
所述业务类型获取模块用于对所述当前场景业务信息进行分析处理得到所述当前场景业务信息所属的当前场景业务类型;
所述第二指令获取模块用于获取与所述当前场景业务类型对应的第二目标执行指令;
所述第二渲染处理模块用于根据所述第二目标执行指令对所述当前场景中的所述场景内容进行云渲染处理得到第二渲染结果并实时发送至所述终端设备;
其中,通过所述终端设备对所述第二渲染结果实时进行动态显示。
较佳地,所述业务类型获取模块包括第二特征信息获取单元和第二确定单元;
所述第二特征信息获取单元用于对所述当前场景业务信息进行识别处理,获取与所述当前场景业务信息对应的第二特征信息;
其中,所述第二特征信息为用于表征会引起所述当前场景发生变化的内容;
所述第二确定单元用于根据所述第二特征信息确定所述当前场景业务信息所属的所述当前场景业务类型。
较佳地,所述第一渲染处理模块包括第一渲染单元和第一发送单元;
所述第一渲染单元用于对所述目标场景区域中的所述场景内容进行云渲染处理得到第一渲染结果并发送至所述第一发送单元;
所述第一发送单元用于基于5G网络将所述第一渲染结果实时发送至所述终端设备;和/或,
所述第二渲染处理模块包括第二渲染单元和第二发送单元;
所述第二渲染单元用于根据所述第二目标执行指令对所述当前场景中的所述场景内容进行云渲染处理得到第二渲染结果并发送至所述第二发送单元;
所述第二发送单元用于基于5G网络将所述第二渲染结果实时发送至所述终端设备。
较佳地,所述当前场景业务信息包括音频信息和/或文本信息。
较佳地,所述处理系统还包括存储模块和自学习模块;
所述存储模块用于将所述场景互动需求与所述第一执行指令之间的对应关系,以及将所述场景业务类型与所述第二执行指令之间的对应关系存储至数据库中;
所述自学习模块用于采用自学习算法对所述数据库进行更新。
本发明还提供一种虚拟场景交互中场景业务的云管理平台,所述云管理平台包括上述的虚拟场景交互中场景业务信息的处理系统,所述云管理平台包括内容层、平台层、网络层和终端层;
其中,所述平台层包括所述处理系统;
所述内容层用于获取所述终端层中的所述当前场景业务信息并发送至所述平台层;
所述平台层用于通过所述网络层将云渲染处理后的结果发送至所述终端层。
本发明的积极进步效果在于:
本发明中,根据实时输入的场景业务信息确定其对应的场景互动需求,并根据该场景互动需求实时云渲染得到目标场景,并基于5G网络实时发送至终端设备以便于用户根据场景内容进行实时互动;或,根据实时输入的场景业务信息确定业务类型并触发场景内容进行实时渲染,并基于5G网络实时发送至终端设备进行显示,即实现了对AR/VR业务内容的强互动功能,同时基于5G网络保证了低时延、数据传输稳定、不易丢包等指标要求,能够满足用户的更高使用需求,提升了用户体验感。
附图说明
图1为本发明实施例1的虚拟场景交互中场景业务信息的处理方法的流程图。
图2为本发明实施例2的虚拟场景交互中场景业务信息的处理方法的流程图。
图3为本发明实施例3的虚拟场景交互中场景业务信息的处理系统的模块示意图。
图4为本发明实施例4的虚拟场景交互中场景业务信息的处理系统的模块示意图。
图5为本发明实施例5的虚拟场景交互中场景业务的云管理平台中的组网示意图。
具体实施方式
下面通过实施例的方式进一步说明本发明,但并不因此将本发明限制在所述的实施例范围之中。
实施例1
如图1所示,本实施例的虚拟场景交互中场景业务信息的处理方法包括:
S101、预设不同的场景互动需求对应的第一执行指令;
S102、在虚拟场景交互过程中,实时获取当前场景的场景内容以及输入的当前场景业务信息;
其中,场景内容包括AR业务内容或VR业务内容;
当前场景业务信息包括但不限于音频信息、文本信息,即当前场景业务信息为用于触发当前场景进行实时响应的触发条件,以满足用户的使用需求。
S103、对当前场景业务信息进行分析处理得到与对应的目标场景互动需求;
具体地,步骤S103包括:
对当前场景业务信息进行识别处理,获取与当前场景业务信息对应的第一特征信息;
其中,第一特征信息为用于表征用户需要参与当前场景的内容;
根据第一特征信息确定当前场景业务信息所属的目标场景互动需求。
S104、根据目标场景互动需求获取对应的第一目标执行指令;
S105、根据第一目标执行指令触发调取当前场景中的目标场景区域;
S106、对目标场景区域中的场景内容进行云渲染处理得到第一渲染结果并发送至终端设备;
其中,终端设备为Cloud AR/VR终端,如VR头盔等。
另外,云渲染处理过程为3D(三维)模型的重新建立与调整过程,属于本领域的成熟技术,因此此处就不再赘述。
具体地,步骤S106包括:
对目标场景区域中的场景内容进行云渲染处理得到第一渲染结果,并基于5G网络将第一渲染结果实时发送至终端设备,从而保证了低时延、数据传输稳定、不易丢包等指标要求。
其中,通过终端设备在第一渲染结果对应的目标场景区域中根据场景内容进行实时交互。
下面结合实例具体说明:
其中,本实施例适用的应用场景包括但不限于:
(1)在沉浸式的虚拟演唱会场景中,用户需要在虚拟的演唱会场地中的不同位置行走以获知不同位置的视听效果时:
根据用户输入的场景业务信息确定用户需要走到虚拟的演唱会场地中的位置A处;
根据执行指令触发调取当前演唱会场景中位置A的目标场景区域;
对目标场景区域中的场景内容进行云渲染处理得到渲染结果并基于5G网络发送至终端设备;
通过终端设备在位置A处根据场景内容进行实时交互。
在该虚拟场景中的其他互动情况与上述步骤类似,因此此处就不再赘述。
(2)在AR客服场景中,用户需要客服人员在虚拟场景中对家电设备进行指导使用:
根据用户输入的场景业务信息确定用户需要客服人员服务的内容是对家庭客厅场景中的电视机的使用方式进行指导;
根据执行指令触发调取家庭客厅场景中的电视机对应的目标场景区域;
对目标场景区域中的场景内容进行云渲染处理得到渲染结果并基于5G网络发送至终端设备;
通过终端设备在电视机处根据场景内容进行实时交互。
在该虚拟场景中的其他互动情况与上述步骤类似,因此此处就不再赘述。
(3)在虚拟的看房场景中,用户需要不同风格的地板、沙发等在房间中的展示效果等:
根据用户输入的场景业务信息确定用户需要查看该看房场景中不同风格地板对应的展示效果;
根据执行指令触发调取该看房场景中地板对应的目标场景区域;
对目标场景区域中的场景内容进行云渲染处理得到渲染结果并基于5G网络发送至终端设备;
通过终端设备在该看房场景中的地板处根据场景内容进行实时交互。
在该虚拟场景中的其他互动情况与上述步骤类似,因此此处就不再赘述。
本实施例中,根据实时输入的场景业务信息确定其对应的场景互动需求,并根据该场景互动需求实时云渲染得到目标场景,并基于5G网络实时发送至终端设备以便于用户根据场景内容进行实时互动,即实现了对AR/VR业务内容的强互动功能,同时基于5G网络保证了低时延、数据传输稳定、不易丢包等指标要求,能够满足用户的更高使用需求,提升了用户体验感。
实施例2
本实施例的虚拟场景交互中场景业务信息的处理方法是对实施例1的进一步改进,具体地:
如图2所示,步骤S102之前还包括:
S1020、预设不同的场景业务类型对应的第二执行指令;
步骤S102之后还包括:
S107、对当前场景业务信息进行分析处理得到当前场景业务信息所属的当前场景业务类型;
具体地,对当前场景业务信息进行识别处理,获取与当前场景业务信息对应的第二特征信息;
其中,第二特征信息为用于表征会触发当前场景发生变化的内容;
根据第二特征信息确定当前场景业务信息所属的当前场景业务类型。
S108、获取与当前场景业务类型对应的第二目标执行指令;
S109、根据第二目标执行指令对当前场景中的场景内容进行云渲染处理得到第二渲染结果并实时发送至终端设备;
具体地,步骤S109包括:
根据第二目标执行指令对当前场景中的场景内容进行云渲染处理得到第二渲染结果,并基于5G网络将第二渲染结果实时发送至终端设备。
其中,通过终端设备对第二渲染结果实时进行动态显示。
下面结合实例具体说明:
其中,本实施例适用的应用场景包括但不限于:
在虚拟场景中显示正在语音交流的对方,实时获取交流过程中的场景业务信息以触发显示的内容发生状态变化:
根据用户输入的场景业务信息确定用户输入的语音内容属于笑话类型;
获取与笑话类型对应的执行指令,以触发虚拟场景中显示的人物面部表情以及肢体关节发生变化;
对发生面部表情以及肢体关节发生变化的人物进行云渲染处理得到渲染结果并基于5G网络发送至终端设备;
通过终端设备对该人物进行实时显示,以在视觉上让用户感知对方处于被逗笑的状态。
在该虚拟场景中的其他互动情况与上述步骤类似,因此此处就不再赘述。
另外,本实施例的处理方法还包括:
将场景互动需求与第一执行指令之间的对应关系,以及将场景业务类型与第二执行指令之间的对应关系存储至数据库中;
采用自学习算法对数据库进行更新,以提升AR/VR业务内容互动的准确性。其中自学习算法属于本领域的成熟技术,因此此处就不再赘述。
本实施例中,根据实时输入的场景业务信息确定其对应的场景互动需求,并根据该场景互动需求实时云渲染得到目标场景,并基于5G网络实时发送至终端设备以便于用户根据场景内容进行实时互动;或,根据实时输入的场景业务信息确定业务类型并触发场景内容进行实时渲染,并基于5G网络实时发送至终端设备进行显示,即实现了对AR/VR业务内容的强互动功能,同时基于5G网络保证了低时延、数据传输稳定、不易丢包等指标要求,能够满足用户的更高使用需求,提升了用户体验感。
实施例3
如图3所示,本实施例的虚拟场景交互中场景业务信息的处理系统包括预设模块1、业务信息获取模块2、互动需求获取模块3、第一指令获取模块4、场景区域调取模块5和第一渲染处理模块6。
预设模块1用于预设不同的场景互动需求对应的第一执行指令;
业务信息获取模块2用于在虚拟场景交互过程中,实时获取当前场景的场景内容以及输入的当前场景业务信息;
其中,场景内容包括AR业务内容或VR业务内容;
当前场景业务信息包括但不限于音频信息、文本信息,即当前场景业务信息为用于触发当前场景进行实时响应的触发条件,以满足用户的使用需求。
互动需求获取模块3用于对当前场景业务信息进行分析处理得到与对应的目标场景互动需求;
具体地,场景区域调取模块5包括第一特征信息获取单元7和第一确定单元8;
第一特征信息获取单元7用于对当前场景业务信息进行识别处理,获取与当前场景业务信息对应的第一特征信息;
其中,第一特征信息为用于表征用户需要参与当前场景的内容;
第一确定单元8用于根据第一特征信息确定当前场景业务信息所属的目标场景互动需求。
第一指令获取模块4用于根据目标场景互动需求获取对应的第一目标执行指令;
场景区域调取模块5用于根据第一目标执行指令触发调取当前场景中的目标场景区域;
第一渲染处理模块6用于对目标场景区域中的场景内容进行云渲染处理得到第一渲染结果并发送至终端设备;
其中,终端设备为Cloud AR/VR终端,如VR头盔。
另外,云渲染处理过程为3D模型的重新建立与调整过程,属于本领域的成熟技术,因此此处就不再赘述。
具体地,第一渲染处理模块6包括第一渲染单元9和第一发送单元10;
第一渲染单元9用于对目标场景区域中的场景内容进行云渲染处理得到第一渲染结果并发送至第一发送单元10;
第一发送单元10用于基于5G网络将第一渲染结果实时发送至终端设备,从而保证了低时延、数据传输稳定、不易丢包等指标要求。
其中,通过终端设备在第一渲染结果对应的目标场景区域中根据场景内容进行实时交互。
下面结合实例具体说明:
其中,本实施例适用的应用场景包括但不限于:
(1)在沉浸式的虚拟演唱会场景中,用户需要在虚拟的演唱会场地中的不同位置行走以获知不同位置的视听效果时:
根据用户输入的场景业务信息确定用户需要走到虚拟的演唱会场地中的位置A处;
根据执行指令触发调取当前演唱会场景中位置A的目标场景区域;
对目标场景区域中的场景内容进行云渲染处理得到渲染结果并基于5G网络发送至终端设备;
通过终端设备在位置A处根据场景内容进行实时交互。
在该虚拟场景中的其他互动情况与上述步骤类似,因此此处就不再赘述。
(2)在AR客服场景中,用户需要客服人员在虚拟场景中对家电设备进行指导使用:
根据用户输入的场景业务信息确定用户需要客服人员服务的内容是对家庭客厅场景中的电视机的使用方式进行指导;
根据执行指令触发调取家庭客厅场景中的电视机对应的目标场景区域;
对目标场景区域中的场景内容进行云渲染处理得到渲染结果并基于5G网络发送至终端设备;
通过终端设备在电视机处根据场景内容进行实时交互。
在该虚拟场景中的其他互动情况与上述步骤类似,因此此处就不再赘述。
(3)在虚拟的看房场景中,用户需要不同风格的地板、沙发等在房间中的展示效果等:
根据用户输入的场景业务信息确定用户需要查看该看房场景中不同风格地板对应的展示效果;
根据执行指令触发调取该看房场景中地板对应的目标场景区域;
对目标场景区域中的场景内容进行云渲染处理得到渲染结果并基于5G网络发送至终端设备;
通过终端设备在该看房场景中的地板处根据场景内容进行实时交互。
在该虚拟场景中的其他互动情况与上述步骤类似,因此此处就不再赘述。
本实施例中,根据实时输入的场景业务信息确定其对应的场景互动需求,并根据该场景互动需求实时云渲染得到目标场景,并基于5G网络实时发送至终端设备以便于用户根据场景内容进行实时互动,即实现了对AR/VR业务内容的强互动功能,同时基于5G网络保证了低时延、数据传输稳定、不易丢包等指标要求,能够满足用户的更高使用需求,提升了用户体验感。
实施例4
如图4所示,本实施例的虚拟场景交互中场景业务信息的处理系统是对实施例3的进一步改进,具体地:
预设模块1还用于预设不同的场景业务类型对应的第二执行指令;
处理系统还包括业务类型获取模块11、第二指令获取模块12和第二渲染处理模块13。
业务类型获取模块11用于对当前场景业务信息进行分析处理得到当前场景业务信息所属的当前场景业务类型;
具体地,业务类型获取模块11包括第二特征信息获取单元14和第二确定单元15。
第二特征信息获取单元14用于对当前场景业务信息进行识别处理,获取与当前场景业务信息对应的第二特征信息;
其中,第二特征信息为用于表征会引起当前场景发生变化的内容;
第二确定单元15用于根据第二特征信息确定当前场景业务信息所属的当前场景业务类型。
第二指令获取模块12用于获取与当前场景业务类型对应的第二目标执行指令;
第二渲染处理模块13用于根据第二目标执行指令对当前场景中的场景内容进行云渲染处理得到第二渲染结果并实时发送至终端设备;
具体地,第二渲染处理模块13包括第二渲染单元16和第二发送单元17;
第二渲染单元16用于根据第二目标执行指令对当前场景中的场景内容进行云渲染处理得到第二渲染结果并发送至第二发送单元17;
第二发送单元17用于基于5G网络将第二渲染结果实时发送至终端设备。
其中,通过终端设备对第二渲染结果实时进行动态显示。
另外,处理系统还包括存储模块18和自学习模块19。
存储模块18用于将场景互动需求与第一执行指令之间的对应关系,以及将场景业务类型与第二执行指令之间的对应关系存储至数据库中;
自学习模块19用于采用自学习算法对数据库进行更新,以提升AR/VR业务内容互动的准确性。其中自学习算法属于本领域的成熟技术,因此此处就不再赘述。
下面结合实例具体说明:
其中,本实施例适用的应用场景包括但不限于:
在虚拟场景中显示正在语音交流的对方,实时获取交流过程中的场景业务信息以触发显示的内容发生状态变化:
根据用户输入的场景业务信息确定用户输入的语音内容属于笑话类型;
获取与笑话类型对应的执行指令,以触发虚拟场景中显示的人物面部表情以及肢体关节发生变化;
对发生面部表情以及肢体关节发生变化的人物进行云渲染处理得到渲染结果并基于5G网络发送至终端设备;
通过终端设备对该人物进行实时显示,以在视觉上让用户感知对方处于被逗笑的状态。
在该虚拟场景中的其他互动情况与上述步骤类似,因此此处就不再赘述。
本实施例中,根据实时输入的场景业务信息确定其对应的场景互动需求,并根据该场景互动需求实时云渲染得到目标场景,并基于5G网络实时发送至终端设备以便于用户根据场景内容进行实时互动;或,根据实时输入的场景业务信息确定业务类型并触发场景内容进行实时渲染,并基于5G网络实时发送至终端设备进行显示,即实现了对AR/VR业务内容的强互动功能,同时基于5G网络保证了低时延、数据传输稳定、不易丢包等指标要求,能够满足用户的更高使用需求,提升了用户体验感。
实施例5
本实施例的虚拟场景交互中场景业务的云管理平台包括实施例1或2的虚拟场景交互中场景业务信息的处理系统,云管理平台包括内容层、平台层、网络层和终端层;其中,平台层包括上述的处理系统。
内容层用于获取终端层中的所述当前场景业务信息并发送至所述平台层;所述平台层用于通过所述网络层将云渲染处理后的结果发送至所述终端层。
具体地,内容层主要负责向平台层提供AR/VR内容,包含内容提供方和内容聚合方,内容主要包含Cloud AR强交互业务和Cloud AR/VR强交互业务。
其中,该内容层既提供标准服务,还提供AR/VR客户定制化服务,以满足更多更高的用户使用需求。
平台层包括Cloud AR强交互业务平台和Cloud VR强交互业务平台,具体地,CloudAR强交互业务平台包括AR中心管理系统以及AR云渲染系统,Cloud VR强交互业务平台包括VR中心管理系统以及VR云渲染系统。AR/VR中心管理系统包括业务系统、统一会话调度管理以及存储管理;AR/VR云渲染系统包括AR/VR应用服务层(AR/VR强交互应用、实时推流系统等)、虚拟服务资源(应用运行操作系统、虚拟机、资源池化等)、基础计算资源(服务器、网络、存储、安全、硬件资源等)。
其中,Cloud AR强交互业务平台:负责对强交互业务进行渲染,包含实例运行、逻辑计算、实时渲染、实时推流等功能,为每个用户在云端生成一个应用实例,对其AR画面进行实时渲染、编码和推流。Cloud VR强交互业务平台:负责对强交互业务进行渲染,包含实例运行、逻辑计算、实时渲染、实时推流等功能,为每个用户在云端生成一个应用实例,对其VR画面进行实时渲染、编码和推流。
应用运行操作系统包括但不限于华为Cloud OS(华为云系统),虚拟机用于提供AR/VR业务计算、渲染、存储等所需的GPU(图形处理器)、CPU(中央处理器)、虚拟机等资源是可以共享的,还提供AR/VR服务应用实例运行所需要的操作系统环境。
资源化池是指将硬件资源池化,形成CPU计算、GPU渲染和存储资源池化,然后在此基础上构建多平台虚拟机作为AR/VR业务的运行环境。
应用服务层、虚拟服务资源以及基础计算资源都是在云端,走云平台内网专线,负载均衡根据计算处理能力及时延实时进行动态调整。
网络层主要包括骨干网、局域网、接入网及家庭网络四部分,负责为Cloud AR业务和Cloud VR业务提供大宽带、低时延的稳定传输。
Cloud AR终端和Cloud VR终端主要实现AR/VR内容呈现、网络接入以及用户鉴权等功能,通过Wi-Fi(无线局域网)或5G接入网络,与平台层连接。
下面结合实例具体说明:
(1)本实施例的云管理平台开发前准备:
注册华为云账号;申请成为华为云Cloud AR/VR连接服务开发者;获取用户名等信息用于接受华为云Cloud AR/VR连接服务共享镜像;注册Cloud AR/VR连接服务控制台;在AR/VR终端安装Cloud AR/VR连接服务(如Oculus Go头盔)等。
(2)线下开发及调试
组网;
包括高性能游戏、无线路由器、5GHz Wi-Fi以及VR头盔。使用网线将高性能游戏本同无线路由器相连,并将网线插入到无线路由器的LAN口(一种网口)上。
硬件及网络准备;
100Mbps高速宽带(最好是光纤或5G蜂窝网络提供宽带服务);AR/VR终端通过5GHzWi-Fi接入网络;推荐路由器:TL-WDR7800千兆版(可以使用其它同等性能的无线路由器);游戏本或PC;RAM 8GB或以上;操作系统Window 10等。
(3)运行环境部署以及线上联调;
(4)远程接入华为云主机;具体如图5所示。
(5)安装VR内容;
(6)绑定头盔和华为云主机;
(7)开发者使用VR头盔和手柄体验或测试VR内容。
本实施例的基于5G的虚拟场景交互中场景业务的云管理平台,将云计算、云渲染的理念及技术引入到AR/VR业务应用中,借助高速稳定的5G网络,将云端的显示输出和声音输出等经过编码压缩后传输到用户的终端设备,实现AR/VR业务内容上云、计算云化、渲染云化的目的。
另外,高性能5G网络为Cloud AR/VR业务提供高带宽、低时延基础:Wi-Fi为CloudAR/VR业务提供网络基础,Cloud AR/VR强交互内容对Wi-Fi的带宽、时延由较高的要求,5GHz频段Wi-Fi可以满足此类业务的要求。
Cloud AR/VR商业发展和平台建设条件成熟:利用云服务运营商的AR/VR平台渲染能力、网络品质带宽优势,向2B(向企业的公司)领域提供行业应用需要的云渲染和内容存储资源。
虽然以上描述了本发明的具体实施方式,但是本领域的技术人员应当理解,这仅是举例说明,本发明的保护范围是由所附权利要求书限定的。本领域的技术人员在不背离本发明的原理和实质的前提下,可以对这些实施方式做出多种变更或修改,但这些变更和修改均落入本发明的保护范围。

Claims (15)

1.一种虚拟场景交互中场景业务信息的处理方法,其特征在于,所述处理方法包括:
预设不同的场景互动需求对应的第一执行指令;
在虚拟场景交互过程中,实时获取当前场景的场景内容以及输入的当前场景业务信息;
其中,所述场景内容包括AR业务内容或VR业务内容;
对所述当前场景业务信息进行分析处理得到与对应的目标场景互动需求;
根据所述目标场景互动需求获取对应的第一目标执行指令;
根据所述第一目标执行指令触发调取所述当前场景中的目标场景区域;
对所述目标场景区域中的所述场景内容进行云渲染处理得到第一渲染结果并发送至终端设备;
其中,通过所述终端设备在所述第一渲染结果对应的所述目标场景区域中根据所述场景内容进行实时交互。
2.如权利要求1所述的虚拟场景交互中场景业务信息的处理方法,其特征在于,所述对所述当前场景业务信息进行分析处理得到与对应的目标场景互动需求的步骤包括:
对所述当前场景业务信息进行识别处理,获取与所述当前场景业务信息对应的第一特征信息;
其中,所述第一特征信息为用于表征用户需要参与所述当前场景的内容;
根据所述第一特征信息确定所述当前场景业务信息所属的所述目标场景互动需求。
3.如权利要求1或2所述的虚拟场景交互中场景业务信息的处理方法,其特征在于,所述实时获取当前场景的场景内容以及输入的当前场景业务信息的步骤之前还包括:
预设不同的场景业务类型对应的第二执行指令;
所述实时获取当前场景的场景内容以及输入的当前场景业务信息的步骤之后包括:
对所述当前场景业务信息进行分析处理得到所述当前场景业务信息所属的当前场景业务类型;
获取与所述当前场景业务类型对应的第二目标执行指令;
根据所述第二目标执行指令对所述当前场景中的所述场景内容进行云渲染处理得到第二渲染结果并实时发送至所述终端设备;
其中,通过所述终端设备对所述第二渲染结果实时进行动态显示。
4.如权利要求3所述的虚拟场景交互中场景业务信息的处理方法,其特征在于,所述对所述当前场景业务信息进行分析处理得到所述当前场景业务信息所属的当前场景业务类型的步骤包括:
对所述当前场景业务信息进行识别处理,获取与所述当前场景业务信息对应的第二特征信息;
其中,所述第二特征信息为用于表征会触发所述当前场景发生变化的内容;
根据所述第二特征信息确定所述当前场景业务信息所属的所述当前场景业务类型。
5.如权利要求3所述的虚拟场景交互中场景业务信息的处理方法,其特征在于,所述对所述目标场景区域中的所述场景内容进行云渲染处理得到第一渲染结果并发送至终端设备的步骤包括:
对所述目标场景区域中的所述场景内容进行云渲染处理得到第一渲染结果,并基于5G网络将所述第一渲染结果实时发送至终端设备;和/或,
所述根据所述第二目标执行指令对所述当前场景中的所述场景内容进行云渲染处理得到第二渲染结果并实时发送至所述终端设备的步骤包括:
根据所述第二目标执行指令对所述当前场景中的所述场景内容进行云渲染处理得到第二渲染结果,并基于5G网络将所述第二渲染结果实时发送至所述终端设备。
6.如权利要求1所述的虚拟场景交互中场景业务信息的处理方法,其特征在于,所述当前场景业务信息包括音频信息和/或文本信息。
7.如权利要求3所述的虚拟场景交互中场景业务信息的处理方法,其特征在于,所述处理方法还包括:
将所述场景互动需求与所述第一执行指令之间的对应关系,以及将所述场景业务类型与所述第二执行指令之间的对应关系存储至数据库中;
采用自学习算法对所述数据库进行更新。
8.一种虚拟场景交互中场景业务信息的处理系统,其特征在于,所述处理系统包括预设模块、业务信息获取模块、互动需求获取模块、第一指令获取模块、场景区域调取模块和第一渲染处理模块;
所述预设模块用于预设不同的场景互动需求对应的第一执行指令;
所述业务信息获取模块用于在虚拟场景交互过程中,实时获取当前场景的场景内容以及输入的当前场景业务信息;
其中,所述场景内容包括AR业务内容或VR业务内容;
所述互动需求获取模块用于对所述当前场景业务信息进行分析处理得到与对应的目标场景互动需求;
所述第一指令获取模块用于根据所述目标场景互动需求获取对应的第一目标执行指令;
所述场景区域调取模块用于根据所述第一目标执行指令触发调取所述当前场景中的目标场景区域;
所述第一渲染处理模块用于对所述目标场景区域中的所述场景内容进行云渲染处理得到第一渲染结果并发送至终端设备;
其中,通过所述终端设备在所述第一渲染结果对应的所述目标场景区域中根据所述场景内容进行实时交互。
9.如权利要求8所述的虚拟场景交互中场景业务信息的处理系统,其特征在于,所述场景区域调取模块包括第一特征信息获取单元和第一确定单元;
所述第一特征信息获取单元用于对所述当前场景业务信息进行识别处理,获取与所述当前场景业务信息对应的第一特征信息;
其中,所述第一特征信息为用于表征用户需要参与所述当前场景的内容;
所述第一确定单元用于根据所述第一特征信息确定所述当前场景业务信息所属的所述目标场景互动需求。
10.如权利要求8或9所述虚拟场景交互中场景业务信息的处理系统,其特征在于,所述预设模块还用于预设不同的场景业务类型对应的第二执行指令;
所述处理系统还包括业务类型获取模块、第二指令获取模块和第二渲染处理模块;
所述业务类型获取模块用于对所述当前场景业务信息进行分析处理得到所述当前场景业务信息所属的当前场景业务类型;
所述第二指令获取模块用于获取与所述当前场景业务类型对应的第二目标执行指令;
所述第二渲染处理模块用于根据所述第二目标执行指令对所述当前场景中的所述场景内容进行云渲染处理得到第二渲染结果并实时发送至所述终端设备;
其中,通过所述终端设备对所述第二渲染结果实时进行动态显示。
11.如权利要求10所述虚拟场景交互中场景业务信息的处理系统,其特征在于,所述业务类型获取模块包括第二特征信息获取单元和第二确定单元;
所述第二特征信息获取单元用于对所述当前场景业务信息进行识别处理,获取与所述当前场景业务信息对应的第二特征信息;
其中,所述第二特征信息为用于表征会引起所述当前场景发生变化的内容;
所述第二确定单元用于根据所述第二特征信息确定所述当前场景业务信息所属的所述当前场景业务类型。
12.如权利要求10所述虚拟场景交互中场景业务信息的处理系统,其特征在于,所述第一渲染处理模块包括第一渲染单元和第一发送单元;
所述第一渲染单元用于对所述目标场景区域中的所述场景内容进行云渲染处理得到第一渲染结果并发送至所述第一发送单元;
所述第一发送单元用于基于5G网络将所述第一渲染结果实时发送至所述终端设备;和/或,
所述第二渲染处理模块包括第二渲染单元和第二发送单元;
所述第二渲染单元用于根据所述第二目标执行指令对所述当前场景中的所述场景内容进行云渲染处理得到第二渲染结果并发送至所述第二发送单元;
所述第二发送单元用于基于5G网络将所述第二渲染结果实时发送至所述终端设备。
13.如权利要求8所述虚拟场景交互中场景业务信息的处理系统,其特征在于,所述当前场景业务信息包括音频信息和/或文本信息。
14.如权利要求10所述虚拟场景交互中场景业务信息的处理系统,其特征在于,所述处理系统还包括存储模块和自学习模块;
所述存储模块用于将所述场景互动需求与所述第一执行指令之间的对应关系,以及将所述场景业务类型与所述第二执行指令之间的对应关系存储至数据库中;
所述自学习模块用于采用自学习算法对所述数据库进行更新。
15.一种虚拟场景交互中场景业务的云管理平台,其特征在于,所述云管理平台包括权利要求8至14所述的虚拟场景交互中场景业务信息的处理系统,所述云管理平台包括内容层、平台层、网络层和终端层;
其中,所述平台层包括所述处理系统;
所述内容层用于获取所述终端层中的所述当前场景业务信息并发送至所述平台层;
所述平台层用于通过所述网络层将云渲染处理后的结果发送至所述终端层。
CN202010278466.3A 2020-04-10 2020-04-10 虚拟场景业务信息的处理方法、系统以及云管理平台 Pending CN112379769A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010278466.3A CN112379769A (zh) 2020-04-10 2020-04-10 虚拟场景业务信息的处理方法、系统以及云管理平台

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010278466.3A CN112379769A (zh) 2020-04-10 2020-04-10 虚拟场景业务信息的处理方法、系统以及云管理平台

Publications (1)

Publication Number Publication Date
CN112379769A true CN112379769A (zh) 2021-02-19

Family

ID=74586335

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010278466.3A Pending CN112379769A (zh) 2020-04-10 2020-04-10 虚拟场景业务信息的处理方法、系统以及云管理平台

Country Status (1)

Country Link
CN (1) CN112379769A (zh)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112907105A (zh) * 2021-03-10 2021-06-04 广东电网有限责任公司 基于业务场景的预警方法及装置
CN113254821A (zh) * 2021-07-14 2021-08-13 深圳市赛野展览展示有限公司 一种基于5g大数据显示互动的智能展示系统
CN113345103A (zh) * 2021-06-08 2021-09-03 杭州快盈信息科技有限公司 一种基于心智模型的虚拟现实交互路线推荐系统
CN113727142A (zh) * 2021-09-02 2021-11-30 北京沃东天骏信息技术有限公司 云渲染方法及装置、计算机可存储介质
CN114333492A (zh) * 2022-01-06 2022-04-12 深圳视觉航空科技有限公司 一种基于5G的Cloud VR平台的航空训练系统

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107392783A (zh) * 2017-07-05 2017-11-24 龚少卓 基于虚拟现实的社交方法及装置
CN108492379A (zh) * 2018-03-23 2018-09-04 平安科技(深圳)有限公司 Vr看房方法、装置、计算机设备和存储介质
KR20180130790A (ko) * 2017-05-30 2018-12-10 이진용 가상 현실 스마트 초인종

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20180130790A (ko) * 2017-05-30 2018-12-10 이진용 가상 현실 스마트 초인종
CN107392783A (zh) * 2017-07-05 2017-11-24 龚少卓 基于虚拟现实的社交方法及装置
CN108492379A (zh) * 2018-03-23 2018-09-04 平安科技(深圳)有限公司 Vr看房方法、装置、计算机设备和存储介质

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112907105A (zh) * 2021-03-10 2021-06-04 广东电网有限责任公司 基于业务场景的预警方法及装置
CN113345103A (zh) * 2021-06-08 2021-09-03 杭州快盈信息科技有限公司 一种基于心智模型的虚拟现实交互路线推荐系统
CN113345103B (zh) * 2021-06-08 2022-04-05 杭州快盈信息科技有限公司 一种基于心智模型的虚拟现实交互路线推荐系统
CN113254821A (zh) * 2021-07-14 2021-08-13 深圳市赛野展览展示有限公司 一种基于5g大数据显示互动的智能展示系统
CN113727142A (zh) * 2021-09-02 2021-11-30 北京沃东天骏信息技术有限公司 云渲染方法及装置、计算机可存储介质
CN114333492A (zh) * 2022-01-06 2022-04-12 深圳视觉航空科技有限公司 一种基于5G的Cloud VR平台的航空训练系统

Similar Documents

Publication Publication Date Title
CN112379769A (zh) 虚拟场景业务信息的处理方法、系统以及云管理平台
JP6310073B2 (ja) 描画システム、制御方法、及び記憶媒体
CN102883135B (zh) 屏幕共享及控制方法
CN105791977B (zh) 基于云服务的虚拟现实数据处理方法、设备及系统
CN113209632B (zh) 一种云游戏的处理方法、装置、设备及存储介质
CN111258526B (zh) 投屏方法和系统
JP2019537158A (ja) リソース共有方法、装置およびシステム
CN106572002B (zh) 智能会话方法、智能会话的定制方法和相关设备
CN107566346B (zh) 3d游戏数据的传输方法、装置以及存储介质、电子装置
CN113489805B (zh) 一种云桌面系统的对接方法、装置、设备及存储介质
WO2012021174A2 (en) EXPERIENCE OR "SENTIO" CODECS, AND METHODS AND SYSTEMS FOR IMPROVING QoE AND ENCODING BASED ON QoE EXPERIENCES
WO2002092177A2 (en) Method and arrangement for providing an interactive game including three-dimensional graphics
Tizon et al. MPEG-4-based adaptive remote rendering for video games
CN110855680A (zh) 一种物联网设备对接方法及装置
CN113741762A (zh) 一种多媒体播放方法、装置、电子设备和存储介质
CN113926185A (zh) 一种数据处理方法、装置、设备及存储介质
CN111773661B (zh) 基于直播界面组队游戏的系统、方法及装置
CN109587118B (zh) Android网游的分布式支持多终端和多网络的系统
Tsipis et al. Performance evaluation in cloud-edge hybrid gaming systems
CN114268626A (zh) 窗口处理系统、方法以及装置
CN111627096A (zh) 一种基于blendshape的数字人驱动系统
CN109547732A (zh) 一种音视频处理方法、装置、服务器及视频会议系统
CN110448892B (zh) 基于增强现实的游戏实现方法及系统
KR101480140B1 (ko) 멀티 인젝션 서버 및 그 방법
CN113436320B (zh) 基于ifc模型文件的3d模型生成系统及方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20210219

RJ01 Rejection of invention patent application after publication