CN110096268A - 将vr/ar/mr装置的可执行程序活态化二次编辑的系统及方法 - Google Patents

Abstract

本公开提供一种将VR/AR/MR装置的可执行程序活态化二次编辑的系统，包括内容编辑可执行模块和运行终端可执行模块；其中，内容编辑可执行模块用于内容的逻辑编辑，以及将编辑好的逻辑以通用逻辑及接口控制文件的形式导出至运行终端可执行模块；运行终端可执行模块用于读取通用逻辑及接口控制文件，解析通用逻辑及接口控制文件，形成与终端设备匹配的逻辑交互指令；当用户需求发生变更时，将通用逻辑及接口控制文件导入至内容编辑可执行模块进行修改，修改完成后导出新的通用逻辑及接口控制文件至运行终端可执行模块；本公开同时提供一种将VR/AR/MR装置的可执行程序活态化二次编辑的方法；本公开还提供一种能够执行将VR/AR/MR装置的可执行程序活态化二次编辑的方法的电子设备和可读存储介质。

Description

将VR/AR/MR装置的可执行程序活态化二次编辑的系统及方法

技术领域

本公开涉及一种将VR/AR/MR装置的可执行程序活态化二次编辑的系统及方法。

背景技术

虚拟现实技术(VR)是一种可以创建和体验虚拟世界的计算机仿真系统,它利用计算机生成一种模拟环境,是一种多源信息融合的、交互式的三维动态视景和实体行为的系统仿真,使用户沉浸到该环境中。

增强现实技术(AR)是一种实时地计算摄影机影像的位置及角度并加上相应图像、视频、3D模型的技术，这种技术的目标是在屏幕上把虚拟世界套在现实世界并进行互动。

混合现实技术(MR),包括虚拟现实和增强现实，指的是合并现实和虚拟世界而产生的新的可视化环境。在新的可视化环境里物理和数字对象共存，并实时互动。它是虚拟现实技术的进一步发展，该技术通过在虚拟环境中引入现实场景信息，在虚拟世界、现实世界和用户之间搭起一个交互反馈的信息回路，以增强用户体验的真实感。

传统的VR/AR/MR的内容开发形成的可执行程序是不可以二次修改的，如果有新的需求或者逻辑变更，只能通过黑客手段截获消息或者以内存注入方式干预程序运行，其难度很大，根据可执行程序的情况，黑客手段也大多只能修改数据，不能修改逻辑；或者也可以弃用原来的可执行程序，重新编辑源码，然后发布成新的可执行程序，由于是对源码进行修改难免会在修改的过程中影响到之前写好的逻辑，从而使可执行程序出现崩溃或者漏洞。

发明内容

为了解决至少一个上述技术问题，本公开提供一种将VR/AR/MR装置的可执行程序活态化二次编辑的系统及方法，通过以下技术方案实现。

根据本公开的一个方面，将VR/AR/MR装置的可执行程序活态化二次编辑的系统包括内容编辑可执行模块和运行终端可执行模块；其中，内容编辑可执行模块用于目标内容的逻辑编辑，以及将编辑好的逻辑以通用逻辑及接口控制文件的形式导出至运行终端可执行模块；运行终端可执行模块用于读取通用逻辑及接口控制文件，解析通用逻辑及接口控制文件，形成与硬件终端设备匹配的逻辑交互指令；当用户需求发生变更时，系统将通用逻辑及接口控制文件导入至内容编辑可执行模块进行修改，修改完成后，内容编辑可执行模块导出新的通用逻辑及接口控制文件至运行终端可执行模块。

根据本公开的至少一个实施方式，内容编辑可执行模块包括逻辑编辑模块和标准化模块；其中，逻辑编辑模块用于对目标内容进行逻辑编辑，形成可交互的逻辑脚本；标准化模块用于对逻辑脚本进行标准化整理，形成系统的通用逻辑及接口控制文件。

根据本公开的至少一个实施方式，标准化整理是指：按照预设的顺序和格式对逻辑脚本中的数据和逻辑进行整理和抽取排版，形成系统的通用逻辑及接口控制文件。

根据本公开的至少一个实施方式，运行终端可执行模块包括解析模块和适配模块；解析模块用于按照预设的顺序和格式解析逻辑及接口控制文件，形成通用性的数据和命令参数；适配模块将通用性的数据和命令参数转化为硬件终端设备交互程序接口能够读取的逻辑交互指令。

根据本公开的另一方面，将VR/AR/MR装置的可执行程序活态化二次编辑的方法包括以下步骤：对目标内容进行逻辑编辑，并将编辑好的逻辑存储为通用逻辑及接口控制文件；读取通用逻辑及接口控制文件，解析通用逻辑及接口控制文件，并形成与硬件终端设备匹配的逻辑交互指令；当用户需求发生变更时，将通用逻辑及接口控制文件重新编辑，并存储为新的通用逻辑及接口控制文件；重新读取新的通用逻辑及接口控制文件，重新解析新的通用逻辑及接口控制文件，并形成与硬件终端设备匹配的新的逻辑交互指令。

根据本公开的至少一个实施方式，对目标内容进行逻辑编辑，并将编辑好的逻辑存储为通用逻辑及接口控制文件的步骤包括：对拟编辑的目标内容进行逻辑编辑，形成可交互的逻辑脚本；对逻辑脚本进行标准化整理，形成系统的通用逻辑及接口控制文件。

根据本公开的至少一个实施方式，标准化整理是指：按照预设的顺序和格式对逻辑脚本中的数据和逻辑进行整理和抽取排版，进而形成系统的通用逻辑及接口控制文件。

根据本公开的至少一个实施方式，读取通用逻辑及接口控制文件，解析通用逻辑及接口控制文件，并形成与硬件终端设备匹配的逻辑交互指令的步骤包括：按照预设的顺序和格式解析逻辑及接口控制文件，形成通用性的数据和命令参数；将通用性的数据和命令参数转化为硬件终端设备的交互程序接口能够读取的逻辑交互指令。

根据本公开的又一方面，一种电子设备包括：存储器，存储器存储执行指令；以及处理器，处理器执行存储器存储的执行指令，使得处理器执行如上所述的方法。

根据本公开的又一方面，一种可读存储介质，可读存储介质中存储有执行指令，执行指令被处理器执行时用于实现如上所述的方法。

附图说明

附图示出了本公开的示例性实施方式，并与其说明一起用于解释本公开的原理，其中包括了这些附图以提供对本公开的进一步理解，并且附图包括在本说明书中并构成本说明书的一部分。

图1是根据本公开的至少一个实施方式的将VR/AR/MR装置的可执行程序活态化二次编辑的系统与硬件终端设备连接的示意图。

图2是根据本公开的至少一个实施方式的将VR/AR/MR装置的可执行程序活态化二次编辑的方法步骤示意图。

图3是根据本公开的至少一个实施方式的一种能够执行将VR/AR/MR装置的可执行程序活态化二次编辑的方法的电子设备的示意性视图。

具体实施方式

下面结合附图和实施方式对本公开作进一步的详细说明。可以理解的是，此处所描述的具体实施方式仅用于解释相关内容，而非对本公开的限定。另外还需要说明的是，为了便于描述，附图中仅示出了与本公开相关的部分。

需要说明的是，在不冲突的情况下，本公开中的实施方式及实施方式中的特征可以相互组合。下面将参考附图并结合实施方式来详细说明本公开。

本公开提供一种将VR/AR/MR装置的可执行程序活态化二次编辑的系统及方法，可应用于数据存储技术领域、图形图像技术领域、虚拟现实技术领域、增强显示现实技术领域及混合现实技术领域。该系统集图形渲染、数据存储、逻辑编码、信息传输、终端适配于一身，为使用者提供一种将VR/AR/MR装置的可执行程序活态化二次编辑的方法，通过此方法可以在无需修改源码的基础上，对生成的可执行程序进行二次编辑，更改其逻辑操作及数据等，避免了源码修改所带来的一系列问题，大大提升了工作效率。下面结合附图详细介绍将VR/AR/MR装置的可执行程序活态化二次编辑的系统及相应的方法。

在本公开的一个可选实施方式中，如图1所示，将VR/AR/MR装置的可执行程序活态化二次编辑的系统1包括内容编辑可执行模块2和运行终端可执行模块3。其中，内容编辑可执行模块2可以对用户拟创作的虚拟现实内容进行逻辑编辑，并将编辑好的逻辑以通用逻辑及接口控制文件的形式导出至运行终端可执行模块3。该通用逻辑为系统通用的逻辑。运行终端可执行模块3可用于读取内容编辑可执行模块2制作的通用逻辑及接口控制文件，并解析该通用逻辑及接口控制文件，然后根据连接的硬件终端设备4进一步形成与该硬件终端设备4匹配的逻辑交互指令，从而驱动执行程序的运行。

在本公开的一个可选实施方式中，如图1所示，内容编辑可执行模块可以由逻辑编辑模块21和标准化模块22组成。

其中，逻辑编辑模块21可以对VR/AR/MR内容进行逻辑编辑，并形成可交互的逻辑脚本。具体的，逻辑编辑模块21可以将大量的底层逻辑代码进行封装处理，然后以可视化的功能模块的方式向用户开放出来以供调用。对于用户来说，进行虚拟现实内容编辑不需要进行代码编写，而只需要像垒积木一样去挑选各个可视化的功能模块，将其组合起来即形成一套内容逻辑。更为详细的，逻辑编辑模块21可以让用户快速的进行虚拟现实内容中的工程场景的逻辑编辑以及通过图形化方式对工程的场景进行编辑管理。例如，通过逻辑编辑模块21可以首先制定一个工程场景的逻辑列表；然后根据编辑好的逻辑列表对场景中的可视化的功能模块或者说场景模型进行属性编辑，包括编辑其位置坐标信息、姿态信息、缩放系数信息、透明度信息、触发机制信息等；还可以通过将事件绑定在场景模型上来对其进行各种操作或属性的更改，包括设置事件触发条件、事件延迟发生或事件持续时间等。在对目标内容编辑的过程中随时可以对工程场景的逻辑列表进行顺序调整或者增删某些逻辑，还可以随时从外部导入新的素材资源，包括三维模型、音频、视频、图片资源和文档资源等，补充工程场景内容，并根据自定义配置对其进行分组。此外，工程场景搭建过程的任意时刻均可以对场景的光照、环境、第一人称参照等进行管理。在内容编辑完成后，用户还可以查看整体场景布局，也可对场景中的物体直接进行各种操作，包括但不限于相机的漫游、场景模型的信息更改、场景模型的事件绑定等。最终，用户通过逻辑编辑模块21可以获取一个编辑好的可交互的逻辑脚本用于后续操作。

标准化模块22则用于对可交互的逻辑脚本进行标准化整理，形成系统通用的逻辑及接口控制文件。具体的，用户可以根据实际需要或经验，预设工程场景顺序，并设定将接口控制文件保存为第一格式。第一格式优选是标准通用标记语言格式，例如可扩展标记语言格式(XML格式)。然后对可交互的逻辑脚本中的数据和逻辑进行整理和抽取排版，以获取预定的场景顺序，并保存为预设的第一格式文件。

在本公开的一个可选实施方式中，运行终端可执行模块3可以读取标准化后的系统通用的逻辑和接口控制文件，解析该系统通用的逻辑及接口控制文件，并基于连接的硬件终端设备4形成与该硬件终端设备4匹配的逻辑交互指令。

在本公开的一个可选实施方式中，如图1所示，运行终端可执行模块3可以配置解析模块31和适配模块32。其中，解析模块31可用来按照预设的顺序和格式解析上述的系统通用的逻辑及接口控制文件，形成通用性的数据和命令参数。

在本公开的一个可选实施方式中，运行终端可执行模块3中可以内置硬件终端设备4提供的交互程序接口(API)，适配模块32可以根据连接的硬件终端设备4(例如VR设备、MR设备或AR设备中的3D投影系统、头戴式立体显示器等)提供的API将通用性的数据和命令参数转化为硬件终端设备API能够读取的交互命令。例如，当运行终端可执行模块3与不同的硬件终端设备4连接时，适配模块32通过与API进行适应和匹配，可以将解析模块31解析出的通用数据和命令参数转化为相应的硬件终端设备4可以读取的逻辑交互指令，从而驱动执行程序的运行，实现了逻辑与运行平台的相对独立。

在本公开的一个可选实施方式中，当用户需求发生变更时，例如需要对原先创作的虚拟现实内容做出更改，可以将通用逻辑及接口控制文件重新导入至内容编辑可执行模块2进行二次编辑，例如通过逻辑编辑模块21重新进行逻辑编辑或场景顺序调整，形成新的交互逻辑脚本。然后再根据预设好的顺序和格式，通过标准化模块22进行标准化整理，将新的交互逻辑脚本转化成新的系统通用的逻辑及接口控制文件并导出至运行终端可执行模块3。修改完成后的通用逻辑及接口控制文件经过运行终端可执行模块3的解析后，进一步形成与硬件终端设备4匹配的新的逻辑交互方式。这样的操作方式打破了传统的可执行程序发布后功能及逻辑都将固化不可修改的问题，可以实现逻辑与运行平台的相对独立，将通用逻辑及接口控制文件作为中间的链接者，当用户需要修改写好的逻辑时，只需要修改通用逻辑及接口控制文件即可，而无需修改任何源码。逻辑及接口控制文件一旦修改，运行终端可执行模块将会重新加载并且按照新的逻辑运行，形成了一个全新逻辑的可执行程序，从而实现了可执行程序的活态化修改。

在本公开的一个可选实施方式中，如图2所示，将VR/AR/MR装置的可执行程序活态化二次编辑的方法包括以下步骤：

1)对目标内容，即待编辑的虚拟现实内容进行逻辑编辑，并将编辑好的逻辑以通用逻辑及接口控制文件的形式存储。

具体的，首先将大量的底层逻辑代码进行封装处理，给用户开放出可视化的功能模块以供调用，即通过图形化方式对工程的场景进行编辑管理，用户只需要像垒积木一样去挑选各个可视化的功能模块，然后将其组合起来即形成一套内容逻辑或者说可交互的逻辑脚本。然后，用户对可交互的逻辑脚本进行标准化整理。更具体的，预先设定目标内容的场景顺序，并预先设定将接口控制文件存储为第一格式文件。

2)读取通用逻辑及接口控制文件，解析通用逻辑及接口控制文件，并根据连接的硬件终端设备形成与硬件终端设备匹配的逻辑交互指令。

具体的，首先按照预设的顺序和格式解析上述的系统通用的逻辑及接口控制文件，形成通用性的数据和命令参数，然后通过与硬件终端设备提供的API进行适应和匹配，将通用性的数据和命令参数转化为硬件终端设备API能够读取的交互命令。

3)当用户需求发生变更时，将通用逻辑及接口控制文件重新编辑，并导出新的通用逻辑及接口控制文件。

需求发生变更后，例如用户需要对创作内容进行逻辑顺序的调整或者场景中的模型进行更改，可以将通用逻辑及接口控制文件进行二次编辑，以形成新的交互逻辑脚本。然后再根据预设好的顺序和格式，对新的逻辑脚本重新进行标准化整理，将新的交互逻辑脚本转化成新的通用逻辑及接口控制文件。

4)重新读取新的通用逻辑及接口控制文件，重新解析新的通用逻辑及接口控制文件，并根据连接的硬件终端设备形成与硬件终端设备匹配的新的逻辑交互指令，进一步驱动可执行程序的运行。

在本公开的一个可选实施方式中，如图3所示为一种电子设备的示意性视图，该电子设备可以是任意的能够执行上述的将VR/AR/MR装置的可执行程序活态化二次编辑的方法的设备。该电子设备包括存储器5、处理器6和通讯接口7。其中，存储器5内存储有可在处理器6上运行的计算机程序。存储器5可以包括高速RAM存储器，也可以还包括非易失性存储器(non-volatile memory)，例如至少一个磁盘存储器。处理器6执行计算机程序时可以实现上述实施方式中的将VR/AR/MR装置的可执行程序活态化二次编辑的方法。存储器5和处理器6的数量可以为一个或多个。通讯接口7用于与外界设备进行通信，进行数据交互传输。如果存储器5、处理器6及通讯接口7独立实现，则存储器5、处理器6及通讯接口7可以通过总线相互连接并完成相互间的通信。可选的，在具体实现上，如果存储器5、处理器6及通讯接口7集成在一块芯片上，则存储器5、处理器6及通讯接口7可以通过内部接口完成相互间的通信。

在本公开的一个可选实施方式中，可读存储介质可以是任何可以包含、存储、通信、传播或传输程序以供指令执行系统、装置或设备或结合这些指令执行系统、装置或设备而使用的装置。可读存储介质的更具体的示例(非穷尽性列表)包括以下：具有一个或多个布线的电连接部(电子装置)，便携式计算机盘盒(磁装置)，随机存取存储器(RAM)，只读存储器(ROM)，可擦除可编辑只读存储器(EPROM或闪速存储器)，光纤装置，以及便携式只读存储器(CDROM)。可读存储介质可以存储可在处理器上运行的执行指令。当可读存储介质与处理器连接时，该执行指令可以通过处理器实现上述的将VR/AR/MR装置的可执行程序活态化二次编辑的方法。

综上所述，本公开的将VR/AR/MR装置的可执行程序活态化二次编辑的系统及方法，打破了传统的可执行程序发布后功能及逻辑都会固化不可修改的问题，可以让使用者无需重新修改源码，也无需重新发布可执行程序，只需对通用的逻辑及接口控制文件进行修改即可，实现了可执行程序的活态化，内容逻辑和运行终端独立，互不干扰，提高了由于需求变更造成的可执行程序修改的效率，避免了源码级修改造成的各种问题。

本领域的技术人员应当理解，凡是只需通过修改特定文件而无需源码级修改后重新发布可执行程序，就能达到更改程序运行数据及逻辑的产品都是使用了本技术。此外，上述实施方式仅仅是为了清楚地说明本公开，而并非是对本公开的范围进行限定。对于所属领域的技术人员而言，在上述公开的基础上还可以做出其它变化或变型，并且这些变化或变型仍处于本公开的范围内。

Claims (10)

1.一种将VR/AR/MR装置的可执行程序活态化二次编辑的系统，其特征在于，包括内容编辑可执行模块和运行终端可执行模块；

其中，所述内容编辑可执行模块用于目标内容的逻辑编辑，以及将编辑好的逻辑以通用逻辑及接口控制文件的形式导出至所述运行终端可执行模块；

所述运行终端可执行模块用于读取所述通用逻辑及接口控制文件，解析所述通用逻辑及接口控制文件，形成与硬件终端设备匹配的逻辑交互指令；

当用户需求发生变更时，所述系统将所述通用逻辑及接口控制文件导入至所述内容编辑可执行模块进行修改，修改完成后，所述内容编辑可执行模块导出新的通用逻辑及接口控制文件至所述运行终端可执行模块。

2.根据权利要求1所述的系统，其特征在于，所述内容编辑可执行模块包括逻辑编辑模块和标准化模块；

其中，所述逻辑编辑模块用于对所述目标内容进行逻辑编辑，形成可交互的逻辑脚本；

所述标准化模块用于对所述逻辑脚本进行标准化整理，形成所述通用逻辑及接口控制文件。

3.根据权利要求2所述的系统，其特征在于，所述标准化整理是指：

按照预设的顺序和格式对所述逻辑脚本中的数据和逻辑进行整理和抽取排版，形成所述通用逻辑及接口控制文件。

4.根据权利要求3所述的系统，其特征在于，所述运行终端可执行模块包括解析模块和适配模块；

所述解析模块用于按照预设的顺序和格式解析所述通用逻辑及接口控制文件，形成通用性的数据和命令参数；

所述适配模块将所述通用性的数据和命令参数转化为所述硬件终端设备交互程序接口能够读取的逻辑交互指令。

5.一种将VR/AR/MR装置的可执行程序活态化二次编辑的方法，其特征在于，包括以下步骤：

对目标内容进行逻辑编辑，并将编辑好的逻辑存储为通用逻辑及接口控制文件；

读取所述通用逻辑及接口控制文件，解析所述通用逻辑及接口控制文件，并形成与硬件终端设备匹配的逻辑交互指令；

当用户需求发生变更时，将所述通用逻辑及接口控制文件重新编辑，并存储为新的通用逻辑及接口控制文件；

重新读取所述新的通用逻辑及接口控制文件，重新解析所述新的通用逻辑及接口控制文件，并形成与所述硬件终端设备匹配的新的逻辑交互指令。

6.根据权利要求5所述的方法，其特征在于，对目标内容进行逻辑编辑，并将编辑好的逻辑存储为通用逻辑及接口控制文件的步骤包括：

对拟编辑的所述目标内容进行逻辑编辑，形成可交互的逻辑脚本；

对所述逻辑脚本进行标准化整理，形成所述通用逻辑及接口控制文件。

7.根据权利要求6所述的方法，其特征在于，所述标准化整理是指：

按照预设的顺序和格式对所述逻辑脚本中的数据和逻辑进行整理和抽取排版，进而形成所述通用逻辑及接口控制文件。

8.根据权利要求7所述的方法，其特征在于，读取所述通用逻辑及接口控制文件，解析所述通用逻辑及接口控制文件，并形成与硬件终端设备匹配的逻辑交互指令的步骤包括：

按照预设的顺序和格式解析所述逻辑及接口控制文件，形成通用性的数据和命令参数；

将所述通用性的数据和命令参数转化为所述硬件终端设备的交互程序接口能够读取的逻辑交互指令。

9.一种电子设备，其特征在于，包括：

存储器，所述存储器存储执行指令；以及

处理器，所述处理器执行所述存储器存储的执行指令，使得所述处理器执行如权利要求5至8中任一项所述的方法。

10.一种可读存储介质，其特征在于，所述可读存储介质中存储有执行指令，所述执行指令被处理器执行时用于实现如权利要求5至8中任一项所述的方法。