CN112070901A - 一种园林的ar场景构建方法、装置、存储介质及终端 - Google Patents

Abstract

本发明公开了一种园林的AR场景构建方法、装置、存储介质及终端，所述方法包括：实时获取园林中目标场景的视频图像帧；基于预先生成的许可证编码识别所述视频图像帧，生成所述视频图像帧对应的园林场景信息；根据所述园林场景信息调用所述园林场景信息对应的AR模型；定位所述目标场景的位置信息；将所述位置信息中的角度值和所述AR模型的角度值进行匹配后生成园林的AR场景。因此，采用本申请实施例，当针对园林的目标场景进行拍摄时，通过获取园林的AR数字模型实现虚拟信息与真实世界相融合，将园林的相关资料基于三维模型的物理分析有效叠加于真实场景，从而提升了用户体验度。

Description

一种园林的AR场景构建方法、装置、存储介质及终端

技术领域

本发明涉及人工智能技术领域，特别涉及一种园林的AR场景构建方法、装置、存储介质及终端。

背景技术

随着时代发展，在中国，园林的社会、经济、生态效益越来越重要，关系到人们生存环境的质量和人们的健康，全社会对园林的理解和知识的普及度也逐渐上升。

目前，公众对园林的认知主要来源园方提供的公告板及景区导览手册，但该方式的局限使得公众很难将文字等信息直观对应到园林的景观场所中去，很难从当下的时间空间中体验由时间变化带来的造园内涵的展现。因此，新型数字媒体技术的介入(例如移动端游览系统)，可有效提高公众与园林的交互过程，增强游览体验，激发起公众对园林的认同感与归属感。由于当前的公告板及景区导览手册以及导览系统是基于平面型文字和图片的形式进行展示，难以将园林多维数据信息与现实场景相互融合从而引导用户认知，从而降低了用户体验度。

发明内容

本申请实施例提供了一种园林的AR场景构建方法、装置、存储介质及终端。为了对披露的实施例的一些方面有一个基本的理解，下面给出了简单的概括。该概括部分不是泛泛评述，也不是要确定关键/重要组成元素或描绘这些实施例的保护范围。其唯一目的是用简单的形式呈现一些概念，以此作为后面的详细说明的序言。

第一方面，本申请实施例提供了一种园林的AR场景构建方法，所述方法包括：

实时获取园林中目标场景的视频图像帧；

基于预先生成的许可证编码识别所述视频图像帧，生成所述视频图像帧对应的园林场景信息；

根据所述园林场景信息调用所述园林场景信息对应的AR模型；

定位所述目标场景的位置信息；

将所述位置信息中的角度值和所述AR模型的角度值进行匹配后生成园林的AR场景。

可选的，所述实时获取园林目标场景的视频图像帧之前，还包括：

采集园林中各个场景图像；

将所述园林中各个场景图像输入AR引擎Vuforia服务器中，生成许可证编码；

将所述许可证编码确定为预先生成的许可证编码；

基于所述园林中各个场景图像生成所述园林场景信息对应的AR模型。

可选的，所述基于所述园林中各个场景图像创建所述园林场景信息对应的AR模型，包括：

数字化所述园林中各个场景图像，生成所述各个场景图像对应的三维模型；

采用Zbrush建模方式对所述各个场景图像对应的三维模型进行优化，生成优化后的各个场景图像对应的三维模型；

将所述优化后的各个场景图像对应的三维模型导入Unity引擎中进行模拟，生成模拟后的各个场景图像对应的三维模型；

针对所述模拟后的各个场景图像对应的三维模型进行模拟状态综合管理，以及利用Unity引擎中的PostProcessing插件和DoozyUI插件对所述各个场景图像对应的三维模型进行界面渲染优化，生成所述园林场景信息对应的AR模型。

可选的，所述数字化所述园林中各个场景图像，生成所述各个场景图像对应的模型，包括：

获取所述园林中各个场景图像三维数据信息；

通过人工智能算法以及超像素处理算法对所述图像三维数据进行处理，生成所述各个场景图像对应的三维模型。

可选的，所述将所述优化后的各个场景图像对应的三维模型导入Unity引擎中进行模拟的模拟方法包括碰撞检测模拟、水流分析模拟以及高亮边界模拟。

可选的，所述人工智能算法至少包括回归神经网络、ID3算法、贝叶斯信念网络；所述超像素处理算法至少包括NC05-归一化切割算法。

第二方面，本申请实施例提供了一种园林的AR场景构建装置，所述装置包括：

图像帧获取模块，用于实时获取园林中目标场景的视频图像帧；

信息生成模块，用于基于预先生成的许可证编码识别所述视频图像帧，生成所述视频图像帧对应的园林场景信息；

AR模型调用模块，用于根据所述园林场景信息调用所述园林场景信息对应的AR模型；

位置信息定位模块，用于定位所述目标场景的位置信息；

AR场景生成模块，用于将所述位置信息中的角度值和所述AR模型的角度值进行匹配后生成园林的AR场景。

第三方面，本申请实施例提供一种计算机存储介质，所述计算机存储介质存储有多条指令，所述指令适于由处理器加载并执行上述的方法步骤。

第四方面，本申请实施例提供一种终端，可包括：处理器和存储器；其中，所述存储器存储有计算机程序，所述计算机程序适于由所述处理器加载并执行上述的方法步骤。

本申请实施例提供的技术方案可以包括以下有益效果：

在本申请实施例中，AR场景构建装置首先实时获取园林中目标场景的视频图像帧，再基于预先生成的许可证编码识别视频图像帧，生成视频图像帧对应的园林场景信息，然后根据园林场景信息调用园林场景信息对应的AR模型，再定位目标场景的位置信息，最后将位置信息中的角度值和所述AR模型的角度值进行匹配后生成园林的AR场景。由于将园林的场景信息处理成AR数字模型，当针对园林的目标场景进行拍摄时，通过获取园林的AR数字模型实现虚拟信息与真实世界相融合，将园林的相关资料，例如文字、视频、音乐，以及基于三维模型的物理分析有效叠加于真实场景，从而提升了用户体验度。

应当理解的是，以上的一般描述和后文的细节描述仅是示例性和解释性的，并不能限制本发明。

附图说明

此处的附图被并入说明书中并构成本说明书的一部分，示出了符合本发明的实施例，并与说明书一起用于解释本发明的原理。

图1是本申请实施例提供的一种园林的AR场景构建场景的场景示意图；

图2是本申请实施例提供的一种园林的AR场景构建方法的流程示意图；

图3是本申请实施例提供的一种园林的AR场景构建流程的流程示意图；

图4是本申请实施例提供的一种园林的AR场景构建过程的过程框图；

图5是本申请实施例提供的另一种园林的AR场景构建方法的流程示意图；

图6是本申请实施例提供的一种园林的AR场景构建的系统框架图；

图7是本申请实施例提供的一种园林的AR场景构建装置的装置示意图；

图8是本申请实施例提供的另一种园林的AR场景构建装置的装置示意图；

图9是一种本申请实施例提供的终端示意图。

具体实施方式

以下描述和附图充分地示出本发明的具体实施方案，以使本领域的技术人员能够实践它们。

应当明确，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其它实施例，都属于本发明保护的范围。

下面的描述涉及附图时，除非另有表示，不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本发明相一致的所有实施方式。相反，它们仅是如所附权利要求书中所详述的、本发明的一些方面相一致的系统和方法的例子。

在本发明的描述中，需要理解的是，术语“第一”、“第二”等仅用于描述目的，而不能理解为指示或暗示相对重要性。对于本领域的普通技术人员而言，可以具体情况理解上述术语在本发明中的具体含义。此外，在本发明的描述中，除非另有说明，“多个”是指两个或两个以上。“和/或”，描述关联对象的关联关系，表示可以存在三种关系，例如，A和/或B，可以表示：单独存在A，同时存在A和B，单独存在B这三种情况。字符“/”一般表示前后关联对象是一种“或”的关系。

到目前为止，公众对中国的园林的认知主要来源园方提供的公告板及景区导览手册，但该方式的局限使得公众很难将文字等信息直观对应到园林的景观场所中去，很难从当下的时间空间中体验由时间变化带来的造园内涵的展现。因此，新型数字媒体技术的介入(例如移动端游览系统)，可有效提高公众与园林的交互过程，增强游览体验，激发起公众对园林的认同感与归属感。由于当前的公告板及景区导览手册以及导览系统是基于平面型文字和图片的形式进行展示，难以将园林多维数据信息与现实场景相互融合从而引导用户认知，从而降低了用户体验度。为此，本申请提供了一种园林的AR场景构建方法、装置、存储介质及终端，以解决上述相关技术问题中存在的问题。本申请提供的技术方案中，由于将园林的场景信息处理成AR数字模型，当针对园林的目标场景进行拍摄时，通过获取园林的AR数字模型实现虚拟信息与真实世界相融合，将园林的相关资料，例如文字、视频、音乐，以及基于三维模型的物理分析有效叠加于真实场景，从而提升了用户体验度，下面采用示例性的实施例进行详细说明。

请参见图1，图1是本申请的一个实施例示出的一种实施场景的场景示意图，该实施场景中包括用户101、用户终端102、园林目标场景103。其中，用户终端102是具备网络通信功能的电子设备，该电子设备包括但不限于智能手机、平板电脑、可穿戴式设备、智能家居设备、膝上型便捷计算机、台式计算机、智能相机等。用户终端102包括一个或者多个处理器或者存储器，处理器可以包括一个或者多个处理核心。处理器利用各种接口和线路连接整个障碍物识别设备内的各个部分，通过运行或执行存储在存储器内的指令、程序、代码集或指令集，以及调用存储在存储器内的数据，执行园林的AR场景构建系统的各种功能和处理数据。可选的，处理器可以采用数字信号处理(Digital Signal Processing，DSP)、现场可编程门阵列(Field－Programmable Gate Array，FPGA)、可编程逻辑阵列(ProgrammableLogic Array，PLA)中的至少一种硬件形式来实现。处理器可集成中央处理器(CentralProcessing Unit，CPU)和调制解调器等中的一种或几种的组合。

其中，该用户终端102中安装有园林的AR场景构建功能的应用程序。

在一种可能的实现方式中，用户101首先利用用户终端102通过拍摄园林103实时获取园林目标场景103的视频图像帧，然后根据提前生成的许可证编码识别园林103的视频图像帧，生成园林目标场景103的电子信息，再根据园林目标场景103的电子信息获取园林目标场景103对应的增强现实(Augmented Reality，AR)模型，再定位用户101拍摄的园林103目标场景的位置信息，最后将园林目标场景103的位置信息中的角度值和AR模型的角度值进行匹配后生成园林目标场景103的AR场景。

在本申请实施例中，AR场景构建装置首先实时获取园林中目标场景的视频图像帧，再基于预先生成的许可证编码识别视频图像帧，生成视频图像帧对应的园林场景信息，然后根据园林场景信息调用园林场景信息对应的AR模型，再定位目标场景的位置信息，最后将位置信息中的角度值和所述AR模型的角度值进行匹配后生成园林的AR场景。由于将园林的场景信息处理成AR数字模型，当针对园林的目标场景进行拍摄时，通过获取园林的AR数字模型实现虚拟信息与真实世界相融合，将园林的相关资料，例如文字、视频、音乐，以及基于三维模型的物理分析有效叠加于真实场景，从而提升了用户体验度。

下面将结合附图2-附图4，对本申请实施例提供的园林的AR场景构建方法进行详细介绍。该方法可依赖于计算机程序实现，可运行于基于冯诺依曼体系的园林的AR场景构建装置上。该计算机程序可集成在应用中，也可作为独立的工具类应用运行。

请参见图2，为本申请实施例提供了一种园林的AR场景构建方法的流程示意图。如图2所示，本申请实施例的所述方法可以包括以下步骤：

S101，实时获取园林中目标场景的视频图像帧；

其中，园林通常是指人们由山水、植物、建筑、道路广场、小品等构成的、供人们户外休闲和娱乐的、贴近自然的场所。目标场景是园林中具体某一位置的场景。图像就是具有视觉效果的画面，它是人类视觉的基础，包括纸质上的、底片或照片上的、电视上的、投影仪或计算机屏幕上的。视频图像帧是用户通过终端上摄像头在园林中某一具体位置连续拍摄的图像。

通常，园林中目标场景的视频图像帧是用户进行构建AR场景的图像，此时的图像仅仅是一个平面效果图，用户会将此时的平面效果图进行AR场景构建，增强对当前位置的园林的深层次意会。

在一种可能的实现方式中，当构建园林的AR场景时，用户首先身处园林某一位置中，然后打开移动终端上安装的摄像软件，通过摄像软件激发摄像头实时拍摄当前位置的园林中的场景图像。

S102，基于预先生成的许可证编码识别所述视频图像帧，生成所述视频图像帧对应的园林场景信息；

其中，许可证编码时预先将场景图像输入到AR引擎Vuforia服务器中生成的代表场景特征的信息码，这里可以理解成园林某一场景的场景识别码。园林场景信息是根据许可证编码获取的场景数字信息。

在一种可能的实现方式中，首先基于步骤S101可得到实时拍摄当前位置的园林中的场景图像，当该图像拍摄后，用户终端基于该场景图像预先生成的许可证编码识别当前场景，识别后生成园林目标场景对应的场景信息。

进一步地，在实时获取园林中目标场景的视频图像帧之前时，还包括生成许可证编码以及园林场景信息对应的AR模型。具体为，首先采集园林中各个场景图像，再将园林中各个场景图像输入AR引擎Vuforia服务器中，生成许可证编码，然后将许可证编码确定为预先生成的许可证编码，最后基于园林中各个场景图像生成园林场景信息对应的AR模型。

S103，根据所述园林场景信息调用所述园林场景信息对应的AR模型；

其中，AR模型是根据园林场景信息进行构建生成园林场景对应的AR模型。

在一种可能的实现方式中，首先基于步骤S102可得到视频图像帧对应的园林场景信息，在用户终端得到园林场景信息后，将该信息生成AR模型获取的密钥通过有线或者无线方式发送至服务器，在服务器接收到该AR模型获取的密钥时，通过该密钥调取该园林场景对应的AR模型，并将该AR模型通过有线或者无线的方式发送至用户终端。

进一步地，在园林不同场景的AR模型进行构建时，首先数字化园林中各个场景图像，生成各个场景图像对应的三维模型，再采用Zbrush建模方式对各个场景图像对应的三维模型进行优化，生成优化后的各个场景图像对应的三维模型，然后将优化后的各个场景图像对应的三维模型导入Unity引擎中进行模拟，生成模拟后的各个场景图像对应的三维模型，最后针对模拟后的各个场景图像对应的三维模型进行模拟状态综合管理，以及利用Unity引擎中的PostProcessing插件和DoozyUI插件对各个场景图像对应的三维模型进行界面渲染优化，生成园林场景信息对应的AR模型。

S104，定位所述目标场景的位置信息；

在一种可能的实现方式中，基于步骤S103获取到当前场景下的AR模型时，通过定位获取当前场景的位置信息。需要说明的时，当前场景位置的定位方式可以是用户终端的GPS定位，也可以是IP定位或WIFI定位，具体的定位方式可根据实际情况自行设定，此处不做限定。

例如图3所示，图3是本申请实施例提供的园林AR场景构建的过程示意图，在该示意图中，包括现实信息，以及数字信息，现实信息和数字信息在引擎层的处理下最终将处理的模型输入融合现实模块中进行数字+现实信息融合，最后生成园林的AR场景。

具体的，利用场景识别功能以及内容呈现功能，对园林信息进行再呈现。其中AR引擎在其中主要提供了以下4个模块：1.场景检测模块、2.摄像机反求模块、3.虚拟模型渲染模块、4.融合显示模块。在场景识别功能中，首先利用场景检测模块，通过将照片信息上传至AR引擎Vuforia服务器，对图像进行识别并提取图像特征，生成许可证编码。在内容呈现功能中，Unity引擎可基于该许可证编码，对摄像机回传的视频流信息进行读取，准确识别出真实世界中的场景信息，将信息回传信息空间中，并利用摄像机视角反求模块，对视频流进行摄像机定位，实现真实世界与数字世界摄像机视角的匹配。流程完成后，基于园林知识体系，在数字世界中尝试对视频流中的物件进行标注以及更深一层的分析，并将该信息通过虚拟模型渲染模块及融合显示模块，映射到视频流中，实现对真实世界的信息再呈现。

S105，将所述位置信息中的角度值和所述AR模型的角度值进行匹配后生成园林的AR场景。

例如图4所示，图4是本申请实施例提供的园林AR场景构建的流程框图，在构建园林AR场景时的AR引擎包括物理信息和虚拟信息。流程为首先定位以及获取场景图像，然后进行现实数据收集，最后进行内容设计呈现出园林场景的AR模型。

在位以及获取场景图像时，首先需要对园林定位和获取场景图，定位和获取场景图的物理信息需要首先拍摄提取场景特征点，然后将照片作为目标上传至Vuforia服务器，最后场景识别后得到当前园林的场景图像。

在现实数据收集时，首先需要对园林场景照片建模或全场景数字建模，然后生成场景照片对应的网络模型，再对模型进行优化，最后导出模型并将模型推送至模型资源库保存。

在内容设计时，首先需要搭建Unity平台，再通过用户界面的按钮以及精准定位的GPS坐标信息进行事件中心创建，生成有机状态机，最后通过获取模型资源库中的模型以及加载基础模型，通过模型模拟以及界面渲染最后得到呈现的内容。

在本申请实施例中，AR场景构建装置首先实时获取园林中目标场景的视频图像帧，再基于预先生成的许可证编码识别视频图像帧，生成视频图像帧对应的园林场景信息，然后根据园林场景信息调用园林场景信息对应的AR模型，再定位目标场景的位置信息，最后将位置信息中的角度值和所述AR模型的角度值进行匹配后生成园林的AR场景。由于将园林的场景信息处理成AR数字模型，当针对园林的目标场景进行拍摄时，通过获取园林的AR数字模型实现虚拟信息与真实世界相融合，将园林的相关资料，例如文字、视频、音乐，以及基于三维模型的物理分析有效叠加于真实场景，从而提升了用户体验度。

请参见图5，为本申请实施例提供的一种园林的AR场景构建方法的流程示意图。该园林的AR场景构建方法可以包括以下步骤：

S201，采集园林中各个场景图像；

例如图6所示，图6是本申请实施例提供的一种园林的AR场景构建的系统框架，该系统框架主要分为七层，即：基础设施层、数据层、识别层、中台层、内容层、应用层和用户层。

基础设施层主要为基础网络，包括云存储、云计算、4G/5G网络及移动端设备。数据层包括GPS坐标数据，三维扫描模型，园林知识库，以及特定场景标定等数据。识别层、中台层及内容层均基于该层级上搭建。识别层作用为连接数字世界和真实世界，利用地理位置坐标、特征点识别等模型匹配技术，连接信息空间与现实世界，作为下一步计算、分析、模拟底层算法模型的数据基础。中台层主要采用Unity3D和Vuforia增强现实引擎作为主要开发平台。内容层包括园林的历史、文化、艺术以及当代使用等。应用层包括：教学研究、游客浏览以及园林管理。用户层包括面对用户方、面对管理方以及面对利益相关方。最后将基础设施层、数据层及识别层作为底层基础，连接内容层、应用层和用户层，同时可为外部平台提供相关接口进行进一步开发。在内容层集合了园林内容体系知识。于应用层则是将服务层的多种算法再融合，基于园林相关方可分为三个应用方向：研究教学、游客游览、园林管理等。基于此将用户层主要分为：个体用户方、相关管理方、科研成果及利益相关方。

S202，将所述园林中各个场景图像输入AR引擎Vuforia服务器中，生成许可证编码；

S203，将所述许可证编码确定为预先生成的许可证编码；

S204，基于所述园林中各个场景图像生成所述园林场景信息对应的AR模型；

在一种可能的实现方式中，首先数字化园林中各个场景图像，生成各个场景图像对应的三维模型，再采用Zbrush建模方式对各个场景图像对应的三维模型进行优化，生成优化后的各个场景图像对应的三维模型，然后将优化后的各个场景图像对应的三维模型导入Unity引擎中进行模拟，生成模拟后的各个场景图像对应的三维模型，最后针对模拟后的各个场景图像对应的三维模型进行模拟状态综合管理，以及利用Unity引擎中的PostProcessing插件和DoozyUI插件对所述各个场景图像对应的三维模型进行界面渲染优化，生成所述园林场景信息对应的AR模型。

具体的，第一步，首先利用照片建模的技术，对现实场景进行数字化还原。第二步，由于获得的模型面数过高，不利于后期计算。因此通过Zbrush建模软件对模型进行优化，将面数降至10万个面。第三步，将模型导入第三方软件或Unity引擎中进行模拟。第四步，利用有限状态机(PlayMaker插件)，完成对每一种模拟状态综合管理，实现各种模拟结果的快速触发。第五步，在完成以上的信息标注或模拟分析后，可利用Unity的PostProcessing插件，为整体界面加上后期处理，进行场景亮度等画面效果的提升。第六步，由于上述功能偏于复杂和多样，需要利用DoozyUI插件，为整体界面制作UI界面设计，例如按下不同的按钮建，实现不同功能的效果展现。

进一步地，在第三步中将模型导入第三方软件或Unity引擎中进行模拟时，模拟包括碰撞检测模拟、水流分析模拟以及高亮边界模拟。在碰撞检测模拟中，首先将模型导入unity引擎中，对模型挂载Rigid body刚体功能，为其记录物体之间进行交互的各种系数,如速度,阻尼等。实现物理效果模拟，例如碰撞检测效果。在水流分析模拟中，首先将模型导入C4d中，利用C4d RealFlow插件对模型进行水流模拟分析。之后将解析后模型输出为Alembic格式，导入Unity引擎，进行水流模拟可视化。在高亮边界模拟中，首先将模型导入unity引擎中，为其添加Unity着色器，对模型进行着色。使得模型具备高亮边框的效果。通过该效果有效实现模型与周围环境的快速分离。

S205，实时获取园林中目标场景的视频图像帧；

S206，基于预先生成的许可证编码识别所述视频图像帧，生成所述视频图像帧对应的园林场景信息；

S207，根据所述园林场景信息调用所述园林场景信息对应的AR模型；

S208，定位所述目标场景的位置信息；

S209，将所述位置信息中的角度值和所述AR模型的角度值进行匹配后生成园林的AR场景。

在本申请实施例中，AR场景构建装置首先实时获取园林中目标场景的视频图像帧，再基于预先生成的许可证编码识别视频图像帧，生成视频图像帧对应的园林场景信息，然后根据园林场景信息调用园林场景信息对应的AR模型，再定位目标场景的位置信息，最后将位置信息中的角度值和所述AR模型的角度值进行匹配后生成园林的AR场景。由于将园林的场景信息处理成AR数字模型，当针对园林的目标场景进行拍摄时，通过获取园林的AR数字模型实现虚拟信息与真实世界相融合，将园林的相关资料，例如文字、视频、音乐，以及基于三维模型的物理分析有效叠加于真实场景，从而提升了用户体验度。

下述为本发明装置实施例，可以用于执行本发明方法实施例。对于本发明装置实施例中未披露的细节，请参照本发明方法实施例。

请参见图7，其示出了本发明一个示例性实施例提供的园林的AR场景构建装置的结构示意图。该园林的AR场景构建装置可以通过软件、硬件或者两者的结合实现成为智能机器人的全部或一部分。该装置1包括图像帧获取模块10、信息生成模块20、AR模型调用模块30、位置信息定位模块40、AR场景生成模块50。

图像帧获取模块10，用于实时获取园林中目标场景的视频图像帧；

信息生成模块20，用于基于预先生成的许可证编码识别所述视频图像帧，生成所述视频图像帧对应的园林场景信息；

AR模型调用模块30，用于根据所述园林场景信息调用所述园林场景信息对应的AR模型；

位置信息定位模块40，用于定位所述目标场景的位置信息；

AR场景生成模块50，用于将所述位置信息中的角度值和所述AR模型的角度值进行匹配后生成园林的AR场景。

可选的，例如图8所示，所述装置1还包括：

图像采集模块60，用于采集园林中各个场景图像；

许可证编码生成模块70，用于将所述园林中各个场景图像输入AR引擎Vuforia服务器中，生成许可证编码；

许可证编码确定模块80，用于将所述许可证编码确定为预先生成的许可证编码；

AR模型生成模块90，用于基于所述园林中各个场景图像生成所述园林场景信息对应的AR模型。

需要说明的是，上述实施例提供的园林的AR场景构建系统在执行园林的AR场景构建方法时，仅以上述各功能模块的划分进行举例说明，实际应用中，可以根据需要而将上述功能分配由不同的功能模块完成，即将设备的内部结构划分成不同的功能模块，以完成以上描述的全部或者部分功能。另外，上述实施例提供的园林的AR场景构建系统与园林的AR场景构建方法实施例属于同一构思，其体现实现过程详见方法实施例，这里不再赘述。

上述本申请实施例序号仅仅为了描述，不代表实施例的优劣。

在本申请实施例中，AR场景构建装置首先实时获取园林中目标场景的视频图像帧，再基于预先生成的许可证编码识别视频图像帧，生成视频图像帧对应的园林场景信息，然后根据园林场景信息调用园林场景信息对应的AR模型，再定位目标场景的位置信息，最后将位置信息中的角度值和所述AR模型的角度值进行匹配后生成园林的AR场景。由于将园林的场景信息处理成AR数字模型，当针对园林的目标场景进行拍摄时，通过获取园林的AR数字模型实现虚拟信息与真实世界相融合，将园林的相关资料，例如文字、视频、音乐，以及基于三维模型的物理分析有效叠加于真实场景，从而提升了用户体验度。

本发明还提供一种计算机可读介质，其上存储有程序指令，该程序指令被处理器执行时实现上述各个方法实施例提供的园林的AR场景构建方法。

本发明还提供了一种包含指令的计算机程序产品，当其在计算机上运行时，使得计算机执行上述各个方法实施例所述的园林的AR场景构建方法。

请参见图9，为本申请实施例提供了一种终端的结构示意图。如图9所示，所述终端1000可以包括：至少一个处理器1001，至少一个网络接口1004，用户接口1003，存储器1005，至少一个通信总线1002。

其中，通信总线1002用于实现这些组件之间的连接通信。

其中，用户接口1003可以包括显示屏(Display)、摄像头(Camera)，可选用户接口1003还可以包括标准的有线接口、无线接口。

其中，网络接口1004可选的可以包括标准的有线接口、无线接口(如WI-FI接口)。

其中，处理器1001可以包括一个或者多个处理核心。处理器1001利用各种借口和线路连接整个电子设备1000内的各个部分，通过运行或执行存储在存储器1005内的指令、程序、代码集或指令集，以及调用存储在存储器1005内的数据，执行电子设备1000的各种功能和处理数据。可选的，处理器1001可以采用数字信号处理(Digital Signal Processing，DSP)、现场可编程门阵列(Field-Programmable Gate Array，FPGA)、可编程逻辑阵列(Programmable Logic Array，PLA)中的至少一种硬件形式来实现。处理器1001可集成中央处理器(Central Processing Unit，CPU)、图像处理器(Graphics Processing Unit，GPU)和调制解调器等中的一种或几种的组合。其中，CPU主要处理操作系统、用户界面和应用程序等；GPU用于负责显示屏所需要显示的内容的渲染和绘制；调制解调器用于处理无线通信。可以理解的是，上述调制解调器也可以不集成到处理器1001中，单独通过一块芯片进行实现。

其中，存储器1005可以包括随机存储器(Random Access Memory，RAM)，也可以包括只读存储器(Read-Only Memory)。可选的，该存储器1005包括非瞬时性计算机可读介质(non-transitory computer-readable storage medium)。存储器1005可用于存储指令、程序、代码、代码集或指令集。存储器1005可包括存储程序区和存储数据区，其中，存储程序区可存储用于实现操作系统的指令、用于至少一个功能的指令(比如触控功能、声音播放功能、图像播放功能等)、用于实现上述各个方法实施例的指令等；存储数据区可存储上面各个方法实施例中涉及到的数据等。存储器1005可选的还可以是至少一个位于远离前述处理器1001的存储装置。如图9所示，作为一种计算机存储介质的存储器1005中可以包括操作系统、网络通信模块、用户接口模块以及园林的AR场景构建应用程序。

在图9所示的终端1000中，用户接口1003主要用于为用户提供输入的接口，获取用户输入的数据；而处理器1001可以用于调用存储器1005中存储的园林的AR场景构建应用程序，并具体执行以下操作：

实时获取园林中目标场景的视频图像帧；

基于预先生成的许可证编码识别所述视频图像帧，生成所述视频图像帧对应的园林场景信息；

根据所述园林场景信息调用所述园林场景信息对应的AR模型；

定位所述目标场景的位置信息；

将所述位置信息中的角度值和所述AR模型的角度值进行匹配后生成园林的AR场景。

可选的，所述处理器1001在执行所述实时获取园林目标场景的视频图像帧之前时，还执行以下操作：

采集园林中各个场景图像；

将所述园林中各个场景图像输入AR引擎Vuforia服务器中，生成许可证编码；

将所述许可证编码确定为预先生成的许可证编码；

基于所述园林中各个场景图像生成所述园林场景信息对应的AR模型。

可选的，所述处理器1001在执行所述基于所述园林中各个场景图像创建所述园林场景信息对应的AR模型时，具体还执行以下操作：

数字化所述园林中各个场景图像，生成所述各个场景图像对应的三维模型；

采用Zbrush建模方式对所述各个场景图像对应的三维模型进行优化，生成优化后的各个场景图像对应的三维模型；

将所述优化后的各个场景图像对应的三维模型导入Unity引擎中进行模拟，生成模拟后的各个场景图像对应的三维模型；

针对所述模拟后的各个场景图像对应的三维模型进行模拟状态综合管理，以及利用Unity引擎中的PostProcessing插件和DoozyUI插件对所述各个场景图像对应的三维模型进行界面渲染优化，生成所述园林场景信息对应的AR模型。

可选的，所述处理器1001在执行所述数字化所述园林中各个场景图像，生成所述各个场景图像对应的模型时，具体执行以下操作：

获取所述园林中各个场景图像三维数据信息；

通过人工智能算法以及超像素处理算法对所述图像三维数据进行处理，生成所述各个场景图像对应的三维模型。

本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程，是可以通过计算机程序来指令相关的硬件来完成，所述的程序可存储于计算机可读取存储介质中，该程序在执行时，可包括如上述各方法的实施例的流程。其中，所述的存储介质可为磁碟、光盘、只读存储记忆体或随机存储记忆体等。

以上所揭露的仅为本申请较佳实施例而已，当然不能以此来限定本申请之权利范围，因此依本申请权利要求所作的等同变化，仍属本申请所涵盖的范围。

Claims (10)

1.一种园林的AR场景构建方法，其特征在于，所述方法包括：

实时获取园林中目标场景的视频图像帧；

基于预先生成的许可证编码识别所述视频图像帧，生成所述视频图像帧对应的园林场景信息；

根据所述园林场景信息调用所述园林场景信息对应的AR模型；

定位所述目标场景的位置信息；

将所述位置信息中的角度值和所述AR模型的角度值进行匹配后生成园林的AR场景。

2.根据权利要求1所述的方法，其特征在于，所述实时获取园林目标场景的视频图像帧之前，还包括：

采集园林中各个场景图像；

将所述园林中各个场景图像输入AR引擎Vuforia服务器中，生成许可证编码；

将所述许可证编码确定为预先生成的许可证编码；

基于所述园林中各个场景图像生成所述园林场景信息对应的AR模型。

3.根据权利要求1或2所述的方法，其特征在于，所述基于所述园林中各个场景图像创建所述园林场景信息对应的AR模型，包括：

数字化所述园林中各个场景图像，生成所述各个场景图像对应的三维模型；

采用Zbrush建模方式对所述各个场景图像对应的三维模型进行优化，生成优化后的各个场景图像对应的三维模型；

将所述优化后的各个场景图像对应的三维模型导入Unity引擎中进行模拟，生成模拟后的各个场景图像对应的三维模型；

针对所述模拟后的各个场景图像对应的三维模型进行模拟状态综合管理，以及利用Unity引擎中的PostProcessing插件和DoozyUI插件对所述各个场景图像对应的三维模型进行界面渲染优化，生成所述园林场景信息对应的AR模型。

4.根据权利要求3所述的方法，其特征在于，所述数字化所述园林中各个场景图像，生成所述各个场景图像对应的模型，包括：

获取所述园林中各个场景图像三维数据信息；

通过人工智能算法以及超像素处理算法对所述图像三维数据进行处理，生成所述各个场景图像对应的三维模型。

5.根据权利要求3所述的方法，其特征在于，所述将所述优化后的各个场景图像对应的三维模型导入Unity引擎中进行模拟的模拟方法包括碰撞检测模拟、水流分析模拟以及高亮边界模拟。

6.根据权利要求4所述的方法，其特征在于，所述人工智能算法至少包括回归神经网络、ID3算法、贝叶斯信念网络；所述超像素处理算法至少包括NC05-归一化切割算法。

7.一种园林的AR场景构建装置，其特征在于，所述装置包括：

图像帧获取模块，用于实时获取园林中目标场景的视频图像帧；

信息生成模块，用于基于预先生成的许可证编码识别所述视频图像帧，生成所述视频图像帧对应的园林场景信息；

AR模型调用模块，用于根据所述园林场景信息调用所述园林场景信息对应的AR模型；

位置信息定位模块，用于定位所述目标场景的位置信息；

AR场景生成模块，用于将所述位置信息中的角度值和所述AR模型的角度值进行匹配后生成园林的AR场景。

8.根据权利要求7所述的装置，其特征在于，所述装置还包括：

图像采集模块，用于采集园林中各个场景图像；

许可证编码生成模块，用于将所述园林中各个场景图像输入AR引擎Vuforia服务器中，生成许可证编码；

许可证编码确定模块，用于将所述许可证编码确定为预先生成的许可证编码；

AR模型生成模块，用于基于所述园林中各个场景图像生成所述园林场景信息对应的AR模型。

9.一种计算机存储介质，其特征在于，所述计算机存储介质存储有多条指令，所述指令适于由处理器加载并执行如权利要求1～6任意一项的方法步骤。

10.一种终端，其特征在于，包括：处理器和存储器；其中，所述存储器存储有计算机程序，所述计算机程序适于由所述处理器加载并执行如权利要求1～6任意一项的方法步骤。

Images