CN117201869A - 一种ar投影离线渲染方法、装置、电子设备及存储介质 - Google Patents

Abstract

本申请提供了一种AR投影离线渲染方法、装置、电子设备及存储介质，涉及三维重建技术领域，通过客户端控制AR主机设备调用摄像机采集投影场景的图像并得到其深度信息，再利用所述摄像机采集的图像的深度信息建立至少一个投射预案；然后对每个所述投射预案中的所有幻灯片进行逐帧渲染并编码为设定格式的视频文件夹；最后将所述视频文件夹发送至所述AR主机设备进行播放，且通过投影仪投射至投射场景中。从而，通过对客户端增加离屏渲染功能和视频编码功能，以及移除AR主机设备的渲染功能，在降低AR主机设备硬件性能要求的同时，解决因AR主机性能不足导致的渲染帧率不同及渲染特效失真问题。

Description

一种AR投影离线渲染方法、装置、电子设备及存储介质

技术领域

本申请涉及三维重建技术领域，具体而言，涉及一种AR投影离线渲染方法、装置、电子设备及存储介质。

背景技术

现有AR投影系统工作时，由AR主机设备调用摄像头采集场景的图像信息之后上传给客户端软件；客户端使用该场景的信息建立空白工程，并基于该工程进行内容编辑，所述内容编辑是指在工程内添加素材，素材为提前预置于客户端内的，所有素材均具有唯一的ID号；客户端编辑完成后，将工程保存为纯文本的工程描述文件，再下发至AR主机设备，所述工程描述文件主要为场景的坐标及所使用素材的ID号；AR主机内保存有与客户端相同的素材库，主机收到工程描述文件后，解析该描述文件，根据其位置坐标及素材ID号，对场景进行逐帧渲染，并将渲染画面通过投影仪投射到场景中。在实际使用过程中发现，其存在以下几点缺陷：

(1)同AR主机设备渲染不同工程出现不同帧率：AR主机设备渲染的性能固定，AR主机设备渲染的帧率与工程文件的复杂程度成反比，即随着工程文件复杂度的提升，主机渲染的帧率下降；

(2)AR主机设备渲染复杂特效时失真：由于同一AR主机设备渲染性能固定，在工程文件复杂程度达到阈值时，主机设备将以峰值性能进行渲染，若工程文件复杂程度继续提升，在渲染品质不变的前提下，渲染帧率将线性下降，导致实际渲染内容低于一倍速，出现渲染变慢的现象；

(3)不同AR主机设备渲染相同工程时出现不同帧率：由于渲染帧率与设备性能相关，当后续升级版硬件支持更高性能时，实际渲染帧率会变高；

(4)素材库占用AR主机设备内存空间：由于主机渲染是根据客户端下发的描述文件进行的，因此需要AR主机设备和客户端软件同时保存素材库才能完成渲染工作，这样，素材库会占用主机的内存空间，且当客户端升级素材库时，主机端需要同时进行升级，否则会使渲染结果错误。

发明内容

为客服现有技术中因AR主机性能不足导致的渲染帧率不同及渲染特效失真问题，本申请提供一种AR投影离线渲染方法、装置、电子设备及存储介质是通过如下方案实现的。

第一方面，本申请实施例提供一种AR投影离线渲染方法，应用于客户端，所述方法包括以下步骤：

控制AR主机设备调用摄像机采集投影场景的图像并得到其深度信息；

利用所述摄像机采集的图像的深度信息建立至少一个投射预案；

对每个所述投射预案中的所有幻灯片进行逐帧渲染并编码为设定格式的视频文件夹；

将所述视频文件夹发送至所述AR主机设备进行播放。

在一些实施例中，所述控制AR主机设备调用摄像机采集投影场景的图像并得到其深度信息，包括以下步骤：

控制AR主机设备调用投影仪将格雷码光栅图案投射至投影场景；

控制AR主机设备调用摄像机采集所述投影场景的图像；其中，所述图像中包含所述投影仪投射的格雷码光栅图案；

利用视觉算法对采集的所述投影场景的图像进行分析得到其深度信息。

在一些实施例中，通过如下方式利用所述摄像机采集的图像的深度信息建立一个投射预案，包括以下步骤：

利用所述摄像机采集的图像的深度信息创建一个空白投射预案，并且在所述空白投射预案中创建包括至少一个图层的图层组；

利用预设的素材库对所述图层组进行填充得到至少一个幻灯片，并由所述得到的至少一个幻灯片构成一个投射预案；其中，不同的幻灯片对所述图层组的填充方式不同。

在一些实施例中，所述对每个所述投射预案中的所有幻灯片进行逐帧渲染并编码为设定格式的视频文件夹，包括以下步骤：

遍历所有幻灯片，并对每个所述幻灯片按照设定的参数进行逐帧渲染且编码为设定格式的视频文件；

将所述视频文件以不同的投射预案进行分组，并打包成视频文件夹，以发送至所述AR主机设备。

第二方面，本申请实施例提供一种AR投影离线渲染方法，应用于AR主机设备，所述方法包括以下步骤：

响应客户端发送的控制指令，调用摄像机采集投影场景的图像并得到其深度信息；

将所述摄像机采集的图像的场景信息发送至所述客户端，以使所述客户端根据所述场景信息建立至少一个投射预案并形成视频文件夹；

接收客户端发送的所述视频文件夹并进行播放，且通过投影仪投射至投射场景中。

在一些实施例中，所述接收客户端发送的所述视频文件夹并进行播放，包括以下步骤：

接收客户端发送的所述视频文件夹，并提取所述视频文件夹包含的所有投射预案，且按照设定的配置逻辑选取目标投射预案；

对所述目标投射预案中所有幻灯片对应的视频文件进行循环播放。

第三方面，本申请实施例提供一种AR投影离线渲染装置，驻留于客户端，所述装置包括：

控制模块，用于控制AR主机设备调用摄像机采集投影场景的图像并得到其深度信息；

编辑模块，用于利用所述摄像机采集的图像的深度信息建立至少一个投射预案；

渲染编码模块，用于对每个所述投射预案中的所有幻灯片进行逐帧渲染并编码为设定格式的视频文件夹；

第一发送模块，用于将所述视频文件夹发送至所述AR主机设备进行播放。

第四方面，本申请实施例提供一种AR投影离线渲染装置，驻留于AR主机设备端，所述装置包括：

调用模块，用于响应客户端发送的控制指令，调用摄像机采集投影场景的图像并得到其深度信息；

第二发送模块，用于将所述摄像机采集的图像的场景信息发送至所述客户端，以使所述客户端根据所述场景信息建立至少一个投射预案并形成视频文件夹；

播放模块，用于接收客户端发送的所述视频文件夹并进行播放，且通过投影仪投射至投射场景中。

第五方面，本申请实施例提供一种电子设备，包括：处理器、存储器和总线，所述存储器存储有所述处理器可执行的机器可读指令，所述机器可读指令被所述处理器运行时执行如第一方面任一实施例所述的AR投影离线渲染方法或者执行如第二方面任一实施例所述的AR投影离线渲染方法的步骤。

第六方面，本申请实施例提供一种计算机可读存储介质，该计算机可读存储介质上存储有计算机程序，该计算机程序被处理器运行时执行如第一方面任一实施例所述的AR投影离线渲染方法或者执行如第二方面任一实施例所述的AR投影离线渲染方法的步骤。

本申请所提供的一种AR投影离线渲染方法、装置、电子设备及存储介质，通过客户端控制AR主机设备调用摄像机采集投影场景的图像并得到其深度信息，再利用所述摄像机采集的图像的深度信息建立至少一个投射预案；然后对每个所述投射预案中的所有幻灯片进行逐帧渲染并编码为设定格式的视频文件夹；最后将所述视频文件夹发送至所述AR主机设备进行播放，且通过投影仪投射至投射场景中。从而，通过对客户端增加离屏渲染功能和视频编码功能，以及移除AR主机设备的渲染功能，在降低AR主机设备硬件性能要求的同时，解决因AR主机性能不足导致的渲染帧率不同及渲染特效失真问题。

附图说明

为了更清楚地说明本申请实施例的技术方案，下面将对实施例中所需要使用的附图作简单地介绍，应当理解，以下附图仅示出了本申请的某些实施例，因此不应被看作是对范围的限定，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他相关的附图。

图1为本申请一实施例中AR投影离线渲染方法应用于客户端的流程示意图；

图2为本申请一实施例中所述AR投影离线渲染系统的结构示意图；

图3为本申请一实施例中所述控制AR主机设备调用摄像机采集投影场景的图像并得到其深度信息的流程示意图；

图4为本申请一实施例中所述对每个所述投射预案中的所有幻灯片进行逐帧渲染并编码为设定格式的视频文件夹的流程示意图；

图5为本申请一实施例中AR投影离线渲染方法应用于应用于AR主机设备的流程示意图；

图6为本申请一实施例中驻留于客户端的AR投影离线渲染装置的结构框图；

图7本申请一实施例中驻留于AR主机设备端的AR投影离线渲染装置的结构框图；

图8本申请一实施例中电子设备的结构框图。

具体实施方式

为使本申请实施例的目的、技术方案和优点更加清楚，下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，应当理解，本申请中附图仅起到说明和描述的目的，并不用于限定本申请的保护范围。另外，应当理解，示意性的附图并未按实物比例绘制。本申请中使用的流程图示出了根据本申请的一些实施例实现的操作。应该理解，流程图的操作可以不按顺序实现，没有逻辑的上下文关系的步骤可以反转顺序或者同时实施。此外，本领域技术人员在本申请内容的指引下，可以向流程图添加一个或多个其他操作，也可以从流程图中移除一个或多个操作。

另外，所描述的实施例仅仅是本申请一部分实施例，而不是全部的实施例。通常在此处附图中描述和示出的本申请实施例的组件可以以各种不同的配置来布置和设计。因此，以下对在附图中提供的本申请的实施例的详细描述并非旨在限制要求保护的本申请的范围，而是仅仅表示本申请的选定实施例。基于本申请的实施例，本领域技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例，都属于本申请保护的范围。

需要说明的是，本申请实施例中将会用到术语“包括”，用于指出其后所声明的特征的存在，但并不排除增加其它的特征。

AR投影与传统投影相比，AR投影极大丰富了投影内容，例如将制作好的视频投射到所需要投射的场景，实现物体与图像的融合。一般来说，AR投影系统的硬件由以下几个部分组成：摄像机、投影仪、AR主机设备、客户端设备，软件则由主机程序和客户端程序组成。通常，AR投影系统通过场景采集、场景编辑、工程渲染、工程发布的流程执行任务，在现有技术中一般是客户端进行场景编辑，AR主机设备进行工程渲染。而在实际应用中，由于AR主机的GPU性能有限，在渲染大型或复杂工程时，主机会出现渲染帧率下降的问题，所以同一工程，在不同AR主机设备上渲染结果无法保证统一，同时，也无法保证AR主机设备实际渲染的效果与客户端编辑时的预览效果一致。为此，本申请提供一种AR投影离线渲染方法、装置、装置、电子设备及存储介质。

在一实施例中，参见说明书附图1，一种AR投影离线渲染方法，应用于客户端，所述方法包括以下步骤：

S1、控制AR主机设备调用摄像机采集投影场景的图像并得到其深度信息；

S2、利用所述摄像机采集的图像的深度信息建立至少一个投射预案；

S3、对每个所述投射预案中的所有幻灯片进行逐帧渲染并编码为设定格式的视频文件夹；

S4、将所述视频文件夹发送至所述AR主机设备进行播放。

为了清楚地了解本申请实施例的技术方案，可以先对应用场景进行示例性说明。具体的，本申请提供的一种AR投影离线渲染方法应用于AR投影离线渲染系统中的客户端。

在一实施例中，所述AR投影离线渲染系统的结构示意图可以参见说明书附图2，包括摄像机、投影仪、AR主机设备、客户端，具体的，所述摄像机、所述投影仪、所述客户端均连接在AR主机设备上。例如，所述客户端与AR主机设备通过网络通信，摄像机通过USB线插接在AR主机设备上，投影仪通过视频线缆与AR主机设备连接。并且在本申请中，所述摄像机用于采集场景图像以得到场景的深度信息；所述AR主机设备可以是一个小型的盒子，内置视频处理板卡，接受客户端的控制，在本申请中主要用于播放视频文件；所述客户端是配置有客户端软件的客户端设备，可以是PC、手机、平板、瘦客户机等可操作设备，客户端根据收到的场景图像和深度信息对场景所需要投射的内容进行编辑、渲染形成视频文件，并将视频文件下发至AR主机设备；所述投影仪将AR主机设备所播放的视频文件投影至投射场景。

其中，在实际应用场景中，所述客户端、所述AR主机设备、所述摄像机、所述投影仪可为分体设备，也可以将所述功能集成到一体机箱内。

具体的，参见说明书附图3，在执行步骤S1时，所述控制AR主机设备调用摄像机采集投影场景的图像并得到其深度信息，包括以下步骤：

S101、控制AR主机设备调用投影仪将格雷码光栅图案投射至投影场景；

S102、控制AR主机设备调用摄像机采集所述投影场景的图像；其中，所述图像中包含所述投影仪投射的格雷码光栅图案；

S103、利用视觉算法对采集的所述投影场景的图像进行分析得到其深度信息。

即，在步骤S101-步骤S103中，客户端先控制AR主机设备调用投影仪将格雷码光栅图案投射至投影场景上，所述投射场景为视频图像所要投射到的空间位置，投射场景可以是平面的，例如一面墙、一块幕布等，也可以是三维的，比如一盆花、一件衣服，一个橱窗等，投影目的是可以使场景变的生动、炫酷、有特色；然后控制AR主机设备调用摄像机完成光栅图像的采集，即采集包含有格雷码光栅图案的投影场景的图像；进而利用视觉算法对采集的投影场景的图像进行分析得到该投影场景的深度(深度渐变情况)信息，所述深度信息可以理解为表征投影仪的视差图像，此应为本领域技术人员所熟知的技术手段，在此不做赘述。并且，AR主机设备在获取到所述投影场景的深度信息之后，还将该深度信息发送至客户端。

在步骤S2中，客户端在接收到AR主机设备发送的投影场景的深度信息之后，利用该投影场景的深度信息建立一个空白工程，并基于该空白工程建立一个空白投射预案，以进行投影内容的编辑，其中，所述客户端中预存储有素材库，例如图片、文字、视频、特效等。

具体的，先在空白投射预案中创建至少一个图层，其中，图层以封闭选区的形式存在，用于标记屏幕的特定区域，并且每个图层具有形状，例如方形、圆形、三角形、不规则图形等，图层的数量至少为1，具体数量可根据投射场景的需要设定，形成图层组；然后利用所述图层组创建至少一个幻灯片，所述幻灯片共享该空白投射预案中的所创建的图层组，单个幻灯片用于描述该投射预案中的全部图层的一种内容填充方式；即，逐一切换各个幻灯片，利用预存储的素材库对所述图层组中进行素材填充，其中，不同的幻灯片对所述图层组的填充方式不同，以使不同的幻灯片可以在相同的区域下预览到不同的渲染内容。即，不同的幻灯片具有相同的图层组，每个图层中可展示不同的投射素材，以使同一图层在不同幻灯片中所展示的内容不同。例如，在一投射预案中包括第一幻灯片和第二幻灯片，所述第一幻灯片和所述第二幻灯片均包括由图层a和图层b组成的图层组，而在第一幻灯片中，所述图层a显示下雨的视频、所述图层b显示下雪的视频，在第二幻灯片中，所述图层a显示小狗的图片、所述图层b显示小猫的图片。

需要说明的是，可以按照上述步骤创建多个投射预案，其中，不同投射预案中的图层、幻灯片数量和画面均可不同。

在步骤S3中，参见说明书附图4，所述对每个所述投射预案中的所有幻灯片进行逐帧渲染并编码为设定格式的视频文件夹，包括以下步骤：

S301、遍历所有幻灯片，并对每个所述幻灯片按照设定的参数进行逐帧渲染且编码为设定格式的视频文件；

S302、将所述视频文件以不同的投射预案进行分组，并打包成视频文件夹，以发送至所述AR主机设备。

即，在步骤S301-步骤S302中，客户端在对投影内容编辑完成之后，会遍历所有幻灯片，并按照设定的参数将幻灯片逐帧渲染并编码为设定格式的视频文件。在一实施例中，设定的参数为分辨率1080P、帧率60fps，设定的格式为H264格式的MP4视频文件，则客户端采用固定分辨率(1080P)和固定帧率(60fps)将幻灯片逐帧渲染并编码为H264格式的MP4视频文件。在其他实施例中，分辨率、帧率、视频格式均可以根据实际应用进行设定，例如，分辨率(4K)，帧率(120fps)、视频格式(rmvb、wmv)，本申请并不对此进行限制和固定。

可见，在本申请中，一方面对客户端增加了离屏渲染功能，即将工程逐帧渲染到图片文件，从而在编辑过程中可实时对某一投射预案下的某一幻灯片进行逐帧渲染，实现幻灯片预览功能，从而能够在预览过程中发现问题可及时修改；另一方面对客户端增加视频编码功能，将帧图片写入MP4文件，并且增加视频标准定义，以规范视频帧率、分辨率等参数，保证AR主机设备在后续播放时的效果统一。

进一步的，客户端在将每个幻灯片按照设定的参数进行逐帧渲染且编码为设定格式的视频文件之后，还将生成的视频文件以不同的投射预案进行分组，再统一打包为视频文件夹，最后将所述视频文件夹下发至AR主机设备，以利于AR主机设备按序播放。

在另一实施例中，参见说明书附图5，一种AR投影离线渲染方法，应用于AR主机设备，所述方法包括以下步骤：

P1、响应客户端发送的控制指令，调用摄像机采集投影场景的图像并得到其深度信息；

P2、将所述摄像机采集的图像的场景信息发送至所述客户端，以使所述客户端根据所述场景信息建立至少一个投射预案并形成视频文件夹；

P3、接收客户端发送的所述视频文件夹并进行播放，且通过投影仪投射至投射场景中。

其中，在步骤P3中，AR主机设备在接收到客户端发送的视频文件夹之后，依次提取所述视频文件夹包含的所有投射预案的目录，每个目录下包含该投射预案下所有幻灯片所对应的MP4文件，在默认情况下，AR主机设备执行第一个投射预案，即循环播放首个投射预案目录内所有的MP4文件，投影仪则会将画面投射到物理场景中。

进一步的，在本申请中AR主机设备支持投射预案切换功能，可以根据用户对客户端或者遥控器的操控实时切换当前投射预案；或者还可以预先在客户端内配置投射预案切换逻辑，例如准备白天/夜晚2套预案，设置晨昏6时自动切换，AR主机设备则会根据客户端下发的指令，在不同的时段播放不同的内容，满足用户更细致的需求，实现无人值守。

可见，在本申请中，移除了AR主机设备的工程渲染功能，增加了视频文件接收功能，从而能够避免因AR主机设备性能不足导致的渲染帧率不同及渲染特效失真问题。

本申请所提供的一种AR投影离线渲染方法与传统的AR投影方法并不相同，通过调整渲染流程，实现了编辑与渲染的解耦，绕过了AR主机设备的性能问题，降低了AR主机设备硬件性能要求，从而使得AR主机设备可以支持更多样化的功能。

基于同一发明构思，本申请实施例中还提供了一种AR投影离线渲染装置，由于本申请实施例中的装置解决问题的原理与本申请实施例上述一种AR投影离线渲染方法相似，因此装置的实施可以参见方法的实施，重复之处不再赘述。

如说明书附图6所示，在一实施例中，本申请提供一种AR投影离线渲染装置，驻留于客户端，所述装置包括：

控制模块601，用于控制AR主机设备调用摄像机采集投影场景的图像并得到其深度信息；

编辑模块602，用于利用所述摄像机采集的图像的深度信息建立至少一个投射预案；

渲染编码模块603，用于对每个所述投射预案中的所有幻灯片进行逐帧渲染并编码为设定格式的视频文件夹；

第一发送模块604，用于将所述视频文件夹发送至所述AR主机设备进行播放。

在一种可能的实施方式中，所述控制模块601控制AR主机设备调用摄像机采集投影场景的图像并得到其深度信息，包括：

控制AR主机设备调用投影仪将格雷码光栅图案投射至投影场景；

控制AR主机设备调用摄像机采集所述投影场景的图像；其中，所述图像中包含所述投影仪投射的格雷码光栅图案；

利用视觉算法对采集的所述投影场景的图像进行分析得到其深度信息。

在一种可能的实施方式中，所述编辑模块602利用所述摄像机采集的图像的深度信息建立一个投射预案，包括：

利用所述摄像机采集的图像的深度信息创建一个空白投射预案，并且在所述空白投射预案中创建包括至少一个图层的图层组；

利用预设的素材库对所述图层组进行填充得到至少一个幻灯片，并由所述得到的至少一个幻灯片构成一个投射预案；其中，不同的幻灯片对所述图层组的填充方式不同。

在一种可能的实施方式中，所述渲染编码模块603对每个所述投射预案中的所有幻灯片进行逐帧渲染并编码为设定格式的视频文件夹，包括：

遍历所有幻灯片，并对每个所述幻灯片按照设定的参数进行逐帧渲染且编码为设定格式的视频文件；

将所述视频文件以不同的投射预案进行分组，并打包成视频文件夹，以发送至所述AR主机设备。

在另一实施例中，如说明书附图7所示，本申请提供一种AR投影离线渲染装置，驻留于AR主机设备端，所述装置包括：

调用模块701，用于响应客户端发送的控制指令，调用摄像机采集投影场景的图像并得到其深度信息；

第二发送模块702，用于将所述摄像机采集的图像的场景信息发送至所述客户端，以使所述客户端根据所述场景信息建立至少一个投射预案并形成视频文件夹；

播放模块703，用于接收客户端发送的所述视频文件夹并进行播放，且通过投影仪投射至投射场景中。

在一种可能的实施方式中，所述播放模块703接收客户端发送的所述视频文件夹并进行播放，包括：

接收客户端发送的所述视频文件夹，并提取所述视频文件夹包含的所有投射预案，且按照设定的配置逻辑选取目标投射预案；

对所述目标投射预案中所有幻灯片对应的视频文件进行循环播放。

可见，本申请提供一种AR投影离线渲染装置，通过对客户端增加离屏渲染功能和视频编码功能，以及移除AR主机设备的渲染功能，在降低AR主机设备硬件性能要求的同时，解决因AR主机性能不足导致的渲染帧率不同及渲染特效失真问题。

基于本发明的同一构思，说明书附图8所示，本申请实施例提供的一种电子设备800的结构，该电子设备800包括：至少一个处理器801，至少一个网络接口804或者其他用户接口803，存储器805，至少一个通信总线802。通信总线802用于实现这些组件之间的连接通信。该电子设备800可选的包含用户接口803，包括显示器(例如，触摸屏、LCD、CRT、全息成像(Holographic)或者投影(Projector)等)，键盘或者点击设备(例如，鼠标，轨迹球(trackball)，触感板或者触摸屏等)。

存储器805可以包括只读存储器和随机存取存储器，并向处理器801提供指令和数据。存储器805的一部分还可以包括非易失性随机存取存储器(NVRAM)。

在一些实施方式中，存储器805存储了如下的元素，可保护模块或者数据结构，或者他们的子集，或者他们的扩展集：

操作系统8051，包含各种系统程序，用于实现各种基础业务以及处理基于硬件的任务；

应用程序模块8052，包含各种应用程序，例如桌面(launcher)、媒体播放器(MediaPlayer)、浏览器(Browser)等，用于实现各种应用业务。

在本申请实施例中，通过调用存储器805存储的程序或指令，处理器801用于执行如一种AR投影离线渲染方法中的步骤，能够解决因AR主机性能不足导致的渲染帧率不同及渲染特效失真问题。

本申请还提供了一种计算机可读存储介质，该计算机可读存储介质上存储有计算机程序，该计算机程序被处理器运行时执行如AR投影离线渲染方法中的步骤。

具体地，该存储介质能够为通用的存储介质，如移动磁盘、硬盘等，该存储介质上的计算机程序被运行时，能够执行上述AR投影离线渲染方法。

在本申请所提供的实施例中，应该理解到，所揭露装置和方法，可以通过其它的方式实现。以上所描述的装置实施例仅仅是示意性的，例如，单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，又例如，多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些通信接口，装置或单元的间接耦合或通信连接，可以是电性，机械或其它的形式。

作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。

另外，在本申请提供的实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。

功能如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本申请的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本申请各个实施例方法的全部或部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器(ROM，Read-Only Memory)、随机存取存储器(RAM，Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。

最后应说明的是：以上实施例，仅为本申请的具体实施方式，用以说明本申请的技术方案，而非对其限制，本申请的保护范围并不局限于此，尽管参照前述实施例对本申请进行了详细的说明，本领域的普通技术人员应当理解：任何熟悉本技术领域的技术人员在本申请揭露的技术范围内，其依然可以对前述实施例所记载的技术方案进行修改或可轻易想到变化，或者对其中部分技术特征进行等同替换；而这些修改、变化或者替换，并不使相应技术方案的本质脱离本申请实施例技术方案的精神和范围。都应涵盖在本申请的保护范围之内。因此，本申请的保护范围应以权利要求的保护范围为准。

Claims (10)

1.一种AR投影离线渲染方法，其特征在于，应用于客户端，所述方法包括以下步骤：

控制AR主机设备调用摄像机采集投影场景的图像并得到其深度信息；

利用所述摄像机采集的图像的深度信息建立至少一个投射预案；

对每个所述投射预案中的所有幻灯片进行逐帧渲染并编码为设定格式的视频文件夹；

将所述视频文件夹发送至所述AR主机设备进行播放。

2.根据权利要求1所述一种AR投影离线渲染方法，其特征在于，所述控制AR主机设备调用摄像机采集投影场景的图像并得到其深度信息，包括以下步骤：

控制AR主机设备调用投影仪将格雷码光栅图案投射至投影场景；

控制AR主机设备调用摄像机采集所述投影场景的图像；其中，所述图像中包含所述投影仪投射的格雷码光栅图案；

利用视觉算法对采集的所述投影场景的图像进行分析得到其深度信息。

3.根据权利要求2所述一种AR投影离线渲染方法，其特征在于，通过如下方式利用所述摄像机采集的图像的深度信息建立一个投射预案，包括以下步骤：

利用所述摄像机采集的图像的深度信息创建一个空白投射预案，并且在所述空白投射预案中创建包括至少一个图层的图层组；

利用预设的素材库对所述图层组进行填充得到至少一个幻灯片，并由所述得到的至少一个幻灯片构成一个投射预案；其中，不同的幻灯片对所述图层组的填充方式不同。

4.根据权利要求3所述一种AR投影离线渲染方法，其特征在于，所述对每个所述投射预案中的所有幻灯片进行逐帧渲染并编码为设定格式的视频文件夹，包括以下步骤：

遍历所有幻灯片，并对每个所述幻灯片按照设定的参数进行逐帧渲染且编码为设定格式的视频文件；

将所述视频文件以不同的投射预案进行分组，并打包成视频文件夹，以发送至所述AR主机设备。

5.根据权利要求4所述一种AR投影离线渲染方法，其特征在于，应用于AR主机设备，所述方法包括以下步骤：

响应客户端发送的控制指令，调用摄像机采集投影场景的图像并得到其深度信息；

将所述摄像机采集的图像的场景信息发送至所述客户端，以使所述客户端根据所述场景信息建立至少一个投射预案并形成视频文件夹；

接收客户端发送的所述视频文件夹并进行播放，且通过投影仪投射至投射场景中。

6.根据权利要求5所述一种AR投影离线渲染方法，其特征在于，所述接收客户端发送的所述视频文件夹并进行播放，包括以下步骤：

接收客户端发送的所述视频文件夹，并提取所述视频文件夹包含的所有投射预案，且按照设定的配置逻辑选取目标投射预案；

对所述目标投射预案中所有幻灯片对应的视频文件进行循环播放。

7.一种AR投影离线渲染装置，其特征在于，驻留于客户端，所述装置包括：

控制模块，用于控制AR主机设备调用摄像机采集投影场景的图像并得到其深度信息；

编辑模块，用于利用所述摄像机采集的图像的深度信息建立至少一个投射预案；

渲染编码模块，用于对每个所述投射预案中的所有幻灯片进行逐帧渲染并编码为设定格式的视频文件夹；

第一发送模块，用于将所述视频文件夹发送至所述AR主机设备进行播放。

8.一种AR投影离线渲染装置，其特征在于，驻留于AR主机设备端，所述装置包括：

调用模块，用于响应客户端发送的控制指令，调用摄像机采集投影场景的图像并得到其深度信息；

第二发送模块，用于将所述摄像机采集的图像的场景信息发送至所述客户端，以使所述客户端根据所述场景信息建立至少一个投射预案并形成视频文件夹；

播放模块，用于接收客户端发送的所述视频文件夹并进行播放，且通过投影仪投射至投射场景中。

9.一种电子设备，其特征在于，包括：处理器、存储器和总线，所述存储器存储有所述处理器可执行的机器可读指令，所述机器可读指令被所述处理器运行时执行如权利要求1-4任意一项所述的AR投影离线渲染方法或者执行如权利要求5-6任意一项所述的AR投影离线渲染方法的步骤。

10.一种计算机可读存储介质，其特征在于，该计算机可读存储介质上存储有计算机程序，该计算机程序被处理器运行时执行如权利要求1-4任意一项所述的AR投影离线渲染方法或者执行如权利要求5-6任意一项所述的AR投影离线渲染方法的步骤。