CN112085855A - 交互式图像编辑方法、装置、存储介质及计算机设备 - Google Patents

Abstract

本发明公开了一种交互式图像编辑方法、装置、存储介质及计算机设备，所述方法包括：获取原始图像，并对所述原始图像进行图层处理，以得到目标图层，所述原始图像由拍摄装置对目标物体进行拍摄得到；对所述目标图层进行任意图像元素的填充，并对填充的图像元素进行编辑处理，以得到目标图像；将所述目标图像发送至投影装置，以使所述投影装置将所述目标图像投影到所述目标物体上。本发明能够解决现有技术中在AR投影时图像不能实时编辑的问题。

Description

交互式图像编辑方法、装置、存储介质及计算机设备

技术领域

本发明涉及增强现实技术领域，特别是涉及一种交互式图像编辑方法、装置、存储介质及计算机设备。

背景技术

增强现实(Augmented Reality，简称AR)技术是一种将虚拟信息与真实世界巧妙融合的技术，广泛运用了多媒体、三维建模、实时跟踪及注册、智能交互、传感等多种技术手段，将计算机生成的文字、图像、三维模型、音乐、视频等虚拟信息模拟仿真后，应用到真实世界中，两种信息互为补充，从而实现对真实世界的“增强”。

在增强现实的具体应用场景中，例如文化遗产复原，博物馆展示、市政建设等场景中，常用到投影技术，例如3Dmapping，其是将制作好的视频投射到高大的物体上，实现物体与动画的完美融合，但现有技术中，视频中的图像不能进行实时编辑，影响最终投影的效果。

发明内容

为此，本发明的一个目的在于提出一种交互式图像编辑方法，以解决现有技术中在AR投影时图像不能实时编辑的问题。

本发明提供一种交互式图像编辑方法，包括：

获取原始图像，并对所述原始图像进行图层处理，以得到目标图层，所述原始图像由拍摄装置对目标物体进行拍摄得到；

对所述目标图层进行任意图像元素的填充，并对填充的图像元素进行编辑处理，以得到目标图像；

将所述目标图像发送至投影装置，以使所述投影装置将所述目标图像投影到所述目标物体上。

根据本发明提供的交互式图像编辑方法，通过对原始图像进行图层处理，得到目标图层，然后对目标图层进行任意图像元素的填充，并对填充的图像元素进行编辑处理，以得到目标图像，例如进行贴图、贴视频或贴特效等编辑处理，最后将完成编辑的目标图像发送至投影装置，通过投影装置将目标图像投影到目标物体上，由此实现了在AR投影时对图像进行实时编辑的效果，此外，本发明能够实现像素级的编辑，编辑效果更好，能够有效提升AR投影的最终效果。

另外，根据本发明上述的交互式图像编辑方法，还可以具有如下附加的技术特征：

进一步地，对所述原始图像进行图层处理，以得到目标图层的步骤包括：

新增至少一个图层，作为目标图层；

或者；

新增至少一个图层，对新增的任意一个图层进行修改，将修改后的图层作为目标图层；

或者；

新增至少一个图层，且删除任意一个图层，保留所有图层中的至少一个图层，作为目标图层；

或者；

新增至少一个图层，对新增的任意一个图层进行修改，对修改后的图层进行删除，保留所有图层中的至少一个图层，作为目标图层。

进一步地，所述图层处理的步骤包括：

获取图层中输入的矩形坐标或多边形坐标，并根据所述矩形坐标或多边形做新增或修改目标图层或产生临时区域。

进一步地，所述图层处理步骤包括：

在原始图像或图层中获取选择的目标坐标点；

根据下式收集所述目标坐标点预设范围内的点，将所述目标坐标点预设范围内的点的集合作为所述图像元素，以得到含所述图像元素的局部或全部区域原始图像：

其中，对应的RGB三通道为：

其中，seedPoint为所述目标坐标点，loDiff为下差值范围，为upDiff上差值范围，src(x,y)代表图像中点的坐标值；

剔除所述原始图像或图层中预设尺寸的孔洞、以及所述原始图像或图层中预设像素的噪音点，以新增或修改目标图层或产生临时区域，所述噪音点为游离于所述图像元素外的包围点。

进一步地，所述图层处理的步骤还包括：

选定一个已有图层作为被编辑图层，对所述被编辑图层做取反操作，以得到目标图层；

或者；

选定一个已有图层作为被编辑图层，对所述被编辑图层和临时区域做或运算，以得到目标图层；

或者；

选定一个已有图层作为被编辑图层，对所述被编辑图层和临时区域做与操作，以得到目标图层；

或者；

选定一个已有图层作为被编辑图层，对所述临时区域先做取反操作，再和所述被编辑图层做与操作，以得到目标图层；

与操作

取反操作

其中，src为所述基础图层中的原图片，src1为采用第一矩形图片对所述原图片进行选取后得到的图片，src2为采用第二矩形图片对所述原图片进行选取后得到的图片，dist为所述原始局部图像，mask为掩膜图片，I为图片数据索引。

进一步地，对所述目标图层进行任意图像元素的填充的步骤包括：

根据所述目标图层的顶点（外缘轮廓点）建立多边形；

计算所述多边形中每个顶点的UV值，其中，U=(顶点.x + 屏幕宽度/2) /屏幕宽度，V=(顶点.y + 屏幕高度/2) / 屏幕高度，使用渲染引擎进行渲染处理，以将选定的图片或视频素材填充到目标图层。

进一步地，对所述目标图层进行任意图像元素的填充的步骤包括；

根据目标图层的顶点（外缘轮廓点）建立多边形，选取所述多边形内的任意一点，并计算该点到任意两个相邻的顶点之间的线段的距离；

取计算得到的距离中的最小值称为最小距离；

将所述最小距离上相同的点涂上相同的预设颜色，以将选定的特效素材填充到目标图层。进一步地，对填充的图像元素进行编辑处理的步骤中，采用下式进行编辑处理：

UV’ = R * UV * S + O

其中，UV’为编辑处理后的UV值，UV为编辑处理前的UV值，R为rotate旋转量（四元数），S为scale缩放量，O为offset偏移量。

本发明的另一个目的在于提出一种交互式图像编辑装置，以解决现有技术中在AR投影时图像不能实时编辑的问题。

本发明提供一种交互式图像编辑装置，包括：

获取处理模块，用于获取原始图像，并对所述原始图像进行图层处理，以得到目标图层，所述原始图像由拍摄装置对目标物体进行拍摄得到；

素材处理模块，用于对所述目标图层进行任意图像元素的填充，并对填充的图像元素进行编辑处理，以得到目标图像；

发送模块，用于将所述目标图像发送至投影装置，以使所述投影装置将所述目标图像投影到所述目标物体上。

根据本发明提供的交互式图像编辑装置，通过对原始图像进行图层处理，得到目标图层，然后对目标图层进行任意图像元素的填充，并对填充的图像元素进行编辑处理，以得到目标图像，例如进行贴图、贴视频或贴特效等编辑处理，最后将完成编辑的目标图像发送至投影装置，通过投影装置将目标图像投影到目标物体上，由此实现了在AR投影时对图像进行实时编辑的效果，此外，本发明能够实现像素级的编辑，编辑效果更好，能够有效提升AR投影的最终效果。

另外，根据本发明上述的交互式图像编辑装置，还可以具有如下附加的技术特征：

进一步地，所述获取处理模块用于：

新增至少一个图层，作为目标图层；

或者；

新增至少一个图层，对新增的任意一个图层进行修改，将修改后的图层作为目标图层；

或者；

新增至少一个图层，且删除任意一个图层，保留所有图层中的至少一个图层，作为目标图层；

或者；

新增至少一个图层，对新增的任意一个图层进行修改，对修改后的图层进行删除，保留所有图层中的至少一个图层，作为目标图层。

进一步地，所述获取处理模块用于：

获取图层中输入的矩形坐标或多边形坐标，并根据所述矩形坐标或多边形做新增或修改目标图层或产生临时区域。

进一步地，所述获取处理模块用于：

在原始图像或图层中获取选择的目标坐标点；

根据下式收集所述目标坐标点预设范围内的点，将所述目标坐标点预设范围内的点的集合作为所述图像元素，以得到含所述图像元素的局部或全部区域原始图像：

其中，对应的RGB三通道为：

其中，seedPoint为所述目标坐标点，loDiff为下差值范围，为upDiff上差值范围，src(x,y)代表图像中点的坐标值；

剔除所述原始图像或图层中预设尺寸的孔洞、以及所述原始图像或图层中预设像素的噪音点，以新增或修改目标图层或产生临时区域，所述噪音点为游离于所述图像元素外的包围点。

进一步地，所述获取处理模块用于：

选定一个已有图层作为被编辑图层，对所述被编辑图层做取反操作，以得到目标图层；

或者；

选定一个已有图层作为被编辑图层，对所述被编辑图层和临时区域做或运算，以得到目标图层；

或者；

选定一个已有图层作为被编辑图层，对所述被编辑图层和临时区域做与操作，以得到目标图层；

或者；

选定一个已有图层作为被编辑图层，对所述临时区域先做取反操作，再和所述被编辑图层做与操作，以得到目标图层；

或操作

与操作

取反操作

其中，src为所述基础图层中的原图片，src1为采用第一矩形图片对所述原图片进行选取后得到的图片，src2为采用第二矩形图片对所述原图片进行选取后得到的图片，dist为所述原始局部图像，mask为掩膜图片，I为图片数据索引。

进一步地，所述素材处理模块用于：

根据所述目标图层的顶点建立多边形；

计算所述多边形中每个顶点的UV值，其中，U=(顶点.x + 屏幕宽度/2) /屏幕宽度，V=(顶点.y + 屏幕高度/2) / 屏幕高度，使用渲染引擎进行渲染处理，以将选定的图片或视频素材填充到目标图层。

进一步地，所述素材处理模块用于：

根据目标图层的顶点（外缘轮廓点）建立多边形，选取所述多边形内的任意一点，并计算该点到任意两个相邻的顶点之间的线段的距离；

取计算得到的距离中的最小值称为最小距离；

将所述最小距离上相同的点涂上相同的预设颜色，以将选定的特效素材填充到目标图层。

进一步地，所述素材处理模块用于采用下式进行编辑处理：

UV’ = R * UV * S + O

其中，UV’为编辑处理后的UV值，UV为编辑处理前的UV值，R为rotate旋转量（四元数），S为scale缩放量，O为offset偏移量。

本发明还提出一种存储介质，其上存储有计算机程序，该程序被处理器执行时实现上述方法的步骤。

本发明还提出一种计算机设备，包括存储器、处理器以及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述程序时实现上述方法的步骤。

本发明的附加方面和优点将在下面的描述中部分给出，部分将从下面的描述中变得明显，或通过本发明的实施例了解到。

附图说明

图1是根据本发明第一实施例的交互式图像编辑方法的流程图；

图2是根据本发明第二实施例的交互式图像编辑装置的结构示意图。

具体实施方式

为使本发明实施例的目的、技术方案和优点更加清楚，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

请参阅图1，本发明第一实施例提出的交互式图像编辑方法，包括步骤S101~S105。

S101，获取原始图像，并对所述原始图像进行图层处理，以得到目标图层，所述原始图像由拍摄装置对目标物体进行拍摄得到。

其中，具体可以通过三维扫描仪对目标物体进行扫描，对扫描得到的三维图像进行逆向建模，从而得到目标物体的三维模型，然后在计算机中，使用三维软件（例如3dsmax）将三维模型转换为二维图像，将转换得到的二维图像作为原始图像，即本实施例的交互式图像编辑方法是对二维图像进行编辑处理。具体实施时，还可以通过网络、本地内存来获取原始图像；也可以用投影仪投射图片和照相机采集图片计算出映射关系，对目标物体的照片进行逆向映射得到原始图像；还可以建立三维模型，然后用模型数据3D打印获得目标物体，然后在计算机中，使用三维软件（例如Unity3D）将三维模型展开为二维图像，将转换得到的二维图像作为原始图像，即本实施例的交互式图像编辑方法是对二维图像进行编辑处理，再将展开的二维图像贴回到三维模型，再用投影仪投射出去贴合实物。

其中，具体实施时，可以采用以下四种方式中的任一种得到目标图层：

第一种：新增至少一个图层，作为目标图层；

第二种：新增至少一个图层，对新增的任意一个图层进行修改，将修改后的图层作为目标图层；

第三种：新增至少一个图层，且删除任意一个图层，保留所有图层中的至少一个图层，作为目标图层；

第四种：新增至少一个图层，对新增的任意一个图层进行修改，对修改后的图层进行删除，保留所有图层中的至少一个图层，作为目标图层。

具体实施时，可以采用以下两种方式中的任一种进行图层处理：

第1种

获取图层中输入的矩形坐标或多边形坐标，并根据所述矩形坐标或多边形做新增或修改目标图层或产生临时区域，临时区域为临时过渡图层。

第2种

在原始图像或图层中获取选择的目标坐标点；

根据下式收集所述目标坐标点预设范围内的点，将所述目标坐标点预设范围内的点的集合作为图像元素，以得到含所述图像元素的局部或全部区域原始图像：

其中，对应的RGB三通道为：

其中，seedPoint为所述目标坐标点，loDiff为下差值范围，为upDiff上差值范围，src(x,y)代表图像中点的坐标值；通过上式即可判断目标坐标点周围的点，将属于上下差值范围内（即预设范围内）的点进行收集，得到点集合；

剔除所述原始图像或图层中预设尺寸的孔洞、以及所述原始图像或图层中预设像素的噪音点，以新增或修改目标图层或产生临时区域，所述噪音点为游离于所述图像元素外的包围点。其中，在处理过程中，可能由于图片情况复杂，导致某选择范围内有小型孔洞，因此需要剔除所述原始局部图像中预设尺寸的孔洞，例如剔除所述原始局部图像中3*3大小的孔洞。在处理过程中，还可能出现噪音点，噪音点为游离于主要结果外的小型包围点，因此需要剔除所述原始局部图像中预设像素的噪音点。

其中，在采用上述第2种方式进行了图层处理后，图层处理步骤还可以包括：

选定一个已有图层作为被编辑图层，对所述被编辑图层做取反操作，以得到目标图层；

或者；

选定一个已有图层作为被编辑图层，对所述被编辑图层和临时区域做或运算(并集运算)，以得到目标图层；

或者；

选定一个已有图层作为被编辑图层，对所述被编辑图层和临时区域做与操作，以得到目标图层；

或者；

选定一个已有图层作为被编辑图层，对所述临时区域先做取反操作，再和所述被编辑图层做与操作，以得到目标图层；或操作与操作

或操作

与操作

取反操作

其中，src为所述基础图层中的原图片，src1为采用第一矩形图片对所述原图片进行选取后得到的图片，src2为采用第二矩形图片对所述原图片进行选取后得到的图片，dist为所述原始局部图像，mask为掩膜图片，I为图片数据索引（例如图片的灰度）。

或操作具体是指将图片src1与图片src2结合在一起，将得到的图像，作为原始局部图像。

与操作具体是指将图片src1减去图片src2，将得到的图像，作为原始局部图像。

取反操作具体包括取反或操作和取反与操作，取反或操作具体是指将或操作得到的图像的以外区域作为原始局部图像，取反与操作具体是指将与操作得到的图像的以外区域作为原始局部图像。

S102，对所述目标图层进行任意图像元素的填充，并对填充的图像元素进行编辑处理，以得到目标图像。

具体实施时，可以采用以下两种方式中的任一种对所述目标图层进行任意图像元素的填充：

第1种

根据所述目标图层的顶点(具体是外缘轮廓点)建立多边形；

计算所述多边形中每个顶点的UV值，其中，U=(顶点.x + 屏幕宽度/2) /屏幕宽度，V=(顶点.y + 屏幕高度/2) / 屏幕高度，使用渲染引擎(例如OpenGL或unity引擎)进行渲染处理，以将选定的图片或视频素材填充到目标图层。其中，其中，屏幕宽度高度是指像素数，例如1920*1080，U,V是归一化的x,y坐标值。

采用该种方式对填充的图像元素进行编辑处理时，具体通过下式进行编辑处理：

UV’ = R * UV * S + O

其中，UV’为编辑处理后的UV值，UV为编辑处理前的UV值，R为rotate旋转量（四元数），S为scale缩放量，O为offset偏移量。

第2种

根据目标图层的顶点(外缘轮廓点)建立多边形，选取所述多边形内的任意一点，并计算该点到任意两个相邻的顶点之间的线段的距离；

取计算得到的距离中的最小值称为最小距离；

将所述最小距离上相同的点涂上相同的预设颜色，以将选定的特效素材填充到目标图层。

S103，将所述目标图像发送至投影装置，以使所述投影装置将所述目标图像投影到所述目标物体上。

其中，计算机可以将编辑后得到的目标图像发送至投影装置，通过投影装置将编辑后得到的目标图像投影到所述目标物体上。

下面以一应用实例对上述方法进行说明，目标物体例如是一个花瓶，花瓶上印有图片，图片中有一只小鸟，处理得到原始图像，在原始图像上新增任意图层，并对其进行修改、删除、新增等图层处理，获得一个目标图层，例如，该目标图层可以是含有小鸟图像元素的区域图层；在图层的修改上，可以对原始图像或图层中的含小鸟图案元素的区域进行选取，得到具有小鸟的原始图层，接着对原始图层进行进一步修改处理，剔除孔洞和噪音点，以得到目标图层，然后对目标图层进行图像元素的填充及编辑处理，例如对该含有小鸟图案元素区域的目标图层进行贴图、贴视频或贴特效的处理，此外，也可对多个不同的目标图层进行图像元素的填充与编辑，以呈现不一样的效果，通过视频、图片、特效的不同搭配，可以给人呈现不一样的感官体验满足多样化的需求，然后将多个目标图像在时间轴上设置隐藏与显示，最后将目标图像发送至投影装置，通过投影装置将目标图像投影到花瓶上，最终能够使观众看到花瓶上的小鸟更加绚丽动感多彩，实现更好的AR投影效果。

综上，根据本实施例的交互式图像编辑方法，通过对原始图像进行图层处理，得到目标图层，然后对目标图层进行任意图像元素的填充，并对填充的图像元素进行编辑处理，以得到目标图像，例如进行贴图、贴视频或贴特效等编辑处理，最后将完成编辑的目标图像发送至投影装置，通过投影装置将目标图像投影到目标物体上，由此实现了在AR投影时对图像进行实时编辑的效果，此外，本发明能够实现像素级的编辑，编辑效果更好，能够有效提升AR投影的最终效果。

请参阅图2，基于同一发明构思，本发明第二实施例提出的交互式图像编辑装置，所述装置包括：

获取处理模块，用于获取原始图像，并对所述原始图像进行图层处理，以得到目标图层，所述原始图像由拍摄装置对目标物体进行拍摄得到；

素材处理模块，用于对所述目标图层进行任意图像元素的填充，并对填充的图像元素进行编辑处理，以得到目标图像；

发送模块，用于将所述目标图像发送至投影装置，以使所述投影装置将所述目标图像投影到所述目标物体上。

本实施例中，所述获取处理模块用于：

新增至少一个图层，作为目标图层；

或者；

新增至少一个图层，对新增的任意一个图层进行修改，将修改后的图层作为目标图层；

或者；

新增至少一个图层，且删除任意一个图层，保留所有图层中的至少一个图层，作为目标图层；

或者；

新增至少一个图层，对新增的任意一个图层进行修改，对修改后的图层进行删除，保留所有图层中的至少一个图层，作为目标图层。

本实施例中，所述获取处理模块用于：

获取图层中输入的矩形坐标或多边形坐标，并根据所述矩形坐标或多边形做新增或修改目标图层。

本实施例中，所述获取处理模块用于：

在原始图像或图层中获取选择的目标坐标点；

根据下式收集所述目标坐标点预设范围内的点，将所述目标坐标点预设范围内的点的集合作为所述图像元素，以得到含所述图像元素的局部或全部区域原始图像：

其中，对应的RGB三通道为：

其中，seedPoint为所述目标坐标点，loDiff为下差值范围，为upDiff上差值范围，src(x,y)代表图像中点的坐标值；

剔除所述原始图像或图层中预设尺寸的孔洞、以及所述原始图像或图层中预设像素的噪音点，以新增或修改目标图层或产生临时区域，所述噪音点为游离于所述图像元素外的包围点。

本实施例中，所述获取处理模块用于：

选定一个已有图层作为被编辑图层，对所述被编辑图层做取反操作，以得到目标图层；

或者；

选定一个已有图层作为被编辑图层，对所述被编辑图层和临时区域做或运算，以得到目标图层；

或者；

选定一个已有图层作为被编辑图层，对所述被编辑图层和临时区域做与操作，以得到目标图层；

或者；

选定一个已有图层作为被编辑图层，对所述临时区域先做取反操作，再和所述被编辑图层做与操作，以得到目标图层；或操作与操作；

或操作

与操作

取反操作

其中，src为所述基础图层中的原图片，src1为采用第一矩形图片对所述原图片进行选取后得到的图片，src2为采用第二矩形图片对所述原图片进行选取后得到的图片，dist为所述原始局部图像，mask为掩膜图片，I为图片数据索引。

本实施例中，所述素材处理模块用于：

根据所述目标图层的顶点（外缘轮廓点）建立多边形；

计算所述多边形中每个顶点的UV值，其中，U=(顶点.x + 屏幕宽度/2) /屏幕宽度，V=(顶点.y + 屏幕高度/2) / 屏幕高度，使用渲染引擎(例如OpenGL、Unity)进行渲染处理，以将选定的图片或视频素材填充到目标图层。

本实施例中，所述素材处理模块用于：

根据目标图层的顶点（外缘轮廓点）建立多边形，选取所述多边形内的任意一点，并计算该点到任意两个相邻的顶点之间的线段的距离；

取计算得到的距离中的最小值称为最小距离；

将所述最小距离上相同的点涂上相同的预设颜色，以将选定的特效素材填充到目标图层。

本实施例中，所述素材处理模块用于采用下式进行编辑处理：

UV’ = R * UV * S + O

其中，UV’为编辑处理后的UV值，UV为编辑处理前的UV值，R为rotate旋转量（四元数），S为scale缩放量，O为offset偏移量。

根据上述的交互式图像编辑装置，通过对原始图像进行图层处理，得到目标图层，然后对目标图层进行任意图像元素的填充，并对填充的图像元素进行编辑处理，以得到目标图像，例如进行贴图、贴视频或贴特效等编辑处理，最后将完成编辑的目标图像发送至投影装置，通过投影装置将目标图像投影到目标物体上，由此实现了在AR投影时对图像进行实时编辑的效果，此外，本发明能够实现像素级的编辑，编辑效果更好，能够有效提升AR投影的最终效果。

此外，本发明的实施例还提出一种存储介质，具体是可读存储介质，其上存储有计算机程序，该程序被处理器执行时实现第一实施例中所述方法的步骤。

此外，本发明的实施例还提出一种计算机设备，包括存储器、处理器以及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述程序时实现第一实施例中所述方法的步骤。

在流程图中表示或在此以其他方式描述的逻辑和/或步骤，例如，可以被认为是用于实现逻辑功能的可执行指令的定序列表，可以具体实现在任何计算机可读介质中，以供指令执行系统、装置或设备（如基于计算机的系统、包括处理器的系统或其他可以从指令执行系统、装置或设备取指令并执行指令的系统）使用，或结合这些指令执行系统、装置或设备而使用。就本说明书而言，“计算机可读介质”可以是任何可以包含、存储、通信、传播或传输程序以供指令执行系统、装置或设备或结合这些指令执行系统、装置或设备而使用的装置。

计算机可读介质的更具体的示例（非穷尽性列表）包括以下：具有一个或多个布线的电连接部（电子装置），便携式计算机盘盒（磁装置），随机存取存储器（RAM），只读存储器（ROM），可擦除可编辑只读存储器（EPROM或闪速存储器），光纤装置，以及便携式光盘只读存储器（CDROM）。另外，计算机可读介质甚至可以是可在其上打印所述程序的纸或其他合适的介质，因为可以例如通过对纸或其他介质进行光学扫描，接着进行编辑、解译或必要时以其他合适方式进行处理来以电子方式获得所述程序，然后将其存储在计算机存储器中。

应当理解，本发明的各部分可以用硬件、软件、固件或它们的组合来实现。在上述实施方式中，多个步骤或方法可以用存储在存储器中且由合适的指令执行系统执行的软件或固件来实现。例如，如果用硬件来实现，和在另一实施方式中一样，可用本领域公知的下列技术中的任一项或他们的组合来实现：具有用于对数据信号实现逻辑功能的逻辑门电路的离散逻辑电路，具有合适的组合逻辑门电路的专用集成电路，可编程门阵列（PGA），现场可编程门阵列（FPGA）等。

在本说明书的描述中，参考术语“一个实施例”、“一些实施例”、 “示例”、“具体示例”、或“一些示例”等的描述意指结合该实施例或示例描述的具体特征、结构、材料或者特点包含于本发明的至少一个实施例或示例中。在本说明书中，对上述术语的示意性表述不一定指的是相同的实施例或示例。而且，描述的具体特征、结构、材料或者特点可以在任何的一个或多个实施例或示例中以合适的方式结合。

尽管已经示出和描述了本发明的实施例，本领域的普通技术人员可以理解：在不脱离本发明的原理和宗旨的情况下可以对这些实施例进行多种变化、修改、替换和变型，本发明的范围由权利要求及其等同物限定。

Claims (11)

1.一种交互式图像编辑方法，其特征在于，所述方法包括：

获取原始图像，并对所述原始图像进行图层处理，以得到目标图层，所述原始图像由拍摄装置对目标物体进行拍摄得到；

对所述目标图层进行任意图像元素的填充，并对填充的图像元素进行编辑处理，以得到目标图像；

将所述目标图像发送至投影装置，以使所述投影装置将所述目标图像投影到所述目标物体上。

2.根据权利要求1所述的交互式图像编辑方法，其特征在于，对所述原始图像进行图层处理，以得到目标图层的步骤包括：

新增至少一个图层，作为目标图层；

或者；

新增至少一个图层，对新增的任意一个图层进行修改，将修改后的图层作为目标图层；

或者；

新增至少一个图层，且删除任意一个图层，保留所有图层中的至少一个图层，作为目标图层；

或者；

新增至少一个图层，对新增的任意一个图层进行修改，对修改后的图层进行删除，保留所有图层中的至少一个图层，作为目标图层。

3.根据权利要求1所述的交互式图像编辑方法，其特征在于，所述图层处理的步骤包括：

获取图层中输入的矩形坐标或多边形坐标，并根据所述矩形坐标或多边形做新增或修改目标图层或产生临时区域。

4.根据权利要求1所述的交互式图像编辑方法，其特征在于，所述图层处理步骤包括：

在原始图像或图层中获取选择的目标坐标点；

根据下式收集所述目标坐标点预设范围内的点，将所述目标坐标点预设范围内的点的集合作为所述图像元素，以得到含所述图像元素的局部或全部区域原始图像：

其中，对应的RGB三通道为：

其中，seedPoint为所述目标坐标点，loDiff为下差值范围，为upDiff上差值范围，src(x,y)代表图像中点的坐标值；

剔除所述原始图像或图层中预设尺寸的孔洞、以及所述原始图像或图层中预设像素的噪音点，以新增或修改目标图层或产生临时区域，所述噪音点为游离于所述图像元素外的包围点。

5.根据权利要求3或4所述的交互式图像编辑方法，其特征在于，所述图层处理的步骤还包括：

选定一个已有图层作为被编辑图层，对所述被编辑图层做取反操作，以得到目标图层；

或者；

选定一个已有图层作为被编辑图层，对所述被编辑图层和临时区域做或运算，以得到目标图层；

或者；

选定一个已有图层作为被编辑图层，对所述被编辑图层和临时区域做与操作，以得到目标图层；

或者；

选定一个已有图层作为被编辑图层，对所述临时区域先做取反操作，再和所述被编辑图层做与操作，以得到目标图层；

或操作与操作或操作

与操作

取反操作

其中，src为所述基础图层中的原图片，src1为采用第一矩形图片对所述原图片进行选取后得到的图片，src2为采用第二矩形图片对所述原图片进行选取后得到的图片，dist为所述原始局部图像，mask为掩膜图片，I为图片数据索引。

6.根据权利要求1所述的交互式图像编辑方法，其特征在于，对所述目标图层进行任意图像元素的填充的步骤包括：

根据所述目标图层的顶点建立多边形；

计算所述多边形中每个顶点的UV值，其中，U=(顶点.x + 屏幕宽度/2) /屏幕宽度，V=(顶点.y + 屏幕高度/2) / 屏幕高度，使用渲染引擎进行渲染处理，以将选定的图片或视频素材填充到目标图层。

7.根据权利要求1所述的交互式图像编辑方法，其特征在于，对所述目标图层进行任意图像元素的填充的步骤包括；

根据目标图层的顶点建立多边形，选取所述多边形内的任意一点，并计算该点到任意两个相邻的顶点之间的线段的距离；

取计算得到的距离中的最小值称为最小距离；

将所述最小距离上相同的点涂上相同的预设颜色，以将选定的特效素材填充到目标图层。

8.根据权利要求6所述的交互式图像编辑方法，其特征在于，对填充的图像元素进行编辑处理的步骤中，采用下式进行编辑处理：

UV’ = R * UV * S + O

其中，UV’为编辑处理后的UV值，UV为编辑处理前的UV值，R为rotate旋转量，S为scale缩放量，O为offset偏移量。

9.一种交互式图像编辑装置，其特征在于，所述装置包括：

获取处理模块，用于获取原始图像，并对所述原始图像进行图层处理，以得到目标图层，所述原始图像由拍摄装置对目标物体进行拍摄得到；

素材处理模块，用于对所述目标图层进行任意图像元素的填充，并对填充的图像元素进行编辑处理，以得到目标图像；

发送模块，用于将所述目标图像发送至投影装置，以使所述投影装置将所述目标图像投影到所述目标物体上。

10.一种存储介质，其上存储有计算机程序，其特征在于，该程序被处理器执行时实现如权利要求1-8任意一项所述的方法。

11.一种计算机设备，包括存储器、处理器以及存储在存储器上并可在处理器上运行的计算机程序，其特征在于，所述处理器执行所述程序时实现如权利要求1至8任意一项所述的方法。

Images