CN115496711A - 图像处理方法及装置、存储介质 - Google Patents

Abstract

本发明提供一种图像处理方法及装置、存储介质，其中方法包括：基于房间的三维轮廓线以及房间的图像，在房间的图像的拍摄点位下对三维轮廓线进行遮挡检测；基于遮挡检测的结果以及预设的渲染策略，将至少部分的三维轮廓线渲染到房间的图像，预设的渲染策略包括三维轮廓线中未被遮挡部分的视觉信息和被遮挡部分的视觉信息不同。如此，可以让用户可以从视觉上直观清晰地感受到被遮挡部分和未被遮挡部分的不同，从而能够对被遮挡部分和未被遮挡部分进行区分，使得渲染的三维轮廓线视觉上更有条理，提升了三维轮廓线的渲染效果。

Description

图像处理方法及装置、存储介质

技术领域

本发明涉及图像处理技术领域，尤其涉及一种图像处理方法及装置、存储介质。

背景技术

目前，为了让用户可以通过图像清晰地感受房间的结构，可以得到房间的三维轮廓线，并将该三维轮廓线在房屋的图像中展示出来。现有技术中是直接将图像拍摄的房间的三维轮廓线渲染到图像上，但是，三维轮廓线有时会与图像中的物品或者墙体等存在遮挡，尤其是物品较多的房间，视觉上给人以杂乱的感觉，降低了三维轮廓线的渲染效果。

发明内容

本发明提供一种图像处理方法及装置、存储介质，用以解决现有技术中房间的图像中三维轮廓线的渲染效果较差的缺陷，实现了三维轮廓线的渲染效果的提升。

本发明提供一种图像处理方法，包括：

基于房间的三维轮廓线以及所述房间的图像，在所述房间的图像的拍摄点位下对所述三维轮廓线进行遮挡检测；

基于所述遮挡检测的结果以及预设的渲染策略，将至少部分的所述三维轮廓线渲染到所述房间的图像，所述预设的渲染策略包括所述三维轮廓线中未被遮挡部分的视觉信息和被遮挡部分的所述视觉信息不同。

根据本发明提供的一种图像处理方法，所述基于房间的三维轮廓线以及所述房间的图像，在所述房间的图像的拍摄点位下对所述三维轮廓线进行遮挡检测，包括：

基于所述三维轮廓线，在所述拍摄点位下对所述三维轮廓线进行被墙体遮挡的检测；

基于所述房间的图像，在所述拍摄点位下对所述三维轮廓线进行被物体遮挡的检测。

根据本发明提供的一种图像处理方法，所述基于所述三维轮廓线，在所述拍摄点位下对所述三维轮廓线进行被墙体遮挡的检测，包括：

获取所述三维轮廓线投影至水平面的二维轮廓线；

基于所述拍摄点位以及所述二维轮廓线，对所述二维轮廓线的每个轮廓点进行被墙体遮挡的检测；

对所述二维轮廓线上与所述三维轮廓线的每个竖直轮廓线对应的每个顶点，基于所述拍摄点位以及所述二维轮廓线，对每个所述顶点对应的所述竖直轮廓线进行被墙体遮挡的检测。

根据本发明提供的一种图像处理方法，所述基于所述拍摄点位以及所述二维轮廓线，对所述二维轮廓线的每个轮廓点进行被墙体遮挡的检测，包括：

针对所述二维轮廓线的每个轮廓点，获取所述二维轮廓线的轮廓点与所述拍摄点位形成的线段；

若所述二维轮廓线的轮廓点所在的线段与所述二维轮廓线存在所述二维轮廓线的轮廓点以外的交点，确定所述二维轮廓线的轮廓点属于被墙体遮挡部分；

若所述二维轮廓线的轮廓点所在的线段与所述二维轮廓线不存在所述二维轮廓线的轮廓点以外的交点，确定所述二维轮廓线的轮廓点属于未被墙体遮挡部分。

根据本发明提供的一种图像处理方法，所述基于所述拍摄点位以及所述二维轮廓线，对每个所述顶点对应的所述竖直轮廓线进行被墙体遮挡的检测，包括：

针对每个所述顶点，获取所述顶点与所述拍摄点位形成的线段；

若所述顶点所在的线段与所述二维轮廓线存在所述顶点以外的交点，确定所述顶点对应的所述竖直轮廓线属于被墙体遮挡部分；

若所述顶点所在的线段与所述二维轮廓线不存在所述顶点以外的交点，确定所述顶点对应的所述竖直轮廓线属于未被墙体遮挡部分。

根据本发明提供的一种图像处理方法，所述基于所述房间的图像，在所述拍摄点位下对所述三维轮廓线进行被物体遮挡的检测，包括：

基于所述房间的图像对应的语义分割图像，确定所述至少部分的所述三维轮廓线的轮廓点对应的所述房间的图像中的像素点的语义；

若所述三维轮廓线的轮廓点对应的所述房间的图像中的像素点的语义为墙体，确定所述三维轮廓线的轮廓点属于未被物体遮挡部分；

若所述三维轮廓线的轮廓点对应的所述房间的图像中的像素点的语义不为墙体，确定所述三维轮廓线的轮廓点属于被物体遮挡部分。

根据本发明提供的一种图像处理方法，所述基于所述房间的图像，在所述拍摄点位下对所述三维轮廓线进行被物体遮挡的检测，包括：

基于所述房间的图像，在所述拍摄点位下对所述三维轮廓线未被墙体遮挡的部分进行被物体遮挡的检测。

根据本发明提供的一种图像处理方法，所述被遮挡部分的所述视觉信息中，被墙体遮挡部分的所述视觉信息和被物体遮挡部分的所述视觉信息不同。

本发明还提供一种图像处理装置，包括：

遮挡检测模块，用于基于房间的三维轮廓线以及所述房间的图像，在所述房间的图像的拍摄点位下对所述三维轮廓线进行遮挡检测；

轮廓渲染模块，用于基于所述遮挡检测的结果以及预设的渲染策略，将至少部分的所述三维轮廓线渲染到所述房间的图像，所述预设的渲染策略包括所述三维轮廓线中未被遮挡部分的视觉信息和被遮挡部分的所述视觉信息不同。

根据本发明提供的一种图像处理装置，遮挡检测模块，具体用于：

基于所述三维轮廓线，在所述拍摄点位下对所述三维轮廓线进行被墙体遮挡的检测；

基于所述房间的图像，在所述拍摄点位下对所述三维轮廓线进行被物体遮挡的检测。

根据本发明提供的一种图像处理装置，遮挡检测模块，具体用于：

获取所述三维轮廓线投影至水平面的二维轮廓线；

基于所述拍摄点位以及所述二维轮廓线，对所述二维轮廓线的每个轮廓点进行被墙体遮挡的检测；

对所述二维轮廓线上与所述三维轮廓线的每个竖直轮廓线对应的每个顶点，基于所述拍摄点位以及所述二维轮廓线，对每个所述顶点对应的所述竖直轮廓线进行被墙体遮挡的检测。

根据本发明提供的一种图像处理装置，遮挡检测模块，具体用于：

针对所述二维轮廓线的每个轮廓点，获取所述二维轮廓线的轮廓点与所述拍摄点位形成的线段；

若所述二维轮廓线的轮廓点所在的线段与所述二维轮廓线存在所述二维轮廓线的轮廓点以外的交点，确定所述二维轮廓线的轮廓点属于被墙体遮挡部分；

若所述二维轮廓线的轮廓点所在的线段与所述二维轮廓线不存在所述二维轮廓线的轮廓点以外的交点，确定所述二维轮廓线的轮廓点属于未被墙体遮挡部分。

根据本发明提供的一种图像处理装置，遮挡检测模块，具体用于：

针对每个所述顶点，获取所述顶点与所述拍摄点位形成的线段；

若所述顶点所在的线段与所述二维轮廓线存在所述顶点以外的交点，确定所述顶点对应的所述竖直轮廓线属于被墙体遮挡部分；

若所述顶点所在的线段与所述二维轮廓线不存在所述顶点以外的交点，确定所述顶点对应的所述竖直轮廓线属于未被墙体遮挡部分。

根据本发明提供的一种图像处理装置，遮挡检测模块，具体用于：

基于所述房间的图像对应的语义分割图像，确定所述至少部分的所述三维轮廓线的轮廓点对应的所述房间的图像中的像素点的语义；

若所述三维轮廓线的轮廓点对应的所述房间的图像中的像素点的语义为墙体，确定所述三维轮廓线的轮廓点属于未被物体遮挡部分；

若所述三维轮廓线的轮廓点对应的所述房间的图像中的像素点的语义不为墙体，确定所述三维轮廓线的轮廓点属于被物体遮挡部分。

根据本发明提供的一种图像处理装置，遮挡检测模块，具体用于：

基于所述房间的图像，在所述拍摄点位下对所述三维轮廓线未被墙体遮挡的部分进行被物体遮挡的检测。

根据本发明提供的一种图像处理装置，所述被遮挡部分的所述视觉信息中，被墙体遮挡部分的所述视觉信息和被物体遮挡部分的所述视觉信息不同。

本发明还提供一种电子设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述程序时实现如上述任一种所述图像处理方法。

本发明还提供一种非暂态计算机可读存储介质，其上存储有计算机程序，该计算机程序被处理器执行时实现如上述任一种所述图像处理方法。

本发明还提供一种计算机程序产品，包括计算机程序，所述计算机程序被处理器执行时实现如上述任一种所述图像处理方法。

本发明提供的图像处理方法，由于可以基于房间的三维轮廓线以及房间的图像，在房间的图像的拍摄点位下对三维轮廓线进行遮挡检测，因此，可以基于遮挡检测的结果以及预设的渲染策略，将至少部分的三维轮廓线渲染到房间的图像，通过渲染策略针对被遮挡部分的视觉信息和未被遮挡部分的视觉信息进行区分，让用户可以从视觉上直观清晰地感受到被遮挡部分和未被遮挡部分的不同，从而能够对被遮挡部分和未被遮挡部分进行区分，使得渲染的三维轮廓线视觉上更有条理，提升了三维轮廓线的渲染效果。

附图说明

为了更清楚地说明本发明或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作一简单地介绍，显而易见地，下面描述中的附图是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1是本发明提供的图像处理方法的流程示意图之一；

图2是本发明提供的三维轮廓线的示意图；

图3是本发明提供的图像处理方法的流程示意图之二；

图4是本发明提供的图像处理方法的流程示意图之三；

图5是本发明提供的二维轮廓线的示意图之一；

图6是本发明提供的二维轮廓线的示意图之二；

图7是本发明提供的图像处理方法的流程示意图之四；

图8是本发明提供的图像处理方法的流程示意图之五；

图9是本发明提供的图像处理方法的流程示意图之五；

图10是本发明提供的三维轮廓线的渲染效果示意图；

图11是本发明提供的图像处理装置的结构示意图；

图12是本发明提供的电子设备的结构示意图。

具体实施方式

为使本发明的目的、技术方案和优点更加清楚，下面将结合本发明中的附图，对本发明中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

下面结合图1-图10描述本发明的图像处理方法。

本实施例提供一种图像处理方法，可以由终端或者服务器中的软件和/或硬件执行，如图1所示，该图像处理方法至少包括如下步骤：

步骤101、基于房间的三维轮廓线以及房间的图像，在房间的图像的拍摄点位下对三维轮廓线进行遮挡检测。

房间的图像可以是全景图，也可以是普通图像。为了通过图像清晰地感受房间的结构，可以预先提取房间的三维轮廓线并基于拍摄点位的位置和朝向渲染到房间的图像中，三维轮廓线的具体提取方式可以参考相关技术实施，此处不做赘述。参见图2，示意了一个房间的三维轮廓线。但是，三维轮廓线有时会与图像中的物品或者墙体等存在遮挡，三维轮廓线的渲染效果不佳，为了提升三维轮廓线的渲染效果，本实施例中进行了关于遮挡情况的处理。由于在拍摄房间的图像时，房间的图像的拍摄点位不同，得到的房间的图像不同，相应的，三维轮廓线渲染到图像中的部分不同，在不同的拍摄点位处看到的三维轮廓线的遮挡情况也不同，因此，可以结合三维轮廓线以及房间的图像，在房间的图像的拍摄点位下对三维轮廓线进行遮挡检测。遮挡检测的结果可以包括三维轮廓线是否被遮挡，三维轮廓线被遮挡时，还可以包括被遮挡部分的位置信息，还可以包括未被遮挡部分的位置信息。可以理解的是，三维轮廓线未被遮挡时，三维轮廓线全部未被遮挡。

步骤102、基于遮挡检测的结果以及预设的渲染策略，将至少部分的三维轮廓线渲染到房间的图像，预设的渲染策略包括三维轮廓线中未被遮挡部分的视觉信息和被遮挡部分的视觉信息不同。

实际应用中，由于拍摄的房间的图像可能是房间的一部分，因此，将三维轮廓线渲染到房间的图像时，将至少部分三维轮廓线渲染到房间的图像中。

为了提升三维轮廓线的渲染效果，可以根据实际需求，预先设置渲染策略，针对被遮挡部分的视觉信息和未被遮挡部分的视觉信息进行区分，让用户可以从视觉上直观地感受到被遮挡部分和未被遮挡部分的不同，从而能够对被遮挡部分和未被遮挡部分进行区分。

本实施例中，由于可以基于房间的三维轮廓线以及房间的图像，在房间的图像的拍摄点位下对三维轮廓线进行遮挡检测，因此，可以基于遮挡检测的结果以及预设的渲染策略，将至少部分的三维轮廓线渲染到房间的图像，通过渲染策略针对被遮挡部分的视觉信息和未被遮挡部分的视觉信息进行区分，让用户可以从视觉上直观清晰地感受到被遮挡部分和未被遮挡部分的不同，从而能够对被遮挡部分和未被遮挡部分进行区分，使得渲染的三维轮廓线视觉上更有条理，提升了三维轮廓线的渲染效果。

在示例性实施例中，基于房间的三维轮廓线以及房间的图像，在房间的图像的拍摄点位下对三维轮廓线进行遮挡检测，如图3所示，具体可以包括：

步骤301、基于三维轮廓线，在拍摄点位下对三维轮廓线进行被墙体遮挡的检测。

步骤302、基于房间的图像，在拍摄点位下对三维轮廓线进行被物体遮挡的检测。

实际应用中，对三维轮廓线中的一条边的轮廓线来说，在拍摄点位处，轮廓线可能被物体遮挡，也可能被其它墙体遮挡，示例性的，可以有以下几种状态：

一、完全被其它墙体遮挡而不可见。

二、部分被其它墙体遮挡，未遮挡部分被物体遮挡。

三、部分被其它墙体遮挡，未遮挡部分未被物体遮挡。

四、没有被其它墙体遮挡，但是被物体遮挡。

五、没有任何遮挡，完整可见。

本实施例中，可以分别对被墙体遮挡和被物体遮挡的情况进行检测，由于三维轮廓线可以反映房间的墙体的情况，因此，可以基于三维轮廓线，在拍摄点位下对三维轮廓线进行被墙体遮挡的检测，从而准确地检测出被墙体遮挡的情况，而房间的图像则可以反映房间的物体的情况，因此，可以基于房间的图像，在拍摄点位下对三维轮廓线进行被物体遮挡的检测，从而准确地检测出被物体遮挡的情况。

进一步的，在示例性实施例中，步骤302中，基于房间的图像，在拍摄点位下对三维轮廓线进行被物体遮挡的检测，其具体实现方式可以包括：基于房间的图像，在拍摄点位下对三维轮廓线未被墙体遮挡的部分进行被物体遮挡的检测。

由于三维轮廓线中被墙体遮挡的部分，不再有物体遮挡，而三维轮廓线中未被墙体遮挡的部分，还可能会被物体遮挡，因此，可以直接在拍摄点位下对三维轮廓线未被墙体遮挡的部分进行被物体遮挡的检测，可以提高检测效率。

在示例性实施例中，基于三维轮廓线，在拍摄点位下对三维轮廓线进行被墙体遮挡的检测，如图4所示，其具体实现方式可以包括：

步骤401、获取三维轮廓线投影至水平面的二维轮廓线。

参见图5，以一套房屋的每个房间的二维轮廓线进行示意，图5中以7个房间的二维轮廓线进行示意，房间的二维轮廓线也可以作为二维户型图。这里，三维轮廓线是由二维户型图沿重力方向拉伸得到的，房顶和地面的轮廓线在水平面的投影是一致的。

步骤402、基于拍摄点位以及二维轮廓线，对二维轮廓线的每个轮廓点进行被墙体遮挡的检测。

实际应用中，可以将第二维轮廓线离散成多个轮廓点，参见图6，以轮廓点A、B、C、D和E进行示意，对二维轮廓线的每个轮廓点进行被墙体遮挡的检测，从而可以得到整个二维轮廓线被墙体遮挡的情况。

步骤403、对二维轮廓线上与三维轮廓线的每个竖直轮廓线对应的每个顶点，基于拍摄点位以及二维轮廓线，对每个顶点对应的竖直轮廓线进行被墙体遮挡的检测。

由于二维轮廓线是由三维轮廓线投影至水平面得到的，三维轮廓线的每个竖直轮廓线对应二维轮廓线的每个顶点，其特点是，顶点未被墙体遮挡，则顶点对应的竖直轮廓线未被墙体遮挡，顶点被墙体遮挡，则顶点对应的竖直轮廓线被墙体遮挡，不会存在竖直轮廓线部分被遮挡部分未被遮挡的情况，因此，可以通过对每个顶点对应的竖直轮廓线进行被墙体遮挡的检测。

本实施例中，通过对二维轮廓线离散的每个轮廓点进行被墙体遮挡的检测，并且通过对二维轮廓线的每个顶点对应的竖直轮廓线进行被墙体遮挡的检测，检测更加准确、精细，从而提升了整个三维轮廓线被墙体遮挡的情况的准确性。

在示例性实施例中，基于拍摄点位以及二维轮廓线，对二维轮廓线的每个轮廓点进行被墙体遮挡的检测，如图7所示，具体实现方式可以包括：

步骤701、针对二维轮廓线的每个轮廓点，获取二维轮廓线的轮廓点与拍摄点位形成的线段。

参见图6，仍以二维轮廓线的轮廓点A、B、C、D和E进行举例，拍摄点位O分别与二维轮廓线的轮廓点A、B、C、D和E形成的线段为OA、OB、OC、OD和OE。

步骤702、若二维轮廓线的轮廓点所在的线段与二维轮廓线存在二维轮廓线的轮廓点以外的交点，确定二维轮廓线的轮廓点属于被墙体遮挡部分。

参见图6，从图6中的线段OE可以看出，若二维轮廓线的轮廓点所在的线段OE与二维轮廓线存在二维轮廓线的轮廓点以外的交点P，说明二维轮廓线的轮廓点E属于被墙体遮挡部分。

步骤703、若二维轮廓线的轮廓点所在的线段与二维轮廓线不存在二维轮廓线的轮廓点以外的交点，确定二维轮廓线的轮廓点属于未被墙体遮挡部分。

参见图6，从图6中的线段OA、OB、OC和OD可以看出，若二维轮廓线的轮廓点所在的线段与二维轮廓线不存在二维轮廓线的轮廓点以外的交点，说明二维轮廓线的轮廓点不属于被墙体遮挡部分。

二维轮廓线是多条轮廓线形成的一个多边形。实施中，可以获取拍摄点位的位置和二维轮廓线的轮廓点的位置，基于拍摄点位的位置和二维轮廓线的轮廓点的位置，可以得到二维轮廓线的轮廓点与拍摄点位形成的线段的表达式。获取形成二维轮廓线的每条轮廓线的表达式。通过二维轮廓线的轮廓点与拍摄点位形成的线段的表达式，以及形成二维轮廓线的每条轮廓线的表达式，确定二维轮廓线的轮廓点所在的线段与二维轮廓线的每条轮廓线是否相交。

属于未被墙体遮挡部分的连续相邻的二维轮廓线的轮廓点形成一段未被墙体遮挡的轮廓线。属于被墙体遮挡部分的连续相邻的二维轮廓线的轮廓点形成一段被墙体遮挡的轮廓线。

本实施例中，通过分析二维轮廓线的轮廓点与拍摄点位形成的线段与二维轮廓线的几何关系，来确定二维轮廓线的轮廓点属于未被墙体遮挡部分还是属于被墙体遮挡部分，不仅简单快速，而且检测结果更加准确。

在示例性实施例中，基于拍摄点位以及二维轮廓线，对每个顶点对应的竖直轮廓线进行被墙体遮挡的检测，如图8所示，其具体实现方式可以包括：

步骤801、针对每个顶点，获取顶点与拍摄点位形成的线段。

步骤802、若顶点所在的线段与二维轮廓线存在顶点以外的交点，确定顶点对应的竖直轮廓线属于被墙体遮挡部分。

步骤803、若顶点所在的线段与二维轮廓线不存在顶点以外的交点，确定顶点对应的竖直轮廓线属于未被墙体遮挡部分。

本实施例中，对每个顶点对应的竖直轮廓线进行被墙体遮挡的检测的方式，与步骤701～步骤703中对二维轮廓线的每个轮廓点进行被墙体遮挡的检测的方式相类似，可以达到相类似的效果。考虑到二维轮廓线的顶点也可以是步骤701～步骤703中二维轮廓线的轮廓点，在一种实现方式中，还可以直接获取二维轮廓线中作为顶点的轮廓点的检测结果。仍参见图6，二维轮廓线的轮廓点A、B、C和D都是二维轮廓线的顶点，可以直接获取这些作为二维轮廓线的顶点的轮廓点的检测结果。如此，无需再重复检测，从而提高了检测效率。

在示例性实施例中，步骤302中，基于房间的图像，在拍摄点位下对三维轮廓线进行被物体遮挡的检测，如图9所示，其具体实现方式可以包括：

步骤901、基于房间的图像对应的语义分割图像，确定至少部分的三维轮廓线的轮廓点对应的房间的图像中的像素点的语义。

实际应用中，可以对房间的图像进行语义分割，得到房间的图像对应的语义分割图像。语义分割可以对图像中物体进行像素级的分割，通过语义分割图像，可以对房间的图像中的每个像素点都标明属于哪类物体，例如可以通过不同的颜色表示不同类别的物体，例如每个像素点属于墙体还是其它的物体。

基于房间的图像，在拍摄点位下对三维轮廓线未被墙体遮挡的部分进行被物体遮挡的检测的情况下，确定至少部分的三维轮廓线的轮廓点对应的房间的图像中的像素点的语义，具体可以是确定至少部分的三维轮廓线的未被墙体遮挡的轮廓点，对应的房间的图像中的像素点的语义。如此，可以进一步提升检测效率。

步骤902、若三维轮廓线的轮廓点对应的房间的图像中的像素点的语义为墙体，确定三维轮廓线的轮廓点属于未被物体遮挡部分。

步骤903、若三维轮廓线的轮廓点对应的房间的图像中的像素点的语义不为墙体，确定三维轮廓线的轮廓点属于被物体遮挡部分。

其中，属于未被物体遮挡部分的连续相邻的轮廓点形成一段未被物体遮挡的轮廓线。属于被物体遮挡部分的连续相邻的轮廓点形成一段被物体遮挡的轮廓线。

本实施例中，通过语义分割图像可以得到房间的图像中的像素点的语义，对于渲染到房间的图像中的至少部分的三维轮廓线来说，该至少部分的三维轮廓线的轮廓点对应的房间的图像中的像素点的语义为墙体，说明未被物体遮挡，否则，说明被物体遮挡了，从而可以准确地确定出物体遮挡情况。

视觉信息可以包括可见和不可见，可见的情况下，还可以包括轮廓线的颜色、宽度和样式中的至少一种。轮廓线的宽度也即轮廓线的粗细。轮廓线的样式可以包括实线和虚线等等。示例性的，被遮挡部分的轮廓线可以为虚线，未被遮挡部分的轮廓线可以为实线。通过实线和虚线来区分被遮挡部分和未被遮挡部分，更符合人们通常的视觉习惯，方便用户快速准确地感受到房间的结构。

示例性的，将至少部分的三维轮廓线渲染到房间的图像时，若房间的图像中渲染的至少部分的三维轮廓线中，若三维轮廓线的一条边的轮廓线完全被墙体遮挡，则不可见，若三维轮廓线的一条边的轮廓线存在未被遮挡部分以及被遮挡部分(包括被墙体遮挡部分和/或被物体遮挡部分)，则可见，其中，未被遮挡部分的轮廓线为实线，被遮挡部分的轮廓线为虚线。参见图10，示意了一个房间的图像中渲染的三维轮廓线。

在示例性实施例中，被遮挡部分的视觉信息中，被墙体遮挡部分的视觉信息和被物体遮挡部分的视觉信息不同。为了进一步提高三维轮廓线的渲染效果，还可以进一步对被墙体遮挡部分和被物体遮挡部分进行区分，使得用户通过被墙体遮挡部分的视觉信息和被物体遮挡部分的视觉信息的不同，进一步清晰感受到被物体遮挡的情况和被墙体遮挡的情况。示例性的，被物体部分的轮廓线和被墙体遮挡部分的轮廓线的颜色不同。颜色的不同在视觉上区分效果更加明显。

另外，将至少部分的三维轮廓线渲染到房间的图像时，还可以渲染每条轮廓线的长度信息，帮助用户清晰地感受房间的尺寸。

在示例性实施例中，基于房间的三维轮廓线以及房间的图像，在房间的图像的拍摄点位下对三维轮廓线进行遮挡检测之前，还可以获取一套房屋的每个房间的三维轮廓线、每个房间的图像以及多个拍摄点位，将每个房间的三维轮廓线投影至水平面得到每个房间的二维轮廓线，在每个拍摄点位下，遍历每个房间的二维轮廓线，确定拍摄点位是否位于该房间的二维轮廓线内，以得到房间的三维轮廓线、房间的图像及拍摄点位的对应关系。如此，则可以针对每个房间，基于房间的三维轮廓线以及房间的图像，在房间的图像的拍摄点位下对三维轮廓线进行遮挡检测。

下面对本发明提供的图像处理装置进行描述，下文描述的图像处理装置与上文描述的图像处理方法可相互对应参照。

本实施例提供一种图像处理装置，如图11所示，包括：

遮挡检测模块1101，用于基于房间的三维轮廓线以及房间的图像，在房间的图像的拍摄点位下对三维轮廓线进行遮挡检测；

轮廓渲染模块1102，用于基于遮挡检测的结果以及预设的渲染策略，将至少部分的三维轮廓线渲染到房间的图像，预设的渲染策略包括三维轮廓线中未被遮挡部分的视觉信息和被遮挡部分的视觉信息不同。

在示例性实施例中，遮挡检测模块1101，具体用于：

基于三维轮廓线，在拍摄点位下对三维轮廓线进行被墙体遮挡的检测；

基于房间的图像，在拍摄点位下对三维轮廓线进行被物体遮挡的检测。

在示例性实施例中，遮挡检测模块1101，具体用于：

获取三维轮廓线投影至水平面的二维轮廓线；

基于拍摄点位以及二维轮廓线，对二维轮廓线的每个轮廓点进行被墙体遮挡的检测；

对二维轮廓线上与三维轮廓线的每个竖直轮廓线对应的每个顶点，基于拍摄点位以及二维轮廓线，对每个顶点对应的竖直轮廓线进行被墙体遮挡的检测。

在示例性实施例中，遮挡检测模块1101，具体用于：

针对二维轮廓线的每个轮廓点，获取二维轮廓线的轮廓点与拍摄点位形成的线段；

若二维轮廓线的轮廓点所在的线段与二维轮廓线存在二维轮廓线的轮廓点以外的交点，确定二维轮廓线的轮廓点属于被墙体遮挡部分；

若二维轮廓线的轮廓点所在的线段与二维轮廓线不存在二维轮廓线的轮廓点以外的交点，确定二维轮廓线的轮廓点属于未被墙体遮挡部分。

在示例性实施例中，遮挡检测模块1101，具体用于：

针对每个顶点，获取顶点与拍摄点位形成的线段；

若顶点所在的线段与二维轮廓线存在顶点以外的交点，确定顶点对应的竖直轮廓线属于被墙体遮挡部分；

若顶点所在的线段与二维轮廓线不存在顶点以外的交点，确定顶点对应的竖直轮廓线属于未被墙体遮挡部分。

在示例性实施例中，遮挡检测模块1101，具体用于：

基于房间的图像对应的语义分割图像，确定至少部分的三维轮廓线的轮廓点对应的房间的图像中的像素点的语义；

若三维轮廓线的轮廓点对应的房间的图像中的像素点的语义为墙体，确定三维轮廓线的轮廓点属于未被物体遮挡部分；

若三维轮廓线的轮廓点对应的房间的图像中的像素点的语义不为墙体，确定三维轮廓线的轮廓点属于被物体遮挡部分。

在示例性实施例中，遮挡检测模块1101，具体用于：

基于房间的图像，在拍摄点位下对三维轮廓线未被墙体遮挡的部分进行被物体遮挡的检测。

在示例性实施例中，被遮挡部分的视觉信息中，被墙体遮挡部分的视觉信息和被物体遮挡部分的视觉信息不同。

图12示例了一种电子设备的实体结构示意图，如图12所示，该电子设备可以包括：处理器(processor)1210、通信接口(Communications Interface)1220、存储器(memory)1230和通信总线1240，其中，处理器1210，通信接口1220，存储器1230通过通信总线1240完成相互间的通信。处理器1210可以调用存储器1230中的逻辑指令，以执行图像处理方法，该方法包括：

基于房间的三维轮廓线以及房间的图像，在房间的图像的拍摄点位下对三维轮廓线进行遮挡检测；

基于遮挡检测的结果以及预设的渲染策略，将至少部分的三维轮廓线渲染到房间的图像，预设的渲染策略包括三维轮廓线中未被遮挡部分的视觉信息和被遮挡部分的视觉信息不同。

此外，上述的存储器1230中的逻辑指令可以通过软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器(ROM，Read-Only Memory)、随机存取存储器(RAM，Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。

另一方面，本发明还提供一种计算机程序产品，所述计算机程序产品包括计算机程序，计算机程序可存储在非暂态计算机可读存储介质上，所述计算机程序被处理器执行时，计算机能够执行上述各方法所提供的图像处理方法，该方法包括：

基于房间的三维轮廓线以及房间的图像，在房间的图像的拍摄点位下对三维轮廓线进行遮挡检测；

基于遮挡检测的结果以及预设的渲染策略，将至少部分的三维轮廓线渲染到房间的图像，预设的渲染策略包括三维轮廓线中未被遮挡部分的视觉信息和被遮挡部分的视觉信息不同。

又一方面，本发明还提供一种非暂态计算机可读存储介质，其上存储有计算机程序，该计算机程序被处理器执行时实现以执行上述各方法提供的图像处理方法，该方法包括：

基于房间的三维轮廓线以及房间的图像，在房间的图像的拍摄点位下对三维轮廓线进行遮挡检测；

基于遮挡检测的结果以及预设的渲染策略，将至少部分的三维轮廓线渲染到房间的图像，预设的渲染策略包括三维轮廓线中未被遮挡部分的视觉信息和被遮挡部分的视觉信息不同。

以上所描述的装置实施例仅仅是示意性的，其中所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。本领域普通技术人员在不付出创造性的劳动的情况下，即可以理解并实施。

通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到各实施方式可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件。基于这样的理解，上述技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品可以存储在计算机可读存储介质中，如ROM/RAM、磁碟、光盘等，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行各个实施例或者实施例的某些部分所述的方法。

最后应说明的是：以上实施例仅用以说明本发明的技术方案，而非对其限制；尽管参照前述实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围。

Claims (10)

1.一种图像处理方法，其特征在于，包括：

基于房间的三维轮廓线以及所述房间的图像，在所述房间的图像的拍摄点位下对所述三维轮廓线进行遮挡检测；

基于所述遮挡检测的结果以及预设的渲染策略，将至少部分的所述三维轮廓线渲染到所述房间的图像，所述预设的渲染策略包括所述三维轮廓线中未被遮挡部分的视觉信息和被遮挡部分的所述视觉信息不同。

2.根据权利要求1所述的图像处理方法，其特征在于，所述基于房间的三维轮廓线以及所述房间的图像，在所述房间的图像的拍摄点位下对所述三维轮廓线进行遮挡检测，包括：

基于所述三维轮廓线，在所述拍摄点位下对所述三维轮廓线进行被墙体遮挡的检测；

基于所述房间的图像，在所述拍摄点位下对所述三维轮廓线进行被物体遮挡的检测。

3.根据权利要求2所述的图像处理方法，其特征在于，所述基于所述三维轮廓线，在所述拍摄点位下对所述三维轮廓线进行被墙体遮挡的检测，包括：

获取所述三维轮廓线投影至水平面的二维轮廓线；

基于所述拍摄点位以及所述二维轮廓线，对所述二维轮廓线的每个轮廓点进行被墙体遮挡的检测；

对所述二维轮廓线上与所述三维轮廓线的每个竖直轮廓线对应的每个顶点，基于所述拍摄点位以及所述二维轮廓线，对每个所述顶点对应的所述竖直轮廓线进行被墙体遮挡的检测。

4.根据权利要求3所述的图像处理方法，其特征在于，所述基于所述拍摄点位以及所述二维轮廓线，对所述二维轮廓线的每个轮廓点进行被墙体遮挡的检测，包括：

针对所述二维轮廓线的每个轮廓点，获取所述二维轮廓线的轮廓点与所述拍摄点位形成的线段；

若所述二维轮廓线的轮廓点所在的线段与所述二维轮廓线存在所述二维轮廓线的轮廓点以外的交点，确定所述二维轮廓线的轮廓点属于被墙体遮挡部分；

若所述二维轮廓线的轮廓点所在的线段与所述二维轮廓线不存在所述二维轮廓线的轮廓点以外的交点，确定所述二维轮廓线的轮廓点属于未被墙体遮挡部分。

5.根据权利要求3所述的图像处理方法，其特征在于，所述基于所述拍摄点位以及所述二维轮廓线，对每个所述顶点对应的所述竖直轮廓线进行被墙体遮挡的检测，包括：

针对每个所述顶点，获取所述顶点与所述拍摄点位形成的线段；

若所述顶点所在的线段与所述二维轮廓线存在所述顶点以外的交点，确定所述顶点对应的所述竖直轮廓线属于被墙体遮挡部分；

若所述顶点所在的线段与所述二维轮廓线不存在所述顶点以外的交点，确定所述顶点对应的所述竖直轮廓线属于未被墙体遮挡部分。

6.根据权利要求2所述的图像处理方法，其特征在于，所述基于所述房间的图像，在所述拍摄点位下对所述三维轮廓线进行被物体遮挡的检测，包括：

基于所述房间的图像对应的语义分割图像，确定所述至少部分的所述三维轮廓线的轮廓点对应的所述房间的图像中的像素点的语义；

若所述三维轮廓线的轮廓点对应的所述房间的图像中的像素点的语义为墙体，确定所述三维轮廓线的轮廓点属于未被物体遮挡部分；

若所述三维轮廓线的轮廓点对应的所述房间的图像中的像素点的语义不为墙体，确定所述三维轮廓线的轮廓点属于被物体遮挡部分。

7.根据权利要求2至6任一项所述的图像处理方法，其特征在于，所述基于所述房间的图像，在所述拍摄点位下对所述三维轮廓线进行被物体遮挡的检测，包括：

基于所述房间的图像，在所述拍摄点位下对所述三维轮廓线未被墙体遮挡的部分进行被物体遮挡的检测。

8.根据权利要求2至6任一项所述的图像处理方法，其特征在于，所述被遮挡部分的所述视觉信息中，被墙体遮挡部分的所述视觉信息和被物体遮挡部分的所述视觉信息不同。

9.一种图像处理装置，其特征在于，包括：

遮挡检测模块，用于基于房间的三维轮廓线以及所述房间的图像，在所述房间的图像的拍摄点位下对所述三维轮廓线进行遮挡检测；

轮廓渲染模块，用于基于所述遮挡检测的结果以及预设的渲染策略，将至少部分的所述三维轮廓线渲染到所述房间的图像，所述预设的渲染策略包括所述三维轮廓线中未被遮挡部分的视觉信息和被遮挡部分的所述视觉信息不同。

10.一种非暂态计算机可读存储介质，其上存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现如权利要求1至8任一项所述图像处理方法。

Images