CN113761614B - 一种平面家装设计辅助方法 - Google Patents

Abstract

本发明公开了一种平面家装设计辅助方法，包括以下步骤：(1)获取渲染图作为平面家装背景图，同时获取渲染图的相机参数和深度信息；(2)根据相机参数构建投影平面坐标系与世界坐标系的变换矩阵，依据该变换矩阵构建平面家装背景图对应的三维模型；(3)在所述平面家装背景图上选择家装素材的目标位置，根据家装素材种类对应的三维空间约束条件在目标位置放置家装素材，同时根据目标位置和深度信息将家装素材由物理尺寸变换为投影尺寸，以实现平面家装辅助设计。该平面家装辅助设计可以提升家装设计效率。

Description

一种平面家装设计辅助方法

技术领域

本发明涉及家装设计和计算机辅助设计的交叉领域，具体涉及一种平面家装设计辅助方法。

背景技术

家装设计一般包含硬装、定制和软装几个部分，而现在精装修交付是社会发展的大趋势，业主收房之后已经是经过开发商统一硬装的房屋，只需对其进行软装和部分硬装辅助搭配陈设即可完成家装设计，而这一部分是最能够体现房屋主人性格和喜好的部分。

软装是一个近年来新兴的概念，把家装领域更加细分化了，所谓软装是指硬装修完毕之后，利用那些易更换、易变动位置的饰物如墙纸、布艺、地毯、家具、饰品、灯饰、植物等对室内的二度陈设与布置。换句话说，就是指除了室内装潢中固定的、不能移动的装饰物如地板、顶棚、墙面以及门窗等之外，其它可以移动的、易于更换的饰物，是对居室的二度陈设与布置。

随着人们生活水平的提高，对软装设计的个性化需求愈加明显，人们通常通过专业的软装设计师、家居卖场的门店导购，或自己简单搭配来确定自己喜欢的风格和色系，以及特定的软装单品，然后才去进行软装的购置和摆场。但是现有的软装设计工具，如美间、Microsoft PowerPoint、Adobe photoshop等，往往不够智能便捷，用户需要自行确定软装素材的大小、位置、形变等，尤其是在透视关系的场景中，用户往往花费很多精力在素材的变形操作上。而3D设计工具，如3D max，对普通用户来说学习成本太高，难以普及。一些互联网3d设计工具如酷家乐、三维家、躺平设计家等，往往需要经历画户型、硬装、定制步骤，才能开始软装设计，前置步骤过于冗长繁琐，难以满足现在精装修交付个性化软装的趋势。

申请公布号为CN106295052A的发明专利申请公开了一种互助家装设计系统，申请公布号为CN107239997A的发明专利申请公开了一种自助家具家装设计系统，这两种家装设计系统均基于三维模型进行家装设计，效率低。

发明内容

本发明的目的是提供一种平面家装设计辅助方法，以提升家装设计效率。

为实现上述发明目的，本发明提供了一种平面家装设计辅助方法，包括以下步骤：

获取渲染图作为平面家装背景图，同时获取渲染图的相机参数和深度信息；所述平面家装背景图是包含地面投影平面、墙面投影平面以及顶面投影平面中至少一种投影平面的平面图；

根据相机参数构建投影平面坐标系与世界坐标系的变换矩阵，依据该变换矩阵构建平面家装背景图对应的三维模型；

在所述平面家装背景图上选择家装素材的目标位置，根据家装素材种类对应的三维空间约束条件在目标位置放置家装素材，同时根据目标位置和深度信息将家装素材由物理尺寸变换为投影尺寸，以实现平面家装辅助设计。

为实现上述发明目的，本发明提供了一种平面家装设计辅助方法，包括以下步骤：

获取房屋硬装实拍照片图作为平面家装背景图，所述平面家装背景图是包含地面投影平面、墙面投影平面以及顶面投影平面中至少一种投影平面的平面图；

检测所述平面家装背景图中平面相交线以此构所述建平面家装背景图对应的三维模型；

依据所述三维模型添加物理尺寸，并确定相机参数、深度信息、投影平面坐标系与世界坐标系的变换矩阵；

在所述平面家装背景图上选择家装素材的目标位置，根据家装素材种类对应的三维空间约束条件在目标位置放置家装素材，同时根据目标位置和深度信息将家装素材由物理尺寸变换为投影尺寸，以实现平面家装辅助设计。

与现有技术相比，具有的有益效果至少包括：

本发明实施例提供的平面家装设计辅助方法，通过构建平面家装背景图的三维模型，在平面家装背景图上放置家装素材时，根据家装素材类型以及三维空间约束条件进行辅助约束，实现自动调节家装素材大小、位置和角度的作用，进而极大地提高了家装设计效率。

附图说明

为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图做简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动前提下，还可以根据这些附图获得其他附图。

图1是本发明提供的平面家装设计辅助方法一实施例的流程图；

图2是本发明提供的平面家装背景图的示例图；

图3是本发明提供的构建投影平面内每个点的投影平面的齐次坐标的示例图；

图4(a)和图4(b)是本发明提供的立体类家装素材桌子被放置到地面投影平面上呈现出进大远小的透视真实感示例图；

图5是本发明提供的平面家装素材挂画被放置到墙面投影平面上呈现出进大远小的透视真实感示例图。

图6是本发明提供的摆放到墙面投影平面上的家装素材相对于相机的布局图；

图7是本发明提供的平面家装设计辅助方法另一实施例的流程图。

具体实施方式

为使本发明的目的、技术方案及优点更加清楚明白，以下结合附图及实施例对本发明进行进一步的详细说明。应当理解，此处所描述的具体实施方式仅仅用以解释本发明，并不限定本发明的保护范围。

为了解决现有平面家装设计效率低下或者前置步骤冗长的问题，以提升平面家装设计效率，本发明实施例提供了一种平面家装设计辅助方法。

图1为本发明提供的平面家装设计辅助方法一实施例的流程图。图1所示的平面家装设计辅助方法主要是针对以渲染图为平面家装背景图的平面家装设计辅助方法。如图1所示，该平面家装设计辅助方法包括以下步骤：

S101，获取渲染图作为平面家装背景图，同时获取渲染图的相机参数和深度信息。

平面家装背景图是平面家装设计的初始输入图片，即在该平面家装背景图上进行家装素材的设计。一般情况下，为了在进行平面家装设计时实现室内整体的呈现效果，平面家装背景图为一个在当前视角下的一个投影平面，即所述平面家装背景图是包含地面投影平面、墙面投影平面以及顶面投影平面中至少一种投影平面的平面图。图2示例性给出了一个平面家装背景图，该平面家装背景图包含地面投影平面F，墙面投影平面W1、W2、W3，顶面投影平面C。

其中，渲染图包括带有深度信息和相机参数的家装设计渲染图和空白场景渲染图；

针对带有深度信息和相机参数的渲染图，直接从渲染图中获得相机参数和深度信息；解析渲染图，将软装元素分离出来作为家装素材，剩下部分重新渲染作为平面家装背景图；

所述空白场景渲染图直接作为平面家装背景图，使用预设的相机参数和深度信息。

实施例中，被分离出来的软装元素以每个图层承载一个当前视角的方式作为平面渲染图。在设计过程中，该平面渲染图直接作为预设家装素材被使用。

家装素材是在设计时被选择用于装饰室内布局的软装或者部分硬装。该些家装素材可以分为三维家装素材或者二维家装素材，三维家装素材一般存储在素材库中，包含家装素材的三维模型和任意视角下的平面渲染图。在设计过程三维家装素材一般以默认角度的平面渲染图代替。二维家装素材除了存储在素材库中外，一般还由设计者自行上传。在设计过程中，二维家装素材作为平面家装素材直接被使用。

按照家装素材的形状，可以分为平面类家装素材和立体类家装素材，其中，平面类家装素材包括地毯、壁画、桌布、地毯等，立体类家装素材包括桌子、椅子、柜子、植物、沙发、空调、灯具等。根据放置方式，可以将立体类家装素材分为直接放置到地面上的摆放式立体类家装素材和悬挂式立体类家装素材，摆放式立体类家装素材包括桌子、沙发等，直接以默认角度放置于地面，悬挂式立体类家装素材包括挂灯、挂式空调、抽油烟机等，旋转为背靠墙面贴合的角度放置墙面或者顶面。

S102，根据相机参数构建投影平面坐标系与世界坐标系的变换矩阵，依据该变换矩阵构建平面家装背景图对应的三维模型。

实施例中，投影平面坐标系与世界坐标系的变换矩阵的构建方式为：

根据相机参数计算相机坐标系到世界坐标系的变换矩阵，

v＝TRv″

其中，v是世界坐标系坐标，v″是相机坐标系坐标，R是旋转变换矩阵且R是正交矩阵，T是平移变换矩阵，那么v″＝R^TT^-1v，这样就得到了世界坐标系和相机坐标系的相互变换关系；

计算投影坐标系与相机坐标系的变换关系，

u＝Pv″

其中，P是投影矩阵，u＝(x,y,z,w)是投影平面的齐次坐标，其中w＝1，z为投影平面深度，(x,y)为投影平面的二维坐标，那么v″＝P^-1u；

综合可以得到投影平面坐标与世界坐标系之间的转换关系：

u＝Mv

其中，M＝PR^TT^-1为投影平面坐标系与世界坐标系的变换矩阵，那么v＝M^-1u。这样只要给定一个点的投影平面的齐次坐标，既可以根据v＝M^-1u计算获得该点的世界坐标。

平面家装背景图是一个在已知相机参数和深度信息通过渲染获得的投影平面图，可以直接根据平面尺寸比例关系即可以获得的投影平面图内每个点的深度z，再结合投影平面图每个点的二维坐标(x,y)，即可以获得每个点在投影平面的齐次坐标u＝(x,y,z,w)，然后根据v＝M^-1u即可以计算获得每个点的世界坐标，最后根据每个点的世界坐标即可以获得平面家装背景图对应的三维模型。

图3为构建投影平面内每个点的投影平面的齐次坐标u＝(x,y,z,w)的示例图，假设选择左上角为原点，定义向下为y轴正方向，向右为x轴正方向，构建图上坐标系，点A为顶面投影平面上的一点，则点A的图上二维坐标为(x,y)，点A到墙面投影平面W2与顶面投影平面C交界线的距离为L，墙面投影平面W2与顶面投影平面C交界线到x轴的距离为L0，距离L0对应的深度为相机到墙面投影平面W2对应墙体的距离Z0，则点A对应的深度这样即可以获得点A在投影平面的齐次坐标/>需要注意的是，点A所在的平行于墙面投影平面W2的平面K与平行于墙面投影平面W2在三维空间大小相同，但是平面上的点的深度不同。

S103，在所述平面家装背景图上选择家装素材的目标位置，根据家装素材种类对应的三维空间约束条件在目标位置放置家装素材，同时根据目标位置和深度信息将家装素材由物理尺寸变换为投影尺寸，以实现平面家装辅助设计。

在设计过程中，首先选择需要放置的家装素材，和放置家装素材的目标位置，目标位置可以是平面家装背景图上的任意一点。针对选定的目标位置计算获得目标位置在投影平面的次坐标u＝(x,y,z,w)，然后可以根据投影平面坐标系与世界坐标系的变换矩阵计算目标位置的世界坐标。

物理世界中，实际家装素材由于重力约束和空间碰撞约束，不会悬浮于空中，也不会嵌入墙体或地面，因此为了提升设计速率和设计真实感，提供了三维空间约束条件，该三维空间约束条件与家装素材种类相对应，不同类的家装素材对应不同的三维空间约束条件，在放置家装素材时，根据家装素材种类对应的三维空间约束条件，家装素材自动放置到目标位置上。

在一个实施方式中，所述家装素材种类对应的三维空间约束条件在目标位置放置家装素材包括：

针对平面类家装素材，对应三维空间约束条件为吸附到投影平面上，因此在放置家装素材时，家装素材直接吸附到目标位置；

针对摆放式立体类家装素材和悬挂式立体类家装素材，对应三维空间约束条件为接触放置到投影平面上，因此在放置家装素材时，家装素材直接接触放置到目标位置。

当然，在一些可能的实施方式中，该三维空间约束条件也可以根据用户选择被取消，默认条件下，在放置家装素材时，带有该三维空间约束条件。

将家装素材放置到目标位置之后，还需要对家装素材投影尺寸进行调节。调节时，主要根据目标位置和深度信息以及家装素材的物理尺寸计算投影尺寸。

针对三维家装素材，家装素材的物理尺寸已知，直接可以获得。针对二维家装素材，会根据家装素材的类型设计默认物理尺寸，例如沙发默认高度800mm，落地灯默认高度1600mm。

在一个实施方式中，所述根据目标位置、深度信息将家装素材由物理尺寸变换为投影尺寸包括：

根据目标位置和深度信息计算家装素材的世界坐标；

将家装素材的世界坐标变换到投影平面的投影坐标；

以家装素材的目标位置为分界线，取沿深度方向以增大深度值那侧部分家装素材作为采样部分，将采样部分沿深度方向根据投影坐标依次进行不同等级的像素点采样，以缩小尺寸；

以家装素材的目标位置为分界线，取沿深度方向以减小深度值那侧部分家装素材作为插值部分，将插值部分沿深度方向根据投影坐标依次进行不同等级的像素点插值，以增大尺寸，至此完成家装素材由物理尺寸变换为投影尺寸。在进行家装素材尺寸变换时，选择一个参考平面，该参考平面可以是任意一个投影平面，例如墙面投影平面，也可以是与投影平面平行的平面，例如与墙面投影平面平行的平面。参考平面的选择以方便计算为主要考虑因素，其他不受限制。

实施例中，定义在墙面投影平面的目标放置位置为家装元素的中心点，例如将挂画放置于墙面投影平面的目标位置时，期望挂画的形心位于指定的目标位置。定义地面投影平面和顶面投影平面的目标位置为家装素材与投影平面接触的中心点。例如放置沙发，目标位置为沙发底面的中心点，放置吊灯，目标位置为吊顶顶端的中心点。

由于选定的目标位置是一点，而家装素材是一个平面图像，所以根据目标位置和家装素材在参考平面的大小获得像素范围，如目标位置为(x0，y0)，放置参考平面大小为(w,h)的挂画到墙面投影平面上，那么在参考平面挂画的位置范围为(x0-w/2,y0-h/2)～(x0+w/2,y0+h/2)。

按照S102中的方式在已知目标位置和深度信息的前提下，计算目标位置的世界坐标。当获得目标位置的世界坐标后，根据目标位置与家装素材的位置关系，以及家装素材的物理尺寸即可以得到家装素材的世界坐标。

然后，根据世界坐标系与投影坐标系的关系对家装素材的世界坐标进行变换，获得家装素材的投影坐标。这样就初步得到了家装素材的投影尺寸。

在得到家装素材的投影尺寸的基础上，为了使家装素材呈现透视关系，提升家装素材的真实感，需要对家装素材进行投影尺寸调整，可以将家装素材划分为采样部分和插值部分，具体划分时以深度方向的深度值的变化为依据，该深度值是以相机为原点的相机坐标系下计算的深度值。

具体地，以家装素材的目标位置为分界线，针对沿深度方向深度值增大的那侧家装素材，即距离相机较远的那半部分家装素材，为了实现呈现进大远小的透视关系，需要对这半部分家装素材做不同等级的采样处理，深度值越大，采样个数越小，以沿深度方向的垂直方向逐渐缩小尺寸。

同样以家装素材的目标位置为分界线，针对沿深度方向深度值减小的那侧家装素材，即距离相机较近的那半部分家装素材，为了实现呈现进大远小的透视关系，需要对这半部分家装素材做不同等级的插值处理，深度值越小，插值个数越多，以沿深度方向的垂直方向逐渐增大尺寸。这样就完成了家装素材由物理尺寸到投影尺寸的变换，且能够呈现进大远小的透视真实感。

在另外一个实施方式中，为了防止呈现透视关系的家装素材失真，直接根据参考坐标系与投影坐标系的透视变换矩阵对家装素材的高清大图进行透视变换，以调整家装素材的投影尺寸。图4(a)和图4(b)示例性给出了立体类家装素材桌子A被放置到地面投影平面上呈现出进大远小的透视真实感，图5示例性给出了平面家装素材挂画B被放置到墙面投影平面上呈现出进大远小的透视真实感，该挂画呈现的透视真实感与所放置的墙面投影平面呈现的透视真实感一致。

其中，所述将家装素材的世界坐标变换到投影平面的投影坐标包括：

方式一：根据世界坐标系与参考坐标系的转换矩阵，对家装素材的世界坐标进行转换，获得家装素材的参考坐标；然后根据参考坐标系与投影坐标系的透视变换矩阵，对家装素材的参考坐标进行转换，获得家装素材的投影坐标；或，

方式二：根据投影平面坐标系与世界坐标系的变换矩阵，对家装素材的世界坐标进行变化，获得家装素材的投影坐标。

方式一中，根据家装素材在世界空间的物理尺寸与在参考平面的图上像素尺寸之间的对应关系确定世界坐标系与参考坐标系的转换矩阵。根据参考平面与投影平面之间的透视关系确定参考坐标系和投影坐标系的透视变换矩阵。方式二中投影平面坐标系与世界坐标系的变换矩阵直接为S102中的变化矩阵M。

在另外一个实施方式中，当立体类家装素材需要背靠墙面投影平面摆放时，自动根据墙面投影平面对应的旋转角对靠近墙面投影平面的家装素材旋转背靠墙面投影平面放置。

在设计过程中，所选家装素材为立体家装素材时，在不靠近墙体的区域一般以默认角度进行放置，靠近墙体的区域自动旋转为背靠墙体的角度进行放置。在转换的过程中，直接根据墙面投影平面对应的旋转角对靠近墙面投影平面的家装素材旋转背靠墙面投影平面进行放置。

其中墙面投影平面对应的旋转角是需要计算的，具体计算过程为：假设家装元素位于相机的正前方，背靠参考墙面投影平面，这样看到家装素材的正前方视图，定义这样的姿态为正面视图。事实上，靠参考墙面投影平面平移家装素材，会稍微看到一点侧面的视图，但是在平面设计过程中忽略这种状态，把沿参考墙面投影平面的移动转换成一个沿弧线墙移动的近似，如下图6所示，在相机位置看几个靠弧形墙的方形家装素材都是正面姿态，几个靠弧形墙的方形家装素材在最终渲染时会给出正确的姿态。

当考虑与参考墙左相邻的左墙距离相机无限远的极限状态，看到的也是家装素材的正面视图，而当左墙正好处于相机正前方，看到了家装素材左面90°的视图，而当左墙处于一般位置时，根据左墙成像角度来确定家装素材的观测角度。左墙的成像角度θ的cos值等于单位长度的水平线在左墙面投影平面的像素长度和参考墙面投影平面的像素长度的比值，这样即可以确定墙面投影平面对应的旋转角θ。特别地，观测长度等于实际长度时，比值为1，θ为0，当观测长度为0时，θ为90°。

在另外一个实施方式中，当家装素材需要调整角度放置时，根据用户选择以单位旋转角度为间隔进行360度旋转；

旋转时，若家装素材为三维家装素材，则以旋转后目标角度的家装素材渲染图替换旋转前家装素材；

若家装素材为二维家装素材，则依据预训练的深度学习网络预测二维家装素材在目标角度下的预测图像，利用该预测图像替换旋转前家装素材。

在家装设计过程中，用户可以调整家装素材的放置角度，调整时，用户每选择一次，旋转一个单位旋转角度，单位旋转角度可以设置为任意角度，举例可以为10度。即在旋转时以10度为间隔旋转家装素材，直到用户满意。当家装素材放置角度发生变化时，呈现的状态也会发生变化，为了提升设计真实感，需要利用家装素材变换后呈现的状态视图替换原来呈现的状态视图。针对三维家装素材，由于素材库中包含三维家装素材的三维模型，这样，直接以目标角度(也就是旋转后角度)渲染三维模型得到目标角度的家装素材渲染图，利用该家装素材渲染图替换旋转前家装素材。

针对没有三维模型的二维家装素材，为了获得目标角度下的二维家装素材，以大量不同角度的二维家装素材作为训练样本，对深度学习网络进行训练，使得训练后的深度学习网络对二维家装素材在目标角度下的图像进行预测，获得预测图像，利用该预测图像替换旋转前家装素材。该深度学习网络是可以实现图像预测的学习网络，可以由卷积层、池化层、全连接层组成，举例可以为出自ICCV2019的VI-GAN(View Independent GenerativeAdversarial Network，与视角无关的对抗生成网络)，出自CVPR2017的TVSN(Transformation-grounded view synthesis network，变换合理的视角合成网络)，出自ECCV2016的view synthesis via appearance flow(通过外观流进行视角合成)，在此不做具体限定。

在移动的过程中，以移动前的视角跟随鼠标移动，当鼠标左键抬起确认目标位置时，以目标位置重新计算家装素材所呈现的视图。

在另外一个实施方式中，当目标位置的原始家装素材被替换为当前家装素材时，保留目标位置的世界坐标和原始家装素材的放置角度信息，计算当前家装素材的投影尺寸。

在家装设计过程中，当对某个目标位置放置的家装素材不满意时，还可以替换家装素材。为了提升替换速率，在替换家装素材时，目标位置的世界坐标和原始家装素材的角度信息保持不变，仅仅重新计算当前家装素材的投影尺寸即可以。

在另外一个实施方式中，当对投影平面上的家装素材进行缩放时，直接对家装素材的投影尺寸进行线性缩放，完成缩放后，将缩放后投影尺寸对应的物理尺寸映射到世界坐标系并保存。

在家装设计过程中，当用户对家装素材的投影尺寸不满意时，直接可以对家装素材进行缩放，为了提升缩放速率，直接采用简单有效的线性缩放调整投影尺寸，调整后，还需要保存缩放后投影尺寸对应的物理尺寸，以及物理尺寸对应的世界坐标。

图7为本发明提供的平面家装设计辅助方法另一实施例的流程图。图7所示的平面家装设计辅助方法主要是针对以房屋硬装实拍照片图为平面家装背景图的平面家装设计辅助方法。如图7所示，该平面家装设计辅助方法包括以下步骤：

S701，获取房屋硬装实拍照片图作为平面家装背景图。

所述平面家装背景图是包含地面投影平面、墙面投影平面以及顶面投影平面中至少一种投影平面的平面图。

S702，检测所述平面家装背景图中平面相交线以此构所述建平面家装背景图对应的三维模型。

由于房屋硬装实拍照片图是用户上传的，没有三维模型，在家装设计过程中，需要根据三维空间约束条件放置家装素材，因此在放置家装素材之前，需要构建房屋硬装实拍照片图的三维模型。具体地，可以采用直线检测的方式，检测房屋硬装实拍照片图中平面相交线，以获得房屋硬装实拍照片图的三维结构。

当然也可以采用布局估计算法，例如出自RoomNet:End-to-End Room LayoutEstimation的RoomNet，出自A Coarse-to-Fine Indoor Layout Estimation(CFILE)Method的CFILE，出自Physics Inspired Optimization on Semantic TransferFeatures:An Alternative Method for Room Layout Estimation的ST-PIO来估计房屋硬装实拍照片图的三维结构。

S703，依据所述三维模型添加物理尺寸，并确定相机参数、深度信息、投影平面坐标系与世界坐标系的变换矩阵。

在获得三维模型基础上，还需要三维模型进行物理尺寸估计，为三维模型添加物理尺寸是一个交互过程，用户对系统自动添加的物理尺寸进行修改确定，以确定正确的物理尺寸。此外，为了方便后续渲染三维模型，根据物理尺寸标注反推相机信息和深度信息。

针对房屋硬装实拍照片图，选择任意3个点不共线的至少6个点计算投影平面坐标系与世界坐标系的变换矩阵。具体可以选自选择任意3个点不共线的6个点计算投影平面坐标系与世界坐标系的变换矩阵，当选择的点超多6个时，对选择的点进行分组，利用每组点计算得到的变换矩阵取平均值后作为最终的投影平面坐标系与世界坐标系的变换矩阵。

S704，在所述平面家装背景图上选择家装素材的目标位置，根据家装素材种类对应的三维空间约束条件在目标位置放置家装素材，同时根据目标位置和深度信息将家装素材由物理尺寸变换为投影尺寸，以实现平面家装辅助设计。

S704的步骤与S103的步骤相同，此处不再赘述。

在一些实施方式中，在平面家装设计完成的基础上，为了得到真实感的设计结果图，还可以对设计结果进行渲染，获得渲染图。因此，所述平面家装设计辅助方法还包括：

当家装素材为三维家装素材时，直接调用每个家装素材的三维模型，在平面家装背景图对应的三维模型中，将该三维模型放置到家装素材的目标位置，获得场景三维模型，然后根据相机参数对场景三维模型进行渲染，获得场景渲染图。

在一些实施方式中，所述平面家装设计辅助方法还包括：

当家装素材为二维家装素材时，在模型库中搜索与家装素材匹配的匹配模型，在平面家装背景图对应的三维模型中，将匹配模型放置到家装素材的目标位置，获得场景三维模型，然后根据相机参数对场景三维模型进行渲染，获得场景渲染图；

当在模型库中搜索到的模型与家装素材不匹配时，采用以下两种方式处理：

方式一、以家装素材的轮廓生成一个平板三维模型，根据家装素材的类型添加材质属性并在平板表面以家装素材对齐方式进行材质贴图获得处理后的平板三维模型，然后在平面家装背景图对应的三维模型中，将处理后的平板三维模型放置到家装素材的目标位置，获得场景三维模型，然后根据相机参数对场景三维模型进行渲染获得场景渲染图；

方式二、直接抛弃二维家装素材，对包含有三维家装素材的三维模型的场景三维模型进行渲染，获得场景渲染图，根据场景渲染图的遮挡关系减去二维家装素材被遮挡部分，剩下部分二维家装素材贴在场景渲染图上。

在搜索过程中，首先，计算模型库里所有模型与家装素材的相似度，并按照相似度降序排列；然后，根据搜索的模型与家装素材的相似度来判断模型与家装素材是否匹配，当模型与家装素材的相似度大于相似度阈值时，则认为该模型为家装素材相匹配的匹配模型；当模型与家装素材的相似度小于相似度阈值时，则认为该模型与家装素材不匹配。

在一些实施方式中，对利用上述实施例提供的平面家装设计辅助方法设计的平面家装设计图不满意时，可以以该平面家装设计图作为平面家装背景图利用上述平面家装设计辅助方法进行再设计，对家装素材进行调整，直到对设计结果满意为止。

其中，该平面家装设计图可以是直接在平面家装背景图上放置家装素材获得的设计结果图，还可以是对设计结果图映射到三维空间渲染得到的渲染图，还可以是直接对一般三维设计方案渲染染得到的渲染图。

上述实施例提供的平面家装设计辅助方法，通过构建平面家装背景图的三维模型，在平面家装背景图上放置家装素材时，根据家装素材类型以及三维空间约束条件进行辅助约束，实现自动调节家装素材大小、位置和角度的作用，进而极大地提高了家装设计效率。

此外，上述实施例提供的平面家装设计辅助方法中，背景和家装素材都采用平面贴图，能够同时兼容二维家装素材和三维家装素材，普适性强，相比3D设计极大地减轻前端计算压力，用户体验和交互上也更加直观易用。在设计结束后，还能够无缝对接3D方案去渲染，生成更具真实感的媲美真实光影的照片级效果图。

以上所述的具体实施方式对本发明的技术方案和有益效果进行了详细说明，应理解的是以上所述仅为本发明的最优选实施例，并不用于限制本发明，凡在本发明的原则范围内所做的任何修改、补充和等同替换等，均应包含在本发明的保护范围之内。

Claims (15)

1.一种平面家装设计辅助方法，其特征在于，包括以下步骤：

获取渲染图作为平面家装背景图，同时获取渲染图的相机参数和深度信息；所述平面家装背景图是包含地面投影平面、墙面投影平面以及顶面投影平面中至少一种投影平面的平面图；

根据相机参数构建投影平面坐标系与世界坐标系的变换矩阵，依据该变换矩阵构建平面家装背景图对应的三维模型；

在所述平面家装背景图上选择家装素材的目标位置，根据家装素材种类对应的三维空间约束条件在目标位置放置家装素材，同时根据目标位置和深度信息将家装素材由物理尺寸变换为投影尺寸，以实现平面家装辅助设计。

2.如权利要求1所述的平面家装设计辅助方法，其特征在于，所述渲染图包括带有深度信息和相机参数的家装设计渲染图和空白场景渲染图；

针对带有深度信息和相机参数的渲染图，直接从渲染图中获得相机参数和深度信息；解析渲染图，将软装元素分离出来作为设计元素，剩下部分重新渲染作为平面家装背景图；

所述空白场景渲染图直接作为平面家装背景图，使用预设的相机参数和深度信息。

3.一种平面家装设计辅助方法，其特征在于，包括以下步骤：

获取房屋硬装实拍照片图作为平面家装背景图，所述平面家装背景图是包含地面投影平面、墙面投影平面以及顶面投影平面中至少一种投影平面的平面图；

检测所述平面家装背景图中平面相交线以此构建所述平面家装背景图对应的三维模型；

依据所述三维模型添加物理尺寸，并确定相机参数、深度信息、投影平面坐标系与世界坐标系的变换矩阵；

在所述平面家装背景图上选择家装素材的目标位置，根据家装素材种类对应的三维空间约束条件在目标位置放置家装素材，同时根据目标位置和深度信息将家装素材由物理尺寸变换为投影尺寸，以实现平面家装辅助设计。

4.如权利要求1或3所述的平面家装设计辅助方法，其特征在于，所述家装素材种类对应的三维空间约束条件在目标位置放置家装素材包括：

针对平面类家装素材，对应三维空间约束条件为吸附到投影平面上，因此在放置家装素材时，家装素材直接吸附到目标位置；

针对摆放式立体类家装素材和悬挂式立体类家装素材，对应三维空间约束条件为接触放置到投影平面上，因此在放置家装素材时，家装素材直接接触放置到目标位置。

5.如权利要求1或3所述的平面家装设计辅助方法，其特征在于，所述根据目标位置、深度信息将家装素材由物理尺寸变换为投影尺寸包括：

根据目标位置和深度信息计算家装素材的世界坐标；

将家装素材的世界坐标变换到投影平面的投影坐标；

以家装素材的目标位置为分界线，取沿深度方向以增大深度值那侧部分家装素材作为采样部分，将采样部分沿深度方向根据投影坐标依次进行不同等级的像素点采样，以缩小尺寸；

以家装素材的目标位置为分界线，取沿深度方向以减小深度值那侧部分家装素材作为插值部分，将插值部分沿深度方向根据投影坐标依次进行不同等级的像素点插值，以增大尺寸，至此完成家装素材由物理尺寸变换为投影尺寸。

6.如权利要求5所述的平面家装设计辅助方法，其特征在于，所述将家装素材的世界坐标变换到投影平面的投影坐标包括：

方式一：根据世界坐标系与参考坐标系的转换矩阵，对家装素材的世界坐标进行转换，获得家装素材的参考坐标；然后根据参考坐标系与投影坐标系的透视变换矩阵，对家装素材的参考坐标进行转换，获得家装素材的投影坐标；或，

方式二：根据投影平面坐标系与世界坐标系的变换矩阵，对家装素材的世界坐标进行变化，获得家装素材的投影坐标。

7.如权利要求1或3所述的平面家装设计辅助方法，其特征在于，当家装素材需要背靠墙面投影平面摆放时，自动根据墙面投影平面对应的旋转角对靠近墙面投影平面的家装素材旋转背靠墙面投影平面放置。

8.如权利要求1或3所述的平面家装设计辅助方法，其特征在于，当家装素材需要调整角度放置时，根据用户选择以单位旋转角度为间隔进行360度旋转；

旋转时，若家装素材为三维家装素材，则以旋转后目标角度的家装素材渲染图替换旋转前家装素材；

若家装素材为二维家装素材，则依据预训练的深度学习网络预测二维家装素材在目标角度下的预测图像，利用该预测图像替换旋转前家装素材。

9.如权利要求1或3所述的平面家装设计辅助方法，其特征在于，当目标位置的原始家装素材被替换为当前家装素材时，保留目标位置的世界坐标和原始家装素材的放置角度信息，计算当前家装素材的投影尺寸。

10.如权利要求1或3所述的平面家装设计辅助方法，其特征在于，当对投影平面上的家装素材进行缩放时，直接对家装素材的投影尺寸进行线性缩放，完成缩放后，将缩放后投影尺寸对应的物理尺寸映射到世界坐标系并保存。

11.如权利要求1或3所述的平面家装设计辅助方法，其特征在于，所述平面家装设计辅助方法还包括：

当家装素材为三维家装素材时，直接调用每个家装素材的三维模型，在平面家装背景图对应的三维模型中，将该三维模型放置到家装素材的目标位置，获得场景三维模型，然后根据相机参数对场景三维模型进行渲染，获得场景渲染图。

12.如权利要求1或3所述的平面家装设计辅助方法，其特征在于，所述平面家装设计辅助方法还包括：

当家装素材为二维家装素材时，在模型库中搜索与家装素材匹配的匹配模型，在平面家装背景图对应的三维模型中，将匹配模型放置到家装素材的目标位置，获得场景三维模型，然后根据相机参数对场景三维模型进行渲染，获得场景渲染图；

当在模型库中搜索到的模型与家装素材不匹配时，采用以下两种方式处理：

方式一、以家装素材的轮廓生成一个平板三维模型，根据家装素材的类型添加材质属性并在平板表面以家装素材对齐方式进行材质贴图获得处理后的平板三维模型，然后在平面家装背景图对应的三维模型中，将处理后的平板三维模型放置到家装素材的目标位置，获得场景三维模型，然后根据相机参数对场景三维模型进行渲染获得场景渲染图；

方式二、直接抛弃二维家装素材，对包含有三维家装素材的三维模型的场景三维模型进行渲染，获得场景渲染图，根据场景渲染图的遮挡关系减去二维家装素材被遮挡部分，剩下部分二维家装素材贴在场景渲染图上。

13.如权利要求1或3所述的平面家装设计辅助方法，其特征在于，所述平面家装设计辅助方法还包括：

对利用所述的平面家装设计辅助方法设计的平面家装设计图不满意时，以该平面家装设计图作为平面家装背景图，然后利用所述的平面家装设计辅助方法进行再设计，对家装素材进行调整，直到对设计结果满意为止。

14.如权利要求11所述的平面家装设计辅助方法，其特征在于，所述平面家装设计辅助方法还包括：

对利用所述的平面家装设计辅助方法设计的平面家装设计图不满意时，以该平面家装设计图作为平面家装背景图，然后利用所述的平面家装设计辅助方法进行再设计，对家装素材进行调整，直到对设计结果满意为止。

15.如权利要求12所述的平面家装设计辅助方法，其特征在于，所述平面家装设计辅助方法还包括：

对利用所述的平面家装设计辅助方法设计的平面家装设计图不满意时，以该平面家装设计图作为平面家装背景图，然后利用所述的平面家装设计辅助方法进行再设计，对家装素材进行调整，直到对设计结果满意为止。