CN115907912A - 提供商品虚拟试用信息的方法、装置及电子设备 - Google Patents

Abstract

本申请实施例公开了提供商品虚拟试用信息的方法、装置及电子设备，所述方法包括：响应于用户在目标空间场所中通过终端设备发起的商品试用请求后，启动所述终端设备中的图像采集装置，以用于对所述目标空间场所进行图像扫描；根据扫描到的图像获取所述目标空间场所对应的3D空间模型；在目标界面中对所述3D空间模型进行渲染展示，并提供待试用商品的信息；通过将选中的目标待试用商品对应的3D商品模型匹配到所述3D空间模型中，展示出该目标待试用商品在所述目标空间场所中的试用效果。通过本申请实施例，能够在通过3D空间模型进行商品虚拟试用的过程中，降低实现成本，提升效率。

Description

提供商品虚拟试用信息的方法、装置及电子设备

技术领域

本申请涉及信息处理技术领域，特别是涉及提供商品虚拟试用信息的方法、装置及电子设备。

背景技术

随着元宇宙(是人类运用数字技术构建的，由现实世界映射或超越现实世界，可与现实世界交互的虚拟世界)概念的兴起，人、货、场数字化还原进入元宇宙的需求与服务与日俱增。其中，场的数字化还原是高频需求中的一种，因为很多元宇宙需求场景都会需要高精度建场及场内互动，例如，游戏、家装、户外等行业领域，都会具有场的数字化还原需求。场的数字化还原，主要就是针对一定空间场所中包含的单墙、多墙、全空间、物品等进行数字化还原，生成3D空间模型，以便基于该3D空间模型进行具体的互动。

现有技术中，通常是需要由专业的设计师或者网站来进行3D空间模型的生成，并且依赖空间场所的户型图等基础信息。以家装行业为例，如果用户需要在装修前查看全新的室内设计，就需要向开发商等索要户型图，然后将户型图等提供给设计师，由设计师进行建模渲染，然后给用户查看效果。或者，用户也可以通过上传户型图(还可能要求CAD(Computer Aided Design，计算机辅助设计)等格式的可编辑文件)到某网站，由该网站的服务端进行建模渲染。但是，无论采用上述何种方式，具体的实现成本都比较高，相应的，效率也很低。

发明内容

本申请提供了提供商品虚拟试用信息的方法、装置及电子设备，能够在通过3D空间模型进行商品虚拟试用的过程中，降低实现成本，提升效率。

本申请提供了如下方案：

一种提供商品虚拟试用信息的方法，包括：

响应于用户在目标空间场所中通过终端设备发起的商品试用请求后，启动所述终端设备中的图像采集装置，以用于对所述目标空间场所进行图像扫描；

根据扫描到的图像获取所述目标空间场所对应的3D空间模型；

在目标界面中对所述3D空间模型进行渲染展示，并提供待试用商品的信息；

通过将选中的目标待试用商品对应的3D商品模型匹配到所述3D空间模型中，展示出该目标待试用商品在所述目标空间场所中的试用效果。

其中，所述根据扫描到的图像获取所述目标空间场所对应的3D空间模型，包括：

从扫描到的图像中进行墙线、墙角以及光线明暗变化情况的识别，以便根据识别到的墙线、墙角以及光线明暗变化情况进行墙体分割，并根据墙体分割结果生成基础3D空间模型；

从所述扫描到的图像中获取所述墙体的纹理贴图；

将所述纹理贴图贴附于所述基础3D空间模型上，生成所述目标空间场所的3D空间模型。

其中，还包括：

提供关于对同一墙体进行进一步扫描，以完成对同一墙体中多个墙线及墙角的扫描的提示信息。

其中，还包括：

如果从所述扫描到的图像中判断出所述建筑面存在被所述目标空间场所中的陈列物品遮挡的部分，则根据该建筑面未被遮挡的部分，对对应的墙体模型以及纹理贴图进行模拟并补全。

其中，所述提供待试用商品的信息，包括：

接收到在所述3D空间模型中目标位置处增加目标类目商品的请求后，提供该目标类目对应的待试用商品的信息；

所述将选中的目标待试用商品对应的3D商品模型匹配到所述3D空间模型中，包括：

将用户选中的目标待试用商品对应的3D商品模型匹配到所述3D空间模型中目标位置处进行展示，以展示出该目标待试用商品增加到所述目标空间场所中所述目标位置处之后的试用效果。

其中，还包括：

如果从所述扫描到的图像中识别出所述目标空间场所中的陈列物品，则从预先建立的3D物品模型库中，选择出与所述陈列物品相同或相似的3D物品模型，并展示到所述3D空间模型中。

其中，所述提供待试用商品的信息，包括：

在所识别出的陈列物品对应的3D物品模型所在的位置处，提供用于对对应的陈列物品进行替换的操作选项；

接收到对其中一陈列物品进行替换的请求后，提供与该陈列物品相关的待试用商品的信息；

所述方法还包括：

在其中一待试用商品被选中后，将该待试用商品对应的3D商品模型替换到该陈列物品对应的3D物品模型所在的位置处进行展示。

其中，还包括：

将用户选中的目标陈列物品对应的3D物品模型从所述3D空间模型中删除，以展示出去掉该目标陈列物品后，所述目标空间场所的物品陈列效果。

其中，待试用商品包括装饰画类目的商品；

所述提供待试用商品的信息，包括：

提供候选的装饰画参数信息，所述参数包括以下一种或多种：风格、画框类型、画作、幅数、尺寸；

根据选中的装饰画参数生成装饰画的3D模型，以用于匹配到所述3D空间模型中展示。

其中，所述根据选中的装饰画参数生成装饰画的3D模型，包括：

根据所选中的画框类型确定对应的画框模型，并根据所选中的画作确定对应的画面模型以及画面贴图；

根据所选中的尺寸信息对所述画框模型、画面模型以及画面贴图的尺寸进行调整；

通过将调整后的画框模型、画面模型以及画面贴图进行组合，生成所述装饰画模型。

一种提供商品虚拟试用信息的装置，包括：

图像扫描单元，用于响应于用户在目标空间场所中通过终端设备发起的商品试用请求后，启动所述终端设备中的图像采集装置，以用于对所述目标空间场所进行图像扫描；

3D空间模型建立单元，用于根据扫描到的图像获取所述目标空间场所对应的3D空间模型；

3D空间模型展示单元，用于在目标界面中对所述3D空间模型进行渲染展示，并提供待试用商品的信息；

商品试用效果展示单元，用于通过将选中的目标待试用商品对应的3D商品模型匹配到所述3D空间模型中，展示出该目标待试用商品在所述目标空间场所中的试用效果。

一种计算机可读存储介质，其上存储有计算机程序，该程序被处理器执行时实现前述任一项所述的方法的步骤。

一种电子设备，包括：

一个或多个处理器；以及

与所述一个或多个处理器关联的存储器，所述存储器用于存储程序指令,所述程序指令在被所述一个或多个处理器读取执行时，执行前述任一项所述的方法的步骤。

根据本申请提供的具体实施例，本申请公开了以下技术效果：

通过本申请实施例，在C端用户需要基于具体的空间场所对家具、家居等类目的商品进行虚拟试用时，可以通过终端设备的图像采集装置对空间场所进行图像扫描，具体的算法便可以根据扫描到的图像建立所述目标空间场所对应的3D空间模型。之后，可以在目标界面中对所述3D空间模型进行渲染展示，并提供待试用商品的信息。在用户选择了某个具体的商品后，可以通过将选中的目标商品对应的3D商品模型匹配到所述3D空间模型中，展示出该目标商品在目标空间场所中的试用效果。通过这种方式，由于只需要用户通过其终端设备对空间场所进行图像扫描，便可以完成3D空间模型的建立，并且可以完成对3D空间模型的渲染展示，使得用户可以看到自己数字化的场内还原，提升用户体验。并且，相对于通过户型图建立3D空间模型的方式而言，可以降低操作成本，提升实现效率。

另外，在可选的实现方式下，还可以在对空间场所进行图像扫描的过程中，对空间场所中的陈列物品也进行图像扫描，并且可以通过算法识别出具体陈列物品的类目、纹理图案、尺寸等信息，这样，可以从预先保存的3D物品模型库中，选择出与具体陈列物品相同或者相似的3D物品模型，并且可以在用户需要的情况下，展示到3D空间模型中。并且，可以实现对这些3D物品模型的增加、删除、替换等互动操作。

当然，实施本申请的任一产品并不一定需要同时达到以上所述的所有优点。

附图说明

为了更清楚地说明本申请实施例或现有技术中的技术方案，下面将对实施例中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1是本申请实施例提供的系统架构的示意图；

图2是本申请实施例提供的方法的流程图；

图3是本申请实施例提供的对空间进行图像扫描过程中提供的提示信息示意图；

图4是本申请实施例提供的3D空间模型的示意图；

图5是本申请实施例提供的装饰画模型的示意图；

图6是本申请实施例提供的装饰画模型在3D空间模型中的试用效果的示意图；

图7是本申请实施例提供的装置的示意图；

图8是本申请实施例提供的电子设备的示意图。

具体实施方式

下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员所获得的所有其他实施例，都属于本申请保护的范围。

在本申请实施例中，为了在基于3D空间模型实现商品虚拟试用的同时，降低用户的成本，提升效率，提供了可由C(消费者用户)端消费者自助式地完成对目标空间场所地图像扫描，并基于图像扫描结果进行重建3D空间模型的实现方案，之后，还可以对3D空间模型进行渲染后，让用户可以看到自己数字化真实的场内还原结果。其中，由于在对空间场所进行扫描的过程中，还可以扫描到场所中已经放置的一些家具等陈列物品，这样，在创建3D空间模型的过程中，还可以对陈列物品的类目、外观、形状等进行识别，并提供对应的3D物品模型，这些3D物品模型也可以展示到3D空间模型中。这样，在通过3D空间模型对商品进行虚拟试用的过程中，还可以查看该商品与空间场所中已有的陈列物品的搭配效果，并且，还可以对空间场所中已有物品进行删除、替换等等。

这里需要说明的是，在通过设计师或者现有的设计网站生成3D空间模型的方案中，由于设计师或者网站方只能获取到空间场所的户型图信息，因此，只能生成3D空间模型，而无法体现出空间场所中已有的陈列物品的情况。这种方式通常在新房装修等场景中更为适用，而如果用户是想在已有家具或者家居物品基础上，增加一些装饰画等商品，并查看装饰画与已有陈列物品的搭配效果，或者，想要替换某商品，并查看替换后的效果，则这种现有技术是无法实现的。另外，现有技术中还存在另一种对家具等商品进行虚拟试用的方案，也即，通过AR(Augmented Reality，增强现实)方式实现的方案。在该方案中，用户可以用手机等终端设备对空间场所进行视频帧采集，然后，可以将商品的3D模型投射到视频帧中指定的位置，以展示出具体商品放置到该空间场所中的试用效果。这种方式虽然方便C端用户自助式实现对商品的虚拟试用，并且可以查看新增的商品与场所中已有物品的搭配效果，但是，如果用户需要对空间中已有的一些陈列物品进行替换，或者，移除一些陈列物品等，并查看替换或者移除后的效果，则是无法通过AR方式来实现的。

而在本申请实施例中，是首先对用户指定的空间场所进行数字化还原，也即创建起对应的3D空间模型，并且C端用户只需要手机等终端设备对空间场所进行图像扫描，即可由算法创建起具体的3D空间模型。然后，可以基于该3D空间模型进行商品的虚拟试用，虽然不是直接基于视频帧中的真实空间图像进行试用，但是，由于3D空间模型对真实空间场所的还原度可以比较高，因此，也可以获得接近AR试用的效果。另外，由于还可以在创建3D空间模型的同时，对空间场所中的陈列物品进行识别，并可以在用户需要的情况下，将3D物品模型展示到3D空间模型中，因此，还可以可操作/互动实现场内物品的增删换功能。

从系统架构角度而言，本申请实施例可以为C端用户提供家具等类目商品的虚拟试用应用/服务，该应用/服务可以以独立的应用程序的形式存在，或者，也可以是以某应用程序中的小程序、轻应用、功能模块等形式存在。参见图1，该应用/服务可以包括客户端以及服务端，其中，客户端主要用于与用户进行交互，具体可以以应用程序、小程序、网页等形式存在。用户在启动该应用/服务的客户端后，该客户端可以自动启动终端设备中的图像采集装置，并提示用户对具体的空间场所进行图像扫描。在扫描过程中，可以提示用户对具体建筑面(墙、门、窗等)的四条边、四个角均进行扫描。之后，可以由服务端保存的算法基于这些图像扫描结果，实现对空间场所的高精度还原，建立起3D空间模型，客户端则可以对具体的3D空间模型进行渲染展示。另外还可以提供可选商品的信息，在用户对某个具体的商品进行选中后，可以将该商品对应的3D商品模型展示到该3D空间模型中指定的位置。其中，在可选的实现方式下，还可以预先建立3D物品模型库，其中包括与家具家居等相关的多个常见物品的3D物品模型，在创建3D空间模型的过程中，还可以对空间场所中的陈列物品的类目、形状、尺寸等进行识别，然后可以从3D物品模型库中选择相同或者相似的3D物品模型，并且可以在用户需要的情况下，展示到3D空间模型中对应的位置。进而可以在此基础上，进行3D商品模型的增加、替换、删除等互动操作。

下面对本申请实施例提供的具体实现方案进行详细介绍。

首先，本申请实施例从前述客户端的角度，提供了一种提供商品虚拟试用信息的方法，参见图2，包括：

S201：响应于用户在目标空间场所中通过终端设备发起的商品试用请求后，启动所述终端设备中的图像采集设备，以用于对所述目标空间场所进行图像扫描。

如前文所述，在本申请实施例中，可以为用户提供与家具、家居等商品的虚拟试用相关的应用/服务，用户可以通过具体的应用程序、小程序、网页等形式的客户端发起试用请求，相应的，客户端可以启动终端设备中的图像采集装置(例如，摄像头)，并提示用户可以对空间场所进行图像扫描。其中，由于空间场所的面积通常会比较大，无法通过同一个镜头拍摄完整，因此，具体的图像扫描通常是一个过程。由于空间场所通常是由多个建筑面组成，包括墙面、门窗、地板、天花板等，每个建筑面通常都会存在四条墙线、四个墙角，因此，为了提升场所还原的精确度，在扫描的过程中，还可以对当前画面中尚未采集到的部分进行提示。例如，如图3(A)中有遮罩的部分可以为尚未采集到的部分，移动改变终端设备中图像采集装置的拍摄角度、位置之后，可以采集到更多的图像，同时也可能会产生新的尚未采集到的部分，并且可以继续进行提示，例如，如图3(B)所示，以此类推，直到采集到完整的建筑面图像。通过这种提示，可以引导用户通过改变终端设备中图像采集装置的拍摄角度、位置等，将具体所需还原的建筑面的四条墙线、四个墙角全部扫描到，以提升场所还原的精确度。

S202：根据扫描到的图像获取所述目标空间场所对应的3D空间模型。

完成对空间场所中的图像扫描后，可以根据扫描到的图像获取所述目标空间场所对应的3D空间模型。具体的，可以通过预先设置的算法来首先该创建3D空间模型的过程，在用户的终端设备性能等支持的情况下，该算法可以部署在客户端，直接在客户端根据扫描的图像进行3D空间模型的创建。或者，在另一种方式下，算法也可以部署在服务端，客户端可以将图像扫描结果提交到服务端，由服务端来完成3D空间模型的创建，并将结果返回给客户端即可。

具体的在创建3D空间模型时，可以分为基础3D空间模型的创建，以及纹理贴图的生成两个部分，然后再将纹理贴图贴附到基础3D空间模型上，生成完整的3D空间模型。其中，基础3D空间模型，具体可以是一种结构化模型，用于对空间场所中各个建筑面的位置(包括四个墙角的3D坐标等)、形状、相互位置关系等进行表达，但是从外观上看，是一个灰色或者白色的状态，因此，也可以称为“白模”。但是，实际上用户的空间场所中，具体的建筑面可能会粉刷有具体颜色的墙漆，或者粘贴了壁纸等，因此，为了使得具体的3D空间模型更逼真地进行数字化还原，也即，看上去更像是用户的空间场所实际的样子，还需要对基础模型进行纹理贴图。贴图过程为一个建模模型赋予灵魂的过程。通俗地讲，贴图可以理解为“画皮”，一个基础模型创建起来之后，空间的轮廓等可以确定下来，之后由纹理贴图给其提供一张表皮，该模型在附着上这张表皮后，模型呈现出的颜色、纹理等会更接近于一个真实的空间场所，而不再是灰色或白色。

其中，在本申请实施例中，由于是通过用户终端设备上的图像采集装置进行图像扫描，而用户终端设备上的图像采集装置可能是单目相机，无法采集到空间中的深度信息，为此，在本申请实施例中，具体在创建基础模型时，可以从扫描到的图像中进行墙线、墙角以及光线明暗变化情况的识别，然后，可以根据识别到的墙线、墙角以及光线明暗变化情况进行墙体分割(也即，确定出不同墙体之间的分界线位置，这里所说的墙体可以包括门窗、地板、天花板等)，并根据墙体分割结果生成基础3D空间模型。

为了能够根据识别到的墙线、墙角以及光线明暗变化情况进行墙体分割，具体实现时，在一种方式下，还可以预先收集一些常见户型数据集，从中学习到墙线、墙角以及光线明暗变化情况与墙体之间的关系。这样，具体在根据图像扫描结果进行基础3D空间模型的创建时，可以根据识别到的墙线、墙角以及光线明暗变化情况，确定出与当前空间场所相似的户型，然后，可以根据该相似户型中的墙体位置等信息，辅助完成墙体分割。

需要说明的是，由于空间场所中可能包括一些陈列物品，因此，一些墙体等建筑面可能会被这种陈列物品遮挡住一部分。此时，可以还可以根据该建筑面未被遮挡的部分，对对应的墙体模型以及纹理贴图进行模拟并补全。也就是说，在本申请实施例中，可以生成完整的墙体模型，可以还原出尚未放置陈列物品时的空间状态，以便于更好地支持空间内物品的删除或者替换等互动。

另外，还可以从扫描到的图像中获取墙体的纹理贴图，例如，一种方式下，可以从扫描到的多帧图像中选取其中一帧(或多帧)关于某墙体的清晰的、正视角度的图像，然后可以从中提取出墙体的纹理图像，并根据墙体的尺寸进行匹配拉伸等处理，生成完整的纹理贴图。之后，便可以将所述纹理贴图贴附于所述基础3D空间模型上，生成所述目标空间场所的3D空间模型。具体的，这种纹理贴图可以是一种带有墙体纹理图案等细节信息的面状mesh(网格体)，此时，具体将纹理贴图贴附于基础3D模型上的过程，就可以是将墙体的基础3D模型与面状mesh进行匹配后，将面状mesh贴附于基础3D模型上的过程。

S203：在目标界面中对所述3D空间模型进行渲染展示，并提供待试用商品的信息。

客户端在获取到具体的3D空间模型后，可以将其进行渲染并展示。其中，具体的，在通过面状mesh来表达纹理贴图，且是在服务端生成3D空间模型的情况下，则可以在服务端完成墙体的基础3D模型与面状mesh的匹配，并记录匹配结果。在向客户端返回建模结果时，就可以包括上述基础3D模型，面状mesh，以及两者之间的匹配关系。这样，客户端可以根据具体的匹配关系信息，自动将面状mesh匹配到基础3D空间模型上，并渲染展示出3D空间模型。

在渲染展示出3D空间模型之后，还可以提供待试用商品的信息。其中，具体实现时，由于具体于家居家具相关的商品类目有多种，因此，可以按类目进行展示。其中，具体展示哪个类目的商品，可以通过多种方式进行确定。例如，在一种方式下，具体的商品试用应用或者服务本身可以是与某个特定的类目绑定的，例如，可以是专用于对装饰画类的商品进行虚拟试用的应用或服务，等等，此时，可以默认展示出可选的装饰画类商品的信息。或者，另一种方式下，具体的应用或服务可以支持对多种不同类目商品的虚拟试用，此时，可以首先为用户提供用于选择类目的选项，然后，展示出用户选中的类目对应的待试用商品的信息。或者，由于本申请实施例中还可以对空间场所中的陈列物品进行识别，并且还可以在3D空间模型中展示出这种物品对应的3D物品模型，而这种3D物品模型也可以关联有类目信息，因此，也可以在用户选中某个3D物品模型后，将该模型对应的类目确定为用户需要试用的类目，并提供该类目对应的待试用商品的信息，此时，在用户选中某个待试用商品后，可以将该商品的3D商品模型，替换到前述3D物品模型所在的位置进行展示，以展示出替换后与其他物品的搭配使用效果，等等。

其中，如前文所述，具体在创建3D空间模型的过程中，还可以如果从扫描到的图像中识别出目标空间场所中的陈列物品，则还可以从预先建立的3D物品模型库中，选择出与所述陈列物品相同或相似的3D物品模型，并展示到所述3D空间模型中。具体实现时，可以由用户选择是否展示出具体陈列物品的3D物品模型，如果需要展示，则可以执行上述识别出陈列物品的类目等信息，并从3D物品模型库中，选择出与具体陈列物品相同或相似的3D物品模型并进行展示的过程。

具体实现时，关于陈列物品的识别，可以是在对空间场所进行图像扫描的过程中，如果发现扫描到的物体是陈列物品，则可以提示用户对该物品进行进一步扫描，以建立起物品的结构化模型，还可以重建物品的体状mesh，然后，可以将体状mesh匹配到前述结构化模型上。这里需要说明的是，在本申请实施例中，由于主要是对空间场所进行3D空间模型，因此，关于具体陈列物品的3D物品模型，由于物品的结构通常比较复杂，比较难直接从扫描图像中完成重建。因此，具体实现时，可以预先基于多种常见的陈列物品，建立3D物品模型库，然后，从这种预先建立的模型库中，为识别出的陈列物品选择相同或者相似的模型作为其3D物品模型。在这种情况下，上述基于扫描图像建立物品结构化模型以及体状mesh并将两者进行匹配的目的，主要用于在此基础上识别出陈列物品的类目、形状、纹理图案、大致的尺寸等信息。当然，这种体状mesh也可以贴附到物品的结构化模型上，并展示在3D空间模型中，只是这种展示出的模型对物品的还原度可能不够高，只是大致形状等方面会比较接近。之后，如果用户需要展示出更精确的3D物品模型，则还可以根据识别出的上述信息，判断3D物品模型库中是否存在与之相同的模型，如果存在，则可以直接取出，作为该陈列物品对应的3D物品模型。如果不存在，则可以从模型库中取出与当前陈列物品最接近的一个，作为该陈列物品对应的3D物品模型，等等。在确定出陈列物品对应的3D物品模型后，可以替换展示到3D空间模型中对应的位置处，以此进一步提升3D空间模型及其中展示的3D物品模型，对实际空间场所及其中的陈列物品的还原度。

S204：通过将选中的目标待试用商品对应的3D商品模型匹配到所述3D空间模型中，展示出该目标待试用商品在所述目标空间场所中的试用效果。

在展示出3D空间模型以及待试用商品的信息后，用户可以对具体需要试用的商品进行选择，之后，可以将被用户选中的目标待试用商品的3D商品模型展示到该3D空间模型中的目标位置处。具体的，商品的3D商品模型可以是预先建立的，具体的，可以由商家提供具体的3D商品模型，或者，也可以由商品信息服务系统提供创建3D商品模型的服务，帮助商家完成3D商品模型的创建，等等。例如，在一个具体的例子中，针对某用户通过手机摄像头进行扫描的空间场所创建出的3D空间模型可以如图4所示。

关于3D商品模型在3D空间模型中的展示位置，可以通过多种方式进行确定，例如，对于添加到3D空间模型中展示的3D商品模型，可以由用户指定具体的展示位置。具体的，用户可以首先在3D空间模型中选择某目标位置，并发起在该目标位置处增加目标类目商品的请求(例如，需要在某墙体上的某位置添加装饰画，或者沙发、茶几类的家具，等等)，此时，关于具体待试用商品的信息也可以是在接收到该请求后提供的。这样，可以将用户选中的目标商品对应的3D商品模型匹配到所述3D空间模型中目标位置处进行展示，以展示出该目标商品增加到所述目标空间场所中所述目标位置处之后的试用效果。

或者，在另一种方式下，还可以在所识别出的陈列物品对应的3D物品模型所在的位置处，提供用于对对应的陈列物品进行替换的操作选项，这样，在接收到对其中一陈列物品进行替换的请求后，可以提供与该陈列物品属于同一类目的待试用商品的信息。此时，在其中一待试用商品被选中后，还可以将该待试用商品对应的3D商品模型替换到该陈列物品对应的3D物品模型所在的位置处进行展示。

再者，用户还可以选择将3D空间模型中某个3D物品模型删除，因此，还可以提供用于将选中的3D物品模型进行删除的操作选项，从而可以将用户选中的目标陈列物品对应的3D物品模型从所述3D空间模型中删除，以展示出去掉该目标陈列物品后，所述目标空间场所的物品陈列效果。

总之，通过本申请实施例，不仅可以使得C端用户可以通过对空间场所进行图像扫描的方式，完成对3D空间模型的创建，还可以实现对3D空间模型中具体物品的增加、删除、替换等互动操作，从而满足用户多种试用需求。

这里需要说明的是，关于具体的待试用商品，在一种具体的应用场景中，可以包括装饰画类目的商品。由于具体的装饰画类商品的数量众多，同一种画框与不同尺寸、不同画作组合，都可以对应不同的商品，如果分别保存各个商品的3D商品模型，则可能会占用大量的存储空间。另一方面，考虑到装饰画的结构本身通常比较简单，通常是长方体结构，不同装饰画之间在结构上的区别，主要体现在画框的结构方面。因此，如果分别保存每个具体商品对应的3D模型，会存在大量的信息冗余，在存储空间等方面会造成大量的浪费。

为此，在一种可选的实现方式下，可以将装饰画模型拆分为画框、画作、尺寸等多个参数来进行表达，然后，预先保存多种不同类型的画框对应的画框模型，这种画框模型的尺寸可以是可调整的。例如，如图5所示，画框模型可以分为A段部分及B段部分，其中，A段部分的尺寸是可调整的。另外，还可以预先保存画面模型，这种画面模型通常是一个平面即可，其尺寸也是可调整的。再者，关于具体的画作，可以以画面贴图的形式预先进行保存，同样，其尺寸也是可调整的。这样，在向用户提供这种装饰画类商品的信息时，也可以通过参数化的方式来提供。具体的，假设用户需要在3D空间模型中的某位置处添加装饰画，则具体可以在界面中提供候选的装饰画参数信息，所述参数包括以下一种或多种：风格、画框类型、画作、幅数、尺寸。之后，在用户选择了具体的画框类型、画作、尺寸等参数后，可以首先根据所选中的画框类型确定对应的画框模型，并根据所选中的画作确定对应的画面模型以及画面贴图；然后，可以根据所选中的尺寸信息对所述画框模型、画面模型以及画面贴图的尺寸进行调整，再通过将调整后的画框模型、画面模型以及画面贴图进行组合，即可生成所述装饰画模型。例如，假设选择了某画框、画作、尺寸等参数后，生成的3D商品模型展示到3D空间模型中对应的位置处之后，可以如图6中的61处所示。

另外需要说明的是，在本申请实施例中，具体在基于3D空间模型对商品进行虚拟试用的过程中，还可以提供用于对3D空间模型中的光照条件进行修改的操作选项。在用户需要在不同光照条件下的试用效果进行体验时，可以通过该操作选项发出请求，相应的，可以对3D空间模型中的光源参数进行修改，实现对室内场景的灯光变换，并进行渲染，展示出变换后的灯光效果下的室内场景。

总之，通过本申请实施例，在C端用户需要基于具体的空间场所对家具、家居等类目的商品进行虚拟试用时，可以通过终端设备的图像采集装置对空间场所进行图像扫描，具体的算法便可以根据扫描到的图像建立所述目标空间场所对应的3D空间模型。之后，可以在目标界面中对所述3D空间模型进行渲染展示，并提供待试用商品的信息。在用户选择了某个具体的商品后，可以通过将选中的目标商品对应的3D商品模型匹配到所述3D空间模型中，展示出该目标商品在目标空间场所中的试用效果。通过这种方式，由于只需要用户通过其终端设备对空间场所进行图像扫描，便可以完成3D空间模型的建立，并且可以完成对3D空间模型的渲染展示，使得用户可以看到自己数字化的场内还原，提升用户体验。并且，相对于通过户型图建立3D空间模型的方式而言，可以降低操作成本，提升实现效率。

另外，在可选的实现方式下，还可以在对空间场所进行图像扫描的过程中，对空间场所中的陈列物品也进行图像扫描，并且可以通过算法识别出具体陈列物品的类目、纹理图案、尺寸等信息，这样，可以从预先保存的3D物品模型库中，选择出与具体陈列物品相同或者相似的3D物品模型，并且可以在用户需要的情况下，展示到3D空间模型中。并且，可以实现对这些3D物品模型的增加、删除、替换等互动操作。

需要说明的是，本申请实施例中可能会涉及到对用户数据的使用，在实际应用中，可以在符合所在国的适用法律法规要求的情况下(例如，用户明确同意，对用户切实通知，等)，在适用法律法规允许的范围内在本文描述的方案中使用用户特定的个人数据。

与前述方法实施例相对应，本申请实施例还提供了一种提供商品虚拟试用信息的装置，参见图7，该装置可以包括：

图像扫描单元701，用于响应于用户在目标空间场所中通过终端设备发起的商品试用请求后，启动所述终端设备中的图像采集装置，以用于对所述目标空间场所进行图像扫描；

3D空间模型建立单元702，用于根据扫描到的图像获取所述目标空间场所对应的3D空间模型；

3D空间模型展示单元703，用于在目标界面中对所述3D空间模型进行渲染展示，并提供待试用商品的信息；

商品试用效果展示单元704，用于通过将选中的目标待试用商品对应的3D商品模型匹配到所述3D空间模型中，展示出该目标待试用商品在所述目标空间场所中的试用效果。

具体的，所述3D空间模型建立单元具体可以用于：

从扫描到的图像中进行墙线、墙角以及光线明暗变化情况的识别，以便根据识别到的墙线、墙角以及光线明暗变化情况进行墙体分割，并根据墙体分割结果生成基础3D空间模型；

从所述扫描到的图像中获取所述墙体的纹理贴图；

将所述纹理贴图贴附于所述基础3D空间模型上，生成所述目标空间场所的3D空间模型。

另外，该装置还可以包括：

提示单元，用于提供关于对同一墙体进行进一步扫描，以完成对同一墙体中多个墙线及墙角的扫描的提示信息。

再者，还可以包括：

模拟补全单元，用于如果从所述扫描到的图像中判断出所述建筑面存在被所述目标空间场所中的陈列物品遮挡的部分，则根据该建筑面未被遮挡的部分，对对应的墙体模型以及纹理贴图进行模拟并补全。

具体的，所述3D空间模型展示单元在提供待试用商品信息时，具体可以用于：

接收到在所述3D空间模型中目标位置处增加目标类目商品的请求后，提供该目标类目对应的待试用商品的信息；

此时，所述商品试用效果展示单元具体可以用于：

将用户选中的目标商品对应的3D商品模型匹配到所述3D空间模型中目标位置处进行展示，以展示出该目标商品增加到所述目标空间场所中所述目标位置处之后的试用效果。

另外，该装置还可以包括：

3D物品模型展示单元，用于如果从所述扫描到的图像中识别出所述目标空间场所中的陈列物品，则从预先建立的3D物品模型库中，选择出与所述陈列物品相同或相似的3D物品模型，并展示到所述3D空间模型中。

此时，在一种方式下，所述3D空间模型展示单元在提供待试用商品信息时，具体可以用于：

在所识别出的陈列物品对应的3D物品模型所在的位置处，提供用于对对应的陈列物品进行替换的操作选项；

接收到对其中一陈列物品进行替换的请求后，提供与该陈列物品相关的待试用商品的信息；

相应的，所述装置还可以包括：

替换展示单元，用于在其中一待试用商品被选中后，将该待试用商品对应的3D商品模型替换到该陈列物品对应的3D物品模型所在的位置处进行展示。

另外，该装置还可以包括：

3D物品模型删除单元，用于将用户选中的目标陈列物品对应的3D物品模型从所述3D空间模型中删除，以展示出去掉该目标陈列物品后，所述目标空间场所的物品陈列效果。

其中，待试用商品包括装饰画类目的商品；

所述3D空间模型展示单元在提供待试用商品信息时，具体可以用于：

提供候选的装饰画参数信息，所述参数包括以下一种或多种：风格、画框类型、画作、幅数、尺寸；

根据选中的装饰画参数生成装饰画的3D模型，以用于匹配到所述3D空间模型中展示。

具体的，所述商品试用效果展示单元具体可以用于：

根据所选中的画框类型确定对应的画框模型，并根据所选中的画作确定对应的画面模型以及画面贴图；

根据所选中的尺寸信息对所述画框模型、画面模型以及画面贴图的尺寸进行调整；

通过将调整后的画框模型、画面模型以及画面贴图进行组合，生成所述装饰画模型。

另外，本申请实施例还提供了一种计算机可读存储介质，其上存储有计算机程序，该程序被处理器执行时实现前述方法实施例中任一项所述的方法的步骤。

以及一种电子设备，包括：

一个或多个处理器；以及

与所述一个或多个处理器关联的存储器，所述存储器用于存储程序指令,所述程序指令在被所述一个或多个处理器读取执行时，执行前述方法实施例中任一项所述的方法的步骤。

其中，图8示例性的展示出了电子设备的架构，例如，设备800可以是移动电话，计算机，数字广播终端，消息收发设备，游戏控制台，平板设备，医疗设备，健身设备，个人数字助理，飞行器等。

参照图8，设备800可以包括以下一个或多个组件：处理组件802，存储器804，电源组件806，多媒体组件808，音频组件810，输入/输出(I/O)的接口812，传感器组件814，以及通信组件816。

处理组件802通常控制设备800的整体操作，诸如与显示，电话呼叫，数据通信，相机操作和记录操作相关联的操作。处理元件802可以包括一个或多个处理器820来执行指令，以完成本公开技术方案提供的方法的全部或部分步骤。此外，处理组件802可以包括一个或多个模块，便于处理组件802和其他组件之间的交互。例如，处理部件802可以包括多媒体模块，以方便多媒体组件808和处理组件802之间的交互。

存储器804被配置为存储各种类型的数据以支持在设备800的操作。这些数据的示例包括用于在设备800上操作的任何应用程序或方法的指令，联系人数据，电话簿数据，消息，图片，视频等。存储器804可以由任何类型的易失性或非易失性存储设备或者它们的组合实现，如静态随机存取存储器(SRAM)，电可擦除可编程只读存储器(EEPROM)，可擦除可编程只读存储器(EPROM)，可编程只读存储器(PROM)，只读存储器(ROM)，磁存储器，快闪存储器，磁盘或光盘。

电源组件806为设备800的各种组件提供电力。电源组件806可以包括电源管理系统，一个或多个电源，及其他与为设备800生成、管理和分配电力相关联的组件。

多媒体组件808包括在设备800和用户之间的提供一个输出接口的屏幕。在一些实施例中，屏幕可以包括液晶显示器(LCD)和触摸面板(TP)。如果屏幕包括触摸面板，屏幕可以被实现为触摸屏，以接收来自用户的输入信号。触摸面板包括一个或多个触摸传感器以感测触摸、滑动和触摸面板上的手势。触摸传感器可以不仅感测触摸或滑动动作的边界，而且还检测与触摸或滑动操作相关的持续时间和压力。在一些实施例中，多媒体组件808包括一个前置摄像头和/或后置摄像头。当设备800处于操作模式，如拍摄模式或视频模式时，前置摄像头和/或后置摄像头可以接收外部的多媒体数据。每个前置摄像头和后置摄像头可以是一个固定的光学透镜系统或具有焦距和光学变焦能力。

音频组件810被配置为输出和/或输入音频信号。例如，音频组件810包括一个麦克风(MIC)，当设备800处于操作模式，如呼叫模式、记录模式和语音识别模式时，麦克风被配置为接收外部音频信号。所接收的音频信号可以被进一步存储在存储器804或经由通信组件816发送。在一些实施例中，音频组件810还包括一个扬声器，用于输出音频信号。

I/O接口812为处理组件802和外围接口模块之间提供接口，上述外围接口模块可以是键盘，点击轮，按钮等。这些按钮可包括但不限于：主页按钮、音量按钮、启动按钮和锁定按钮。

传感器组件814包括一个或多个传感器，用于为设备800提供各个方面的状态评估。例如，传感器组件814可以检测到设备800的打开/关闭状态，组件的相对定位，例如所述组件为设备800的显示器和小键盘，传感器组件814还可以检测设备800或设备800一个组件的位置改变，用户与设备800接触的存在或不存在，设备800方位或加速/减速和设备800的温度变化。传感器组件814可以包括接近传感器，被配置用来在没有任何的物理接触时检测附近物体的存在。传感器组件814还可以包括光传感器，如CMOS或CCD图像传感器，用于在成像应用中使用。在一些实施例中，该传感器组件814还可以包括加速度传感器，陀螺仪传感器，磁传感器，压力传感器或温度传感器。

通信组件816被配置为便于设备800和其他设备之间有线或无线方式的通信。设备800可以接入基于通信标准的无线网络，如WiFi，或2G、3G、4G/LTE、5G等移动通信网络。在一个示例性实施例中，通信部件816经由广播信道接收来自外部广播管理系统的广播信号或广播相关信息。在一个示例性实施例中，所述通信部件816还包括近场通信(NFC)模块，以促进短程通信。例如，在NFC模块可基于射频识别(RFID)技术，红外数据协会(IrDA)技术，超宽带(UWB)技术，蓝牙(BT)技术和其他技术来实现。

在示例性实施例中，设备800可以被一个或多个应用专用集成电路(ASIC)、数字信号处理器(DSP)、数字信号处理设备(DSPD)、可编程逻辑器件(PLD)、现场可编程门阵列(FPGA)、控制器、微控制器、微处理器或其他电子元件实现，用于执行上述方法。

在示例性实施例中，还提供了一种包括指令的非临时性计算机可读存储介质，例如包括指令的存储器804，上述指令可由设备800的处理器820执行以完成本公开技术方案提供的方法。例如，所述非临时性计算机可读存储介质可以是ROM、随机存取存储器(RAM)、CD-ROM、磁带、软盘和光数据存储设备等。

通过以上的实施方式的描述可知，本领域的技术人员可以清楚地了解到本申请可借助软件加必需的通用硬件平台的方式来实现。基于这样的理解，本申请的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品可以存储在存储介质中，如ROM/RAM、磁碟、光盘等，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本申请各个实施例或者实施例的某些部分所述的方法。

本说明书中的各个实施例均采用递进的方式描述，各个实施例之间相同相似的部分互相参见即可，每个实施例重点说明的都是与其他实施例的不同之处。尤其，对于系统或系统实施例而言，由于其基本相似于方法实施例，所以描述得比较简单，相关之处参见方法实施例的部分说明即可。以上所描述的系统及系统实施例仅仅是示意性的，其中所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。本领域普通技术人员在不付出创造性劳动的情况下，即可以理解并实施。

以上对本申请所提供的提供商品虚拟试用信息的方法、装置及电子设备，进行了详细介绍，本文中应用了具体个例对本申请的原理及实施方式进行了阐述，以上实施例的说明只是用于帮助理解本申请的方法及其核心思想；同时，对于本领域的一般技术人员，依据本申请的思想，在具体实施方式及应用范围上均会有改变之处。综上所述，本说明书内容不应理解为对本申请的限制。

Claims (13)

1.一种提供商品虚拟试用信息的方法，其特征在于，包括：

响应于用户在目标空间场所中通过终端设备发起的商品试用请求后，启动所述终端设备中的图像采集装置，以用于对所述目标空间场所进行图像扫描；

根据扫描到的图像获取所述目标空间场所对应的3D空间模型；

在目标界面中对所述3D空间模型进行渲染展示，并提供待试用商品的信息；

通过将选中的目标待试用商品对应的3D商品模型匹配到所述3D空间模型中，展示出该目标待试用商品在所述目标空间场所中的试用效果。

2.根据权利要求1所述的方法，其特征在于，

所述根据扫描到的图像获取所述目标空间场所对应的3D空间模型，包括：

从扫描到的图像中进行墙线、墙角以及光线明暗变化情况的识别，以便根据识别到的墙线、墙角以及光线明暗变化情况进行墙体分割，并根据墙体分割结果生成基础3D空间模型；

从所述扫描到的图像中获取所述墙体的纹理贴图；

将所述纹理贴图贴附于所述基础3D空间模型上，生成所述目标空间场所的3D空间模型。

3.根据权利要求2所述的方法，其特征在于，还包括：

提供关于对同一墙体进行进一步扫描，以完成对同一墙体中多个墙线及墙角的扫描的提示信息。

4.根据权利要求1所述的方法，其特征在于，还包括：

如果从所述扫描到的图像中判断出所述建筑面存在被所述目标空间场所中的陈列物品遮挡的部分，则根据该建筑面未被遮挡的部分，对对应的墙体模型以及纹理贴图进行模拟并补全。

5.根据权利要求1所述的方法，其特征在于，

所述提供待试用商品的信息，包括：

接收到在所述3D空间模型中目标位置处增加目标类目商品的请求后，提供该目标类目对应的待试用商品的信息；

所述将选中的目标待试用商品对应的3D商品模型匹配到所述3D空间模型中，包括：

将用户选中的目标待试用商品对应的3D商品模型匹配到所述3D空间模型中目标位置处进行展示，以展示出该目标待试用商品增加到所述目标空间场所中所述目标位置处之后的试用效果。

6.根据权利要求1所述的方法，其特征在于，还包括：

如果从所述扫描到的图像中识别出所述目标空间场所中的陈列物品，则从预先建立的3D物品模型库中，选择出与所述陈列物品相同或相似的3D物品模型，并展示到所述3D空间模型中。

7.根据权利要求6所述的方法，其特征在于，

所述提供待试用商品的信息，包括：

在所识别出的陈列物品对应的3D物品模型所在的位置处，提供用于对对应的陈列物品进行替换的操作选项；

接收到对其中一陈列物品进行替换的请求后，提供与该陈列物品相关的待试用商品的信息；

所述方法还包括：

在其中一待试用商品被选中后，将该待试用商品对应的3D商品模型替换到该陈列物品对应的3D物品模型所在的位置处进行展示。

8.根据权利要求6所述的方法，其特征在于，还包括：

将用户选中的目标陈列物品对应的3D物品模型从所述3D空间模型中删除，以展示出去掉该目标陈列物品后，所述目标空间场所的物品陈列效果。

9.根据权利要求1所述的方法，其特征在于，

待试用商品包括装饰画类目的商品；

所述提供待试用商品的信息，包括：

提供候选的装饰画参数信息，所述参数包括以下一种或多种：风格、画框类型、画作、幅数、尺寸；

根据选中的装饰画参数生成装饰画的3D模型，以用于匹配到所述3D空间模型中展示。

10.根据权利要求9所述的方法，其特征在于，

所述根据选中的装饰画参数生成装饰画的3D模型，包括：

根据所选中的画框类型确定对应的画框模型，并根据所选中的画作确定对应的画面模型以及画面贴图；

根据所选中的尺寸信息对所述画框模型、画面模型以及画面贴图的尺寸进行调整；

通过将调整后的画框模型、画面模型以及画面贴图进行组合，生成所述装饰画模型。

11.一种提供商品虚拟试用信息的装置，其特征在于，包括：

图像扫描单元，用于响应于用户在目标空间场所中通过终端设备发起的商品试用请求后，启动所述终端设备中的图像采集装置，以用于对所述目标空间场所进行图像扫描；

3D空间模型建立单元，用于根据扫描到的图像获取所述目标空间场所对应的3D空间模型；

3D空间模型展示单元，用于在目标界面中对所述3D空间模型进行渲染展示，并提供待试用商品的信息；

商品试用效果展示单元，用于通过将选中的目标待试用商品对应的3D商品模型匹配到所述3D空间模型中，展示出该目标待试用商品在所述目标空间场所中的试用效果。

12.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，该程序被处理器执行时实现权利要求1至10任一项所述的方法的步骤。

13.一种电子设备，其特征在于，包括：

一个或多个处理器；以及

与所述一个或多个处理器关联的存储器，所述存储器用于存储程序指令,所述程序指令在被所述一个或多个处理器读取执行时，执行权利要求1至10任一项所述的方法的步骤。

Images