CN108876936B - 虚拟显示方法、装置、电子设备及计算机可读存储介质 - Google Patents

Abstract

本申请实施例提供了一种虚拟显示方法、装置、电子设备及计算机可读存储介质，涉及图像处理技术领域，该方法包括：获取包含第一目标信息的第一图像，第一目标包括鞋子、服装以及饰品中的至少一种，然后从第一图像中提取第一目标信息，生成第二图像，然后获取包含第二目标信息的第三图像，第二目标包括人体，然后将第二图像和第三图像进行合成，以显示合成后的图像。本申请实施例实现了降低实现虚拟显示的复杂度以及减少实现虚拟显示的计算量，并可以降低虚拟显示的成本。

Description

虚拟显示方法、装置、电子设备及计算机可读存储介质

技术领域

本申请涉及图像处理技术领域，具体而言，本申请涉及一种虚拟显示方法、装置、电子设备及计算机可读存储介质。

背景技术

随着互联网的发展，线上购物已逐渐成为潮流，买家一般通过商家展示的商品照片进行线上购物，其中商品照片包括：单一的商品展示照片、模特试穿试戴的效果照片以及商品细节展示照片，尤其是在购买鞋服类或者饰品类商品时，由于照片的拍摄灯光、色差以及个人身材、肤色、发型以及气质等因素，同样的鞋服或者饰品在不同的人身上可能产生不同的效果，因此买家若仅根据商家展示的商品照片进行购物，可能与实际试穿或者实际试戴的效果存在较大的偏差。

现有技术中提供了一种虚拟显示的方法，用于显示试穿或者试戴的效果，该方法包括：获取试穿者或者试戴者的各项体征信息，然后基于获取到的各项体征信息，建立试穿者或者试戴者对应的3D模型，然后将待试商品图片与已建立的3D模型进行匹配，显示待试者试穿效果图片或者待试者试戴效果图片。

然而，当通过将试穿者或者试戴者对应的3D模型与待试商品图片进行匹配，得到试穿效果图片或者试戴效果图片时，由于需要测量试穿者或者试戴者的各项体征信息，才可以建立试穿者或者试戴者对应的3D模型，流程复杂，并且通过各项体征信息建立试穿者或者试戴者对应的3D模型的计算量较大，成本较高，从而导致实现虚拟显示复杂度较高、计算量较大，进而导致成本较高。

发明内容

本申请提供了一种虚拟显示方法、装置、电子设备及计算机可读存储介质，用于解决虚拟显示复杂度较高、计算量较大以及成本较高的问题。

第一方面，提供了一种虚拟显示方法，包括：

获取包含第一目标信息的第一图像，第一目标包括鞋子、服装以及饰品中的至少一种；

从第一图像中提取第一目标信息，生成第二图像；

获取包含第二目标信息的第三图像，第二目标包括人体；

将第二图像和第三图像进行合成，以显示合成后的图像。

第二方面，提供了一种虚拟显示装置，包括：

第一获取模块，用于获取包含第一目标信息的第一图像，第一目标包括鞋子、服装以及饰品中的至少一种；

提取模块，用于从第一获取模块获取的第一图像中提取第一目标信息，并通过生成模块生成第二图像；

第二获取模块，用于获取包含第二目标信息的第三图像，第二目标包括人体；

合成模块，用于将生成模块生成的第二图像和第二获取模块获取的第三图像进行合成，以显示合成后的图像。

第三方面，提供了一种电子设备，该电子设备包括：处理器、存储器、通信接口和通信总线，处理器、存储器和通信接口通过通信总线完成相互间的通信；

存储器用于存放至少一可执行指令，可执行指令使处理器执行如第一方面所示的虚拟显示方法对应的操作。

第四方面，提供了一种计算机可读存储介质，计算机可读存储介质上存储有计算机程序，该程序被处理器执行时实现第一方面所示的虚拟显示方法。

本申请实施例提供了一种虚拟显示方法、装置、电子设备以及计算机可读存储介质，与现有技术中通过将试穿者或者试戴者对应的3D模型与待试商品图片进行匹配相比，本申请实施例获取包含第一目标信息的第一图像，第一目标包括鞋子、服装以及饰品中的至少一种，然后从第一图像中提取第一目标信息，生成第二图像，然后获取包含第二目标信息的第三图像，第二目标包括人体，然后将第二图像和第三图像进行合成，以显示合成后的图像，并且合成后的图像能够显示虚拟试穿服装或者鞋子的效果图像或者虚拟试戴饰品效果的图像，并不需要通过测量试穿者或者试戴者的各项体征信息，建立试穿者或者试戴者对应的3D模型，以显示虚拟试穿或者虚拟试戴的效果图，从而可以降低实现虚拟显示的复杂度以及减少实现虚拟现实的计算量，进而可以降低虚拟显示的成本。

附图说明

为了更清楚地说明本申请实施例中的技术方案，下面将对本申请实施例描述中所需要使用的附图作简单地介绍。

图1为本申请实施例提供的一种虚拟显示方法的流程示意图；

图2为本申请实施例提供的一种虚拟显示装置的结构示意图；

图3为本申请实施例提供的另一种虚拟显示装置的结构示意图；

图4为本申请实施例提供的一种电子设备的结构示意图。

具体实施方式

下面详细描述本申请的实施例，所述实施例的示例在附图中示出，其中自始至终相同或类似的标号表示相同或类似的元件或具有相同或类似功能的元件。下面通过参考附图描述的实施例是示例性的，仅用于解释本申请，而不能解释为对本发明的限制。

本技术领域技术人员可以理解，除非特意声明，这里使用的单数形式“一”、“一个”、“所述”和“该”也可包括复数形式。应该进一步理解的是，本申请的说明书中使用的措辞“包括”是指存在所述特征、整数、步骤、操作、元件和/或组件，但是并不排除存在或添加一个或多个其他特征、整数、步骤、操作、元件、组件和/或它们的组。应该理解，当我们称元件被“连接”或“耦接”到另一元件时，它可以直接连接或耦接到其他元件，或者也可以存在中间元件。此外，这里使用的“连接”或“耦接”可以包括无线连接或无线耦接。这里使用的措辞“和/或”包括一个或更多个相关联的列出项的全部或任一单元和全部组合。

下面以具体地实施例对本申请的技术方案以及本申请的技术方案如何解决上述技术问题进行详细说明。下面这几个具体的实施例可以相互结合，对于相同或相似的概念或过程可能在某些实施例中不再赘述。下面将结合附图，对本申请的实施例进行描述。

实施例一

本申请实施例提供了一种虚拟显示方法，如图1所示，该方法包括：

步骤S101、获取包含第一目标信息的第一图像。

其中，第一目标包括鞋子、服装以及饰品中的至少一种。

对于本申请实施例，通过对网站展示的包含第一目标信息的图像进行拍摄，或者下载网站展示的包含第一目标信息的图像，以获取第一图像。在本申请实施例中，网站展示的图像可以为鞋子展示图像、服装展示图像和/或饰品展示图像。

步骤S102、从第一图像中提取第一目标信息，生成第二图像。

对于本申请实施例，由于第一图像中除了包含第一目标信息之外还包括图像背景信息和/或其它特征信息，因此从第一图像中提取第一目标信息，并将仅包含提取到的第一目标信息的图像生成第二图像，即第二图像中仅包含第一目标信息。

例如，第一图像为服装展示图像，该服装展示图像中包含第一目标信息(服装像素信息)以及背景像素信息，则从该服装展示图像中提取第一目标信息(服装像素信息)，并将仅包含服装像素信息的图像作为第二图像，即第二图像中仅包含服装像素信息。

步骤S103、获取包含第二目标信息的第三图像。

其中，第二目标包括人体。

对于本申请实施例，可以实时拍摄包含第二目标信息的第三图像或者从本地存储中获取包含第二目标信息的第三图像。在本申请实施例中，第二目标信息可以包括待试穿的人体的像素信息或者待试戴的人体的像素信息等。在本申请实施例中，第三图像中第二目标信息的位置信息与第二图像中第一目标信息的位置信息相匹配。

例如，第二图像中的第一目标信息为待试穿的衣服像素信息，则基于第二图像中待试穿的衣服像素信息，获取与待试穿的衣服像素信息位置相匹配的包含待试穿人体像素信息的第三图像，其中，待试穿的衣服的像素信息能够遮挡住人体的像素。

对于本申请实施例，若从本地存储中获取包含第二目标信息的第三图像，则可以调整第一目标信息在第二图像中的位置信息，还可以调整第二目标信息在第三图像中的位置信息。在本申请实施例中，与第二位置信息相匹配的第一位置信息是基于所述第二位置信息进行调整得到的。其中，所述第一位置信息为第一目标信息在第二图像中的位置信息，所述第二位置信息为第二目标信息在第三图像中的位置信息。

步骤S104、将第二图像和第三图像进行合成，以显示合成后的图像。

对于本申请实施例，若第二图像与第三图像是在终端设备中合成，则在第二图像与第三图像合成之后，显示合成后的图像；若第二图像与第三图像是在服务器进行合成，则在第二图像与第三图像合成之后，将合成后的图像推送至对应的终端设备，并使得终端设备显示合成后的图像。

本申请实施例提供了一种虚拟显示方法，与现有技术中通过将试穿者或者试戴者对应的3D模型与待试商品图片进行匹配相比，本申请实施例获取包含第一目标信息的第一图像，第一目标包括鞋子、服装以及饰品中的至少一种，然后从第一图像中提取第一目标信息，生成第二图像，然后获取包含第二目标信息的第三图像，第二目标包括人体，然后将第二图像和第三图像进行合成，以显示合成后的图像，并且合成后的图像能够显示虚拟试穿服装或者鞋子的效果图像或者虚拟试戴饰品效果的图像，并不需要通过测量试穿者或者试戴者的各项体征信息，建立试穿者或者试戴者对应的3D模型，以显示虚拟试穿或者虚拟试戴的效果图，从而可以降低实现虚拟显示的复杂度以及减少实现虚拟显示的计算量，进而可以降低虚拟显示的成本。

实施例二

本申请实施例的另一种可能的实现方式，在实施例一的基础上还包括实施例二所示的操作，其中，

该方法还包括步骤SA(图中未标注)，其中步骤SA可以在步骤S102之前执行，其中，

步骤SA、确定第一图像中是否包含模特信息。

对于本申请实施例，第一图像可以包括两种类型的第一图像，即第一预设类型图像以及第二预设类型图像。在本申请实施例中，第一预设类型图像中包括第一目标信息像素以及背景像素；第二预设类型图像中包括：第一目标信息像素、背景信息像素以及模特信息像素。例如，第一目标信息像素可以为服装信息像素、饰品信息像素等。

具体地，当第一图像中不包含模特信息时，步骤S102中从第一图像中提取第一目标信息，包括：步骤SB1(图中未标注)，其中，

步骤SB1、基于边缘检测以及图像分割从第一图像中提取第一目标信息。

具体地，基于边缘检测以及图像分割从第一图像中提取第一目标信息，包括：基于边缘检测，检测第一图像中各个边缘点分别对应位置信息；基于各个边缘点分别对应的位置信息，去除第一图像中的背景像素，以提取第一目标信息像素。

对于本申请实施例，针对不包含模特信息的第一图像，商家在对第一目标信息进行拍照时，均采用差别于第一目标信息的单一颜色作为背景色，因此仅包括第一目标信息像素以及背景信息像素的图像中灰度变化剧烈的点即为边缘点。在本申请实施例中，通过对不包含模特信息的第一图像分别求一阶导数以及二阶导数可得到边缘点的灰度变化情况。由于图像灰度变化曲线的一阶导数在边缘处取得极大值，二阶导数在边缘处取值为零，因此经典的边缘检测算法常使用边缘领巾的一阶或者二阶导数构造边缘检测算子进行边缘检测。

在本申请实施例中，采用Canny边缘检测算法检测出不包含模特信息的第一图像的边缘，然后根据边缘点的位置坐标，进行图像分割。在本申请实施例中，由于不包含模特信息的第一图像中仅包括第一目标信息像素以及背景信息像素，因此不包含模特信息的第一图像的边缘即为第一目标信息的像素边缘，即对不包含模特信息的第一图像进行图像分割只保留第一目标信息边缘点内部的像素点，去除边缘点外部的像素点，以提取仅包含第一目标信息的第二图像。

例如，第一目标信息为服装信息，则采用Canny边缘检测算法从不包含模特信息的第一图像中检测出服装信息像素的边缘，然后根据服装信息像素边缘的边缘点进行图像分割，仅保留服装信息边缘点内部的像素，并去除服装像素信息边缘点外部的像素，以提取出仅包含服装像素信息的第二图像。

具体地，当第一图像中包含模特信息时，步骤S102中从第一图像中提取第一目标信息，包括：步骤SB2(图中未标注)，其中，

步骤SB2、基于边缘检测、特征识别以及图像分割，从第一图像中提取第一目标信息。

具体地，基于边缘检测、特征识别以及图像分割，从第一图像中提取第一目标信息，包括：基于边缘检测，检测第一图像中各个边缘点分别对应位置信息；基于特征识别，检测第一图像中的目标特征；基于第一图像中各个边缘点分别对应位置信息，去除第一图像中的背景像素，并基于检测到的目标特征，去除目标特征对应的像素，以提取第一目标信息。

对于本申请实施例，包含模特信息的第一图像中包括第一目标信息、背景信息以及模特特征信息。

对于本申请实施例，基于特征识别，检测第一图像中的目标特征，包括：基于特征识别模型，检测第一图像中的目标特征。在本申请实施例中，采用AdaBoost算法的迭代计算方式，通过不断训练同一个训练集得到多个不同的弱分类器，然后从这些弱分类器中通过加权投票的方式，得到一个强分类器，作为特征识别模型，检测第一图像中的目标特征。

对于本申请实施例，第一图像中的目标特征可以包括：人脸、脖颈等未被第一目标信息遮挡的特征。

对于本申请实施例，通过去除第一图像中的背景像素和/或去除目标特征的像素，以从第一图像中提取第一目标信息，从而可以使得第一目标信息像素、背景像素以及目标特征像素的有效分离，例如，衣服像素、背景像素以及模特裸露特征的像素的有效分离，进而可以提升第一目标信息(例如服装像素信息)显示的真实度，进一步提升虚拟显示的效果。

实施例三

本申请实施例的另一种可能的实现方式，在实施例一或实施例二的基础上还包括实施例三所示的操作，其中，

步骤S103之前包括步骤SC(图中未标注)，其中，

步骤SC、当检测到用户触发的尺寸调整操作时，调整第一目标信息在第二图像中显示的尺寸。

对于本申请实施例，第三图像中的第二目标信息可以为试衣者人体特征信息或者试戴者人体特征信息。在本申请实施例中，由于试衣者或者试戴者的高矮胖瘦的个体性差异性，而从网站(购物网站)中获取的衣服图像显示的尺寸或者饰品图像显示的尺寸为单一尺寸，因此需要试衣者(用户)或者试戴者(用户)根据自身信息，对第二图像中的第一目标信息显示的尺寸进行调整。具体的尺寸调整方式详见下文。

具体地，步骤SC中调整第一目标信息在第二图像中显示的尺寸之前，包括：步骤SD(图中未标注)，其中，

步骤SD、显示尺寸调整页面，以使用户触发尺寸调整操作。

其中，尺寸调整操作包括拉伸操作、缩放操作或输入操作中的至少一种。

具体地，当尺寸调整操作为拉伸操作和/或缩放操作时，步骤SD包括步骤SD1(图中未标注)、其中，

步骤SD1、按照预设比例对第二图像中的第一目标信息进行拉伸和/或缩放。

对于本申请实施例，用户可以在显示的尺寸调整页面中通过手指滑动对第二图像中的第一目标信息进行拉伸操作或者缩放操作，以调整第一目标信息在第二图像中显示的尺寸。

例如，第一目标信息可以为服装像素信息，用户可以通过手指滑动，对展示的衣服进行拉伸或者缩放，以调整衣服在第二图像中显示的尺寸。

对于本申请实施例，通过调用系统函数中的Matrix矩阵对第二图像中的第一目标信息进行拉伸和/或缩放。

具体地，当尺寸调整操作为输入操作时，步骤SD包括步骤SD2(图中未标注)，其中，

步骤SD2、基于用户输入的尺寸信息调整第一目标信息在第二图像中显示的尺寸。

对于本申请实施例，用户还可以通过触发尺寸调整按钮，在尺寸调整页面中弹出输入框，该输入框可以用于用户输入身体属性信息，服务器或者终端设备在接收到用户输入的身体属性信息之后，根据用户输入的身体属性信息，自动调整第一目标信息在第二图像中显示的尺寸。

其中，身体属性信息可以包括：身高、体重、腰围、臀围以及臂围等。

对于本申请实施例，通过调整第一目标信息在第二图像中显示的尺寸，以使得第一目标信息能覆盖住第二目标信息，例如调整衣服的尺寸，以使得覆盖住试穿者的身体特征，提升虚拟显示的效果。

实施例四

本申请实施例的另一种可能的实现方式，在实施例一的基础上还包括实施例四所示的操作，其中，

步骤S103包括步骤S1031(图中未标注)，其中，

步骤S1031、获取以第二图像作为前景拍摄的包含第二目标信息的第三图像。

对于本申请实施例，通过将第二图像作为前景展示在拍照界面上，采用正常的拍照方式，并通过调整采集设备的位置，以使得第二图像中的第一目标信息在屏幕中的显示位置与第二目标信息在屏幕中的显示位置相匹配。

对于本申请实施例，用户通过自拍或者由他人协作拍摄的方式，拍摄包含第二目标信息的第三图像。在本申请实施例中，若通过自拍的方式，可将采集设备放置在远端合适位置，当观察到第二目标信息与作为前景的第二图像中的第一目标信息的在屏幕中的显示位置相匹配时，进行拍摄；若通过由他人协作拍摄的方式，可以通过拍摄界面调整采集设备焦距，以使得第二目标信息在屏幕中的显示位置与作为前景的第二图像中的第一目标信息在屏幕中的显示位置相匹配时进行拍摄。

对于本申请实施例，通过将第二图像作为前景图像拍摄第三图像，能够使得获取到的第三图像中的第二目标信息的位置与第二图像中的第一目标信息的位置信息更加匹配，从而可以提升虚拟显示的效果，提升用户体验。

对于本申请实施例，当接收到用户触发的延迟拍摄触发消息时，确定延迟拍摄的时间，基于确定出的延迟拍摄的时间进行拍摄。例如，接收到用户触发的延迟拍摄时间为10s(秒)，则在10s之后自动进行拍摄。在本申请实施例中，延迟拍摄时间可以由用户设置，也可以由电子设备设置，电子设备可以为服务器或者终端设备。

对于本申请实施例，当接收到用户触发的延迟拍摄消息时，在确定出的延迟拍摄时间之后进行拍摄，以使得用户可以在延迟拍摄时间内调整距离以及姿态，例如，试衣者可以在延迟拍摄时间内调整姿态、表情以及距离等，从而可以使得人体特征信息与作为前景的第二图像中的第一目标信息在屏幕中显示位置更加匹配，进而可以提升虚拟显示的效果。

实施例五

本申请实施例的另一种可能的实现方式，在实施例一所示的基础上还包括实施例五所示的操作，其中，

步骤S104中将第二图像和第三图像进行合成，之后还包括步骤SE(图中未标注)，其中，

步骤SE、对合成后的图像进行模糊处理。

对于本申请实施例，在合成中的图像中，第二目标信息与第一目标信息的连接处将出现较为明显的边界，因此需要对连接点进行模糊化处理。在本申请实施例中，对连接点进行模糊化处理即对图像中连接点附近的像素进行平均处理，以使得这些像素值越来越接近，以使得人为无法识别这些像素点的差别，已达到模糊化的效果。

具体地，对第一目标信息与第二目标信息的连接位置进行模糊处理，包括：

步骤1、对预设圆内的各像素点进行模糊处理。

其中，预设圆的圆心为连接位置上任一连接点，半径为预设值。

步骤2、按照预设步长增大半径，并对增大半径后的圆内的各像素点进行模糊处理。

对于本申请实施例，预设步长可以由用户进行设置，也可以由电子设备进行设置。在本申请实施例中不做限定。

对于本申请实施例，对圆内的各个像素点进行模糊处理即为确定圆内各个像素点的平均值，然后将确定出的平均值赋值为圆内各个像素点。

步骤3、循环步骤2，直至半径增加到预设阈值时，切换圆心为另一个连接点，并对切换圆心后的圆内的各像素点进行模糊处理。

其中，切换圆心后的圆的半径为预设值。

循环步骤3，直至半径增大到预设阈值达到预设条件。

对于本申请实施例，该预设条件为圆心遍历各个连接点。

对于本申请实施例，通过逐步增大半径的方式，对确定出的圆内的各个像素点进行模糊处理，对确定的圆内的像素进行模糊处理，以使得合成后图像中第二目标信息与第一目标信息能够更好地进行平滑过渡，从而可以提升进行模糊处理的效果。

具体地，步骤SE包括步骤SE1(图中未标注)以及步骤SE2(图中未标注)，其中，

步骤SE1、确定合成后的图像中第一目标信息与第二目标信息的连接位置。

步骤SE2、对第一目标信息与第二目标信息的连接位置处的像素进行模糊处理。

具体地，对第一目标信息与第二目标信息的连接位置进行模糊处理，具体还包括：

步骤4、对以任一连接点为圆心，以预设值为半径的圆内各像素点进行模糊处理；

其中，对圆内各像素点进行模糊处理的方式具体详见上文，在此不再赘述。

步骤5、切换圆心为另一个连接点，并对切换圆心后的圆内各像素点进行模糊处理。

其中，切换圆心后的圆的半径为预设值；

循环步骤5，直至达到预设条件。

对于本申请实施例，该预设条件为圆心遍历各个连接点。

实施例六

本申请实施例的另一种可能的实现方式，在实施例一所示的基础上还包括实施例六所示的操作，其中，

步骤S104中将第二图像和第三图像进行合成，之后还包括步骤SF(图中未标注)，其中，

步骤SF、对合成后的图像进行色阶调整处理。

对于本申请实施例，在合成后的图像中，第一目标信息的色调与第二目标信息的色调不同，导致融合度较低，为了提升合成后的图像中第一目标信息与第二目标信息的融合度，因此需要对合成后的图像进行色阶调整处理。

对于本申请实施例，通过对合成后的图像进行模糊处理和/或色阶调整处理，避免了合成后的图像边界突兀的问题，和/或提升合成后的图像的第一目标信息像素(衣服像素)与当前光线的匹配度，进而可以提升虚拟显示的效果。

具体地，步骤SF包括：获取当前环境光线强度的参数信息；基于当前环境光线强度的参数信息，确定合成后的图像中第一目标信息对应的色阶调整信息；基于色阶调整信息，对合成后的图像中第一目标信息的色阶进行调整。

对于本申请实施例，通过电子设备中的光线传感器感知当前光线强弱的环境参数，然后通过OpenCV库函数对第一目标信息的RGB三个信道进行整体的色阶调整。

具体地，首先基于当前环境光线强度的参数信息，计算出白场与黑场的离差Diff，即Diff＝Highlight-Shadow，其中Shadow为输入色阶低端数据(黑场)，Highlight为输入色阶高端数据(白场)，然后分别计算各像素点RGB与黑场的离差记为rgbDiff，其中，rgbDiff＝RGB–Shadow，RGB为调整前的像素分量值，若rgbDiff大于0，计算以rgbDiff与Diff的比值为底的灰场倒数的幂，得到调整输入色阶后的像素分量值clRGB，其中，clRGB＝Power(rgbDiff/Diff，1/Midtones)，Midtones为输入色阶中间数据(灰场)，且Diff>0；然后计算输出色阶白场与黑场的离差与255的比值系数，然后用输入色阶调整后的像素分量值乘以该比值系数，并加上输出黑场值，得到全部色阶调整后的像素分量值outClRGB，outClRGB＝clRGB*(outHighlight-outShadow)/255+outShadow，outShadow为输出黑场，outHighlight为输出白场，并对合成后的图像中的第一目标信息进行色阶调整。

对于本申请实施例，通过根据当前环境光线强度的参数信息对合成后的图像中的第一目标信息的色阶进行调整，例如对合成后的图像中的衣服的色阶进行调整，从而可以提升合成后的图像的第一目标信息(衣服)与当前光线的匹配度，进而可以提升虚拟显示的效果。

实施例七

本申请实施例的另一种可能的实现方式，在实施例一至实施例六的任一实施例的基础上还包括实施例七所示的操作，其中，

步骤S104包括：通过将第二图像中的像素覆盖于第三图像的像素上，合成第二图像以及第三图像，以显示合成后的图像。

对于本申请实施例，将第二图像中的像素覆盖于第三图像上的步骤，具体包括：将第二图像中第一目标信息的像素覆盖于第三图像中第二目标信息的对应位置上。

具体地，在第二目标信息拍摄完成之后，获取到仅包含第一目标信息的第二图像以及包含第二目标信息的第三图像，由于在拍摄时已经确保第二图像中的第一目标信息与第三图像中的第二目标信息的位置信息相匹配，因此可以直接将第二图像中第一目标信息的像素覆盖于第三图像中第二目标信息的对应位置，以合成第二图像以及第三图像。

例如，直接将第二图像中衣服的像素覆盖于第三图像中试衣者躯干位置处，以合成第二图像以及第三图像。

对于本申请实施例，通过将第二图像中的像素覆盖与第三图像的像素上，以实现第二图像与第三图像的合成，计算量小，复杂度较低。

实施例八

本申请实施例提供了一种虚拟显示装置，如图2所示，该虚拟显示装置20可以包括：第一获取模块201、提取模块202、生成模块203、第二获取模块204、合成模块205，其中，

第一获取模块201，用于获取包含第一目标信息的第一图像。

其中，第一目标包括鞋子、服装以及饰品中的至少一种。

提取模块202，用于从第一获取模块201获取的第一图像中提取第一目标信息，并通过生成模块203生成第二图像。

第二获取模块204，用于获取包含第二目标信息的第三图像。

其中，第二目标包括人体。

合成模块205，用于将生成模块203生成的第二图像和第二获取模块204获取的第三图像进行合成，以显示合成后的图像。

本申请实施例提供了一种虚拟显示装置，与现有技术中通过将试穿者或者试戴者对应的3D模型与待试商品图片进行匹配相比，本申请实施例获取包含第一目标信息的第一图像，第一目标包括鞋子、服装以及饰品中的至少一种，然后从第一图像中提取第一目标信息，生成第二图像，然后获取包含第二目标信息的第三图像，第二目标包括人体，然后将第二图像和第三图像进行合成，以显示合成后的图像，并且合成后的图像能够显示虚拟试穿服装或者鞋子的效果图像或者虚拟试戴饰品效果的图像，并不需要通过测量试穿者或者试戴者的各项体征信息，建立试穿者或者试戴者对应的3D模型，以显示虚拟试穿或者虚拟试戴的效果图，从而可以降低实现虚拟显示的复杂度以及减少实现虚拟显示的计算量，进而可以降低虚拟显示的成本。

本实施例的虚拟显示装置可执行本申请实施例一提供的一种虚拟显示方法，其实现原理相类似，此处不再赘述。

实施例九

本申请实施例提供了另一种虚拟显示装置，如图3所示，该虚拟显示装置30可以包括：第一获取模块301、提取模块302、生成模块303、第二获取模块304、合成模块305，其中，

第一获取模块301，用于获取包含第一目标信息的第一图像。

其中，第一目标包括鞋子、服装以及饰品中的至少一种。

其中，图3中的第一获取模块301与图2中的第一获取模块201的功能相同或相似。

提取模块302，用于从第一获取模块301获取的第一图像中提取第一目标信息，并通过生成模块303生成第二图像。

其中，图3中的提取模块302与图2中的提取模块202的功能相同或相似。

其中，图3中的生成模块303与图2中的生成模块203的功能相同或相似。

第二获取模块304，用于获取包含第二目标信息的第三图像。

其中，第二目标包括人体。

其中，图3中的第二获取模块304与图2中的第二获取模块204的功能相同或相似。

合成模块305，用于将生成模块303生成的第二图像和第二获取模块304获取的第三图像进行合成，以显示合成后的图像。

其中，图3中的合成模块305与图2中的合成模块205的功能相同或相似。

进一步地，如图3所示，该虚拟显示装置30还包括：确定模块306，其中，

确定模块306，用于确定第一图像中是否包含模特信息。

具体地，当第一图像中不包含模特信息时，提取模块302，具体用于基于边缘检测以及图像分割从第一图像中提取第一目标信息。

当第一图像中包含模特信息时，提取模块302，具体用于基于边缘检测、特征识别以及图像分割，从第一图像中提取第一目标信息。

对于本申请实施例，通过去除第一图像中的背景像素和/或去除目标特征的像素，以从第一图像中提取第一目标信息，从而可以使得第一目标信息像素、背景像素以及目标特征像素的有效分离，例如，衣服像素、背景像素以及模特裸露特征的像素的有效分离，进而可以提升第一目标信息(例如服装像素信息)显示的真实度，进一步提升虚拟显示的效果。

进一步地，如图3所示，该虚拟显示装置30还包括：调整模块307，其中，

当检测到用户触发的尺寸调整操作时，调整模块307，用于调整第一目标信息在第二图像中显示的尺寸。

进一步地，如图3所示，该虚拟显示装置30还包括：显示模块308，其中，

显示模块308，用于显示尺寸调整页面，以使用户触发尺寸调整操作。

其中，尺寸调整操作包括拉伸操作、缩放操作或输入操作中的至少一种。

具体地，当尺寸调整操作为拉伸操作和/或缩放操作时，调整模块307，具体用于按照预设比例对第二图像中的第一目标信息进行拉伸和/或缩放。

当尺寸调整操作为输入操作时，调整模块307，具体用于基于用户输入的尺寸信息调整第一目标信息在第二图像中显示的尺寸。

对于本申请实施例，通过调整第一目标信息在第二图像中显示的尺寸，以使得第一目标信息能覆盖住第二目标信息，例如调整衣服的尺寸，以使得覆盖住试穿者的身体特征，提升虚拟显示的效果。

具体地，第二获取模块304，具体用于获取以第二图像作为前景拍摄的包含第二目标信息的第三图像。

对于本申请实施例，当接收到用户触发的延迟拍摄消息时，在确定出的延迟拍摄时间之后进行拍摄，以使得用户可以在延迟拍摄时间内调整距离以及姿态，例如，试衣者可以在延迟拍摄时间内调整姿态、表情以及距离等，从而可以使得人体特征信息与作为前景的第二图像中的第一目标信息在屏幕中显示位置更加匹配，进而可以提升虚拟显示的效果。

进一步地，如图3所示，该虚拟显示装置30还包括：模糊处理模块309，其中，

模糊处理模块309，用于对合成模块305合成后的图像进行模糊处理。

对于本申请实施例，在合成中的图像中，第二目标信息与第一目标信息的连接处将出现较为明显的边界，因此需要对连接点进行模糊化处理。在本申请实施例中，对连接点进行模糊化处理即对图像中连接点附近的像素进行平均处理，以使得这些像素值越来越接近，以使得人为无法识别这些像素点的差别，已达到模糊化的效果。

具体地，模糊处理模块309包括：第一确定单元3091以及模糊处理单元3092，其中，

第一确定单元3091，用于确定合成后的图像中第一目标信息与第二目标信息的连接位置。

模糊处理单元3092，用于对第一目标信息与第二目标信息的连接位置处的像素进行模糊处理。

进一步地，如图3所示，该虚拟显示装置30还包括：色阶调整处理模块310，其中，

色阶调整处理模块310，用于对合成模块305合成后的图像进行色阶调整处理。

对于本申请实施例，通过对合成后的图像进行模糊处理和/或色阶调整处理，避免了合成后的图像边界突兀的问题，和/或提升合成后的图像的第一目标信息像素(衣服像素)与当前光线的匹配度，进而可以提升虚拟显示的效果。

具体地，色阶调整模块310包括：获取单元3101、第二确定单元3102、色阶调整单元3103，其中，

获取单元3101，用于获取当前环境光线强度的参数信息。

第二确定单元3102，用于基于获取单元3101获取的当前环境光线强度的参数信息，确定合成后的图像中第一目标信息对应的色阶调整信息。

色阶调整单元3103，用于基于第二确定单元3102确定的色阶调整信息，对合成后的图像中第一目标信息的色阶进行调整。

对于本申请实施例，通过根据当前环境光线强度的参数信息对合成后的图像中的第一目标信息的色阶进行调整，例如对合成后的图像中的衣服的色阶进行调整，从而可以提升合成后的图像的第一目标信息(衣服)与当前光线的匹配度，进而可以提升虚拟显示的效果。

本申请实施例提供了一种虚拟显示装置，与现有技术中通过将试穿者或者试戴者对应的3D模型与待试商品图片进行匹配相比，本申请实施例获取包含第一目标信息的第一图像，第一目标包括鞋子、服装以及饰品中的至少一种，然后从第一图像中提取第一目标信息，生成第二图像，然后获取包含第二目标信息的第三图像，第二目标包括人体，然后将第二图像和第三图像进行合成，以显示合成后的图像，并且合成后的图像能够显示虚拟试穿服装或者鞋子的效果图像或者虚拟试戴饰品效果的图像，并不需要通过测量试穿者或者试戴者的各项体征信息，建立试穿者或者试戴者对应的3D模型，以显示虚拟试穿或者虚拟试戴的效果图，从而可以降低实现虚拟显示的复杂度以及减少实现虚拟显示的计算量，进而可以降低虚拟显示的成本。

本实施例的虚拟显示装置可执行本申请实施例一至实施例七任一实施例提供的虚拟显示方法，其实现原理相类似，此处不再赘述。

实施例九

本申请实施例提供了一种电子设备，如图4所示，图4所示的电子设备4000包括：处理器4001和存储器4003。其中，处理器4001和存储器4003相连，如通过总线4002相连。可选地，电子设备4000还可以包括收发器4004。需要说明的是，实际应用中收发器4004不限于一个，该电子设备4000的结构并不构成对本申请实施例的限定。

其中，处理器4001应用于本申请实施例中，用于实现图2或图3所示的第一获取模块、提取模块、生成模块、第二获取模块以及合成模块的功能，以及图3所示的调整模块、确定模块、显示模块、模糊处理模块以及色阶处理模块的功能。收发器4004包括接收机和发射机。

处理器4001可以是CPU，通用处理器，DSP，ASIC，FPGA或者其他可编程逻辑器件、晶体管逻辑器件、硬件部件或者其任意组合。其可以实现或执行结合本申请公开内容所描述的各种示例性的逻辑方框，模块和电路。处理器4001也可以是实现计算功能的组合，例如包含一个或多个微处理器组合，DSP和微处理器的组合等。

总线4002可包括一通路，在上述组件之间传送信息。总线4002可以是PCI总线或EISA总线等。总线4002可以分为地址总线、数据总线、控制总线等。为便于表示，图4中仅用一条粗线表示，但并不表示仅有一根总线或一种类型的总线。

存储器4003可以是ROM或可存储静态信息和指令的其他类型的静态存储设备，RAM或者可存储信息和指令的其他类型的动态存储设备，也可以是EEPROM、CD-ROM或其他光盘存储、光碟存储(包括压缩光碟、激光碟、光碟、数字通用光碟、蓝光光碟等)、磁盘存储介质或者其他磁存储设备、或者能够用于携带或存储具有指令或数据结构形式的期望的程序代码并能够由计算机存取的任何其他介质，但不限于此。

存储器4003用于存储执行本申请方案的应用程序代码，并由处理器4001来控制执行。处理器4001用于执行存储器4003中存储的应用程序代码，以实现图2或图3所示实施例提供的虚拟显示装置的动作。

本申请实施例提供了一种电子设备，与现有技术中通过将试穿者或者试戴者对应的3D模型与待试商品图片进行匹配相比，本申请实施例获取包含第一目标信息的第一图像，第一目标包括鞋子、服装以及饰品中的至少一种，然后从第一图像中提取第一目标信息，生成第二图像，然后获取包含第二目标信息的第三图像，第二目标包括人体，然后将第二图像和第三图像进行合成，以显示合成后的图像，并且合成后的图像能够显示虚拟试穿服装或者鞋子的效果图像或者虚拟试戴饰品效果的图像，并不需要通过测量试穿者或者试戴者的各项体征信息，建立试穿者或者试戴者对应的3D模型，以显示虚拟试穿或者虚拟试戴的效果图，从而可以降低实现虚拟显示的复杂度以及减少实现虚拟显示的计算量，进而可以降低虚拟显示的成本。

本申请实施例提供了一种电子设备适用于上述实施例一至实施例七的任一实施例。在此不再赘述。

实施例十

本申请实施例提供了一种计算机可读存储介质，计算机可读存储介质上存储有计算机程序，该程序被处理器执行时实现实施例一至实施例六任一实施例所示的虚拟显示方法。

本申请实施例提供了一种计算机可读存储介质，与现有技术中通过将试穿者或者试戴者对应的3D模型与待试商品图片进行匹配相比，本申请实施例获取包含第一目标信息的第一图像，然后从第一图像中提取第一目标信息，生成第二图像，然后基于第二图像中第一目标信息的位置信息，获取包含第二目标信息的第三图像，其中第三图像中第二目标信息的位置信息与第二图像中第一目标信息的位置信息相匹配，然后将第二图像以及第三图像进行合成，以显示合成后的图像。例如从待试商品图片中获取仅包含待试商品的图片，并获取与图片中待试商品位置相匹配的试穿者的图片或者试戴者的图片，并将两张图片进行合成，得到试穿效果图片或者试戴效果图片，并不需要通过测量试穿者或者试戴者的各项体征信息，建立试穿者或者试戴者对应的3D模型，以显示虚拟试穿或者虚拟试戴的效果图，从而可以降低实现虚拟显示的复杂度以及减少实现虚拟显示的计算量，进而可以降低虚拟显示的成本。

本申请实施例提供了一种计算机可读存储介质适用于上述实施例一至实施例七中任一实施例，在此不再赘述。

应该理解的是，虽然附图的流程图中的各个步骤按照箭头的指示依次显示，但是这些步骤并不是必然按照箭头指示的顺序依次执行。除非本文中有明确的说明，这些步骤的执行并没有严格的顺序限制，其可以以其他的顺序执行。而且，附图的流程图中的至少一部分步骤可以包括多个子步骤或者多个阶段，这些子步骤或者阶段并不必然是在同一时刻执行完成，而是可以在不同的时刻执行，其执行顺序也不必然是依次进行，而是可以与其他步骤或者其他步骤的子步骤或者阶段的至少一部分轮流或者交替地执行。

以上所述仅是本发明的部分实施方式，应当指出，对于本技术领域的普通技术人员来说，在不脱离本发明原理的前提下，还可以做出若干改进和润饰，这些改进和润饰也应视为本发明的保护范围。

Claims (14)

1.一种虚拟显示方法，其特征在于，包括：

获取包含第一目标信息的第一图像，所述第一目标包括鞋子、服装以及饰品中的至少一种；

从所述第一图像中提取第一目标信息，生成第二图像；

获取包含第二目标信息的第三图像，所述第二目标包括人体；

将所述第二图像和所述第三图像进行合成，以显示合成后的图像；

将所述第二图像以及所述第三图像进行合成，之后还包括：

对合成后的图像进行模糊处理；

所述对合成后的图像进行模糊处理，包括：

确定所述合成后的图像中第一目标信息与第二目标信息的连接位置；

对所述第一目标信息与第二目标信息的连接位置处的像素进行模糊处理；

所述对所述第一目标信息与第二目标信息的连接位置处的像素进行模糊处理，包括：

步骤1、对预设圆内的各像素点进行模糊处理；

其中，所述预设圆的圆心为所述连接位置上任一连接点；所述预设圆的半径为预设值；

步骤2、按照预设步长增大半径，并对增大半径后的圆内的各像素点进行模糊处理；

步骤3、循环步骤2，直至半径增加到预设阈值时，切换圆心为另一个所述连接点，并对切换圆心后的圆内的各像素点进行模糊处理；

循环步骤3，直至半径增大到预设阈值达到预设条件；

所述预设条件为圆心遍历各个所述连接点。

2.根据权利要求1所述的方法，其特征在于，所述方法还包括：

确定所述第一图像中是否包含模特信息；

当所述第一图像中不包含模特信息时，所述从所述第一图像中提取第一目标信息，包括：

基于边缘检测以及图像分割从所述第一图像中提取所述第一目标信息；

当所述第一图像中包含模特信息时，所述从所述第一图像中提取第一目标信息，包括：

基于边缘检测、特征识别以及图像分割，从第一图像中提取所述第一目标信息。

3.根据权利要求1或2所述的方法，其特征在于，

所述获取包含第二目标信息的第三图像，之前还包括：

当检测到用户触发的尺寸调整操作时，调整第一目标信息在第二图像中显示的尺寸。

4.根据权利要求3所述的方法，其特征在于，所述调整第一目标信息在第二图像中显示的尺寸之前，包括：

显示尺寸调整页面，以使用户触发尺寸调整操作，所述尺寸调整操作包括拉伸操作、缩放操作或输入操作中的至少一种；

当所述尺寸调整操作为拉伸操作和/或缩放操作时，所述调整第一目标信息在第二图像中显示的尺寸包括按照预设比例对第二图像中的第一目标信息进行拉伸和/或缩放；

当所述尺寸调整操作为输入操作时，所述调整第一目标信息在第二图像中显示的尺寸包括基于所述用户输入的尺寸信息调整第一目标信息在第二图像中显示的尺寸。

5.根据权利要求1所述的方法，其特征在于，所述获取包含第二目标信息的第三图像，包括：

获取以所述第二图像作为前景拍摄的包含第二目标信息的第三图像。

6.根据权利要求1所述的方法，其特征在于，将所述第二图像以及所述第三图像进行合成，之后还包括：

对合成后的图像进行色阶调整处理；

所述对合成后的图像进行色阶调整处理包括：

获取当前环境光线强度的参数信息；

基于当前环境光线强度的参数信息，确定合成后的图像中第一目标信息对应的色阶调整信息；

基于所述色阶调整信息，对合成后的图像中第一目标信息的色阶进行调整。

7.一种虚拟显示装置，其特征在于，包括：

第一获取模块，用于获取包含第一目标信息的第一图像，所述第一目标包括鞋子、服装以及饰品中的至少一种；

提取模块，用于从所述第一获取模块获取的第一图像中提取第一目标信息，并通过生成模块生成第二图像；

第二获取模块，用于获取包含第二目标信息的第三图像，所述第二目标包括人体；

合成模块，用于将所述生成模块生成的第二图像和所述第二获取模块获取的第三图像进行合成，以显示合成后的图像；

所述装置还包括：模糊处理模块；

所述模糊处理模块，用于对所述合成模块合成后的图像进行模糊处理；

所述模糊处理模块包括：第一确定单元以及模糊处理单元；

所述第一确定单元，用于确定所述合成后的图像中第一目标信息与第二目标信息的连接位置；

所述模糊处理单元，用于对所述第一目标信息与第二目标信息的连接位置处的像素进行模糊处理；

所述模糊处理单元具体用于：

步骤1、对预设圆内的各像素点进行模糊处理；

其中，所述预设圆的圆心为所述连接位置上任一连接点；所述预设圆的半径为预设值；

步骤2、按照预设步长增大半径，并对增大半径后的圆内的各像素点进行模糊处理；

步骤3、循环步骤2，直至半径增加到预设阈值时，切换圆心为另一个所述连接点，并对切换圆心后的圆内的各像素点进行模糊处理；

循环步骤3，直至半径增大到预设阈值达到预设条件；

所述预设条件为圆心遍历各个所述连接点。

8.根据权利要求7所述的装置，其特征在于，所述装置还包括：确定模块；

所述确定模块，用于确定所述第一图像中是否包含模特信息；

当所述第一图像中不包含模特信息时，所述提取模块，具体用于基于边缘检测以及图像分割从所述第一图像中提取所述第一目标信息；

当所述第一图像中包含模特信息时，所述提取模块，具体用于基于边缘检测、特征识别以及图像分割，从第一图像中提取所述第一目标信息。

9.根据权利要求7或8所述的装置，其特征在于，所述装置还包括：调整模块；

当检测到用户触发的尺寸调整操作时，所述调整模块，用于调整第一目标信息在第二图像中显示的尺寸。

10.根据权利要求9所述的装置，其特征在于，所述装置还包括：显示模块；

所述显示模块，用于显示尺寸调整页面，以使用户触发尺寸调整操作，所述尺寸调整操作包括拉伸操作、缩放操作或输入操作中的至少一种；

当所述尺寸调整操作为拉伸操作和/或缩放操作时，所述调整模块，具体用于按照预设比例对第二图像中的第一目标信息进行拉伸和/或缩放；

当所述尺寸调整操作为输入操作时，所述调整模块，具体用于基于所述用户输入的尺寸信息调整第一目标信息在第二图像中显示的尺寸。

11.根据权利要求7所述的装置，其特征在于，

所述第二获取模块，具体用于以所述第二图像作为前景拍摄的包含第二目标信息的第三图像。

12.根据权利要求7所述的装置，其特征在于，所述装置还包括：色阶调整处理模块；

所述色阶调整处理模块，用于对所述合成模块合成后的图像进行色阶调整处理；

所述色阶调整模块包括：获取单元、第二确定单元、色阶调整单元；

所述获取单元，用于获取当前环境光线强度的参数信息；

所述第二确定单元，用于基于所述获取单元获取的当前环境光线强度的参数信息，确定合成后的图像中第一目标信息对应的色阶调整信息；

所述色阶调整单元，用于基于所述第二确定单元确定的所述色阶调整信息，对合成后的图像中第一目标信息的色阶进行调整。

13.一种电子设备，包括：处理器、存储器、通信接口和通信总线，所述处理器、所述存储器和所述通信接口通过所述通信总线完成相互间的通信；

所述存储器用于存放至少一可执行指令，所述可执行指令使所述处理器执行如权利要求1-6中任一项所述的虚拟显示的方法对应的操作。

14.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质上存储有计算机程序，该程序被处理器执行时实现权利要求1-6任一项所述的方法。

Images