CN110706320A - 一种虚拟试衣方法、装置及系统 - Google Patents

Abstract

本申请公开一种虚拟试衣方法、装置及系统。所述方法包括：建立与移动终端的通信连接，接收移动终端发送的试衣信号，启动大屏显示；全角度采集试穿者图像，对采集到的试穿者图像建模得到试穿者模型；将试穿者模型与电子试穿镜CG人台模型进行全角度图像合成，并对合成后的图像进行图像预处理，得到虚拟效果动画；接收试穿者选择的衣物，将选定衣物与虚拟效果动画贴合生成试衣视频，使用预设播放器进行360°匀速播放；当接收到试穿者的下单触发时，将下单指示发送至移动终端进行下单支付。采用本申请提供的电子试衣镜能够实现衣物的大屏试穿，而且可以实现通过电子试衣镜直接进行远程下单支付的功能。

Description

一种虚拟试衣方法、装置及系统

技术领域

本申请涉及虚拟试衣通信领域，尤其涉及一种虚拟试衣方法、装置及系统。

背景技术

随着服装制造成本的不断升高，服装生产自动化、信息化的进程也在不断推进，由此要求服装销售要更加适应经济和社会的发展。传统的服装销售时，主要都是消费者亲自到服饰店直接试衣消费，一般所知的经验中，大多数消费者到服饰店都必须要不断地挑选喜欢的衣服，即使看到喜欢的衣服也必读要试穿，确定衣服的颜色款式是否与脸型身材匹配，因而经常出现衣服款式合适还是上身效果不佳的情况，非常浪费时间。

随着时代及科技进行，市面上出现了许多电子试穿镜，主要包括两类：

(1)2D平面展示，无法转动；

(2)3D立体展示，但是却不能精确实现动作捕捉和贴合，用户体验较差；

现有的上述两类试衣镜都无法稳定地解决360°穿搭替换，而且户外的电子屏幕展示又比较单一，不能实现与试穿者的互动属性。另外，单独的展项无成套的线上线下购物模式，用户不能方便的实现线上试穿下单购物。

发明内容

本申请提供了一种虚拟试衣方法，包括：

建立与移动终端的通信连接，接收移动终端发送的试衣信号，启动大屏显示；

全角度采集试穿者图像，对采集到的试穿者图像建模得到试穿者模型；

将试穿者模型与电子试穿镜CG人台模型进行全角度图像合成，并对合成后的图像进行图像预处理，得到虚拟效果动画；

接收试穿者选择的衣物，将选定衣物与虚拟效果动画贴合生成试衣视频，使用预设播放器进行360°匀速播放；

当接收到试穿者的下单触发时，将下单指示发送至移动终端进行下单支付。

如上所述的虚拟试衣方法，其中，电子穿衣镜定时检测图像采集区域，若连续检测多次图像采集区域内没有试穿者或采集到的图像已与当前图像不同时，则退出与当前移动终端的通信。

如上所述的虚拟试衣方法，其中，将试穿者模型与电子试穿镜CG人台模型进行全角度图像合成，并对合成后的图像进行图像预处理，得到虚拟效果动画，具体包括如下子步骤：

创建初始骨骼节点数组，并为预设CG人台模型添加与初始骨骼节点数组相对应的虚拟骨骼节点，得到绑定骨骼节点的虚拟骨骼模型；

从试穿者模型中获取用户实际骨骼节点，将实际骨骼节点与初始骨骼节点数组相关联，得到试穿者虚拟骨骼节点数组；

将绑定的骨骼节点虚拟骨骼模型与试穿者虚拟骨骼节点数组相关联，得到联动骨骼节点模型；

依据联动骨骼节点模型添加人体皮肤，构建合成后的试穿者图像，对合成后的试穿者图像进行图像预处理，得到虚拟效果动画。

如上所述的虚拟试衣方法，其中，对合成后的试穿者图像进行图像预处理，具体包括：对图像边缘做平滑处理，使图像更自然，然后对图像进行亮度一致性调整、色差一致性校正、图像防抖操作以及图像拼接操作，得到虚拟效果动画。

如上所述的虚拟试衣方法，其中，将选定衣物与虚拟效果动画贴合生成试衣视频，具体为使用贴合匹配算法将选定的衣物与虚拟效果动画进行特征区域面匹配贴合和边缘线匹配贴合，将衣物与试穿者动画进行融合得到试衣视频。

本申请还提供一种虚拟试衣的电子穿衣镜，包括：

通信模块，用于与移动终端建立通信连接，接收移动终端发送的试衣信号，启动大屏显示；还用于在接收到试穿者的下单触发时，将下单指示发送至移动终端进行下单支付。

360°图像采集建模模块，用于全角度采集试穿者图像，对采集到的试穿者图像进行建模得到试穿者模型；

图像合成动画模块，用于运用CG动画技术，将试穿者模型与电子试穿镜CG人台模型进行全角度图像合成，并对合成后的图像进行图像预处理，得到虚拟效果动画；

试衣视频生成播放模块，用于接收试穿者选择的衣物，将选定衣物与虚拟效果动画贴合生成试衣视频，使用预设播放器进行匀速播放。

如上所述的虚拟试衣的电子穿衣镜，其中，所述电子穿衣镜还包括拍摄装置和摄影灯组件，通过旋转电机控制拍摄装置和摄影灯组件围绕试穿者进行360°全角度拍摄，完成全角度图像采集；或，在电子穿衣镜的拍摄区域四周设置拍摄阵列，用于360°拍摄试穿者图像。

如上所述的虚拟试衣的电子穿衣镜，其中，所述图像合成动画模块，具体用于：创建初始骨骼节点数组，并为预设CG人台模型添加与初始骨骼节点数组相对应的虚拟骨骼节点，得到绑定骨骼节点的虚拟骨骼模型；从试穿者模型中获取用户实际骨骼节点，将实际骨骼节点与初始骨骼节点数组相关联，得到试穿者虚拟骨骼节点数组；将绑定的骨骼节点虚拟骨骼模型与试穿者虚拟骨骼节点数组相关联，得到联动骨骼节点模型；依据联动骨骼节点模型添加人体皮肤，构建合成后的试穿者图像，对合成后的试穿者图像进行图像预处理，得到虚拟效果动画。

如上所述的虚拟试衣的电子穿衣镜，其中，所述试衣视频生成播放模块，具体用于将选定衣物与虚拟效果动画贴合生成试衣视频，具体为使用贴合匹配算法将选定的衣物与虚拟效果动画进行特征区域面匹配贴合和边缘线匹配贴合，将衣物与试穿者动画进行融合得到试衣视频。

本申请还提供一种虚拟试衣系统，包括上述电子穿衣镜，还包括移动终端和云端；

所述移动终端用于扫描电子穿衣镜显示屏上的二维码，连接到云端，注册登录云端账号，建立移动终端与电子试穿镜的通信连接；还用于通过云端向电子穿衣镜发送大屏试衣信号；

所述电子穿衣镜还用于通过云端向移动终端发送下单指示；

所述移动终端在接收到下单指示后启动支付界面，完成下单支付。

本申请实现的有益效果如下：采用本申请提供的电子试衣镜能够实现衣物的大屏试穿，而且可以实现通过电子试衣镜直接进行远程下单支付的功能。

附图说明

为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明中记载的一些实施例，对于本领域普通技术人员来讲，还可以根据这些附图获得其他的附图。

图1是本申请实施例一提供的虚拟试衣方法流程图；

图2是本申请实施例二提供的虚拟试衣的电子试穿镜示意图。

具体实施方式

下面结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

实施例一

本申请实施例一提供一种虚拟试衣方法，如图1所示，具体包括如下步骤：

步骤110、电子试穿镜与移动终端建立通信连接；

具体地，电子试穿镜可以通过云端或本地两种通信方式与移动终端进行连接；可选地，在电子试穿镜显示屏上显示多种通信方式，如显示与云端连接的二维码、蓝牙通信等。当用户需要通过云端通信时，则移动终端扫描电子试穿镜显示屏上的二维码，链接到云端，注册登录云端账号，建立移动终端与电子试穿镜的通信连接；当用户需要通过蓝牙通信通信时，在移动终端上选择电子穿衣镜的蓝牙MAC地址，通过蓝牙通道与电子试穿镜建立蓝牙连接；

优选地，为了在试穿者离开之后方便其他试穿者使用电子穿衣镜，电子穿衣镜设定定时检测图像采集区域，若连续检测多次图像采集区域内没有试穿者或采集到的图像已与当前图像不同时，则退出与当前移动终端的通信。

步骤120、电子试穿镜接收移动终端发送的试衣信号，启动大屏显示；

具体地，移动终端在建立与电子穿衣镜的连接后，从云端下载试衣镜APP，在移动终端APP中选择启动大屏试衣功能，移动终端将大屏试衣信号发送至云端，通过云端将大屏试衣信号下达至电子试衣镜，电子试衣镜启动大屏显示。

步骤130、电子穿衣镜全角度采集试穿者图像，对采集到的试穿者图像进行建模得到试穿者模型；

可选地，电子穿衣镜设置有拍摄装置和摄影灯组件，通过旋转电机控制拍摄装置和摄影灯组件围绕试穿者进行360°全角度拍摄，完成全角度图像采集；另外，也可以在电子穿衣镜的拍摄区域四周设置拍摄阵列，用于从多个角度拍摄试穿者的真实状态。

步骤140、电子穿衣镜运用CG动画技术，将试穿者模型与电子试穿镜CG人台模型进行全角度图像合成，并对合成后的图像进行图像预处理，得到虚拟效果动画。

具体地，捕捉试穿者模型的骨骼特征，利用骨骼匹配算法将试穿者模型与预设的CG人台模型按照拍摄的不同角度进行一一合成，合成出不同角度的若干张图像；

其中，利用骨骼匹配算法将试穿者模型与预设的CG人台模型按照拍摄的不同角度进行一一合成，对每个拍摄角度的图像进行如下处理，具体包括如下子步骤：

步骤141、创建初始骨骼节点数组，并为预设CG人台模型添加与初始骨骼节点数组相对应的虚拟骨骼节点，得到绑定骨骼节点的虚拟骨骼模型；

步骤142、从试穿者模型中获取用户实际骨骼节点，将实际骨骼节点与初始骨骼节点数组相关联，得到试穿者虚拟骨骼节点数组；

步骤143、将绑定的骨骼节点虚拟骨骼模型与试穿者虚拟骨骼节点数组相关联，得到联动骨骼节点模型；

步骤144、依据联动骨骼节点模型添加人体皮肤，构建合成后的试穿者图像；

步骤145、对合成后的试穿者图像进行图像预处理，得到虚拟效果动画；

其中，对图像进行预处理包括对图像边缘做平滑处理，使图像更自然，然后对图像进行亮度一致性调整、色差一致性校正、图像防抖操作以及图像拼接操作等，得到虚拟效果动画；具体地，在拍照时拍摄装置按照拍摄角度按顺序为拍摄的图像进行标号，在合成图像之后依然按照标号顺序进行排序，得到虚拟效果动画。

返回参见图1，步骤150、电子穿衣镜接收试穿者选择的衣物，将选定衣物与虚拟效果动画贴合生成试衣视频，使用预设播放器进行匀速播放。

具体地，使用贴合匹配算法依据预设参考点将选定的衣物与虚拟效果动画进行特征区域面和边缘线的图层匹配贴合，将衣物与试穿者动画进行融合得到试衣视频，使用预设播放器进行匀速播放；其中，预设参考点优选为上衣以肩膀为参考点，下衣以腰部作为参考点；

可选地，可以预先在电子穿衣镜中设置多种衣服，由试穿者通过电子穿衣镜屏幕进行滑动选择，也可以在移动终端中选定衣物，通过云端传输至电子穿衣镜，作为试穿者选定的衣物。

步骤160、电子穿衣镜接收试穿者的下单按钮触发，将下单指示传送至移动终端；本申请实施例中，当移动终端接收到下单指示后启动支付界面，完成下单支付。

实施例二

本申请实施例二提供一种虚拟试衣系统，如图2所示，包括电子穿衣镜21、移动终端22和云端23；

移动终端22用于扫描电子穿衣镜21显示屏上的二维码，连接到云端23，注册登录云端账号，建立移动终端22与电子试穿镜21的通信连接；还用于通过云端23向电子穿衣镜21发送大屏试衣信号；

电子穿衣镜21包括通信模块210、360°图像采集建模模块211、图像合成动画模块212和试衣视频生成播放模块213，还包括显示屏幕214；

通信模块210，用于与移动终端建立通信连接，接收移动终端发送的试衣信号，启动大屏显示；还用于在接收到试穿者的下单触发时，将下单指示发送至移动终端进行下单支付。

360°图像采集建模模块211，用于全角度采集试穿者图像，对采集到的试穿者图像进行建模得到试穿者模型；

图像合成动画模块212，用于运用CG动画技术，将试穿者模型与电子试穿镜CG人台模型进行全角度图像合成，并对合成后的图像进行图像预处理，得到虚拟效果动画；

试衣视频生成播放模块213，用于接收试穿者选择的衣物，将选定衣物与虚拟效果动画贴合生成试衣视频，使用预设播放器进行匀速播放。

所述电子穿衣镜还包括拍摄装置和摄影灯组件，通过旋转电机控制拍摄装置和摄影灯组件围绕试穿者进行360°全角度拍摄，完成全角度图像采集；或，在电子穿衣镜的拍摄区域四周设置拍摄阵列，用于360°拍摄试穿者图像。

所述图像合成动画模块212，具体用于：创建初始骨骼节点数组，并为预设CG人台模型添加与初始骨骼节点数组相对应的虚拟骨骼节点，得到绑定骨骼节点的虚拟骨骼模型；从试穿者模型中获取用户实际骨骼节点，将实际骨骼节点与初始骨骼节点数组相关联，得到试穿者虚拟骨骼节点数组；将绑定的骨骼节点虚拟骨骼模型与试穿者虚拟骨骼节点数组相关联，得到联动骨骼节点模型；依据联动骨骼节点模型添加人体皮肤，构建合成后的试穿者图像，对合成后的试穿者图像进行图像预处理，得到虚拟效果动画。

所述试衣视频生成播放模块213，具体用于依据预设参考点将选定的衣物与虚拟效果动画进行特征区域面和边缘线的图层匹配贴合，将衣物与试穿者动画进行融合得到试衣视频，使用预设播放器进行匀速播放。

尽管已描述了本申请的优选实施例，但本领域内的技术人员一旦得知了基本创造性概念，则可对这些实施例作出另外的变更和修改。所以，所附权利要求意欲解释为包括优选实施例以及落入本申请范围的所有变更和修改。显然，本领域的技术人员可以对本申请进行各种改动和变型而不脱离本申请的精神和范围。这样，倘若本申请的这些修改和变型属于本申请权利要求及其等同技术的范围之内，则本申请也意图包含这些改动和变型在内。

Claims (10)

1.一种虚拟试衣方法，其特征在于，包括：

建立与移动终端的通信连接，接收移动终端发送的试衣信号，启动大屏显示；

全角度采集试穿者图像，对采集到的试穿者图像建模得到试穿者模型；

将试穿者模型与电子试穿镜CG人台模型进行全角度图像合成，并对合成后的图像进行图像预处理，得到虚拟效果动画；

接收试穿者选择的衣物，将选定衣物与虚拟效果动画贴合生成试衣视频，使用预设播放器进行360°匀速播放；

当接收到试穿者的下单触发时，将下单指示发送至移动终端进行下单支付。

2.如权利要求1所述的虚拟试衣方法，其特征在于，定时检测图像采集区域，若连续检测多次图像采集区域内没有试穿者或采集到的图像已与当前试穿者图像不同时，则退出与当前移动终端的通信。

3.如权利要求1所述的虚拟试衣方法，其特征在于，将试穿者模型与电子试穿镜CG人台模型进行全角度图像合成，并对合成后的图像进行图像预处理，得到虚拟效果动画，具体包括如下子步骤：

创建初始骨骼节点数组，并为预设CG人台模型添加与初始骨骼节点数组相对应的虚拟骨骼节点，得到绑定骨骼节点的虚拟骨骼模型；

从试穿者模型中获取用户实际骨骼节点，将实际骨骼节点与初始骨骼节点数组相关联，得到试穿者虚拟骨骼节点数组；

将绑定的骨骼节点虚拟骨骼模型与试穿者虚拟骨骼节点数组相关联，得到联动骨骼节点模型；

依据联动骨骼节点模型添加人体皮肤，构建合成后的试穿者图像，对合成后的试穿者图像进行图像预处理，得到虚拟效果动画。

4.如权利要求3所述的虚拟试衣方法，其特征在于，对合成后的试穿者图像进行图像预处理，具体包括：对图像边缘做平滑处理，然后对图像进行亮度一致性调整、色差一致性校正、图像防抖操作以及图像拼接操作，得到虚拟效果动画。

5.如权利要求1所述的虚拟试衣方法，其特征在于，将选定衣物与虚拟效果动画贴合生成试衣视频，具体为依据预设参考点将选定的衣物与虚拟效果动画进行特征区域面和边缘线的图层匹配贴合，将衣物与试穿者动画进行融合得到试衣视频，使用预设播放器进行匀速播放。

6.一种虚拟试衣的电子穿衣镜，其特征在于，包括：

通信模块，用于与移动终端建立通信连接，接收移动终端发送的试衣信号，启动大屏显示；还用于在接收到试穿者的下单触发时，将下单指示发送至移动终端进行下单支付；

360°图像采集建模模块，用于全角度采集试穿者图像，对采集到的试穿者图像进行建模得到试穿者模型；

图像合成动画模块，用于运用CG动画技术，将试穿者模型与电子试穿镜CG人台模型进行全角度图像合成，并对合成后的图像进行图像预处理，得到虚拟效果动画；

试衣视频生成播放模块，用于接收试穿者选择的衣物，将选定衣物与虚拟效果动画贴合生成试衣视频，使用预设播放器进行匀速播放。

7.如权利要求6所述的虚拟试衣的电子穿衣镜，其特征在于，所述电子穿衣镜还包括拍摄装置和摄影灯组件，通过旋转电机控制拍摄装置和摄影灯组件围绕试穿者进行360°全角度拍摄，完成全角度图像采集；或，在电子穿衣镜的拍摄区域四周设置拍摄阵列，用于360°拍摄试穿者图像。

8.如权利要求6所述的虚拟试衣的电子穿衣镜，其特征在于，所述图像合成动画模块，具体用于：创建初始骨骼节点数组，并为预设CG人台模型添加与初始骨骼节点数组相对应的虚拟骨骼节点，得到绑定骨骼节点的虚拟骨骼模型；从试穿者模型中获取用户实际骨骼节点，将实际骨骼节点与初始骨骼节点数组相关联，得到试穿者虚拟骨骼节点数组；将绑定的骨骼节点虚拟骨骼模型与试穿者虚拟骨骼节点数组相关联，得到联动骨骼节点模型；依据联动骨骼节点模型添加人体皮肤，构建合成后的试穿者图像，对合成后的试穿者图像进行图像预处理，得到虚拟效果动画。

9.如权利要求6所述的虚拟试衣的电子穿衣镜，其特征在于，所述试衣视频生成播放模块，具体用于依据预设参考点将选定的衣物与虚拟效果动画进行特征区域面和边缘线的图层匹配贴合，将衣物与试穿者动画进行融合得到试衣视频，使用预设播放器进行匀速播放。

10.一种虚拟试衣系统，其特征在于，包括如权利要求6-9中任意一项所述的电子穿衣镜，还包括移动终端和云端；

所述移动终端用于扫描电子穿衣镜显示屏上的二维码，连接到云端，注册登录云端账号，建立移动终端与电子试穿镜的通信连接；还用于通过云端向电子穿衣镜发送大屏试衣信号；

所述电子穿衣镜还用于通过云端向移动终端发送下单指示；

所述移动终端在接收到下单指示后启动支付界面，完成下单支付。

Images