CN108510594A - 虚拟试衣方法、装置及终端设备 - Google Patents

虚拟试衣方法、装置及终端设备 Download PDF

Info

Publication number
CN108510594A
CN108510594A CN201810161158.5A CN201810161158A CN108510594A CN 108510594 A CN108510594 A CN 108510594A CN 201810161158 A CN201810161158 A CN 201810161158A CN 108510594 A CN108510594 A CN 108510594A
Authority
CN
China
Prior art keywords
image
dress ornament
target
human body
target user
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201810161158.5A
Other languages
English (en)
Inventor
行长印
周芳慧
栾雨
王鹏
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Jilin Xing's Cartoon Science And Technology Co Ltd
Original Assignee
Jilin Xing's Cartoon Science And Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Jilin Xing's Cartoon Science And Technology Co Ltd filed Critical Jilin Xing's Cartoon Science And Technology Co Ltd
Priority to CN201810161158.5A priority Critical patent/CN108510594A/zh
Publication of CN108510594A publication Critical patent/CN108510594A/zh
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/006—Mixed reality
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/06—Buying, selling or leasing transactions
    • G06Q30/0601—Electronic shopping [e-shopping]
    • G06Q30/0641—Shopping interfaces
    • G06Q30/0643—Graphical representation of items or shoppers
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2200/00—Indexing scheme for image data processing or generation, in general
    • G06T2200/08—Indexing scheme for image data processing or generation, in general involving all processing steps from image acquisition to 3D model generation

Abstract

本发明提供一种虚拟试衣方法、装置及终端设备。其中，虚拟试衣方法包括：获取目标用户的深度影像和彩色影像；根据所述深度影像确定所述目标用户的人体姿态信息，所述人体姿态信息包括：人体轮廓信息和/或人体骨骼信息；确定所述目标用户选取的目标服饰；从所述目标服饰的多幅服饰影像中选出所述目标用户的人体姿态信息相匹配的目标服饰影像，其中，所述服饰影像是从真人模特拍摄的模特影像中提取的；根据所述目标服饰影像和所述彩色影像合成得到虚拟试衣影像。本发明确定的目标服饰影像更加“合身”、质感更好、真实感更强，可以给用户带来更好的代入感，具有更好的试衣效果，可以有效提升用户体验。

Description

虚拟试衣方法、装置及终端设备
技术领域
本发明涉及虚拟现实技术领域，具体涉及一种虚拟试衣方法、装置及终端设备。
背景技术
虚拟试衣是通过虚拟的技术手段，实现用户不用脱去身上衣服而查看变装效果的一种技术，能够为用户带来快捷、方便的试衣体验，在服装网购、远程试衣等领域具有广阔的应用前景。
目前主流的虚拟试衣技术主要分为两类：一类是通过输入用户数据，来定制虚拟的模特形象从而进行粗略的静态试衣；另一类则是通过体感设备捕捉用户数据，然后将服装的2D纹理或者3D模型与用户影像进行合成，从而实现动态实时试衣的效果。两种方法均有利弊：前者服饰用静态图片表示，因此添加服饰所需的处理很简单，但试衣功能非常有限；而后者的话，如果采用2D纹理贴图的方式表示服饰，处理同样简单，但会极大的影响服装的质感，并且实现图片跟随人体变形的效果很困难，如果采用3D模型的话，服饰的建模则会是一个很大的难题。综上，现有主流的虚拟试衣方案仿真效果较差，难以给用户带来良好的代入感，试衣效果不理想，用户体验较差。
鉴于上述问题，目前迫切需要提供一种用户体验良好、实用性强的虚拟试衣方法。
发明内容
鉴于上述问题，本发明的目的是通过提供一种虚拟试衣方法、装置及虚拟试衣终端设备，以解决现有技术中虚拟试衣系统仿真效果较差、难以给用户带来良好的代入感、试衣效果不理想及用户体验较差的问题。
本发明第一方面提供一种虚拟试衣方法，包括：
获取目标用户的深度影像和彩色影像；
根据所述深度影像确定所述目标用户的人体姿态信息，所述人体姿态信息包括：人体轮廓信息和/或人体骨骼信息；
确定所述目标用户选取的目标服饰；
从所述目标服饰的多幅服饰影像中选出所述目标用户的人体姿态信息相匹配的目标服饰影像，其中，所述服饰影像是从真人模特拍摄的模特影像中提取的；
根据所述目标服饰影像和所述彩色影像合成得到虚拟试衣影像。
可选的，所述获取目标用户的深度影像和彩色影像，包括：
获取采用Kinect体感设备采集的目标用户的深度影像和彩色影像。
可选的，所述根据所述深度影像确定所述目标用户的人体姿态信息，包括：
根据所述深度影像，采用基于深度图像的人体轮廓提取技术提取所述目标用户的人体轮廓信息；和/或
根据所述深度影像，采用基于深度图像的人体骨骼提取技术提取所述目标用户的人体骨骼信息。
可选的，在确定所述目标用户选取的目标服饰之前，还包括：
采用Unity引擎构建用户图形界面，其中，所述用户图形界面中设有服饰待选区，所述服饰待选区设有多个待选服饰的示意图。
可选的，所述确定所述目标用户选取的目标服饰，包括：
根据所述深度影像判断所述目标用户的交互手势；
根据所述交互手势在所述服饰待选区中选取至少一个待选服饰作为所述目标用户选取的目标服饰。
可选的，所述确定所述目标用户选取的目标服饰，包括：
接收所述目标用户输入的语音指令；
根据所述语音指令在所述服饰待选区中选取至少一个待选服饰作为所述目标用户选取的目标服饰。
可选的，在从所述目标服饰的多幅服饰影像中选出所述人体姿态信息相匹配的目标服饰影像之前，还包括：
获取目标服饰的多幅模特影像，其中，所述多幅模特影像为拍摄穿戴目标服饰的真人模特得到的；
确定每幅所述模特影像对应的人体姿态信息；
对每幅所述模特影像中的目标服饰进行抠图处理，得到与各人体姿态信息对应的服饰影像；
将所述目标服饰的多幅服饰影像及对应的人体姿态信息存储于服饰影像数据库中。
可选的，所述从所述目标服饰的多幅服饰影像中选出所述人体姿态信息相匹配的目标服饰影像，包括：
遍历所述服饰影像数据库中存储的所述目标服饰的多幅服饰影像，将遍历到的所述服饰影像对应的人体姿态信息与所述目标用户的人体姿态信息进行特征匹配，根据匹配结果确定与所述目标用户的人体姿态信息相匹配的目标服饰影像。
本发明第二方面提供一种虚拟试衣装置，包括：
影像获取模块，用于获取目标用户的深度影像和彩色影像；
姿态信息确定模块，用于根据所述深度影像确定所述目标用户的人体姿态信息，所述人体姿态信息包括：人体轮廓信息和/或人体骨骼信息；
目标服饰选取模块，用于确定所述目标用户选取的目标服饰；
服饰匹配模块，用于从所述目标服饰的多幅服饰影像中选出所述人体姿态信息相匹配的目标服饰影像，其中，所述服饰影像是从真人模特拍摄的模特影像中提取的；
影像合成模块，用于根据所述目标服饰影像和所述彩色影像合成得到虚拟试衣影像。
可选的，所述影像获取模块，包括：
体感影像获取单元，用于获取采用Kinect体感设备采集的目标用户的深度影像和彩色影像。
可选的，所述姿态信息确定模块，包括：
轮廓信息提取单元，用于根据所述深度影像，采用基于深度图像的人体轮廓提取技术提取所述目标用户的人体轮廓信息；和/或
骨骼信息提取单元，用于根据所述深度影像，采用基于深度图像的人体骨骼提取技术提取所述目标用户的人体骨骼信息。
可选的，所述虚拟试衣装置，还包括：
图形界面构建模块，用于采用Unity引擎构建用户图形界面，其中，所述用户图形界面中设有服饰待选区，所述服饰待选区设有多个待选服饰的示意图。
可选的，所述目标服饰选取模块，包括：
手势判断单元，用于根据所述深度影像判断所述目标用户的交互手势；
手势选取单元，用于根据所述交互手势在所述服饰待选区中选取至少一个待选服饰作为所述目标用户选取的目标服饰。
可选的，所述目标服饰选取模块，包括：
语音接收单元，用于接收所述目标用户输入的语音指令；
语音选取单元，用于根据所述语音指令在所述服饰待选区中选取至少一个待选服饰作为所述目标用户选取的目标服饰。
可选的，所述虚拟试衣装置，还包括：
真人影像获取模块，用于获取目标服饰的多幅模特影像，其中，所述多幅模特影像为拍摄穿戴目标服饰的真人模特得到的；
模特姿态确定模块，用于确定每幅所述模特影像对应的人体姿态信息；
抠图模块，用于对每幅所述模特影像中的目标服饰进行抠图处理，得到与各人体姿态信息对应的服饰影像；
数据库添加模块，用于将所述目标服饰的多幅服饰影像及对应的人体姿态信息存储于服饰影像数据库中。
可选的，所述服饰匹配模块，包括：
服饰匹配单元，用于遍历所述服饰影像数据库中存储的所述目标服饰的多幅服饰影像，将遍历到的所述服饰影像对应的人体姿态信息与所述目标用户的人体姿态信息进行特征匹配，根据匹配结果确定与所述目标用户的人体姿态信息相匹配的目标服饰影像。
本发明第三方面提供一种虚拟试衣终端设备，包括：摄像设备、主机和显示设备，所述摄像设备和所述显示设备均与所述主机连接；
所述摄像设备用于采集目标用户的深度影像和彩色影像，并将所述深度影像和所述彩色影像发送至所述主机；
所述主机中设置有存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序，所述处理器运行所述计算机程序时执行本发明提供的虚拟试衣方法，以根据所述深度影像和所述彩色影像生成虚拟试衣影像，并将所述虚拟试衣影像发送至所述显示设备；
所述显示设备用于显示所述虚拟试衣影像。
本发明第一方面提供的虚拟试衣方法，包括：获取目标用户的深度影像和彩色影像；根据所述深度影像确定所述目标用户的人体姿态信息，所述人体姿态信息包括：人体轮廓信息和/或人体骨骼信息；确定所述目标用户选取的目标服饰；从所述目标服饰的多幅服饰影像中选出所述目标用户的人体姿态信息相匹配的目标服饰影像，其中，所述服饰影像是从真人模特拍摄的模特影像中提取的；根据所述目标服饰影像和所述彩色影像合成得到虚拟试衣影像。本发明根据深度影像提取用户的人体姿态信息，进而可以以人体姿态信息为选择依据选取出更加“合身”的目标服饰影像；另外，由于所述服饰影像是从真人模特拍摄的模特影像中提取的，相较于纹理贴图等渲染方式，服饰质感更好、真实感更强，因此，将所述目标服饰影像和所述彩色影像合成得到虚拟试衣影像更加真实，可以给用户带来更好的代入感，具有更好的试衣效果，可以有效提升用户体验。
本发明第二方面提供的虚拟试衣装置、第三方面提供的虚拟试衣终端设备，与上述第一方面提供的虚拟试衣方法出于相同的发明构思，具有相同的有益效果。
附图说明
通过阅读下文优选实施方式的详细描述，各种其他的优点和益处对于本领域普通技术人员将变得清楚明了。附图仅用于示出优选实施方式的目的，而并不认为是对本发明的限制。而且在整个附图中，用相同的参考符号表示相同的部件。在附图中：
图1示出了本发明实施方式所提供的一种虚拟试衣方法的流程图；
图2示出了本发明实施方式所提供的一种虚拟试衣装置的示意图；
图3示出了本发明实施方式所提供的一种虚拟试衣终端设备的结构示意图；
图4示出了本发明实施方式所提供的一种虚拟试衣终端设备中主机的结构示意图；
图5示出了本发明实施方式所提供的一种用户图形界面的示意图。
具体实施方式
下面将参照附图更详细地描述本公开的示例性实施方式。虽然附图中显示了本公开的示例性实施方式，然而应当理解，可以以各种形式实现本公开而不应被这里阐述的实施方式所限制。相反，提供这些实施方式是为了能够更透彻地理解本公开，并且能够将本公开的范围完整的传达给本领域的技术人员。
需要注意的是，除非另有说明，本发明使用的技术术语或者科学术语应当为本发明所属领域技术人员所理解的通常意义。
本发明提供一种虚拟试衣方法、装置及虚拟试衣终端设备。下面结合附图对本发明的实施例进行说明。
请参考图1，其示出了本发明实施方式所提供的一种虚拟试衣方法的流程图，所述虚拟试衣方法包括以下步骤：
步骤S101：获取目标用户的深度影像和彩色影像。
本步骤中，需要获取目标用户的深度影像和彩色影像，其中，所述深度影像可以采用深度摄像头进行采集，深度摄像头除了能够获取平面图像以外，还可以获得拍摄对象的深度信息，也就是三维的位置和尺寸信息，从而获得拍摄对象的三维立体数据。
具体的，本发明实施例可以采用结构光、双目视觉、飞行时间法等任意一种深度信息采集技术的深度摄像头进行深度影像的采集，采用不同技术的深度摄像头具有不同的优点，各深度影像采集技术的基本原理及优点介绍如下，本领域技术人员可以根据实际应用需求灵活选用：
结构光技术是目前最主流、应用最广泛的深度感知方案，其基本原理是由结构光投射器向被测物体表面投射可控制的光点、光条或光面结构，并由图像传感器获得图像，通过系统几何关系，利用三角原理计算得到物体的三维坐标。结构光方案优势在于技术成熟，识别距离远，深度影像分辨率可以做得比较高。
双目视觉技术是指安装两个摄像头，利用双目立体视觉成像原理，通过两个摄像机来提取包括三维位置在内的信息进行深度感知。双目视觉的方案不容易受到环境光线的干扰，适合室外环境，满足7*24小时的长时间工作要求，不易损坏。而且，由于不涉及光学系统，因此双目视觉的成本是三种深度感知方案中最低的。
飞行时间技术，TOF是飞行时间(Time of Flight)技术的缩写，基本原理是传感器发出经调制的近红外光，遇物体后反射，传感器通过计算光线发射和反射时间差或相位差，来换算被拍摄景物的距离，以产生深度信息，此外再结合传统的相机拍摄，就能将物体的三维轮廓以不同颜色代表不同距离的地形图方式呈现出来。飞行时间技术是相对结构光和双目视觉来说受环境影响最小的技术，具有响应速度快、深度信息精度高的优点。
所述彩色影像可以利用普通的摄像机、摄像头、相机等拍摄设备进行采集。需要说明的是，本发明实施例中所述的影像，既可以是静态图像，也可以是动态影像，其均适用于本发明技术方案。
另外，容易理解的是，本发明实施例中，所述彩色影像和所述深度影像应当是针对同一目标用户、在同一角度进行拍摄后获得的，以便于在根据所述深度影像确定目标服饰影像后，可以将所述目标服饰影像与所述目标用户的彩色影像进行较好的合成。
鉴于微软公司开发的游戏体感外设Kinect具有优良的深度信息采集能力和彩色影像采集能力，且为了Kinect功能的扩展，现有技术已经为Kinect提供了功能强大的应用程序编程接口OpenNI(英文全称：Open Natural Interaction，中文名称：开放式的自然交互，是一个多语言，跨平台的框架，它定义了编写应用程序，并利用其自然交互的API。OpenNI API由一组可用来编写通用自然交互应用的接口组成。OpenNI的主要目的是要形成一个标准的API，来搭建视觉和音频传感器与视觉和音频感知中间件通信的桥梁)，为了充分利用现有技术进行产品开发、降低产品开发难度和研发成本，以及获得优良的信息采集结果，在一些实施例中，可以利用现有的Kinect体感设备采集目标用户的深度影像和彩色影像，相应的，所述获取目标用户的深度影像和彩色影像，包括：获取采用Kinect体感设备采集的目标用户的深度影像和彩色影像。
步骤S102：根据所述深度影像确定所述目标用户的人体姿态信息，所述人体姿态信息包括：人体轮廓信息和/或人体骨骼信息。
本步骤中，具体可以包括：根据所述深度影像，采用基于深度图像的人体轮廓提取技术提取所述目标用户的人体轮廓信息；和/或根据所述深度影像，采用基于深度图像的人体骨骼提取技术提取所述目标用户的人体骨骼信息。
其中，基于深度图像的人体轮廓提取技术和基于深度图像的人体骨骼提取技术均为当前体感技术研发领域的热点技术，并已得到较多实用效果良好的技术方案，本发明实施例可以采用现有技术提供的任意实施方式进行实施，本发明不再一一赘述。
在实际应用中，考虑到现有的OpenNI中已集成了人体骨骼生成算法，因此，为了降低开发难度，在一些实施方式中，可以将所述深度影像直接输入至OpenNI进行处理，利用所述OpenNI自带的人体骨骼生成算法直接确定目标用户的人体骨骼信息。
步骤S103：确定所述目标用户选取的目标服饰。
本发明实施例中，可以预先为用户构建一人机交互界面，并在人机交互界面中提供多款待选服饰，由所述目标用户通过人机交互在所述多款待选服饰中选择出目标服饰。其中，人机交互的方式可以是用户通过鼠标、键盘、操控感、手柄等外接设备进行交互，也可以是利用交互手势进行交互，还可以是利用语音控制等方式进行交互，本领域技术人员可以根据实际需求灵活择一或复合使用。
在一些实施方式中，在确定所述目标用户选取的目标服饰之前，还包括：采用Unity引擎构建用户图形界面(英文简称：GUI)，其中，所述用户图形界面中设有服饰待选区，所述服饰待选区设有多个待选服饰的示意图。目标用户通过人机交互即可选择任意一个待选服饰的示意图，系统后台自动选择该示意图所表示的待选服饰作为目标服饰。
Unity(也称Unity 3D)是由Unity Technologies开发的一个让玩家轻松创建诸如三维视频游戏、建筑可视化、实时三维动画等类型互动内容的多平台的综合型游戏开发工具，是一个包括图形、声音、物理等功能的全面整合的专业游戏引擎。由于Unity具有良好的易用性、扩展性和跨平台性能，本发明实施例借鉴其在游戏开发领域的上述优点，跨领域将其引入到虚拟试衣的技术领域中，采用Unity引擎构建用户图形界面，可以有效降低本发明的实施难度、提高产品开发效率、其跨平台性能可以有效降低本发明实施例对硬件的要求，降低实施成本，且可以构建更加友好的用户图形界面。
为了便于理解，请参考图5，其示出了本发明实施方式所提供的一种用户图形界面的示意图，如图所示，所述用户图形界面包括左右两个服饰待选区及中间的虚拟试衣界面，左侧的服饰待选区为服饰类目菜单，按服饰类目将服饰进行了分类，点选不同的服饰类目，可以触发右侧的服饰待选区显示该服饰类目下对应的服饰列表，用户即可以从该服饰列表中选择目标服饰进行虚拟试衣，虚拟试衣影响会在虚拟试衣界面中进行显示，以便于用户观看试衣效果。
考虑到目标用户可能是男士、女士、儿童、老人等不同的用户，不同的用户群体往往需要试穿不同的服饰，如果所述服饰待选区对不同的用户群体都是一样的，则在实际使用中可能因为待选服饰太多而给用户的服饰选择带来困扰，鉴于上述问题，在本发明实施例的一些实施方式中，还可以包括：
根据所述目标用户的深度影像和/或彩色影像，判断所述目标用户的性别和/或年龄；
根据所述目标用户的性别和/或年龄，判断所述目标用户的用户类别；
在服饰待选区中显示与所述目标用户的用户类别相对应的待选服饰。
其中，根据深度影像和/或彩色影像判断用户的性别和/或年龄，可以通过人脸识别方法、形体特征匹配方法等技术实现，上述方法已是现有技术中比较成熟的技术，此处不再赘述。
通过上述实施方式，可以针对不同的用户类别为目标用户呈现不同的待选服饰，从而方便目标用户从中选择目标服饰，可以有效提高服饰选取效率和试衣效率，进一步提升用户体验。
在上述实施方式的基础上，本发明实施例可以采用外接设备交互、手势交互、语音交互等人机交互方式实现目标服饰的选取，例如，在一些实施方式中，所述确定所述目标用户选取的目标服饰，可以包括：
根据所述深度影像判断所述目标用户的交互手势；
根据所述交互手势在所述服饰待选区中选取至少一个待选服饰作为所述目标用户选取的目标服饰。
其中，所述交互手势可以是抓取、挥手、按压、摊手等，不同的交互手势对应不同的交互指令，如选取指令、旋转指令、穿戴指令、脱下指令、保存指令等，在识别出所述目标用户的交互手势后，即可查找对应的交互指令，按照交互指令执行相应的选取服饰、旋转用户虚拟化身、穿戴服饰、脱下服饰、保存虚拟试衣影像等操作。
本发明上述实施方式可以根据所述深度影像确定用户的交互手势，并根据用户的交互手势实现服装选取等交互操作，相较于采用鼠标、键盘等外接设备进行操控的方式，具有更好的交互效果，可以给用户带来更好的代入感和交互感，可有效提升用户体验。
由于OpenNI中已预设有部分手势识别算法，因此，在一些实施方式中，所述根据所述深度影像判断所述目标用户的交互手势，可以是利用OpenNI根据所述深度影像判断所述目标的交互手势，将所述深度影像输入OpenNI，即可调用相关接口确定相应的交互手势。
考虑到抓取手势较为复杂，为了提高对抓取手势识别的准确性，在一些实施方式中，可以采用以下方法进行抓取手势的识别：首先采用最近邻域法从所述深度影像分离出手部深度图；然后对所述手部深度图进行二值化处理，得到二值化图像；接下来从所述二值化图像中提取出手形轮廓；再使用利用重心法优化的Graham扫描算法，从所述手形轮廓中提取出凸包点，将提取出的凸包点作为指尖候选点；然后利用指尖识别算法从所述指尖候选点中提取出指尖凸包点；最后根据指尖的数量，并结合面积比例的方法判定抓取手势。通过上述实施方式，可以更加准确地识别出抓取手势，进而提高人机交互的精准性，提升用户体验。
在另一些实施方式中，所述确定所述目标用户选取的目标服饰，可以包括：
接收所述目标用户输入的语音指令；
根据所述语音指令在所述服饰待选区中选取至少一个待选服饰作为所述目标用户选取的目标服饰。
上述实施方式中，可以采用麦克接收用户输入的语音指令，如用户对着麦克说出“选取5号衣服”、“穿衣”、“脱衣”、“旋转”、“前视”、“后视”、“侧视”等语音指令，本发明实施例即可启动语音转文字引擎，将接收到的语音指令转换成文字指令，并根据文字指令超找对应的交互指令，按照交互指令执行相应的选取5号服饰、穿戴服饰、脱下服饰、旋转用户虚拟化身、采用前视镜头观察、采用后视镜头观察、采用侧视镜头观察等操作。
本发明上述实施方式可以根据用户的语音指令实现服装选取等交互操作，相较于采用鼠标、键盘等外接设备进行操控的方式，交互方式更加方便、简单，具有更好的交互效果，可以给用户带来更好的代入感和交互感，可有效提升用户体验。
考虑到目前移动终端如手机等已经非常普及，用户更加习惯在手机上进行操作，为了满足用户需求，在另一些实施方式中，所述确定所述目标用户选取的目标服饰，还可以包括：
接收移动终端发送的选取指令，所述选取指令包括所述目标用户在移动终端的用户图形界面中选取目标服饰的指令，所述用户图形界面中设有服饰待选区，所述服饰待选区设有多个待选服饰的示意图。
具体的，本发明实施方式，可以在目标用户的移动终端中安装一应用程序，当打开该应用程序后，在移动终端上会显示用户图形界面，这样，目标用户即可在移动终端上进行目标服饰的选取，选取完成后，移动终端将相应的选取指令发送至虚拟试衣终端设备的主机，由主机完成虚拟试衣影像的生成。
需要说明的是，移动终端中的用户图形界面可以如图5所示，主机生成虚拟试衣影像后再将所述虚拟试衣影像发送至所述移动终端，便于目标用户在所述移动终端上查看、保存虚拟试衣影像；另外，移动终端中的用户图形界面也可以在4的基础上去掉虚拟试衣界面，而仅保留服饰待选区，从而扩大服饰待选区，使目标用户可以同时查看更多的待选服饰以方便选择。
由于用户更加习惯在手机上进行操作，采用上述实施方式，可以满足用户在手机上进行服饰选取的需求，便于用户进行操作，另外，用户可以在闲暇时间(如上下班途中、乘车时等)在所述移动终端上选取目标服饰并进行保存，这样，当用户来到虚拟试衣终端设备前时，可以免除选取服饰的漫长过程，直接将已选取的目标服饰的选取指令发送给虚拟试衣终端设备，从而实现快速试衣，提高虚拟试衣的效率，进一步提升用户体验。
在上述实施例说明中，给出了确定所述目标用户选取的目标服饰的多种示意性的实施方式，本领域技术人员可以在上述实施方式的基础上择一、组合和变更实施，其均应在本发明的保护范围之内。
步骤S104：从所述目标服饰的多幅服饰影像中选出所述目标用户的人体姿态信息相匹配的目标服饰影像，其中，所述服饰影像是从真人模特拍摄的模特影像中提取的。
在本发明实施例的一些实施方式中，在本步骤S104之前，还可以包括：
获取目标服饰的多幅模特影像，其中，所述多幅模特影像为拍摄穿戴目标服饰的真人模特得到的；
确定每幅所述模特影像对应的人体姿态信息；
对每幅所述模特影像中的目标服饰进行抠图处理，得到与各人体姿态信息对应的服饰影像；
将所述目标服饰的多幅服饰影像及对应的人体姿态信息存储于服饰影像数据库中。
例如，本发明实施方式，可以使真人模特穿戴目标服饰进行拍摄，可以从不同的拍摄角度、距离进行拍摄，也可以是多个不同体型的真人模特进行拍摄，从而得到目标服饰的多幅模特影像，并在拍摄的同时采集真人模特的深度影像，并根据所述深度影像确定每幅所述模特影像对应的人体姿态信息(具体实施方式可以参照步骤S102部分的说明，此处不再赘述)，然后对每幅所述模特影像中的目标服饰进行抠图处理，即可得到与各人体姿态信息对应的服饰影像，其中，抠图可以使用现有技术提供的抠图算法进行自动抠图，也可以是人工抠图，本发明实施例不做具体限定，最后，将所述目标服饰的多幅服饰影像及对应的人体姿态信息存储于服饰影像数据库中。
通过上述实施方式，获得的服饰影像是基于真人模特试穿得到的，所述服饰影像具有更强的真实感和质感，因此，最终生成的虚拟试衣影像也会具有较强的真实感和质感，仿真效果更好，有助于提升用户体验。
在一些实施方式中，所述步骤S104，可以包括：遍历所述服饰影像数据库中存储的所述目标服饰的多幅服饰影像，将遍历到的所述服饰影像对应的人体姿态信息与所述目标用户的人体姿态信息进行特征匹配，根据匹配结果确定与所述目标用户的人体姿态信息相匹配的目标服饰影像。
通过根据人体姿态信息进行特征匹配，可以得到与目标用户的形体、姿态相匹配的目标服饰影像，从而可以使得最终合成的虚拟试衣影像更加“合身”，具有真实感。
其中，根据人体姿态信息进行特征匹配的方法，可以参照现有的特征匹配方法进行匹配，本发明实施例不做具体限定。
例如，根据人体轮廓信息进行匹配的方法，可以包括：首先计算出目标用户的人体轮廓信息所表示的轮廓的中心点O；以该中心点O为原点，向四周360度的空间内作射线，射线与Y轴的正方向所成的夹角为θ，其取值范围为θ∈[0，359]，如此即可得到360条不同方向的射线；对于每条射线，找出其与人体轮廓最近的交点R1和次近的交点R2，并记录下线段OR1和OR2的长度。通常情况下所有的R1的组和即代表躯干的形状，而大部分的R2的组和代表的则是人体轮廓上手臂和腿的部位。假设使用N台照相机进行拍摄以获取人体轮廓信息，对N台照相机而言，每张图片中将被提取出360*2个特征值，则每张图片对应的特征值总数为N*360*2个。这些特征值组成一个特征向量V：
V＝[v1，v2，…，vN]N∈[1，10]
其中每一维的vi表示如下：
vi＝[P1，P2，…，PM]M∈[0，359]
Vi中的每一维Pj包含两个值，分别为线段OR1的长度d1和线段OR2的长度d2：
Pj＝(d1，d2)
对每张图片得到的向量V进行主成分分析，缩减维数，并对向量进行单位化；利用简单的线性遍历方法遍历数据库，计算特征向量与数据库中各待选服饰的图像的特征向量的欧式距离，并找出距离最小的数据图像，即为目标服饰图像。
又如，根据人体骨骼信息进行匹配的方法，可以包括：根据目标用户的深度影像，通过OpenNI获取目标用户的人体骨骼信息，并构建特征向量，检索服饰影像数据库，进行特征匹配，得到目标服饰影像。
以上示意性给出了根据人体轮廓信息和人体骨骼信息进行匹配的方法，本领域技术人员可以择一变更实施，也可以将上述两种实施方式组合后变更实施，其均在本发明的保护范围之内。
步骤S105：根据所述目标服饰影像和所述彩色影像合成得到虚拟试衣影像。
在找到目标服饰影像后，即可将所述目标服饰影像与所述彩色影像进行合成，以得到虚拟试衣影像，在合成时，可以根据人体姿态信息将所述目标服饰影像合成到人体对应的位置，例如，可以根据人体骨骼信息中肩部骨骼点的位置坐标进行合成。
考虑到，真人模特与目标用户的形体未必完全一致，如果直接将目标服饰影像贴合到人体上，有可能会导致“不合身”，影响试衣效果，因此，在一些实施方式中，还可以根据目标用户的人体姿态信息和所述目标服饰影像对应的人体姿态信息，对所述目标服饰影像进行缩放后，再将缩放后的目标服饰影像与所述彩色影像进行合成，得到虚拟试衣影像。
例如，可以用XRS和XLS分别表示目标用户的人体骨骼信息中左右肩关节的横坐标，X＇RS和X＇LS则表示从服饰影像数据库中检索出的目标服饰影像对应的人体骨骼信息的左右肩关节的横坐标。即可利用scale对目标服饰影像进行缩放，公式如下：
然后参照所述彩色影像中躯干节点的坐标，将目标服饰影像贴合到所述彩色影像中，得到虚拟试衣影像。
通过上述实施方式，可以进一步确保虚拟试衣影像的“合身”，提高虚拟试衣效果的真实感，给用户带来更强的代入感，进一步提升用户体验。
以上，为本发明实施例提供的虚拟试衣方法的示例性说明，本发明实施例提供的虚拟试衣方法，根据深度影像提取用户的人体姿态信息，进而可以以人体姿态信息为选择依据选取出更加“合身”的目标服饰影像；另外，由于所述服饰影像是从真人模特拍摄的模特影像中提取的，相较于纹理贴图等渲染方式，服饰质感更好、真实感更强，因此，将所述目标服饰影像和所述彩色影像合成得到虚拟试衣影像更加真实，可以给用户带来更好的代入感，具有更好的试衣效果，可以有效提升用户体验。
在上述的实施例中，提供了一种虚拟试衣方法，与之相对应的，本发明还提供一种虚拟试衣装置。请参考图2，其为本发明实施方式所提供的一种虚拟试衣装置的示意图。由于装置实施例基本相似于方法实施例，所以描述得比较简单，相关之处参见方法实施例的部分说明即可。下述描述的装置实施例仅仅是示意性的。
如图2所示，本发明实施例提供的一种虚拟试衣装置2，包括：
影像获取模块21，用于获取目标用户的深度影像和彩色影像；
姿态信息确定模块22，用于根据所述深度影像确定所述目标用户的人体姿态信息，所述人体姿态信息包括：人体轮廓信息和/或人体骨骼信息；
目标服饰选取模块23，用于确定所述目标用户选取的目标服饰；
服饰匹配模块24，用于从所述目标服饰的多幅服饰影像中选出所述人体姿态信息相匹配的目标服饰影像，其中，所述服饰影像是从真人模特拍摄的模特影像中提取的；
影像合成模块25，用于根据所述目标服饰影像和所述彩色影像合成得到虚拟试衣影像。
在一些实施方式中，所述影像获取模块21，包括：
体感影像获取单元，用于获取采用Kinect体感设备采集的目标用户的深度影像和彩色影像。
在一些实施方式中，所述姿态信息确定模块22，包括：
轮廓信息提取单元，用于根据所述深度影像，采用基于深度图像的人体轮廓提取技术提取所述目标用户的人体轮廓信息；和/或
骨骼信息提取单元，用于根据所述深度影像，采用基于深度图像的人体骨骼提取技术提取所述目标用户的人体骨骼信息。
在一些实施方式中，所述虚拟试衣装置2，还包括：
图形界面构建模块，用于采用Unity引擎构建用户图形界面，其中，所述用户图形界面中设有服饰待选区，所述服饰待选区设有多个待选服饰的示意图。
在一些实施方式中，所述目标服饰选取模块23，包括：
手势判断单元，用于根据所述深度影像判断所述目标用户的交互手势；
手势选取单元，用于根据所述交互手势在所述服饰待选区中选取至少一个待选服饰作为所述目标用户选取的目标服饰。
在一些实施方式中，所述目标服饰选取模块23，包括：
语音接收单元，用于接收所述目标用户输入的语音指令；
语音选取单元，用于根据所述语音指令在所述服饰待选区中选取至少一个待选服饰作为所述目标用户选取的目标服饰。
在一些实施方式中，所述虚拟试衣装置2，还包括：
真人影像获取模块，用于获取目标服饰的多幅模特影像，其中，所述多幅模特影像为拍摄穿戴目标服饰的真人模特得到的；
模特姿态确定模块，用于确定每幅所述模特影像对应的人体姿态信息；
抠图模块，用于对每幅所述模特影像中的目标服饰进行抠图处理，得到与各人体姿态信息对应的服饰影像；
数据库添加模块，用于将所述目标服饰的多幅服饰影像及对应的人体姿态信息存储于服饰影像数据库中。
在一些实施方式中，所述服饰匹配模块24，包括：
服饰匹配单元，用于遍历所述服饰影像数据库中存储的所述目标服饰的多幅服饰影像，将遍历到的所述服饰影像对应的人体姿态信息与所述目标用户的人体姿态信息进行特征匹配，根据匹配结果确定与所述目标用户的人体姿态信息相匹配的目标服饰影像。
本发明实施例提供的虚拟试衣装置2，与本发明前述实施例提供的虚拟试衣方法出于相同的发明构思，具有相同的有益效果。
在上述的实施例中，提供了一种虚拟试衣方法及装置，与之相对应的，本发明还提供一种虚拟试衣终端设备。请参考图3和图4，图3为本发明实施例提供的一种虚拟试衣终端设备的结构示意图，图4为本发明实施方式所提供的一种虚拟试衣终端设备中主机的结构示意图。如图3、图4所示，所述虚拟试衣终端设备3包括：摄像设备31、主机32和显示设备33，所述摄像设备31和所述显示设备33均与所述主机32连接；
所述摄像设备31用于采集目标用户的深度影像和彩色影像，并将所述深度影像和所述彩色影像发送至所述主机32；
所述主机32中设置有处理器320，存储器321，总线322和通信接口323，所述处理器320、通信接口323和存储器321通过总线322连接；所述存储器321中存储有可在所述处理器320上运行的计算机程序，所述处理器320运行所述计算机程序时执行本发明提供的虚拟试衣方法，以根据所述深度影像和所述彩色影像生成虚拟试衣影像，并将所述虚拟试衣影像发送至所述显示设备33；
所述显示设备33用于显示所述虚拟试衣影像。
其中，所述摄像设备31可以包括深度摄像头和普通摄像头，分别采集深度影像和彩色影像；在一些实施方式中，所述摄像设备31也可以是Kinect体感设备，所述Kinect体感设备不仅可以采集深度影像和彩色影像，还可以根据所述深度影像捕获目标用户的交互手势，从而通过手势交互方式实现人机交互，提高虚拟试衣的交互感，提升用户体验。
所述显示设备33可以是显示屏、投影设备、虚拟现实显示设备等任意显示设备。
存储器321可能包含高速随机存取存储器(RAM：Random Access Memory)，也可能还包括非不稳定的存储器(non-volatile memory)，例如至少一个磁盘存储器。通过至少一个通信接口323(可以是有线或者无线)实现该系统网元与至少一个其他网元之间的通信连接，可以使用互联网、广域网、本地网、城域网等。
总线322可以是ISA总线、PCI总线或EISA总线等。所述总线可以分为地址总线、数据总线、控制总线等。其中，存储器321用于存储程序，所述处理器320在接收到执行指令后，执行所述程序，前述本发明实施例任一实施方式揭示的所述虚拟试衣方法可以应用于处理器320中，或者由处理器320实现。
处理器320可能是一种集成电路芯片，具有信号的处理能力。在实现过程中，上述方法的各步骤可以通过处理器320中的硬件的集成逻辑电路或者软件形式的指令完成。上述的处理器320可以是通用处理器，包括中央处理器(Central Processing Unit，简称CPU)、网络处理器(Network Processor，简称NP)等；还可以是数字信号处理器(DSP)、专用集成电路(ASIC)、现成可编程门阵列(FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。可以实现或者执行本发明实施例中的公开的各方法、步骤及逻辑框图。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。结合本发明实施例所公开的方法的步骤可以直接体现为硬件译码处理器执行完成，或者用译码处理器中的硬件及软件模块组合执行完成。软件模块可以位于随机存储器，闪存、只读存储器，可编程只读存储器或者电可擦写可编程存储器、寄存器等本领域成熟的存储介质中。该存储介质位于存储器321，处理器320读取存储器321中的信息，结合其硬件完成上述方法的步骤。
本发明实施例提供的虚拟试衣终端设备与本发明实施例提供的虚拟试衣方法出于相同的发明构思，具有相同的有益效果。
需要说明的是，附图中的流程图和框图显示了根据本发明的多个实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上，流程图或框图中的每个方框可以代表一个模块、程序段或代码的一部分，所述模块、程序段或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意，在有些作为替换的实现中，方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如，两个连续的方框实际上可以基本并行地执行，它们有时也可以按相反的顺序执行，这依所涉及的功能而定。也要注意的是，框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合，可以用执行规定的功能或动作的专用的基于硬件的系统来实现，或者可以用专用硬件与计算机指令的组合来实现。
所属领域的技术人员可以清楚地了解到，为描述的方便和简洁，上述描述的系统、装置和单元的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。
在本发明所提供的几个实施例中，应该理解到，所揭露的装置和方法，可以通过其它的方式实现。以上所描述的装置实施例仅仅是示意性的，例如，所述单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，又例如，多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些通信接口，装置或单元的间接耦合或通信连接，可以是电性，机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外，在本发明各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。
所述功能如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器(ROM，Read-Only Memory)、随机存取存储器(RAM，Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
最后应说明的是：以上各实施例仅用以说明本发明的技术方案，而非对其限制；尽管参照前述各实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分或者全部技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本发明各实施例技术方案的范围，其均应涵盖在本发明的权利要求和说明书的范围当中。

Claims (10)

1.一种虚拟试衣方法，其特征在于，包括：
获取目标用户的深度影像和彩色影像；
根据所述深度影像确定所述目标用户的人体姿态信息，所述人体姿态信息包括：人体轮廓信息和/或人体骨骼信息；
确定所述目标用户选取的目标服饰；
从所述目标服饰的多幅服饰影像中选出所述目标用户的人体姿态信息相匹配的目标服饰影像，其中，所述服饰影像是从真人模特拍摄的模特影像中提取的；
根据所述目标服饰影像和所述彩色影像合成得到虚拟试衣影像。
2.根据权利要求1所述的虚拟试衣方法，其特征在于，所述获取目标用户的深度影像和彩色影像，包括：
获取采用Kinect体感设备采集的目标用户的深度影像和彩色影像。
3.根据权利要求1所述的虚拟试衣方法，其特征在于，所述根据所述深度影像确定所述目标用户的人体姿态信息，包括：
根据所述深度影像，采用基于深度图像的人体轮廓提取技术提取所述目标用户的人体轮廓信息；和/或
根据所述深度影像，采用基于深度图像的人体骨骼提取技术提取所述目标用户的人体骨骼信息。
4.根据权利要求1所述的虚拟试衣方法，其特征在于，在确定所述目标用户选取的目标服饰之前，还包括：
采用Unity引擎构建用户图形界面，其中，所述用户图形界面中设有服饰待选区，所述服饰待选区设有多个待选服饰的示意图。
5.根据权利要求4所述的虚拟试衣方法，其特征在于，所述确定所述目标用户选取的目标服饰，包括：
根据所述深度影像判断所述目标用户的交互手势；
根据所述交互手势在所述服饰待选区中选取至少一个待选服饰作为所述目标用户选取的目标服饰。
6.根据权利要求4所述的虚拟试衣方法，其特征在于，所述确定所述目标用户选取的目标服饰，包括：
接收所述目标用户输入的语音指令；
根据所述语音指令在所述服饰待选区中选取至少一个待选服饰作为所述目标用户选取的目标服饰。
7.根据权利要求1所述的虚拟试衣方法，其特征在于，在从所述目标服饰的多幅服饰影像中选出所述人体姿态信息相匹配的目标服饰影像之前，还包括：
获取目标服饰的多幅模特影像，其中，所述多幅模特影像为拍摄穿戴目标服饰的真人模特得到的；
确定每幅所述模特影像对应的人体姿态信息；
对每幅所述模特影像中的目标服饰进行抠图处理，得到与各人体姿态信息对应的服饰影像；
将所述目标服饰的多幅服饰影像及对应的人体姿态信息存储于服饰影像数据库中。
8.根据权利要求7所述的虚拟试衣方法，其特征在于，所述从所述目标服饰的多幅服饰影像中选出所述人体姿态信息相匹配的目标服饰影像，包括：
遍历所述服饰影像数据库中存储的所述目标服饰的多幅服饰影像，将遍历到的所述服饰影像对应的人体姿态信息与所述目标用户的人体姿态信息进行特征匹配，根据匹配结果确定与所述目标用户的人体姿态信息相匹配的目标服饰影像。
9.一种虚拟试衣装置，其特征在于，包括：
影像获取模块，用于获取目标用户的深度影像和彩色影像；
姿态信息确定模块，用于根据所述深度影像确定所述目标用户的人体姿态信息，所述人体姿态信息包括：人体轮廓信息和/或人体骨骼信息；
目标服饰选取模块，用于确定所述目标用户选取的目标服饰；
服饰匹配模块，用于从所述目标服饰的多幅服饰影像中选出所述人体姿态信息相匹配的目标服饰影像，其中，所述服饰影像是从真人模特拍摄的模特影像中提取的；
影像合成模块，用于根据所述目标服饰影像和所述彩色影像合成得到虚拟试衣影像。
10.一种虚拟试衣终端设备，其特征在于，包括：摄像设备、主机和显示设备，所述摄像设备和所述显示设备均与所述主机连接；
所述摄像设备用于采集目标用户的深度影像和彩色影像，并将所述深度影像和所述彩色影像发送至所述主机；
所述主机中设置有存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序，所述处理器运行所述计算机程序时执行权利要求1至8任一项所述的虚拟试衣方法，以根据所述深度影像和所述彩色影像生成虚拟试衣影像，并将所述虚拟试衣影像发送至所述显示设备；
所述显示设备用于显示所述虚拟试衣影像。
CN201810161158.5A 2018-02-27 2018-02-27 虚拟试衣方法、装置及终端设备 Pending CN108510594A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810161158.5A CN108510594A (zh) 2018-02-27 2018-02-27 虚拟试衣方法、装置及终端设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810161158.5A CN108510594A (zh) 2018-02-27 2018-02-27 虚拟试衣方法、装置及终端设备

Publications (1)

Publication Number Publication Date
CN108510594A true CN108510594A (zh) 2018-09-07

Family

ID=63375361

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810161158.5A Pending CN108510594A (zh) 2018-02-27 2018-02-27 虚拟试衣方法、装置及终端设备

Country Status (1)

Country Link
CN (1) CN108510594A (zh)

Cited By (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109285057A (zh) * 2018-09-29 2019-01-29 深圳市丰巢科技有限公司 应用于快递柜的服饰获取方法、装置、快递柜和储存介质
CN109508708A (zh) * 2019-01-15 2019-03-22 广州唯品会研究院有限公司 形体数据的测量方法、装置以及计算机可读存储介质
CN109522886A (zh) * 2019-01-15 2019-03-26 广州唯品会研究院有限公司 形体数据的测量方法、装置以及计算机可读存储介质
CN109685633A (zh) * 2019-03-19 2019-04-26 江苏皓之睿数字科技有限公司 一种基于ar技术的服饰尺寸匹配系统
CN109816492A (zh) * 2019-01-29 2019-05-28 许广明 虚拟试衣间的实现方法、终端及介质
CN110363867A (zh) * 2019-07-16 2019-10-22 芋头科技（杭州）有限公司 虚拟装扮系统、方法、设备及介质
CN111275518A (zh) * 2020-01-15 2020-06-12 中山大学 一种基于混合光流的视频虚拟试穿方法及装置
CN111768472A (zh) * 2020-05-29 2020-10-13 北京沃东天骏信息技术有限公司 虚拟试衣方法及装置、计算机可存储介质
CN111787242A (zh) * 2019-07-17 2020-10-16 北京京东尚科信息技术有限公司 用于虚拟试衣的方法和装置
CN111882380A (zh) * 2020-06-30 2020-11-03 飞诺门阵(北京)科技有限公司 一种虚拟试衣的方法、装置、系统及电子设备
CN112232914A (zh) * 2020-10-19 2021-01-15 武汉纺织大学 基于2d图像的四阶段虚拟试衣方法及装置
CN112686733A (zh) * 2021-01-06 2021-04-20 成都高乔科技有限公司 基于大数据的电商产品模拟系统
CN113034219A (zh) * 2021-02-19 2021-06-25 深圳创维－Rgb电子有限公司 虚拟着装方法、装置、设备及计算机可读存储介质
CN114296556A (zh) * 2021-12-31 2022-04-08 苏州欧普照明有限公司 一种基于人体姿态的交互显示方法、装置和系统
TWI808438B (zh) * 2021-06-24 2023-07-11 和碩聯合科技股份有限公司 影像修飾方法與影像修飾裝置

Citations (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102214355A (zh) * 2011-05-20 2011-10-12 西安工程大学 一种服装展示素材的抠图方法
US20120299912A1 (en) * 2010-04-01 2012-11-29 Microsoft Corporation Avatar-based virtual dressing room
CN102831380A (zh) * 2011-06-15 2012-12-19 康佳集团股份有限公司 一种基于深度图像感应的肢体动作识别方法及系统
CN102855470A (zh) * 2012-07-31 2013-01-02 中国科学院自动化研究所 基于深度图像的人体姿态估计方法
CN103106604A (zh) * 2013-01-23 2013-05-15 东华大学 基于体感技术的3d虚拟试衣方法
US20150279098A1 (en) * 2014-03-27 2015-10-01 Electronics And Telecommunications Research Institute Smart device and virtual experience providing server providing virtual experience service method using digitalexperience service method using digital clothes
CN105139446A (zh) * 2015-08-07 2015-12-09 河海大学常州校区 一种基于kinect的全息虚拟试衣系统
CN105389569A (zh) * 2015-11-17 2016-03-09 北京工业大学 一种人体姿态估计方法
CN105843386A (zh) * 2016-03-22 2016-08-10 宁波元鼎电子科技有限公司 一种商场虚拟试衣系统
US20160284017A1 (en) * 2015-03-25 2016-09-29 Optitex Ltd. Systems and methods for generating virtual photoshoots for photo-realistic quality images
CN106056053A (zh) * 2016-05-23 2016-10-26 西安电子科技大学 基于骨骼特征点提取的人体姿势识别方法
CN107230224A (zh) * 2017-05-19 2017-10-03 深圳奥比中光科技有限公司 三维虚拟服装模型制作方法及装置
CN107403436A (zh) * 2017-06-26 2017-11-28 中山大学 一种基于深度图像的人物轮廓快速检测与跟踪方法
CN107613228A (zh) * 2017-09-11 2018-01-19 广东欧珀移动通信有限公司 虚拟服饰的添加方法和终端设备

Patent Citations (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20120299912A1 (en) * 2010-04-01 2012-11-29 Microsoft Corporation Avatar-based virtual dressing room
CN102214355A (zh) * 2011-05-20 2011-10-12 西安工程大学 一种服装展示素材的抠图方法
CN102831380A (zh) * 2011-06-15 2012-12-19 康佳集团股份有限公司 一种基于深度图像感应的肢体动作识别方法及系统
CN102855470A (zh) * 2012-07-31 2013-01-02 中国科学院自动化研究所 基于深度图像的人体姿态估计方法
CN103106604A (zh) * 2013-01-23 2013-05-15 东华大学 基于体感技术的3d虚拟试衣方法
US20150279098A1 (en) * 2014-03-27 2015-10-01 Electronics And Telecommunications Research Institute Smart device and virtual experience providing server providing virtual experience service method using digitalexperience service method using digital clothes
US20160284017A1 (en) * 2015-03-25 2016-09-29 Optitex Ltd. Systems and methods for generating virtual photoshoots for photo-realistic quality images
CN105139446A (zh) * 2015-08-07 2015-12-09 河海大学常州校区 一种基于kinect的全息虚拟试衣系统
CN105389569A (zh) * 2015-11-17 2016-03-09 北京工业大学 一种人体姿态估计方法
CN105843386A (zh) * 2016-03-22 2016-08-10 宁波元鼎电子科技有限公司 一种商场虚拟试衣系统
CN106056053A (zh) * 2016-05-23 2016-10-26 西安电子科技大学 基于骨骼特征点提取的人体姿势识别方法
CN107230224A (zh) * 2017-05-19 2017-10-03 深圳奥比中光科技有限公司 三维虚拟服装模型制作方法及装置
CN107403436A (zh) * 2017-06-26 2017-11-28 中山大学 一种基于深度图像的人物轮廓快速检测与跟踪方法
CN107613228A (zh) * 2017-09-11 2018-01-19 广东欧珀移动通信有限公司 虚拟服饰的添加方法和终端设备

Cited By (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109285057A (zh) * 2018-09-29 2019-01-29 深圳市丰巢科技有限公司 应用于快递柜的服饰获取方法、装置、快递柜和储存介质
CN109508708B (zh) * 2019-01-15 2021-11-16 广州唯品会研究院有限公司 形体数据的测量方法、装置以及计算机可读存储介质
CN109508708A (zh) * 2019-01-15 2019-03-22 广州唯品会研究院有限公司 形体数据的测量方法、装置以及计算机可读存储介质
CN109522886A (zh) * 2019-01-15 2019-03-26 广州唯品会研究院有限公司 形体数据的测量方法、装置以及计算机可读存储介质
CN109522886B (zh) * 2019-01-15 2021-11-30 广州唯品会研究院有限公司 形体数据的测量方法、装置以及计算机可读存储介质
CN109816492A (zh) * 2019-01-29 2019-05-28 许广明 虚拟试衣间的实现方法、终端及介质
CN109816492B (zh) * 2019-01-29 2023-01-03 许广明 虚拟试衣间的实现方法、终端及介质
CN109685633A (zh) * 2019-03-19 2019-04-26 江苏皓之睿数字科技有限公司 一种基于ar技术的服饰尺寸匹配系统
CN110363867A (zh) * 2019-07-16 2019-10-22 芋头科技（杭州）有限公司 虚拟装扮系统、方法、设备及介质
CN111787242B (zh) * 2019-07-17 2021-12-07 北京京东尚科信息技术有限公司 用于虚拟试衣的方法和装置
CN111787242A (zh) * 2019-07-17 2020-10-16 北京京东尚科信息技术有限公司 用于虚拟试衣的方法和装置
US11935167B2 (en) 2019-07-17 2024-03-19 Reling Jingdong Shangke Information Technology Co., Ltd. Method and apparatus for virtual fitting
CN111275518A (zh) * 2020-01-15 2020-06-12 中山大学 一种基于混合光流的视频虚拟试穿方法及装置
CN111275518B (zh) * 2020-01-15 2023-04-21 中山大学 一种基于混合光流的视频虚拟试穿方法及装置
CN111768472A (zh) * 2020-05-29 2020-10-13 北京沃东天骏信息技术有限公司 虚拟试衣方法及装置、计算机可存储介质
CN111882380A (zh) * 2020-06-30 2020-11-03 飞诺门阵(北京)科技有限公司 一种虚拟试衣的方法、装置、系统及电子设备
CN112232914A (zh) * 2020-10-19 2021-01-15 武汉纺织大学 基于2d图像的四阶段虚拟试衣方法及装置
CN112232914B (zh) * 2020-10-19 2023-04-18 武汉纺织大学 基于2d图像的四阶段虚拟试衣方法及装置
CN112686733A (zh) * 2021-01-06 2021-04-20 成都高乔科技有限公司 基于大数据的电商产品模拟系统
CN113034219A (zh) * 2021-02-19 2021-06-25 深圳创维－Rgb电子有限公司 虚拟着装方法、装置、设备及计算机可读存储介质
TWI808438B (zh) * 2021-06-24 2023-07-11 和碩聯合科技股份有限公司 影像修飾方法與影像修飾裝置
CN114296556A (zh) * 2021-12-31 2022-04-08 苏州欧普照明有限公司 一种基于人体姿态的交互显示方法、装置和系统

Similar Documents

Publication Publication Date Title
CN108510594A (zh) 虚拟试衣方法、装置及终端设备
JP6644833B2 (ja) アルベドモデルにより拡張現実コンテンツをレンダリングするシステムおよび方法
US10489956B2 (en) Robust attribute transfer for character animation
CN105528082B (zh) 三维空间及手势识别追踪交互方法、装置和系统
CN105391970B (zh) 提供由车辆的场景相机捕获的至少一个图像的方法和系统
KR101687017B1 (ko) 머리 착용형 컬러 깊이 카메라를 활용한 손 위치 추정 장치 및 방법, 이를 이용한 맨 손 상호작용 시스템
CN104937635B (zh) 基于模型的多假设目标追踪器
JP4768196B2 (ja) ３次元モデリングを行うことなく画像処理によってターゲットを指し示す装置及びその方法
Liu et al. Real-time robust vision-based hand gesture recognition using stereo images
EP3545497B1 (en) System for acquiring a 3d digital representation of a physical object
EP2718903B1 (en) Controlling objects in a virtual environment
CN107004279A (zh) 自然用户界面相机校准
JP7387202B2 (ja) ３次元顔モデル生成方法、装置、コンピュータデバイス及びコンピュータプログラム
JP2022542573A (ja) 衣服の３次元モデルデータを生成するための方法およびコンピュータプログラム製品
CN106896925A (zh) 一种虚拟现实与真实场景融合的装置
CN109271023B (zh) 一种基于三维对象外形轮廓徒手手势动作表达的选择方法
CN104933704B (zh) 一种三维立体扫描方法及系统
CN108416832A (zh) 媒体信息的显示方法、装置和存储介质
JP2017187861A (ja) 情報処理装置およびその制御方法
CN111897422B (zh) 一种虚实物体实时融合的实物交互方法与系统
CN111833457A (zh) 图像处理方法、设备及存储介质
JP2938739B2 (ja) 動画像処理装置
JP2004341642A (ja) 画像合成表示方法、画像合成表示プログラム、並びにこの画像合成表示プログラムを記録した記録媒体
CN110348359A (zh) 手部姿态追踪的方法、装置及系统
CN106997366A (zh) 数据库构建方法、增强现实融合追踪方法及终端设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20180907