CN112070575A - 一种虚拟试衣的方法、装置、系统及电子设备 - Google Patents

一种虚拟试衣的方法、装置、系统及电子设备 Download PDF

Info

Publication number
CN112070575A
CN112070575A CN202010761493.6A CN202010761493A CN112070575A CN 112070575 A CN112070575 A CN 112070575A CN 202010761493 A CN202010761493 A CN 202010761493A CN 112070575 A CN112070575 A CN 112070575A
Authority
CN
China
Prior art keywords
image
point information
human body
target object
fitting
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202010761493.6A
Other languages
English (en)
Inventor
汝聪翀
沈寓实
吴昊
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fenomen Array Beijing Technology Co ltd
Original Assignee
Fenomen Array Beijing Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fenomen Array Beijing Technology Co ltd filed Critical Fenomen Array Beijing Technology Co ltd
Priority to CN202010761493.6A priority Critical patent/CN112070575A/zh
Publication of CN112070575A publication Critical patent/CN112070575A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/06—Buying, selling or leasing transactions
    • G06Q30/0601—Electronic shopping [e-shopping]
    • G06Q30/0641—Shopping interfaces
    • G06Q30/0643—Graphical representation of items or shoppers
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T15/00—3D [Three Dimensional] image rendering
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Accounting & Taxation (AREA)
  • Finance (AREA)
  • Multimedia (AREA)
  • Human Computer Interaction (AREA)
  • Development Economics (AREA)
  • Economics (AREA)
  • Marketing (AREA)
  • Strategic Management (AREA)
  • General Business, Economics & Management (AREA)
  • Computer Graphics (AREA)
  • Processing Or Creating Images (AREA)

Abstract

本发明实施例提供了一种虚拟试衣的方法、装置、系统及电子设备，涉及虚拟试衣技术领域。所述方法包括：获取关于目标对象的不同角度的多个第一图像，所述第一图像中包含人体关键点信息和辅助成像点信息；根据所述第一图像中的人体关键点信息和辅助成像点信息，构建关于所述目标对象的三维图像；将所述三维图像与服装样本库中的第一目标服装样本进行合成处理，显示合成处理后的试衣图像。上述方案，不仅可以增强人体运动状态下的三维重构性能，并且还可以提高三维成像的精确度，进一步提升用户体验。

Description

一种虚拟试衣的方法、装置、系统及电子设备
技术领域
本发明涉及虚拟试衣技术领域，尤其涉及一种虚拟试衣的方法、装置、系统及电子设备。
背景技术
随着中国服装电子商务的迅速发展，网上服装销售量迅速增长，其销售比重在整个服装销售中越来越高。与传统的服装销售模式相比，网上服装销售拥有许多不可比拟的优越性。一方面，商场里的衣服琳琅满目，往往不方便一一试穿而做出选择，因而找到合适自己的衣服不是一件易事。另一方面，商场的试衣间往往有限，尤其节假日时试衣间门口往往排着长龙，影响购买者的试衣欲望和购买想法。因此，快速、真实的虚拟试衣技术呼之欲出，逐渐成为企业和研究机构的研发热点。
目前的虚拟试衣技术，多采用单目深度相机进行视频采集，单目深度相机可以提供红绿蓝深度图(Red Green Blue-Depth Map，RGB-D)四个通道的信息，即：红、蓝、绿三种颜色，以及物体表面和相机之间的距离。每个像素都对应真实世界的一个点。得到RGB-D采集信息后，通过三维重构技术完成人体的三维成像，进一步完成虚拟试衣操作。
但是，由于目前深度相机的分辨率普遍不高，再加上物体面与面之间的遮挡关系，深度相机提供的数据相对比较稀疏。此外，在试衣过程中人体会进行摆动、旋转等运动，会进一步增加三维重构的难度，降低三维成像的精确度。
发明内容
本申请实施例的目的是提供一种虚拟试衣的方法、装置、系统及电子设备，能够解决现有试衣过程中人体运动导致三维重构难度大，三维成像的精确度较低的问题。
在本发明实施的第一方面，提供了一种虚拟试衣的方法，所述方法包括：
获取关于目标对象的不同角度的多个第一图像，所述第一图像中包含人体关键点信息和辅助成像点信息；
根据所述第一图像中的人体关键点信息和辅助成像点信息，构建关于所述目标对象的三维图像；
将所述三维图像与服装样本库中的第一目标服装样本进行合成处理，显示合成处理后的试衣图像。
可选的，所述获取关于目标对象的不同角度的多个第一图像，包括：
获取不同角度的多个第一视频，所述第一视频为经过压缩编码的视频；
将所述第一视频进行解压处理，获取解压处理后的第二视频，所述第一图像为所述第二视频中的帧图像。
可选的，在所述获取关于目标对象的不同角度的多个第一图像之后，所述方法还包括：
根据所述第一图像中的人体关键点信息和辅助成像点信息，获取所述目标对象的运动姿态。
可选的，所述将所述三维图像与服装样本库中的第一目标服装样本进行合成处理，显示合成处理后的试衣图像，包括：
根据所述三维图像，识别所述目标对象的人体轮廓；
对所述第一目标服装样本进行处理，获取处理后的第二目标服装样本；
将所述人体轮廓与所述第二目标服装样本进行虚拟缝合，获取虚拟缝合后的缝合图像；
根据所述缝合图像与所述运动姿态，获取并显示所述试衣图像。
可选的，所述人体关键点信息包括：所述目标对象的人体关键点部位的位置信息。
可选的，所述辅助成像点信息包括：所述目标对象上与所述人体关键点部位间隔预设距离的部位的位置信息。
在本发明实施的第二方面，提供了一种虚拟试衣的装置，包括：
第一获取模块，用于获取关于目标对象的不同角度的多个第一图像，所述第一图像中包含人体关键点信息和辅助成像点信息；
第一处理模块，用于根据所述第一图像中的人体关键点信息和辅助成像点信息，构建关于所述目标对象的三维图像；
第二处理模块，用于将所述三维图像与服装样本库中的第一目标服装样本进行合成处理，显示合成处理后的试衣图像。
在本发明实施的第三方面，还提供了一种虚拟试衣的系统，包括：图像采集系统、图像传输系统、图像处理系统以及服装样本库；所述图像采集系统通过所述图像传输系统与所述图像处理系统连接，所述服装样本库与所述图像处理系统连接；
其中，所述图像采集系统采集目标对象不同角度的多个第一视频，并将所述第一视频发送至所述图像传输系统，所述图像传输系统将所述第一视频进行压缩编码，并将压缩编码后的第一视频发送至所述图像处理系统，所述图像处理系统根据所述第一视频中的第一图像中的人体关键点信息和辅助成像点信息，构建关于所述目标对象的三维图像，并将所述三维图像与所述服装样本库中的第一目标服装样本进行合成处理，显示合成处理后的试衣图像。
在本发明实施的第四方面，还提供了一种电子设备，包括处理器，存储器及存储在所述存储器上并可在所述处理器上运行的程序或指令，所述程序或指令被所述处理器执行时实现如上所述的虚拟试衣的方法的步骤。
在本发明实施的第五方面，还提供了一种计算机可读存储介质，所述可读存储介质上存储程序或指令，所述程序或指令被处理器执行时实现如上所述的虚拟试衣的方法的步骤。
针对在先技术，本发明具备如下优点：
本发明实施例中，通过获取关于目标对象的不同角度的多个第一图像，所述第一图像中包含人体关键点信息和辅助成像点信息，根据所述人体关键点信息和辅助成像点信息，构建关于所述目标对象的三维图像，并将所述三维图像与服装样本库中的第一目标服装样本进行合成处理，显示合成处理后的试衣图像，不仅可以增强人体运动状态下的三维重构性能，并且还可以提高三维成像的精确度，进一步提升用户体验。
上述说明仅是本发明技术方案的概述，为了能够更清楚了解本发明的技术手段，而可依照说明书的内容予以实施，并且为了让本发明的上述和其它目的、特征和优点能够更明显易懂，以下特举本发明的具体实施方式。
附图说明
通过阅读下文优选实施方式的详细描述，各种其他的优点和益处对于本领域普通技术人员将变得清楚明了。附图仅用于示出优选实施方式的目的，而并不认为是对本发明的限制。而且在整个附图中，用相同的参考符号表示相同的部件。在附图中：
图1为本发明实施例提供的虚拟试衣的系统的框图；
图2为本发明实施例提供的图像采集系统的框图；
图3为本发明实施例提供的虚拟试衣的方法的流程示意图；
图4为本发明实施例提供的虚拟试衣的装置的框图；
图5为本发明实施例提供的电子设备的框图。
具体实施方式
下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。
本申请的说明书和权利要求书中的术语“第一”、“第二”等是用于区别类似的对象，而不用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换，以便本申请的实施例能够以除了在这里图示或描述的那些以外的顺序实施，且“第一”、“第二”等所区分的对象通常为一类，并不限定对象的个数，例如第一对象可以是一个，也可以是多个。此外，说明书以及权利要求中“和/或”表示所连接对象的至少其中之一，字符“/”，一般表示前后关联对象是一种“或”的关系。
如图1所示，本发明实施例提供了一种虚拟试衣的系统，包括：图像采集系统11、图像传输系统12、图像处理系统13以及服装样本库14；所述图像采集系统11通过所述图像传输系统12与所述图像处理系统13连接，所述服装样本库14与所述图像处理系统13连接；
其中，所述图像采集系统11采集目标对象不同角度的多个第一视频，并将所述第一视频发送至所述图像传输系统12，所述图像传输系统12将所述第一视频进行压缩编码，并将压缩编码后的第一视频发送至所述图像处理系统13，所述图像处理系统13根据所述第一视频中的第一图像中的人体关键点信息和辅助成像点信息，构建关于所述目标对象的三维图像，并将所述三维图像与所述服装样本库14中的第一目标服装样本进行合成处理，显示合成处理后的试衣图像。
具体的，如图2所示，所述图像采集系统11可以包括主摄像机和辅摄像机，所述主摄像机可以包括第一摄像机111，所述辅摄像机可以包括第二摄像机112和第三摄像机113。所述第一摄像机111可以采用高清单目深度相机，负责采集目标对象的正面图像，主要可以获得人脸表情、身体轮廓等主要数据，所述第一摄像机拍摄的高清图像用于整体成像恢复、人脸识别、人体轮廓细节提取等。此外，辅摄相机(如：第二摄像机112和第三摄像机113)以一定倾斜度放置在目标对象侧面的不同位置，辅摄像机可以采用精度相对较低的红外摄像机，它的主要目的是获取不同角度的人体三维轮廓，以便更好地重构三维人体图像和虚拟试衣图像。主摄像机和辅摄像机的视频数据可以以同步方式进行采集，并发送至图像传输系统12(图像传输系统12即为多路视频传输系统)。图像传输系统12可以通过压缩视频编码技术将多路第一视频进行压缩编码之后传输给后续的图像处理系统13(图像处理系统13即为多路视频处理系统)，可以降低传输带宽。其中，压缩编码可以为基于离散余弦变换(Discrete Cosine Transform，DCT)的压缩编码，或者是基于离散小波变换(DiscreteWavelet Transformation，DWT)的压缩编码，在此不做限定。
需要说明的是，上述主摄像机和辅摄像机的数量、位置、角度等仅为示例，在此并不具体限定。
具体的，如图3所示，本发明实施例提供了一种虚拟试衣的方法，所述虚拟试衣的方法应用于图像处理系统13，所述方法包括：
步骤301，获取关于目标对象的不同角度的多个第一图像，所述第一图像中包含人体关键点信息和辅助成像点信息。
具体的，首先获取关于所述目标对象多个第一图像，多个第一图像可以为不同角度的图像。每一个所述第一图像中不仅包含目标对象的人体关键点信息，还包含辅助目标对象成像的辅助成像点信息。
可选的，所述人体关键点信息可以包括：所述目标对象的人体关键点部位的位置信息。
具体的，所述人体关键点部位可以包括人体的头、颈、肩等人体特征部位。人体关键点部位的位置信息为每个人体关键点部位的坐标位置。
可选的，所述辅助成像点信息包括：所述目标对象上与所述人体关键点部位间隔预设距离的部位的位置信息。
具体的，所述目标对象身上设置有多个辅助成像点，辅助成像点的位置可以为人体关键点部位的周围，即与所述人体关键点部位的坐标位置间隔预设距离的坐标位置，辅助成像点设置在人体关键点部位的周围，可以用于辅助识别出人体关键点部位的精确轮廓，进一步识别出整个人体的外部轮廓。所述辅助成像点也可以设置在人体关键点之外的其他位置，用于辅助目标对象除所述人体关键点之外的其他位置的人体轮廓。
需要说明的是，所述预设距离可以为一具体距离数值，也可以为距离范围值，用于判定该位置是否符合作为辅助成像点的距离限值。如果所述预设距离为一距离范围值，则目标对象上与所述人体关键点部位间隔的距离在预设距离之内的部位均可以设置为辅助成像点。
其中，辅助成像点可以通过贴片、设置发光二极管(Light-Emitting Diode，LED)等方式定位实现，可以进一步增强数据拼接以及人体轮廓细节恢复的效果，并且可以在后续三维人体重构时，可以通过识别辅助成像点的方式，高精度的识别出人体轮廓的细节。
步骤302，根据所述第一图像中的人体关键点信息和辅助成像点信息，构建关于所述目标对象的三维图像。
具体的，对于多幅图像的数据拼接及融合，一般是依据曲面特征得到匹配点或者是手动标记。手动标记由于需要人工干预，无法做到实时拼接，只适用于静态测试阶段。因此需要通过曲面特征获得的匹配点的方式进行图像拼接。此外，对于三维重构及虚拟试衣，人体轮廓细节部分的识别、匹配也直接决定了虚拟试衣系统的效果和用户体验。本发明实施例采用特征电匹配算法进行数据拼接和三维重构，可以进一步增强三维重构及虚拟试衣的性能。
这里，可以将人体关键点和辅助成像点作为锚点，锚点的位置信息作为先验信息，计算匹配误差并惊醒迭代，不断减小匹配误差，可以达到较优的匹配效果。其中，基于特征点匹配算法不断迭代的算法流程为：输入数据为包含源点集P和目标点集Q的两个点云数据集合，特征点匹配算法通过搜索相应的匹配点对，计算变换矩阵，再统一源点和目标点的坐标系，计算变换后两个点云的误差函数，然后判断误差函数是否满足小于预设阈值的条件，如不满足条件则再次进行迭代，直至误差函数小于预设阈值。
步骤303，将所述三维图像与服装样本库中的第一目标服装样本进行合成处理，显示合成处理后的试衣图像。
具体的，所述服装样本库中包含多个服装样本，在所述多个服装样本中选择并确定需要试穿的服装样本为第一服装样本，通过对所述三维图像与所述第一目标服装样本的合成处理，获取合成处理后的试衣图像，并显示所述试衣图像，以供用户观看试衣效果。
本发明上述实施例中，通过获取关于目标对象的不同角度的多个第一图像，所述第一图像中包含人体关键点信息和辅助成像点信息，根据所述人体关键点信息和辅助成像点信息，构建关于所述目标对象的三维图像，并将所述三维图像与服装样本库中的第一目标服装样本进行合成处理，显示合成处理后的试衣图像，不仅可以增强人体运动状态下的三维重构性能，并且还可以提高三维成像的精确度，进一步提升用户体验。
可选的，所述步骤301具体可以包括：
获取不同角度的多个第一视频，所述第一视频为经过压缩编码的视频；
将所述第一视频进行解压处理，获取解压处理后的第二视频，所述第一图像为所述第二视频中的帧图像。
具体的，首先接收压缩编码之后的第一视频，所述第一视频的数量为多个，分别为不同角度拍摄的视频。然后将所述第一视频进行解压处理，获取解压后的第二视频，每一个所述第二视频中均包含多个帧图像，所述第一图像即为所述第二视频中的帧图像。
可选的，在所述步骤301之后，所述方法还可以包括：
根据所述第一图像中的人体关键点信息和辅助成像点信息，获取所述目标对象的运动姿态。
具体的，根据所述三维人体重构算法的不同，可以将所述第一图像进行三维人体重构的过程中的中间数据作为获取所述目标对象的运动姿态的参数。
例如：如果三维人体重构的方法采用特征点匹配算法，则三维人体重构的处理流程为：根据所述第一图像中的人体关键点信息和辅助成像点信息，进行三维人体重构，在三维人体重构过程中，可以得到中间数据，即图像的特征点数据；根据所述特征点数据，可以获取目标对象的运动姿态。并且，根据所述特征点数据，可以继续人体三维重构过程，获取所述目标对象的三维图像，能够进一步减少虚拟试衣过程的复杂程度。
可选的，在获取所述目标对象的第一图像之后，可以根据所述第一图像中的人体关键点信息和辅助成像点信息进行三维人体重构，从而可以构建出关于所述目标对象的三维图像。可以直接根据所述第一图像中的人体关键点信息和辅助成像点信息获取所述目标对象的运动姿态，如：根据连续的多个所述第一图像中的人体关键点信息和辅助成像点信息可以获取目标对象的运动趋势，从而获取所述目标对象的运动姿态。或者，可以根据所述三维图像中的人体关键点信息和辅助成像点信息获取所述目标对象的运动姿态。或者，可以根据所述三维图像中的人体关键点信息和辅助成像点信息以及所述第一图像中的人体关键点信息和辅助成像点信息获取所述目标对象的运动姿态，在此不做具体限定。
可选的，所述步骤303，具体可以包括：
根据所述三维图像，识别所述目标对象的人体轮廓；
对所述第一目标服装样本进行处理，获取处理后的第二目标服装样本；
将所述人体轮廓与所述第二目标服装样本进行虚拟缝合，获取虚拟缝合后的缝合图像；
根据所述缝合图像与所述运动姿态，获取并显示所述试衣图像。
具体的，根据所述三维图像中的人体关键点信息和辅助成像点信息，可以识别出所述目标对象的人体轮廓，换句话说，需要通过人体图像识别算法从三维图像中自动识别出人体轮廓，以便进行后续的虚拟缝合。然后从服装样本库中确定需要试穿的第一目标服装样本，并通过服装衣料构建算法对所述第一目标服装样本进行处理(如：服装变形处理、服装效果模拟处理等)，获取处理后的第二目标服装样本；然后将所述人体轮廓与所述第二目标服装样本进行虚拟缝合，可以获得虚拟缝合后的缝合图像，并根据所述缝合图像与所述运动姿态，可以获取试衣图像，并输出试衣图像，以供用户观看试衣效果。
需要说明的是，所述运动姿态可以包括人体的姿态角度、人体的运动方向(或者为人体的运动趋势的方向、人体转角方向)等，在此不做具体限定。
综上所述，本发明实施例中，通过获取关于目标对象的不同多角度的第一图像，根据所述人体关键点信息和辅助成像点信息，构建关于所述目标对象的三维图像，并将所述三维图像与服装样本库中的第一目标服装样本进行合成处理，显示合成处理后的试衣图像，不仅可以增强人体运动状态下的三维重构性能及速度，并且还可以提高三维成像的精确度和虚拟缝合的匹配精度，进一步提升用户体验。
如图4所示，本发明实施例提供的一种虚拟试衣的装置400，包括：
第一获取模块401，用于获取关于目标对象的不同角度的多个第一图像，所述第一图像中包含人体关键点信息和辅助成像点信息；
第一处理模块402，用于根据所述第一图像中的人体关键点信息和辅助成像点信息，构建关于所述目标对象的三维图像；
第二处理模块403，用于将所述三维图像与服装样本库中的第一目标服装样本进行合成处理，显示合成处理后的试衣图像。
本发明上述实施例中，通过第一获取模块401获取关于目标对象的不同角度的多个第一图像，所述第一图像中包含人体关键点信息和辅助成像点信息，第一处理模块402根据所述人体关键点信息和辅助成像点信息，构建关于所述目标对象的三维图像，第二处理模块403将所述三维图像与服装样本库中的第一目标服装样本进行合成处理，显示合成处理后的试衣图像，不仅可以增强人体运动状态下的三维重构性能，并且还可以提高三维成像的精确度，进一步提升用户体验。
可选的，所述第一获取模块401，包括：
第一获取单元，用于获取不同角度的多个第一视频，所述第一视频为经过压缩编码的视频；
第二获取单元，用于将所述第一视频进行解压处理，获取解压处理后的第二视频，所述第一图像为所述第二视频中的帧图像。
可选的，所述装置还包括：
第二获取模块，用于根据所述第一图像中的人体关键点信息和辅助成像点信息，获取所述目标对象的运动姿态。
可选的，所述第二处理模块403，包括：
识别单元，用于根据所述三维图像，识别所述目标对象的人体轮廓；
第三获取单元，用于对所述第一目标服装样本进行处理，获取处理后的第二目标服装样本；
第四获取单元，用于将所述人体轮廓与所述第二目标服装样本进行虚拟缝合，获取虚拟缝合后的缝合图像；
第五获取单元，用于根据所述缝合图像与所述运动姿态，获取并显示所述试衣图像。
可选的，所述人体关键点信息包括：所述目标对象的人体关键点部位的位置信息。
可选的，所述辅助成像点信息包括：所述目标对象上与所述人体关键点部位间隔预设距离的部位的位置信息。
综上所述，本发明实施例中，通过获取关于目标对象的不同多角度的第一图像，根据所述人体关键点信息和辅助成像点信息，构建关于所述目标对象的三维图像，并将所述三维图像与服装样本库中的第一目标服装样本进行合成处理，显示合成处理后的试衣图像，不仅可以增强人体运动状态下的三维重构性能及速度，并且还可以提高三维成像的精确度和虚拟缝合的匹配精度，进一步提升用户体验。
需要说明的是，该虚拟试衣的装置实施例是与上述虚拟试衣的方法相对应的装置，上述方法实施例的所有实现方式均适用于该装置实施例中，也能达到与其相同的技术效果，在此不再赘述。
本发明实施例还提供了一种电子设备，如图5所示，包括处理器501、通信接口502、存储器503和通信总线504，其中，处理器501，通信接口502，存储器503通过通信总线504完成相互间的通信。
存储器503，用于存放计算机程序。
在电子设备为终端设备时，处理器501用于执行存储器503上所存放的程序时，实现如下步骤：
获取关于目标对象的不同角度的多个第一图像，所述第一图像中包含人体关键点信息和辅助成像点信息；
根据所述第一图像中的人体关键点信息和辅助成像点信息，构建关于所述目标对象的三维图像；
将所述三维图像与服装样本库中的第一目标服装样本进行合成处理，显示合成处理后的试衣图像。
可选的，所述处理器501用于执行存储器503上所存放的上述程序时，具体实现如下步骤：
获取不同角度的多个第一视频，所述第一视频为经过压缩编码的视频；
将所述第一视频进行解压处理，获取解压处理后的第二视频，所述第一图像为所述第二视频中的帧图像。
可选的，在所述获取关于目标对象的不同角度的多个第一图像之后，所述处理器501用于执行存储器503上所存放的程序时，还实现如下步骤：
根据所述第一图像中的人体关键点信息和辅助成像点信息，获取所述目标对象的运动姿态。
可选的，所述处理器501用于执行存储器503上所存放的上述程序时，具体实现如下步骤：
根据所述三维图像，识别所述目标对象的人体轮廓；
对所述第一目标服装样本进行处理，获取处理后的第二目标服装样本；
将所述人体轮廓与所述第二目标服装样本进行虚拟缝合，获取虚拟缝合后的缝合图像；
根据所述缝合图像与所述运动姿态，获取并显示所述试衣图像。
可选的，所述人体关键点信息包括：所述目标对象的人体关键点部位的位置信息。
可选的，所述辅助成像点信息包括：所述目标对象上与所述人体关键点部位间隔预设距离的部位的位置信息。
上述电子设备提到的通信总线可以是外设部件互连标准(Peripheral ComponentInterconnect，简称PCI)总线或扩展工业标准结构(Extended Industry StandardArchitecture，简称EISA)总线等。该通信总线可以分为地址总线、数据总线、控制总线等。为便于表示，图中仅用一条粗线表示，但并不表示仅有一根总线或一种类型的总线。
通信接口用于上述终端与其他设备之间的通信。
存储器可以包括随机存取存储器(Random Access Memory，简称RAM)，也可以包括非易失性存储器(non-volatile memory)，例如至少一个磁盘存储器。可选的，存储器还可以是至少一个位于远离前述处理器的存储装置。
上述的处理器可以是通用处理器，包括中央处理器(Central Processing Unit，简称CPU)、网络处理器(Network Processor，简称NP)等；还可以是数字信号处理器(Digital Signal Processing，简称DSP)、专用集成电路(Application SpecificIntegrated Circuit，简称ASIC)、现场可编程门阵列(Field－Programmable Gate Array，简称FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。
在本发明提供的又一实施例中，还提供了一种计算机可读存储介质，该计算机可读存储介质中存储有指令，当其在计算机上运行时，使得计算机执行上述实施例中所述的虚拟试衣的方法。
在本发明提供的又一实施例中，还提供了一种包含指令的计算机程序产品，当其在计算机上运行时，使得计算机执行上述实施例中所述的虚拟试衣的方法。
在上述实施例中，可以全部或部分地通过软件、硬件、固件或者其任意组合来实现。当使用软件实现时，可以全部或部分地以计算机程序产品的形式实现。所述计算机程序产品包括一个或多个计算机指令。在计算机上加载和执行所述计算机程序指令时，全部或部分地产生按照本发明实施例所述的流程或功能。所述计算机可以是通用计算机、专用计算机、计算机网络、或者其他可编程装置。所述计算机指令可以存储在计算机可读存储介质中，或者从一个计算机可读存储介质向另一个计算机可读存储介质传输，例如，所述计算机指令可以从一个网站站点、计算机、服务器或数据中心通过有线(例如同轴电缆、光纤、数字用户线(DSL))或无线(例如红外、无线、微波等)方式向另一个网站站点、计算机、服务器或数据中心进行传输。所述计算机可读存储介质可以是计算机能够存取的任何可用介质或者是包含一个或多个可用介质集成的服务器、数据中心等数据存储设备。所述可用介质可以是磁性介质，(例如，软盘、硬盘、磁带)、光介质(例如，DVD)、或者半导体介质(例如固态硬盘Solid State Disk(SSD))等。
需要说明的是，在本文中，诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
本说明书中的各个实施例均采用相关的方式描述，各个实施例之间相同相似的部分互相参见即可，每个实施例重点说明的都是与其他实施例的不同之处。尤其，对于系统实施例而言，由于其基本相似于方法实施例，所以描述的比较简单，相关之处参见方法实施例的部分说明即可。
以上所述仅为本发明的较佳实施例而已，并非用于限定本发明的保护范围。凡在本发明的精神和原则之内所作的任何修改、等同替换、改进等，包含在本发明的保护范围内。

Claims (10)

1.一种虚拟试衣的方法，其特征在于，包括：
获取关于目标对象的不同角度的多个第一图像，所述第一图像中包含人体关键点信息和辅助成像点信息；
根据所述第一图像中的人体关键点信息和辅助成像点信息，构建关于所述目标对象的三维图像；
将所述三维图像与服装样本库中的第一目标服装样本进行合成处理，显示合成处理后的试衣图像。
2.根据权利要求1所述的方法，其特征在于，所述获取关于目标对象的不同角度的多个第一图像，包括：
获取不同角度的多个第一视频，所述第一视频为经过压缩编码的视频；
将所述第一视频进行解压处理，获取解压处理后的第二视频，所述第一图像为所述第二视频中的帧图像。
3.根据权利要求1所述的方法，其特征在于，在所述获取关于目标对象的不同角度的多个第一图像之后，所述方法还包括：
根据所述第一图像中的人体关键点信息和辅助成像点信息，获取所述目标对象的运动姿态。
4.根据权利要求3所述的方法，其特征在于，所述将所述三维图像与服装样本库中的第一目标服装样本进行合成处理，显示合成处理后的试衣图像，包括：
根据所述三维图像，识别所述目标对象的人体轮廓；
对所述第一目标服装样本进行处理，获取处理后的第二目标服装样本；
将所述人体轮廓与所述第二目标服装样本进行虚拟缝合，获取虚拟缝合后的缝合图像；
根据所述缝合图像与所述运动姿态，获取并显示所述试衣图像。
5.根据权利要求1所述的方法，其特征在于，所述人体关键点信息包括：所述目标对象的人体关键点部位的位置信息。
6.根据权利要求5所述的方法，其特征在于，所述辅助成像点信息包括：所述目标对象上与所述人体关键点部位间隔预设距离的部位的位置信息。
7.一种虚拟试衣的装置，其特征在于，包括：
第一获取模块，用于获取关于目标对象的不同角度的多个第一图像，所述第一图像中包含人体关键点信息和辅助成像点信息；
第一处理模块，用于根据所述第一图像中的人体关键点信息和辅助成像点信息，构建关于所述目标对象的三维图像；
第二处理模块，用于将所述三维图像与服装样本库中的第一目标服装样本进行合成处理，显示合成处理后的试衣图像。
8.一种虚拟试衣的系统，其特征在于，包括：图像采集系统、图像传输系统、图像处理系统以及服装样本库；所述图像采集系统通过所述图像传输系统与所述图像处理系统连接，所述服装样本库与所述图像处理系统连接；
其中，所述图像采集系统采集目标对象不同角度的多个第一视频，并将所述第一视频发送至所述图像传输系统，所述图像传输系统将所述第一视频进行压缩编码，并将压缩编码后的第一视频发送至所述图像处理系统，所述图像处理系统根据所述第一视频中的第一图像中的人体关键点信息和辅助成像点信息，构建关于所述目标对象的三维图像，并将所述三维图像与所述服装样本库中的第一目标服装样本进行合成处理，显示合成处理后的试衣图像。
9.一种电子设备，其特征在于，包括处理器，存储器及存储在所述存储器上并可在所述处理器上运行的程序或指令，所述程序或指令被所述处理器执行时实现如权利要求1-6任一项所述的虚拟试衣的方法的步骤。
10.一种可读存储介质，其特征在于，所述可读存储介质上存储程序或指令，所述程序或指令被处理器执行时实现如权利要求1-6任一项所述的虚拟试衣的方法的步骤。
CN202010761493.6A 2020-07-31 2020-07-31 一种虚拟试衣的方法、装置、系统及电子设备 Pending CN112070575A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010761493.6A CN112070575A (zh) 2020-07-31 2020-07-31 一种虚拟试衣的方法、装置、系统及电子设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010761493.6A CN112070575A (zh) 2020-07-31 2020-07-31 一种虚拟试衣的方法、装置、系统及电子设备

Publications (1)

Publication Number Publication Date
CN112070575A true CN112070575A (zh) 2020-12-11

Family

ID=73656948

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010761493.6A Pending CN112070575A (zh) 2020-07-31 2020-07-31 一种虚拟试衣的方法、装置、系统及电子设备

Country Status (1)

Country Link
CN (1) CN112070575A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114630012A (zh) * 2022-03-11 2022-06-14 北京奇艺世纪科技有限公司 一种虚拟试衣视频生成方法、装置、电子设备及介质

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108564612A (zh) * 2018-03-26 2018-09-21 广东欧珀移动通信有限公司 模型显示方法、装置、存储介质及电子设备
CN108765367A (zh) * 2018-04-16 2018-11-06 武汉纺织大学 一种着装人体尺寸确定方法和系统
CN109003168A (zh) * 2018-08-16 2018-12-14 深圳Tcl数字技术有限公司 虚拟试衣方法、智能电视以及计算机可读存储介质
CN110189202A (zh) * 2019-05-30 2019-08-30 广东元一科技实业有限公司 一种三维虚拟试衣方法及系统
CN110992470A (zh) * 2019-12-02 2020-04-10 怀化学院 虚拟试衣图像生成方法、装置、计算机设备以及存储介质

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108564612A (zh) * 2018-03-26 2018-09-21 广东欧珀移动通信有限公司 模型显示方法、装置、存储介质及电子设备
CN108765367A (zh) * 2018-04-16 2018-11-06 武汉纺织大学 一种着装人体尺寸确定方法和系统
CN109003168A (zh) * 2018-08-16 2018-12-14 深圳Tcl数字技术有限公司 虚拟试衣方法、智能电视以及计算机可读存储介质
CN110189202A (zh) * 2019-05-30 2019-08-30 广东元一科技实业有限公司 一种三维虚拟试衣方法及系统
CN110992470A (zh) * 2019-12-02 2020-04-10 怀化学院 虚拟试衣图像生成方法、装置、计算机设备以及存储介质

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114630012A (zh) * 2022-03-11 2022-06-14 北京奇艺世纪科技有限公司 一种虚拟试衣视频生成方法、装置、电子设备及介质
CN114630012B (zh) * 2022-03-11 2024-03-12 北京奇艺世纪科技有限公司 一种虚拟试衣视频生成方法、装置、电子设备及介质

Similar Documents

Publication Publication Date Title
CN110221690B (zh) 基于ar场景的手势交互方法及装置、存储介质、通信终端
WO2020119527A1 (zh) 人体动作识别方法、装置、终端设备及存储介质
WO2020006961A1 (zh) 用于提取图像的方法和装置
CN109727303B (zh) 视频展示方法、系统、计算机设备、存储介质和终端
CN109887003B (zh) 一种用于进行三维跟踪初始化的方法与设备
CN111787242B (zh) 用于虚拟试衣的方法和装置
CN108388882B (zh) 基于全局-局部rgb-d多模态的手势识别方法
US10970938B2 (en) Method and apparatus for generating 3D information
CN110866977B (zh) 增强现实处理方法及装置、系统、存储介质和电子设备
US11145080B2 (en) Method and apparatus for three-dimensional object pose estimation, device and storage medium
CN108388889B (zh) 用于分析人脸图像的方法和装置
CN111191582B (zh) 三维目标检测方法、检测装置、终端设备及计算机可读存储介质
CN108229375B (zh) 用于检测人脸图像的方法和装置
CN111862205A (zh) 一种视觉定位方法、装置、设备及存储介质
CN107563357B (zh) 基于场景分割的直播服饰装扮推荐方法、装置及计算设备
CN112927363A (zh) 体素地图构建方法及装置、计算机可读介质和电子设备
CN110084154B (zh) 渲染图像的方法、装置、电子设备和计算机可读存储介质
WO2017156864A1 (zh) 图像识别方法、装置、设备及非易失性计算机存储介质
US20140198177A1 (en) Realtime photo retouching of live video
CN112766215A (zh) 人脸融合方法、装置、电子设备及存储介质
CN112070575A (zh) 一种虚拟试衣的方法、装置、系统及电子设备
CN113870439A (zh) 用于处理图像的方法、装置、设备以及存储介质
CN112287945A (zh) 碎屏确定方法、装置、计算机设备及计算机可读存储介质
CN116452745A (zh) 手部建模、手部模型处理方法、设备和介质
CN110633630A (zh) 一种行为识别方法、装置及终端设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination