CN114758109A - 虚拟试穿方法及其系统、和提供虚拟试穿信息方法 - Google Patents

虚拟试穿方法及其系统、和提供虚拟试穿信息方法 Download PDF

Info

Publication number
CN114758109A
CN114758109A CN202210556717.9A CN202210556717A CN114758109A CN 114758109 A CN114758109 A CN 114758109A CN 202210556717 A CN202210556717 A CN 202210556717A CN 114758109 A CN114758109 A CN 114758109A
Authority
CN
China
Prior art keywords
clothes
tried
human body
sub
virtual fitting
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202210556717.9A
Other languages
English (en)
Inventor
张钦满
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
LeiShen Intelligent System Co Ltd
Original Assignee
LeiShen Intelligent System Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by LeiShen Intelligent System Co Ltd filed Critical LeiShen Intelligent System Co Ltd
Priority to CN202210556717.9A priority Critical patent/CN114758109A/zh
Publication of CN114758109A publication Critical patent/CN114758109A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • G06T19/20Editing of 3D images, e.g. changing shapes or colours, aligning objects or positioning parts
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00Commerce
    • G06Q30/06Buying, selling or leasing transactions
    • G06Q30/0601Electronic shopping [e-shopping]
    • G06Q30/0641Shopping interfaces
    • G06Q30/0643Graphical representation of items or shoppers

Landscapes

  • Engineering & Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • General Physics & Mathematics (AREA)
  • Finance (AREA)
  • Accounting & Taxation (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Computer Hardware Design (AREA)
  • Computer Graphics (AREA)
  • Architecture (AREA)
  • Development Economics (AREA)
  • Economics (AREA)
  • Marketing (AREA)
  • Strategic Management (AREA)
  • General Business, Economics & Management (AREA)
  • Processing Or Creating Images (AREA)

Abstract

本申请提供一种虚拟试穿方法及其系统、和提供虚拟试穿信息方法,该虚拟试穿方法包括:获取包含有试穿者的人体三维轮廓的数据集;基于数据集对人体三维轮廓进行区域分割,得到分割结果;结合分割结果和待试穿服饰的特征信息,得到待试穿服饰对应人体三维轮廓中的目标部位;根据待试穿服饰的特征信息,将待试穿服饰划分为预定数量的服饰子区域,将目标部位划分为预定数量的部位子区域,各个部位子区域与各个服饰子区域一一对应;基于各个服饰子区域和各个部位子区域,将待试穿服饰覆盖到目标部位,得到虚拟试穿结果。该方法得到立体的虚拟试穿结果,相比与传统试穿方式,使得试穿效果更加自然,对于试穿者而言,虚拟试穿的可参考性更强等。

Description

虚拟试穿方法及其系统、和提供虚拟试穿信息方法
技术领域
本申请涉及数据处理技术领域,尤其涉及一种虚拟试穿方法及其系统、和提供虚拟试穿信息方法。
背景技术
消费者在购买服饰之前,一般希望可以进行试穿试戴,从而获知穿戴效果。如果进行真实试穿试戴,如果需要对大量的服饰进行试穿试戴,对于消费者和商家而言,都带来了极大的不便。而针对虚拟试穿,现有的试穿方式主要是制定标准样式,然后把客户的头像粘贴上去,给消费者感受服饰的试穿试戴效果。但由于并没有考虑到试穿者自身的实际体态,上述虚拟方法并没有太强的参考性。
因此,如何提供一种更精准的试穿试戴效果,成为本领域技术人员需要解决的技术问题。
发明内容
有鉴于此,本申请实施例提供一种虚拟试穿方法及其系统、和提供虚拟试穿信息方法,可以给消费者提供更精准的试穿试戴效果。
第一方面,本申请实施例公开一种虚拟试穿方法,包括:
获取包含有试穿者的人体三维轮廓的数据集;
基于数据集对所述人体三维轮廓进行区域分割,得到分割结果;
结合所述分割结果和待试穿服饰的特征信息,得到待试穿服饰对应所述人体三维轮廓中的目标部位;
根据所述待试穿服饰的特征信息,将所述待试穿服饰划分为预定数量的服饰子区域,将所述目标部位划分为所述预定数量的部位子区域,各个所述部位子区域与各个所述服饰子区域一一对应;
基于各个所述服饰子区域和各个所述部位子区域,将所述待试穿服饰覆盖到目标部位,得到虚拟试穿结果。
在一些实施例中,该虚拟试穿方法还包括:
将各个所述服饰子区域的参数与存在对应关系的各个所述部位子区域的参数进行对比;
根据对比结果,对所述待试穿服饰在相应服饰子区域的图像进行调整。
在一些实施例中,所述分割结果包括若干个分割区域;所述结合所述分割结果和待试穿服饰的特征信息,得到待试穿服饰对应所述人体三维轮廓中的目标部位,包括:
根据待试穿服饰的特征信息,确定试穿的目标部位及在所述分割结果中所在的分割区域;
将所述人体三维轮廓分为在所述分割区域中含所述目标部位的第一区域和在所述分割区域中去除所述第一区域的第二区域、以及人体三维轮廓去除所述分割区域的第三区域。
在一些实施例中,所述基于各个所述服饰子区域和各个所述部位子区域,将所述待试穿服饰覆盖到目标部位,得到虚拟试穿结果,包括:
将待试穿服饰的各个子区域匹配到对应所述第一区域的目标部位的部位子区域中;
基于所述待试穿服饰的特征信息和/或试穿者需求,对所述第二区域对应的人体图像数据进行调整;
基于包含匹配有所述待试穿服饰的第一区域、经过调整后的第二区域、以及所述第三区域,得到虚拟试穿结果。
在一些实施例中,所述试穿者需求包括所述试穿者的当前穿着状态,所述对所述第二区域对应的人体图像数据进行调整,包括:
基于所述待试穿服饰的特征信息,得到所述第二区域中与所述目标部位有关的关联部位;
结合所述试穿者的当前穿着状态确定所述关联部位的图像数据是否需要保留;
在确定不需要保留的情况下,从所述人体三维轮廓的人体图像数据中提取所述关联部位的边界;
对所述边界及所述边界包围的试穿者人体图像区域进行肤色图层覆盖处理,得到调整后的第二区域。
在一些实施例中,若所述待试穿服饰的类型包括上衣,所述基于各个所述服饰子区域和各个所述部位子区域,将所述待试穿服饰覆盖到目标部位,包括:
确定所述上衣的双肩位点及所述人体轮廓中的双肩位点,其中,所述目标部位为所述试穿者的上半身;
将所述上衣的双肩位点与所述人体轮廓中的双肩位点设为重合,并将各个所述服饰子区域的特征覆盖到存在对应关系的所述部位子区域,以将所述上衣覆盖到所述试穿者的上半身。
在一些实施例中,若所述待试穿服饰的类型包括下衣,所述基于各个所述服饰子区域和各个所述部位子区域,将所述待试穿服饰覆盖到目标部位,包括:
确定所述下衣的腰围线位置和所述人体三维轮廓中的腰围线区域,其中,所述目标部位为所述试穿者的下半身;
将所述下衣的腰围线位置移至所述人体三维轮廓中的腰围线区域内,并将各个所述服饰子区域的特征叠加到存在对应关系的所述部位子区域,以将所述下衣覆盖到所述试穿者的下半身。
第二方面,本申请实施例公开一种提供虚拟试穿信息方法,包括:
接收虚拟试穿请求;
获取包含有试穿者的人体三维轮廓的数据集;
对所述人体三维轮廓进行区域分割,得到分割结果;
结合所述分割结果和待试穿服饰的特征信息,得到待试穿服饰对应所述人体三维轮廓中的目标部位;
根据所述待试穿服饰的特征信息,将所述待试穿服饰划分为预定数量的服饰子区域,将所述目标部位划分为所述预定数量的部位子区域,各个所述部位子区域与各个所述服饰子区域一一对应;
基于各个所述服饰子区域和各个所述部位子区域,将所述待试穿服饰覆盖到目标部位,得到虚拟试穿结果;
发送所述虚拟试穿结果。
第三方面,本申请实施例公开一种虚拟试穿系统,包括:
数据获取单元,用于获取包含有试穿者的人体三维轮廓的数据集;
数据分析单元,用于对所述人体三维轮廓进行区域分割,得到分割结果;结合所述分割结果和待试穿服饰的特征信息,得到待试穿服饰对应所述人体三维轮廓中的目标部位;根据所述待试穿服饰的特征信息,将所述待试穿服饰划分为预定数量的服饰子区域,将所述目标部位划分为所述预定数量的部位子区域,各个所述部位子区域与各个所述服饰子区域一一对应;
数据合成单元,用于基于各个所述服饰子区域和各个所述部位子区域,将所述待试穿服饰覆盖到目标部位,得到虚拟试穿结果。
第四方面,本申请实施例公开一种提供虚拟试穿信息系统,包括:
请求接收单元,用于接收来自试穿终端提交的虚拟试穿请求;
数据获取单元,用于获取包含有试穿者的人体三维轮廓的数据集;
数据分析单元,用于对所述人体三维轮廓进行区域分割,得到分割结果;结合所述分割结果和待试穿服饰的特征信息,得到待试穿服饰对应所述人体三维轮廓中的目标部位;根据所述待试穿服饰的特征信息,将所述待试穿服饰划分为预定数量的服饰子区域,将所述目标部位划分为所述预定数量的部位子区域,各个所述部位子区域与各个所述服饰子区域一一对应;
数据合成单元,用于基于各个所述服饰子区域和各个所述部位子区域,将所述待试穿服饰覆盖到目标部位,得到虚拟试穿结果;
发送单元,用于发送所述虚拟试穿结果到所述试穿终端以进行展示。
第五方面,本申请实施例公开一种计算机可读存储介质,存储有计算机程序,该程序被处理器执行时实现上述的方法步骤。
第六方面,本申请实施例公开一种电子设备,包括:一个或多个处理器;以及与所述一个或多个处理器关联的存储器,所述存储器用于存储程序指令,所述程序指令在被所述一个或多个处理器读取执行时,执行上述的方法步骤。
本申请的实施例具有如下有益效果:
本申请的虚拟试穿方法通过获取包含有试穿者的人体三维轮廓的数据集;基于数据集对所述人体三维轮廓进行区域分割,得到分割结果;结合所述分割结果和待试穿服饰的特征信息,得到待试穿服饰对应所述人体三维轮廓中的目标部位;根据所述待试穿服饰的特征信息,将待试穿服饰和目标部位分别划分为数量相同的对应子区域,然后将两种类型的各个子区域进行匹配以将待试穿服饰覆盖到目标部位,从而得到虚拟试穿结果。该方法基于试穿者的三维轮廓数据进行虚拟试穿,相比与传统的试穿方式,能够使得试穿结果更加自然,虚拟试穿的可参考性更强等。
应当理解的是,以上的一般描述和后文的细节描述仅是示范性和解释性的,并不能限制本申请。
附图说明
为了更清楚地说明本申请实施例的技术方案,下面将对实施例中所需要使用的附图作简单地介绍,应当理解,以下附图仅示出了本申请的某些实施例,因此不应被看作是对范围的限定,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他相关的附图。
图1示出了本申请实施例一的虚拟试穿方法的第一流程图;
图2示出了本申请实施例一的虚拟试穿方法的第二流程图;
图3示出了本申请实施例一的虚拟试穿方法的分割区域的一种示意图;
图4示出了本申请实施例一的虚拟试穿方法的第三流程图;
图5示出了本申请实施例二的虚拟试穿方法的流程图;
图6示出了本申请实施例三的提供虚拟试穿信息方法的流程图;
图7示出了本申请实施例四的虚拟试穿方法的流程图;
图8示出了本申请实施例五的提供虚拟试穿信息方法的流程图;
图9示出了本申请实施例六的虚拟试穿方法的流程图;
图10示出了本申请实施例七的提供虚拟试穿信息方法的流程图;
图11示出了对应于本申请实施例一的虚拟试穿系统的结构示意图;
图12示出了对应于本申请实施例二的虚拟试穿系统的结构示意图;
图13示出了对应于本申请实施例三的提供虚拟试穿信息系统的结构示意图;
图14示出了对应于本申请实施例四的虚拟试穿方法的结构示意图;
图15示出了对应于本申请实施例五的提供虚拟试穿信息系统的结构示意图;
图16示出了对应于本申请实施例六的虚拟试穿方法的结构示意图;
图17示出了对应于本申请实施例七的提供虚拟试穿信息系统的结构示意图;
图18示出了本申请实施例的线下虚拟试穿装置的结构示意图;
图19示出了本申请实施例的线下虚拟试穿装置的图像采集模块和激光雷达的第一种位置设置的示意图;
图20示出了本申请实施例的线下虚拟试穿装置的图像采集模块和激光雷达的第二种位置设置的示意图。
具体实施方式
下面将结合本申请实施例中附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本申请一部分实施例,而不是全部的实施例。
通常在此处附图中描述和示出的本申请实施例的组件可以以各种不同的配置来布置和设计。因此,以下对在附图中提供的本申请的实施例的详细描述并非旨在限制要求保护的本申请的范围,而是仅仅表示本申请的选定实施例。基于本申请的实施例,本领域技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例,都属于本申请保护的范围。
在下文中,可在本申请的各种实施例中使用的术语“包括”、“具有”及其同源词仅意在表示特定特征、数字、步骤、操作、元件、组件或前述项的组合,并且不应被理解为首先排除一个或更多个其它特征、数字、步骤、操作、元件、组件或前述项的组合的存在或增加一个或更多个特征、数字、步骤、操作、元件、组件或前述项的组合的可能性。此外,术语“第一”、“第二”、“第三”等仅用于区分描述,而不能理解为指示或暗示相对重要性。
除非另有限定,否则这里使用的所有术语(包括技术术语和科学术语)具有与本申请的各种实施例所属领域普通技术人员通常理解的含义相同的含义。所述术语(诸如在一般使用的词典中限定的术语)将被解释为具有与在相关技术领域中的语境含义相同的含义并且将不被解释为具有理想化的含义或过于正式的含义,除非在本申请的各种实施例中被清楚地限定。
下面结合附图,对本申请的一些实施方式作详细说明。在不冲突的情况下,下述的实施例及实施例中的特征可以相互结合。
消费者在购买服饰之前,一般希望可以进行试穿试戴,从而获知穿戴效果。如果进行真实试穿试戴,如果需要对大量的服饰进行试穿试戴,对于消费者和商家而言,都带来了极大的不便。而针对虚拟试穿,现有的试穿方式主要是制定标准样式,然后把客户的头像粘贴上去,给消费者感受服饰的试穿试戴效果。但由于并没有考虑到试穿者自身的实际体态,上述虚拟方法并没有太强的参考性。
具体的,本申请实施例首先通过以下实施例一提供了一种虚拟试穿方法,该方法主要从技术层面对本申请实施例提供的虚拟试穿方法等进行了介绍,在后续的实施例中,将会结合该技术的具体应用场景进行介绍。
实施例一
参见图1,本实施例提供了一种虚拟试穿方法,该虚拟试穿方法可包括步骤S110~S150:
S110,获取包含有试穿者的人体三维轮廓的数据集。
其中,该人体三维轮廓是指试穿者的三维立体轮廓数据。本实施例中,将基于试穿者的人体三维轮廓数据进行虚拟试穿,可以得到立体试穿效果。
示范性地,对于试穿者的人体三维轮廓的数据集的获取方式,可根据试穿者所在试穿场景来决定,例如,若试穿者是通过手机、平板等终端设备进行虚拟试穿操作,以第一次虚拟试穿操作为例,可以是通过对试穿者的人体图像数据进行采集并通过三维轮廓模型进行在线提取得到并进行本地或云端存储等。若后续再次进行虚拟试穿时,则可以直接从存储区域读取得到。另外,考虑到试穿者在不同时刻的身型可以会有所变化,还可以定期更新已存在的人体三维轮廓的数据集。
又或者,若试穿者是在线下商场等场合进行临时虚拟试穿,则可以利用线下的虚拟试穿终端来现场获取,例如,可通过具有如激光雷达等装置的线下试穿装置对试穿者进行点云扫描,以得到试穿者的人体点云数据;通过摄像头对试穿者进行图像采集,以得到试穿者的人体图像数据;进而基于该人体点云数据和人体图像数据得到试穿者的人体三维轮廓等。
此外,对于待试穿服饰的信息,如包括但不限于有衣服的立体轮廓、颜色、尺码及其他细节尺寸等特征信息,其中,衣服的立体轮廓同样可以通过激光雷达扫描得到。对于客户终端而言,获取该第三数据集时,可以是从提供在线试穿服饰的相应厂商服务器中下载得到,也可以是从本地存储中读取得到等。可以理解,本实施例中对试穿者的人体三维轮廓及待试穿服饰的数据获取方式并不作限定。
S120,基于数据集对人体三维轮廓进行区域分割,得到分割结果。
其中,分割结果是指将试穿者的完整三维轮廓按照需求划分为多个轮廓区域。示范性地,在进行分割时,例如,可按照上半身、下半身等几大主要部位进行区域分割,得到若干个分割区域。可选地,还可以分割更精细,例如,对于上关身,可进一步划分为头部、上半身躯干和两条手臂等;对于下半身,也可以划分为腰部、左腿、右腿等,具体可根据实际需求来设定分割的区域数量。
可以理解,通过对人体的三维轮廓进行分割,可以针对性对人体的不同部位进行服饰试穿,一方面可以满足试穿者将不同类型的衣服、首饰进行穿搭;另一方面,进行精细化匹配,可以计算得到更加贴合真实试穿的试穿结果,从而提高试穿者的试穿体验等。
S130,结合分割结果和待试穿服饰的特征信息,得到待试穿服饰对应人体三维轮廓中的目标部位。
在一种实施方式中,如图2所示,步骤S130包括子步骤S210~S220:
S210,根据待试穿服饰的特征信息,确定试穿的目标部位及在分割结果中所在的分割区域。
S220,将人体轮廓数据分为在该分割区域中含目标部位的第一区域和在分割区域中去除第一区域的第二区域、以及去除分割区域的第三区域。
由于待试穿服饰的类型不同,因此需要根据待试穿服饰的具体类型来确定试穿部位。示范性地,在获取到待试穿服饰的特征信息后,可以确定待试穿服饰的类型。例如,待试穿服饰可以是短袖、长袖、背心等上衣,也可以是裤子、半身裙等下衣。相应地,若为上衣,则可以确定试穿的目标部位为试穿者的上半身;若为下衣,则试穿的目标部位为试穿者的下半身等。当然,若为连衣裙等,则目标部位则为包含上半身和下半身整个躯干区域;又或者为项链首饰,则目标部位则为上半身的脖子部位等。
其中,上述的分割区域是指目标部位所在的轮廓区域,通过将该分割区域提取出来进行立体匹配,这样可以得到更加贴合真实试穿的效果,可以大大提高虚拟试穿体验。
以待试穿一件背心为例,如图3所示,假设分割区域包括了上半身、下半身及头部,此时目标部位应为上半身的躯干,第一区域S1则指包含该上半身区域内的躯干所在区域(即背心能够覆盖到的地方),第二区域S2是指该上半身区域内除躯干以外的部分脖子和两条手臂的其他区域,而第三区域S3则指下半身及头部区域。
本实施例中,在确定目标部位及其所在的第一区域后,将进一步对待试穿服饰和目标部位所在的轮廓区域进行子区域划分,然后通过各个子区域进行匹配,得到最终的试穿结果。
S140,根据待试穿服饰的特征信息,将待试穿服饰划分为预定数量的服饰子区域,将目标部位划分为预定数量的部位子区域,各个部位子区域与各个服饰子区域一一对应。
其中,目标部位的子区域划分可根据待试穿服饰来具体确定。例如,对于上衣,其服饰子区域可以划分为3个子区域,具体包括两个衣袖及上半身躯干子区域。对应地,部位子区域的数量也为3个,分别是两个手臂及躯干子区域,相同位置的各个部位子区域与服饰子区域建立有关联关系。进一步可选地,若为长袖或长裤,还可以将每个衣袖基于肘关节一分为二或将衣裤基于膝关节一分为二等,从而划分得到更多的子区域等。
应当明白的是,由于服饰并不会自然跟随人的动作而发生形变,本实施例通过子区域分区化匹配,可以理解为是将服饰设置了类似“旋转轴”结构。“旋转轴”结构基本上和人体的主要关节相对应,这样当试穿的时候,衣服可以对当前人体的四肢动作进行较好的跟随形变,从而极大提升试穿的真实效果等。
S150,基于各个服饰子区域和各个部位子区域,将待试穿服饰覆盖到目标部位,得到虚拟试穿结果。
对于上述步骤S150,在一种实施方式中,如图4所示,包括子步骤S310~S330:
S310,将待试穿服饰的各个子区域匹配到对应第一区域的目标部位的部位子区域中。
示范性地,可将各个服饰子区域的特征数据叠加到存在对应关系的部位子区域的特征数据,以此得到试穿数据。可选地,对于待试穿服饰或目标部位的各个子区域,在进行子区域特征匹配时,还可以采用下采样的方式来提取得到各个子区域的特征数据,从而减少计算量等。
S320,基于待试穿服饰的特征信息和/或试穿者需求,对第二区域对应的人体图像数据进行调整。
其中,该试穿者需求可包括但不限于包括,考虑试穿者的当前穿着状态等。原因在于,考虑到用于试穿的人体图像数据中可能包括了试穿者当前穿着其他衣服,在虚拟试穿时,为了避免因当前的穿着而影响了试穿效果,本实施例还可根据试穿者的需求来进行局部调整。
例如,可基于待试穿服饰的特征信息,得到第二区域中与目标部位有关的关联部位;结合试穿者的当前穿着状态确定该关联部位的图像数据是否需要保留;在确定不需要保留的情况下,则从人体图像数据中提取关联部位的边界;然后对边界及边界包围的试穿者人体图像区域进行肤色图层覆盖处理,得到调整后的第二区域。
例如,若图像数据中的试穿者当前穿着长袖,而待试穿服饰为短袖,若是直接将短袖进行覆盖式试穿,则手臂部分区域还会展开出未被遮挡的长袖部分,因此,此时的关联部位即为手臂未能够被短袖所覆盖的区域,为了不影响本次的试穿效果,可不保留该关联部位的原始图像数据。此时,可采用轮廓检测或边界检测等方法进行关联部位的边界提取,待提取出该边界后,再对该边界及其包围的图像区域采用肤色图层进行覆盖,从而得到更好的试穿效果。
S330,基于包含匹配有待试穿服饰的第一区域、经过调整后的第二区域、以及第三区域,得到虚拟试穿结果。
示范性地,将待试穿服饰匹配到第一区域的目标部位后,结合调整后的第二区域,以及未经调整的第三区域,即可合成得到虚拟试穿数据。作为一种可选的方案,还可以通过调整试穿服饰的颜色,或对整体的虚拟试穿结果进行亮度调整等,从而强化试穿光鲜感觉,加强试穿者的购物欲望等。
可以理解的是,通过对人体轮廓数据进行划分并不同的区域进行不同的操作,一方面可以得到更加精细化的试穿数据,另一方面,对不需要调整的地方则不进行任何处理,以降低需要处理的数据量。
对于上述步骤S150,在另一种实施方式中,可结合待试穿服饰的具体特征来实现待试穿服饰与目标部位的匹配。
为了实现上述匹配,考虑到人的身体跟衣服不可能完全吻合,这里可以先选取一个对齐基准,在确定该基准后,衣服如何覆盖就可以确定。例如,若待试穿服饰属于上衣类型,如短袖、长袖、背心等,其基准可以选取为上衣的双肩位点,将其与试穿者的双肩位点进行对齐后,再实现其他区域的覆盖,就可以实现试穿服饰与目标部位的匹配。当然,除了只考虑双肩位点外,优选地,本实施例中,还可以结合各子区域的匹配来得到更为准确的试穿效果。
具体地,若待试穿服饰的类型包括上衣,则可先确定上衣的双肩位点及人体轮廓中的双肩位点;然后,将上衣的双肩位点与人体轮廓中的双肩位点设为重合,并将各个服饰子区域的特征覆盖到存在对应关系的部位子区域,以将上衣覆盖到试穿者的上半身。
同理,若待试穿服饰属于下衣类型,如短裤、长裤、半身裙等,可将下衣的腰围线移动至试穿者的腰围线,从而完成下衣覆盖到试穿者的下半身。考虑到试穿者可能存在不同的穿搭需求,同一件下衣的腰围线位置在试穿者身上的位置可能会不同。为此,本实施例将对试穿者的腰围线所在的位置保留一定的区域范围,试穿者可根据自身的需要对腰围线进行上下调节。
对于下衣类型,除了仅考虑腰围线的对齐之外,优选地,还可以在腰围线的基础上进一步结合各子区域的匹配来得到更为准确的试穿效果。具体地,在确定下衣的腰围线位置和人体三维轮廓中的腰围线区域后,将下衣的腰围线位置移至人体三维轮廓中的腰围线区域内,并将各个服饰子区域的特征叠加到存在对应关系的部位子区域,以将下衣覆盖到试穿者的下半身。
可以理解,由于上述的匹配操作是基于立体数据进行比对的,所以无需传统的衣服形变从而迁就身体的变化,直接通过肩位和腰位固定衣裤之后,就可以直接体现整个立体穿着。
此外,考虑到针对没有弹性的/弹性一般的衣服,若是试穿者选取的服饰尺寸不符,尤其是衣服尺寸偏小时,则得到的试穿结果会存在相应区域出现形变等。
作为一种可选的方案,在上述步骤S150之后,该虚拟试穿方法还包括:
将各个服饰子区域的参数与存在对应关系的各个部位子区域的参数进行对比;根据对比结果,对待试穿服饰在相应服饰子区域的图像进行调整。
示范性地,若选取的服饰大于等于人体轮廓,则可直接覆盖;若小于人体轮廓,则可作进一步调整。例如,该调整可包括但不限于为,更换更大的尺寸,或者衣服作变形适配等。此外,还可以将这一特定区域图像进行突出显示,如标红等,以提示试穿者该位置区域不合适等。
本实施例的虚拟试穿方法通过结合人体三维轮廓以及待试穿服饰信息作为虚拟试穿的基础数据,其中通过对人体三维轮廓进行轮廓区域分割以及对待试穿服饰及试穿部位所在的分割区域进行多个子区域进一步分割,以此来进行匹配得到立体的虚拟试穿结果,这样可以针对性对人体的不同部位进行服饰试穿,不仅可以满足试穿者将不同类型的衣服、首饰进行穿搭,而且得到的立体试穿效果更加更具有真实感;而且,由于进行了多个子区域的分割,这样当试穿的时候,衣服可以对当前人体的四肢动作进行较好的跟随形变,可极大提升试穿的真实效果等。相比与传统的试穿方式,能够使得试穿结果更加自然,对于用户而言,虚拟试穿的可参考性更强等。此外,在试穿服饰匹配过程中,用户还可以根据实际需求实现对服饰子区域或人体区域进行相应调整等,互动性更强。
实施例二
该实施例二是从具体应用的角度对本申请的实施例提供的技术方案进行介绍。具体的,该实施例二中的应用场景是在计算机系统(包括手持终端等),试穿者并不限定为线下买家,还可以是线上买家,当试穿者具有虚拟试穿需求时,可以通过系统为试穿者提供试穿效果。具体而言,从系统架构角度而言,该系统可能涉及系统的服务器端和提供给试穿者的客户端。该实施例二主要从客户端的角度,公开了一种虚拟试穿方法。
请参照图5,示范性地,本实施例提供一种虚拟试穿方法,应用于客户端,包括:
S410,识别用户发出的虚拟试穿请求的操作。
例如,用户可在客户端的相关操作界面中进行点击等操作,以提交虚拟试穿请求,进而,客户端会把该虚拟试穿请求发送到服务端,并由服务端进行虚拟试穿处理。
S420,将所述虚拟试穿请求提交到服务端,以使得所述服务器在接收到请求后,获取所述试穿者的人体三维轮廓数据,对所述人体三维轮廓进行区域分割,得到分割结果;结合所述分割结果和待试穿服饰的特征信息,得到待试穿服饰对应所述人体三维轮廓中的目标部位;然后,根据所述待试穿服饰的特征信息,将所述待试穿服饰划分为预定数量的服饰子区域,将所述目标部位划分为所述预定数量的部位子区域,各个所述部位子区域与各个所述服饰子区域一一对应;最后,基于各个所述服饰子区域和各个所述部位子区域,将所述待试穿服饰覆盖到目标部位,得到虚拟试穿结果。
可以理解,关于步骤S420中服务器所执行的相关操作的具体实现,可参见实施例一中的步骤S120~S150,由于各步骤原理类似,这里不再重复描述。另外,实施例一中的部分可选项或优选项同样适用于上述实施例二。
S430,接收所述服务端返回的虚拟试穿的相关信息并进行展示。
实施例三
实施例三与实施例二相对应,主要从系统的服务器端的角度,公开了一种提供虚拟试穿信息方法。
请参照图6,示范性地,本实施例提供一种提供虚拟试穿信息方法,应用于服务器端,包括:
S510,接收来自客户端的虚拟试穿请求。例如,该客户端可包括但不限于为手机、平板等。
S520,获取包含有试穿者的人体三维轮廓的数据集。
S530,对所述人体三维轮廓进行区域分割,得到分割结果。
S540,结合所述分割结果和待试穿服饰的特征信息,得到待试穿服饰对应所述人体三维轮廓中的目标部位。
S550,根据所述待试穿服饰的特征信息,将所述待试穿服饰划分为预定数量的服饰子区域,将所述目标部位划分为所述预定数量的部位子区域,各个所述部位子区域与各个所述服饰子区域一一对应。
S560,基于各个所述服饰子区域和各个所述部位子区域,将所述待试穿服饰覆盖到目标部位,得到虚拟试穿结果。
S570,发送所述虚拟试穿结果到所述客户端以进行展示。
可以理解,关于上述步骤S520~S560的具体实现,可参见实施例一中的步骤S110~S150,各步骤原理类似,这里不再重复描述。另外,实施例一中的部分可选项或优选项同样适用于上述实施例三。
实施例四
该实施例四是对本申请实施例提供的另一种场景进行介绍。具体的,该实施例四中的应用场景是卖家用户在发布服饰商品的过程中,可能需要通过具体的模特人物对服饰的上身效果进行表达。在现有技术中,卖家用户通常需要聘请或者雇佣实际的模特人物,将具体的衣物等穿在模特人物身上,再进行拍照。如果需要对大量的服饰进行试穿试戴,整体流程十分繁琐。针对该情况,在本申请实施例可以为卖家用户提供用于生成合成图像的系统,卖家可以利用上述合成图像作为服饰商品的对象图进行发布。
具体而言,从系统架构角度而言,该系统可能涉及系统的服务器端和提供给卖家客户的客户端。请参照图7,该实施例四主要从前述的客户端的角度,提供了一种虚拟试穿方法,主要包括:
S610,识别卖家发出的虚拟试穿请求的操作。
例如,卖家客户可在客户端的相关操作界面中进行点击等操作,以提交虚拟试穿请求,进而,客户端会把该虚拟试穿请求发送到服务端,并由服务端进行虚拟试穿处理。
S620,将所述虚拟试穿请求提交到服务端,以使得所述服务器在接收到请求后,获取所述试穿者的人体三维轮廓数据,对所述人体三维轮廓进行区域分割,得到分割结果;结合所述分割结果和待试穿服饰的特征信息,得到待试穿服饰对应所述人体三维轮廓中的目标部位;然后,根据所述待试穿服饰的特征信息,将所述待试穿服饰划分为预定数量的服饰子区域,将所述目标部位划分为所述预定数量的部位子区域,各个所述部位子区域与各个所述服饰子区域一一对应;最后,基于各个所述服饰子区域和各个所述部位子区域,将所述待试穿服饰覆盖到目标部位,得到虚拟试穿结果。
可以理解,关于步骤S620中服务器所执行的相关操作的具体实现,可参见实施例一中的步骤S120~S150,由于各步骤原理类似,这里不再重复描述。另外,实施例一中的部分可选项或优选项同样适用于上述实施例四。
S630,接收所述服务端根据虚拟试穿的相关信息生成的合成图像。
具体而言,试穿者(模特人物)在测试某款服饰时,可以通过多个不同的动作下服饰的变化,得到多张合成图像,以便卖家客户可从中选择可作为服饰商品的对象图。
实施例五
请参照图8,实施例五与实施例四相对应,主要从系统的服务器端的角度,提供了一种提供虚拟试穿信息方法,主要包括:
S710,接收来自卖家客户端的虚拟试穿请求。例如,该客户端可包括但不限于为手机、平板、电脑等。
S720,获取包含有试穿者的人体三维轮廓的数据集。
S730,对所述人体三维轮廓进行区域分割,得到分割结果。
S740,结合所述分割结果和待试穿服饰的特征信息,得到待试穿服饰对应所述人体三维轮廓中的目标部位。
S750,根据所述待试穿服饰的特征信息,将所述待试穿服饰划分为预定数量的服饰子区域,将所述目标部位划分为所述预定数量的部位子区域,各个所述部位子区域与各个所述服饰子区域一一对应。
S760,基于各个所述服饰子区域和各个所述部位子区域,将所述待试穿服饰覆盖到目标部位,得到虚拟试穿结果。
S770,根据虚拟试穿的相关信息生成合成图像,并将合成图像发送至客户端。
可以理解,关于上述步骤S720~S760的具体实现,可参见实施例一中的步骤S110~S150,各步骤原理类似,这里不再重复描述。另外,实施例一中的部分可选项或优选项同样适用于上述实施例五。
具体而言,试穿者(模特人物)在测试某款服饰时,可以通过多个不同的动作下服饰的变化,得到多张合成图像,以便卖家客户可从中选择可作为服饰商品的对象图。
实施例六
该实施例六是对本申请实施例提供的另一种场景进行介绍。具体的,该实施例六中的应用场景是线下实体店铺中的“虚拟试衣镜”场景。在服饰类商品的线下实体店铺中,通常会为顾客提供试衣镜,顾客选择好自己所感兴趣的服饰后,可以到试衣间进行试穿,再走到试衣镜前查看具体的上身效果。但是,整个过程会比较耗时,如果感兴趣的服装有多件,则需要顾客花费大量的时间,才能够分别获得试穿效果。针对该情况,本申请实施例可以在线下实体店铺中提供一种虚拟试穿方法,为顾客提供良好的虚拟试穿感受。
具体而言,从系统架构角度而言,该系统可能涉及系统的服务器端和提供给顾客的客户端。请参照图9,该实施例主要从前述的虚拟试衣装置的角度,提供了一种虚拟试穿方法,主要包括:
S810,在检测到存在试穿者出现在图像采集区域内且面部朝向采集镜头超过预设时长时,获取包含穿者的实时图像数据及开始采集试穿者的人体点云数据。
S820,基于实时图像数据和图像采集区域在无人状态下的初始图像数据,从实时图像数据中提取得到试穿者的平面轮廓线,并结合所述人体轮廓线和所述人体点云数据获取人体三维轮廓的数据集。
其中,初始图像数据是指在该图像采集区域内无人时拍摄得到的图像。本实施例中,通过先记录无人状态下的图像数据作为初始值,以用于检测是否有人出现图像采集区域,然后在检测到有人出现在图像采集区域且判定其有试穿意图时,才开始采集该试穿者的人体点云数据,并进行后续的试穿操作,这样可以便降低线下虚拟试穿装置的功耗等。
此外,可以理解,点云数据具有三维信息,将其与不具有深度信息的图像数据结合可以得到人体立体信息,从而解决了人体轮廓数据获取难的问题。另外,由于人体点云数据的数量通常非常大,其中,线数越高点云数量越多,为此,通过只提取出呈现人体三维轮廓的点云数据,而不考虑非轮廓的点云数据,即将一些非必要的点云数据直接排除,这样可以极大降低系统的数据处理量,提高处理速度等。
S830,基于数据集对所述人体三维轮廓进行区域分割,得到分割结果。
S840,结合所述分割结果和待试穿服饰的特征信息,得到待试穿服饰对应所述人体三维轮廓中的目标部位。
S850,根据所述待试穿服饰的特征信息,将所述待试穿服饰划分为预定数量的服饰子区域,将所述目标部位划分为所述预定数量的部位子区域,各个所述部位子区域与各个所述服饰子区域一一对应。
S860,基于各个所述服饰子区域和各个所述部位子区域,将所述待试穿服饰覆盖到目标部位,得到虚拟试穿结果。
S870,展示所述虚拟试穿结果。
可以理解,关于步骤S830~S860中所执行的相关操作的具体实现,可参见实施例一中的步骤S120~S150,由于各步骤原理类似,这里不再重复描述。另外,实施例一中的部分可选项或优选项同样适用于上述实施例六。
实施例七
请参照图10,实施例七与实施例六相对应,主要从系统的服务器端的角度,提供了一种提供虚拟试穿信息方法,主要包括:
S910,接收来自虚拟试衣装置提交的虚拟试穿请求。
S920,接收所述虚拟试衣装置发送的包含穿者的实时图像数据及采集的试穿者的人体点云数据。
S930,基于实时图像数据和图像采集区域在无人状态下的初始图像数据,从实时图像数据中提取得到试穿者的平面轮廓线,并结合所述人体轮廓线和所述人体点云数据获取人体三维轮廓的数据集。
S940,基于数据集对所述人体三维轮廓进行区域分割,得到分割结果。
S950,结合所述分割结果和待试穿服饰的特征信息,得到待试穿服饰对应所述人体三维轮廓中的目标部位。
S960,根据所述待试穿服饰的特征信息,将所述待试穿服饰划分为预定数量的服饰子区域,将所述目标部位划分为所述预定数量的部位子区域,各个所述部位子区域与各个所述服饰子区域一一对应。
S970,基于各个所述服饰子区域和各个所述部位子区域,将所述待试穿服饰覆盖到目标部位,得到虚拟试穿结果。
S980,发送虚拟试穿结果到虚拟试衣装置以进行展示。
可以理解,关于步骤S940~S970中所执行的相关操作的具体实现,可参见实施例一中的步骤S120~S150,由于各步骤原理类似,这里不再重复描述。此外,实施例一中的部分可选项或优选项同样适用于上述实施例七,故在此不再重复描述。
另外,除了前述应用场景以外,本申请实施例还可以与其他具体应用场景相结合,例如,可以在直播场景下提供上述功能。具体的,假设某“主播”用户通过直播的方式介绍某服装的信息并进行线上销售,进入该直播间的用户如果感兴趣可以在线购买。在传统的方式下,买家用户只能通过主播的介绍来了解该服装,但是无法获知该服装在自己身上的上身效果。针对该情况,“主播”用户可以先向服务器提交具体服饰的信息,或者,在关联某网络销售系统的情况下,也可以指定具体的服饰在该系统中的ID等信息,服务器可以从该网络销售系统中提取符合条件的模特试穿合成图像。另外,也可以在买家用户侧的界面中提供“试穿”入口,通过该入口,买家用户可以提交包含有人体三维轮廓的数据集,然后服务器便可以生成对应的合成图像,使得买家用户可以查看到具体服装“穿”在自己身上的效果,以便于用户更好的进行购物决策。
需要说明的是,本申请实施例中可能会涉及到对用户数据的使用,在实际应用中,可以在符合所在国的适用法律法规要求的情况下(例如,用户明确同意,对用户切实通知,等),在适用法律法规允许的范围内在本文描述的方案中使用用户特定的个人数据。
另外,与上述实施例一相对应的是,本申请实施例还提供了一种虚拟试穿系统100,请参照图11,虚拟试穿系统100包括:
数据获取单元110,用于获取包含有试穿者的人体三维轮廓的数据集;
数据分析单元120,用于对所述人体三维轮廓进行区域分割,得到分割结果;结合所述分割结果和待试穿服饰的特征信息,得到待试穿服饰对应所述人体三维轮廓中的目标部位;根据所述待试穿服饰的特征信息,将所述待试穿服饰划分为预定数量的服饰子区域,将所述目标部位划分为所述预定数量的部位子区域,各个所述部位子区域与各个所述服饰子区域一一对应;
数据合成单元130,用于基于各个所述服饰子区域和各个所述部位子区域,将所述待试穿服饰覆盖到目标部位,得到虚拟试穿结果。
与上述实施例二相对应的是,本申请实施例还提供了一种虚拟试穿系统200,请参照图12,虚拟试穿系统200包括:
操作识别单元210,用于识别用户发出的虚拟试穿请求的操作。
请求发送单元220,用于将所述虚拟试穿请求提交到服务端,以使得所述服务器在接收到请求后,获取所述试穿者的人体三维轮廓数据,对所述人体三维轮廓进行区域分割,得到分割结果;结合所述分割结果和待试穿服饰的特征信息,得到待试穿服饰对应所述人体三维轮廓中的目标部位;然后,根据所述待试穿服饰的特征信息,将所述待试穿服饰划分为预定数量的服饰子区域,将所述目标部位划分为所述预定数量的部位子区域,各个所述部位子区域与各个所述服饰子区域一一对应;最后,基于各个所述服饰子区域和各个所述部位子区域,将所述待试穿服饰覆盖到目标部位,得到虚拟试穿结果。
显示单元230,用于接收所述服务端返回的虚拟试穿的相关信息并进行展示。
与上述实施例三相对应的是,本申请实施例还提供了一种提供虚拟试穿信息系统300,请参照图13,提供虚拟试穿信息系统300包括:
请求接收单元310,用于接收来自客户端的虚拟试穿请求。
数据获取单元320,用于获取包含有试穿者的人体三维轮廓的数据集。
数据分析单元330,用于对所述人体三维轮廓进行区域分割,得到分割结果;结合所述分割结果和待试穿服饰的特征信息,得到待试穿服饰对应所述人体三维轮廓中的目标部位;根据所述待试穿服饰的特征信息,将所述待试穿服饰划分为预定数量的服饰子区域,将所述目标部位划分为所述预定数量的部位子区域,各个所述部位子区域与各个所述服饰子区域一一对应。
数据合成单元340,用于基于各个所述服饰子区域和各个所述部位子区域,将所述待试穿服饰覆盖到目标部位,得到虚拟试穿结果。
发送单元350,用于发送所述虚拟试穿结果到所述试穿终端以进行展示。
与上述实施例四相对应的是,本申请实施例还提供了一种虚拟试穿系统400,请参照图14,虚拟试穿系统400包括:
操作识别单元410,用于识别卖家发出的虚拟试穿请求的操作。
请求发送单元420,用于将所述虚拟试穿请求提交到服务端,以使得所述服务器在接收到请求后,获取所述试穿者的人体三维轮廓数据,对所述人体三维轮廓进行区域分割,得到分割结果;结合所述分割结果和待试穿服饰的特征信息,得到待试穿服饰对应所述人体三维轮廓中的目标部位;然后,根据所述待试穿服饰的特征信息,将所述待试穿服饰划分为预定数量的服饰子区域,将所述目标部位划分为所述预定数量的部位子区域,各个所述部位子区域与各个所述服饰子区域一一对应;最后,基于各个所述服饰子区域和各个所述部位子区域,将所述待试穿服饰覆盖到目标部位,得到虚拟试穿结果。
接收单元430,用于接收所述服务端根据虚拟试穿的相关信息生成的合成图像。
与上述实施例五相对应的是,本申请实施例还提供了一种提供虚拟试穿信息系统500,请参照图15,该提供虚拟试穿信息系统500包括:
请求接收单元510,用于来自卖家客户端的虚拟试穿请求。
数据获取单元520,用于获取包含有试穿者的人体三维轮廓的数据集。
数据分析单元530,用于对所述人体三维轮廓进行区域分割,得到分割结果;结合所述分割结果和待试穿服饰的特征信息,得到待试穿服饰对应所述人体三维轮廓中的目标部位;根据所述待试穿服饰的特征信息,将所述待试穿服饰划分为预定数量的服饰子区域,将所述目标部位划分为所述预定数量的部位子区域,各个所述部位子区域与各个所述服饰子区域一一对应。
数据合成单元540,用于基于各个所述服饰子区域和各个所述部位子区域,将所述待试穿服饰覆盖到目标部位,得到虚拟试穿结果。
合成发送单元550,用于根据虚拟试穿的相关信息生成合成图像,并将合成图像发送至客户端。
与上述实施例六相对应的是,本申请实施例还提供了一种虚拟试穿系统600,请参照图16,虚拟试穿系统600包括:
数据获取单元610,用于在检测到存在试穿者出现在图像采集区域内且面部朝向采集镜头超过预设时长时,获取包含穿者的实时图像数据及开始采集试穿者的人体点云数据。
数据获取单元610,还用于基于实时图像数据和图像采集区域在无人状态下的初始图像数据,从实时图像数据中提取得到试穿者的平面轮廓线,并结合所述人体轮廓线和所述人体点云数据获取人体三维轮廓的数据集。
数据分析单元620,用于基于数据集对所述人体三维轮廓进行区域分割,得到分割结果;结合所述分割结果和待试穿服饰的特征信息,得到待试穿服饰对应所述人体三维轮廓中的目标部位;根据所述待试穿服饰的特征信息,将所述待试穿服饰划分为预定数量的服饰子区域,将所述目标部位划分为所述预定数量的部位子区域,各个所述部位子区域与各个所述服饰子区域一一对应。
数据合成单元630,用于基于各个所述服饰子区域和各个所述部位子区域,将所述待试穿服饰覆盖到目标部位,得到虚拟试穿结果。
数据显示单元640,用于展示所述虚拟试穿结果。
与上述实施例七相对应的是,本申请实施例还提供了一种提供虚拟试穿信息系统700,请参照图17,提供虚拟试穿信息系统700包括:
数据接收单元710,用于接收来自虚拟试衣装置提交的虚拟试穿请求,以及接收所述虚拟试衣装置发送的包含穿者的实时图像数据及采集的试穿者的人体点云数据。
数据分析单元720,用于基于实时图像数据和图像采集区域在无人状态下的初始图像数据,从实时图像数据中提取得到试穿者的平面轮廓线,并结合所述人体轮廓线和所述人体点云数据获取人体三维轮廓的数据集。
数据分析单元720,还用于基于数据集对所述人体三维轮廓进行区域分割,得到分割结果;结合所述分割结果和待试穿服饰的特征信息,得到待试穿服饰对应所述人体三维轮廓中的目标部位;根据所述待试穿服饰的特征信息,将所述待试穿服饰划分为预定数量的服饰子区域,将所述目标部位划分为所述预定数量的部位子区域,各个所述部位子区域与各个所述服饰子区域一一对应。
数据合成单元730,用于基于各个所述服饰子区域和各个所述部位子区域,将所述待试穿服饰覆盖到目标部位,得到虚拟试穿结果。
发送单元740,用于发送虚拟试穿结果到虚拟试衣装置以进行展示。
另外,本申请实施例还提供一种线下虚拟试穿装置800,所述装置用于线下实体店铺中的“虚拟试衣镜”场景,示范性地,该线下虚拟试穿装置800包括:
如图18所示,该线下虚拟试穿装置800包括M个图像采集模块810、N个激光雷达820、显示模块830和处理器840,这些组件之间均与处理器840电性连接。其中,M和N均为正整数,这两个量可以取值相同,如均设置为2个、3个或4个等,这里不作限定,当然也可以取值不同,例如,图像采集模块810设置为2个,激光雷达820设置为3个等。
进一步,关于图像采集模块810和激光雷达820的位置设置,具体可根据实际需求来设置,这里不作限定。例如,如图19所示,若设置2个图像采集模块810为例,则可以对立设置,形成一前一后的位置关系。又例如,以3个激光雷达为例,如图20所示,可呈三角形构型设置,从而形成全方位的拍摄及扫描等。此外,在另一种可选的方式中,还可将M和N均取值为3,具体地,可将3个图像采集模块810和激光雷820达均呈三角形构型设置等。其中,这M个图像采集模块810分别用于采集对应图像采集区域内的图像数据;N个激光雷达820则用于采集人体点云数据;处理器840将执行上述的虚拟试穿方法,得到虚拟试穿结果;最后,显示模块830用于显示得到的虚拟试穿结果。
另外,本申请实施例还提供了一种电子设备,如手机、平板、计算机等。示范性地,该电子设备包括处理器和存储器,其中,存储器存储有计算机程序,处理器通过运行所述计算机程序,从而使终端设备执行上述实施例的虚拟试穿方法或提供虚拟试穿信息方法。
另外,本申请实施例还提供了一种计算机可读存储介质,其上存储有计算机程序,该程序被处理器执行时实现上述实施例的方法的步骤。
在本申请所提供的几个实施例中,应该理解到,所揭露的装置和方法,也可以通过其它的方式实现。以上所描述的装置实施例仅仅是示意性的,例如,附图中的流程图和结构图显示了根据本申请的多个实施例的装置、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上,流程图或框图中的每个方框可以代表一个模块、程序段或代码的一部分,所述模块、程序段或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意,在作为替换的实现方式中,方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如,两个连续的方框实际上可以基本并行地执行,它们有时也可以按相反的顺序执行,这依所涉及的功能而定。也要注意的是,结构图和/或流程图中的每个方框、以及结构图和/或流程图中的方框的组合,可以用执行规定的功能或动作的专用的基于硬件的系统来实现,或者可以用专用硬件与计算机指令的组合来实现。
另外,在本申请各个实施例中的各功能模块或单元可以集成在一起形成一个独立的部分,也可以是各个模块单独存在,也可以两个或更多个模块集成形成一个独立的部分。
所述功能如果以软件功能模块的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是智能手机、个人计算机、服务器、或者网络设备等)执行本申请各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述,仅为本申请的具体实施方式,但本申请的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本申请揭露的技术范围内,可轻易想到变化或替换,都应涵盖在本申请的保护范围之内。

Claims (12)

1.一种虚拟试穿方法,其特征在于,包括:
获取包含有试穿者的人体三维轮廓的数据集;
基于数据集对所述人体三维轮廓进行区域分割,得到分割结果;
结合所述分割结果和待试穿服饰的特征信息,得到待试穿服饰对应所述人体三维轮廓中的目标部位;
根据所述待试穿服饰的特征信息,将所述待试穿服饰划分为预定数量的服饰子区域,将所述目标部位划分为所述预定数量的部位子区域,各个所述部位子区域与各个所述服饰子区域一一对应;
基于各个所述服饰子区域和各个所述部位子区域,将所述待试穿服饰覆盖到目标部位,得到虚拟试穿结果。
2.根据权利要求1所述的虚拟试穿方法,其特征在于,还包括:
将各个所述服饰子区域的参数与存在对应关系的各个所述部位子区域的参数进行对比;
根据对比结果,对所述待试穿服饰在相应服饰子区域的图像进行调整。
3.根据权利要求1或2所述的虚拟试穿方法,其特征在于,所述分割结果包括若干个分割区域;所述结合所述分割结果和待试穿服饰的特征信息,得到待试穿服饰对应所述人体三维轮廓中的目标部位,包括:
根据待试穿服饰的特征信息,确定试穿的目标部位及在所述分割结果中所在的分割区域;
将所述人体三维轮廓分为在所述分割区域中含所述目标部位的第一区域和在所述分割区域中去除所述第一区域的第二区域、以及人体三维轮廓去除所述分割区域的第三区域。
4.根据权利要求3所述的虚拟试穿方法,其特征在于,所述基于各个所述服饰子区域和各个所述部位子区域,将所述待试穿服饰覆盖到目标部位,得到虚拟试穿结果,包括:
将待试穿服饰的各个子区域匹配到对应所述第一区域的目标部位的部位子区域中;
基于所述待试穿服饰的特征信息和/或试穿者需求,对所述第二区域对应的人体图像数据进行调整;
基于包含匹配有所述待试穿服饰的第一区域、经过调整后的第二区域、以及所述第三区域,得到虚拟试穿结果。
5.根据权利要求4所述的虚拟试穿方法,其特征在于,所述试穿者需求包括所述试穿者的当前穿着状态,所述对所述第二区域对应的人体图像数据进行调整,包括:
基于所述待试穿服饰的特征信息,得到所述第二区域中与所述目标部位有关的关联部位;
结合所述试穿者的当前穿着状态确定所述关联部位的图像数据是否需要保留;
在确定不需要保留的情况下,从所述人体三维轮廓的人体图像数据中提取所述关联部位的边界;
对所述边界及所述边界包围的试穿者人体图像区域进行肤色图层覆盖处理,得到调整后的第二区域。
6.根据权利要求1、2、4或5所述的虚拟试穿方法,其特征在于,若所述待试穿服饰的类型包括上衣,所述基于各个所述服饰子区域和各个所述部位子区域,将所述待试穿服饰覆盖到目标部位,包括:
确定所述上衣的双肩位点及所述人体轮廓中的双肩位点,其中,所述目标部位为所述试穿者的上半身;
将所述上衣的双肩位点与所述人体轮廓中的双肩位点设为重合,并将各个所述服饰子区域的特征覆盖到存在对应关系的所述部位子区域,以将所述上衣覆盖到所述试穿者的上半身。
7.根据权利要求1、2、4或5所述的虚拟试穿方法,其特征在于,若所述待试穿服饰的类型包括下衣,所述基于各个所述服饰子区域和各个所述部位子区域,将所述待试穿服饰覆盖到目标部位,包括:
确定所述下衣的腰围线位置和所述人体三维轮廓中的腰围线区域,其中,所述目标部位为所述试穿者的下半身;
将所述下衣的腰围线位置移至所述人体三维轮廓中的腰围线区域内,并将各个所述服饰子区域的特征叠加到存在对应关系的所述部位子区域,以将所述下衣覆盖到所述试穿者的下半身。
8.一种提供虚拟试穿信息方法,其特征在于,包括:
接收虚拟试穿请求;
获取包含有试穿者的人体三维轮廓的数据集;
对所述人体三维轮廓进行区域分割,得到分割结果;
结合所述分割结果和待试穿服饰的特征信息,得到待试穿服饰对应所述人体三维轮廓中的目标部位;
根据所述待试穿服饰的特征信息,将所述待试穿服饰划分为预定数量的服饰子区域,将所述目标部位划分为所述预定数量的部位子区域,各个所述部位子区域与各个所述服饰子区域一一对应;
基于各个所述服饰子区域和各个所述部位子区域,将所述待试穿服饰覆盖到目标部位,得到虚拟试穿结果;
发送所述虚拟试穿结果。
9.一种虚拟试穿系统,其特征在于,包括:
数据获取单元,用于获取包含有试穿者的人体三维轮廓的数据集;
数据分析单元,用于对所述人体三维轮廓进行区域分割,得到分割结果;结合所述分割结果和待试穿服饰的特征信息,得到待试穿服饰对应所述人体三维轮廓中的目标部位;根据所述待试穿服饰的特征信息,将所述待试穿服饰划分为预定数量的服饰子区域,将所述目标部位划分为所述预定数量的部位子区域,各个所述部位子区域与各个所述服饰子区域一一对应;
数据合成单元,用于基于各个所述服饰子区域和各个所述部位子区域,将所述待试穿服饰覆盖到目标部位,得到虚拟试穿结果。
10.一种提供虚拟试穿信息系统,其特征在于,包括:
请求接收单元,用于接收来自试穿终端提交的虚拟试穿请求;
数据获取单元,用于获取包含有试穿者的人体三维轮廓的数据集;
数据分析单元,用于对所述人体三维轮廓进行区域分割,得到分割结果;结合所述分割结果和待试穿服饰的特征信息,得到待试穿服饰对应所述人体三维轮廓中的目标部位;根据所述待试穿服饰的特征信息,将所述待试穿服饰划分为预定数量的服饰子区域,将所述目标部位划分为所述预定数量的部位子区域,各个所述部位子区域与各个所述服饰子区域一一对应;
数据合成单元,用于基于各个所述服饰子区域和各个所述部位子区域,将所述待试穿服饰覆盖到目标部位,得到虚拟试穿结果;
发送单元,用于发送所述虚拟试穿结果到所述试穿终端以进行展示。
11.一种计算机可读存储介质,其特征在于,存储有计算机程序,该程序被处理器执行时实现权利要求1至8任一项所述的方法的步骤。
12.一种电子设备,其特征在于,包括:一个或多个处理器;以及与所述一个或多个处理器关联的存储器,所述存储器用于存储程序指令,所述程序指令在被所述一个或多个处理器读取执行时,执行权利要求1至8任一项所述的方法的步骤。
CN202210556717.9A 2022-05-20 2022-05-20 虚拟试穿方法及其系统、和提供虚拟试穿信息方法 Pending CN114758109A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202210556717.9A CN114758109A (zh) 2022-05-20 2022-05-20 虚拟试穿方法及其系统、和提供虚拟试穿信息方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210556717.9A CN114758109A (zh) 2022-05-20 2022-05-20 虚拟试穿方法及其系统、和提供虚拟试穿信息方法

Publications (1)

Publication Number Publication Date
CN114758109A true CN114758109A (zh) 2022-07-15

Family

ID=82335896

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210556717.9A Pending CN114758109A (zh) 2022-05-20 2022-05-20 虚拟试穿方法及其系统、和提供虚拟试穿信息方法

Country Status (1)

Country Link
CN (1) CN114758109A (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN116503569A (zh) * 2023-06-29 2023-07-28 深圳市镭神智能系统有限公司 虚拟试穿方法及其系统、计算机可读存储介质和电子设备
CN117523142A (zh) * 2023-11-13 2024-02-06 书行科技(北京)有限公司 虚拟试穿方法、装置、电子设备和计算机可读存储介质

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102981603A (zh) * 2011-06-01 2013-03-20 索尼公司 图像处理装置、图像处理方法和程序
CN103106604A (zh) * 2013-01-23 2013-05-15 东华大学 基于体感技术的3d虚拟试衣方法
TW201721519A (zh) * 2015-12-01 2017-06-16 英業達股份有限公司 虛擬試衣系統及虛擬試衣方法
CN107977885A (zh) * 2017-12-12 2018-05-01 北京小米移动软件有限公司 虚拟试穿的方法及装置
CN110176016A (zh) * 2019-05-28 2019-08-27 哈工大新材料智能装备技术研究院(招远)有限公司 一种基于人体轮廓分割与骨骼识别的虚拟试衣方法
US20200066029A1 (en) * 2017-02-27 2020-02-27 Metail Limited Method of generating an image file of a 3d body model of a user wearing a garment
US20210049811A1 (en) * 2019-08-13 2021-02-18 Texel Llc Method and System for Remote Clothing Selection
CN114445599A (zh) * 2021-12-22 2022-05-06 武汉万集光电技术有限公司 一种试衣方法、装置、终端设备、存储介质和系统

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102981603A (zh) * 2011-06-01 2013-03-20 索尼公司 图像处理装置、图像处理方法和程序
CN103106604A (zh) * 2013-01-23 2013-05-15 东华大学 基于体感技术的3d虚拟试衣方法
TW201721519A (zh) * 2015-12-01 2017-06-16 英業達股份有限公司 虛擬試衣系統及虛擬試衣方法
US20200066029A1 (en) * 2017-02-27 2020-02-27 Metail Limited Method of generating an image file of a 3d body model of a user wearing a garment
CN107977885A (zh) * 2017-12-12 2018-05-01 北京小米移动软件有限公司 虚拟试穿的方法及装置
CN110176016A (zh) * 2019-05-28 2019-08-27 哈工大新材料智能装备技术研究院(招远)有限公司 一种基于人体轮廓分割与骨骼识别的虚拟试衣方法
US20210049811A1 (en) * 2019-08-13 2021-02-18 Texel Llc Method and System for Remote Clothing Selection
CN114445599A (zh) * 2021-12-22 2022-05-06 武汉万集光电技术有限公司 一种试衣方法、装置、终端设备、存储介质和系统

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN116503569A (zh) * 2023-06-29 2023-07-28 深圳市镭神智能系统有限公司 虚拟试穿方法及其系统、计算机可读存储介质和电子设备
CN116503569B (zh) * 2023-06-29 2023-09-22 深圳市镭神智能系统有限公司 虚拟试穿方法及其系统、计算机可读存储介质和电子设备
CN117523142A (zh) * 2023-11-13 2024-02-06 书行科技(北京)有限公司 虚拟试穿方法、装置、电子设备和计算机可读存储介质

Similar Documents

Publication Publication Date Title
CN110826528B (zh) 时尚偏好分析
US9369638B2 (en) Methods for extracting objects from digital images and for performing color change on the object
US8976160B2 (en) User interface and authentication for a virtual mirror
CN114758109A (zh) 虚拟试穿方法及其系统、和提供虚拟试穿信息方法
US8982110B2 (en) Method for image transformation, augmented reality, and teleperence
CN111787242B (zh) 用于虚拟试衣的方法和装置
US20150248583A1 (en) Image processing apparatus, image processing system, image processing method, and computer program product
CN111681070B (zh) 线上商品的购买方法、购买装置、存储装置及购买设备
CN108351522A (zh) 注视方向映射
US20130170715A1 (en) Garment modeling simulation system and process
CN109547753A (zh) 提供由车辆的场景相机捕获的至少一个图像的方法和系统
JP6373026B2 (ja) 画像処理装置、画像処理システム、画像処理方法、及びプログラム
JP2018084890A (ja) 情報処理装置、情報処理方法、およびプログラム
JP6720385B1 (ja) プログラム、情報処理方法、及び情報処理端末
CN111767817A (zh) 一种服饰搭配方法、装置、电子设备及存储介质
KR102506352B1 (ko) 전자상거래를 위한 3d 인체 측정 데이터 기반의 디지털 트윈 아바타 제공 시스템
CN114170250B (zh) 图像处理方法、装置和电子设备
KR102064653B1 (ko) 증강현실 의류 쇼핑을 위한 웨어러블 글래스 및 증강현실 의류 쇼핑 방법
CN108010038B (zh) 基于自适应阈值分割的直播服饰装扮方法及装置
US20230245192A1 (en) System, method and apparatus for augmenting relaity with true-to- size apparel
KR20140015709A (ko) 이미지 매칭 시스템 및 방법
CN114219578A (zh) 无人服装售卖方法、装置、终端及存储介质
CN108040296B (zh) 基于自适应跟踪框分割的直播服饰装扮方法及装置
JP2020022681A (ja) メイクアップ支援システム、及びメイクアップ支援方法
KR20140085630A (ko) 인터넷을 이용한 패션 정보 제공 시스템 및 그 방법

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination