CN110610537B - 一种衣服图像展示方法、装置及存储介质和终端设备 - Google Patents

一种衣服图像展示方法、装置及存储介质和终端设备 Download PDF

Info

Publication number
CN110610537B
CN110610537B CN201910881749.4A CN201910881749A CN110610537B CN 110610537 B CN110610537 B CN 110610537B CN 201910881749 A CN201910881749 A CN 201910881749A CN 110610537 B CN110610537 B CN 110610537B
Authority
CN
China
Prior art keywords
clothes
position information
point
arbitrary point
triangle
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201910881749.4A
Other languages
English (en)
Other versions
CN110610537A (zh
Inventor
张煜
邵志兢
赵维凯
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Zhuhai Prometheus Vision Technology Co ltd
Original Assignee
Zhuhai Prometheus Vision Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Zhuhai Prometheus Vision Technology Co ltd filed Critical Zhuhai Prometheus Vision Technology Co ltd
Priority to CN201910881749.4A priority Critical patent/CN110610537B/zh
Publication of CN110610537A publication Critical patent/CN110610537A/zh
Application granted granted Critical
Publication of CN110610537B publication Critical patent/CN110610537B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T15/003D [Three Dimensional] image rendering
    • G06T15/005General purpose rendering architectures

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Graphics (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Processing Or Creating Images (AREA)
  • Image Generation (AREA)

Abstract

本发明实施例公开了一种衣服图像展示方法、装置及存储介质和终端设备,应用于人工智能技术领域。衣服图像展示装置会根据二维图像即待处理图像中衣服的衣服类型,确定对应衣服在标准状态下的第二衣服控制点所构成的第二转换三角形内第二任意点的相对参数,再结合二维图像中第一衣服控制点的位置信息即可得到当前状态下,衣服在二维图像中的投影点即第一任意点的位置信息,进而根据第一任意点的位置信息可以展示衣服的纹理。通过得到标准状态下衣服在二维平面的投影点的相对参数,可以推算出任意状态下衣服在二维平面的各个投影点,进而逼真地展示任意状态下衣服的纹理,实现二维的衣服图像到三维图像的展示。

Description

一种衣服图像展示方法、装置及存储介质和终端设备
技术领域
本发明涉及人工智能技术领域,特别涉及一种衣服图像展示方法、装置及存储介质和终端设备。
背景技术
随着虚拟化身的普及,捏脸、小偶以及小我等以虚拟化身为基础的应用在社交、游戏以及视频行业中占有越来越大的比重,但是,这些基于卡通、抽象的虚拟化身表现形式并不能满足某些对真实性要求较高的应用,比如虚拟试衣、真人形象社交以及真实场景的短视频内容,因此,需要一种技术能够达到逼真的真人展示技术。
传统的真人展示方法中真实衣服的展示占有非常重要的比重,主要是基于二维图像的展示方法,但是无法达到逼真的还原效果,仅能用卡通或抽象的方式进行近似,因此,需要大量的后期人工处理和特效渲染,无法在普通消费场景中应用。
发明内容
本发明实施例提供一种衣服图像展示方法、装置及存储介质和终端设备,实现了根据二维衣服图像三维图像的展示。
本发明实施例第一方面提供一种衣服图像展示方法,包括:
确定待处理图像中衣服的衣服类型,及确定所述衣服在当前状态下的第一衣服控制点的位置信息;
获取所述衣服类型对应衣服在标准状态下的第二衣服控制点的位置信息,及根据所述第二衣服控制点的位置信息,计算所述衣服在标准状态下的第二转换三角形与所述第二转换三角形内的第二任意点的相对参数;所述第二转换三角形为所述第二衣服控制点构成的三角形区域,所述第二任意点为标准状态下所述衣服类型对应衣服在二维平面的投影点;
根据所述第一衣服控制点的位置信息,确定所述衣服在当前状态下的第一转换三角形,及根据所述第一转换三角形以及所述相对参数,确定所述第一转换三角形内的第一任意点的位置信息,所述第一任意点为当前状态下所述衣服类型对应衣服在二维平面的投影点;
根据第一任意点的位置信息展示所述待处理图像中衣服的纹理。
本发明实施例第二方面提供一种衣服图像展示装置,包括:
当前信息确定单元,用于确定待处理图像中衣服的衣服类型,及确定所述衣服在当前状态下的第一衣服控制点的位置信息;
相对参数单元,用于获取所述衣服类型对应衣服在标准状态下的第二衣服控制点的位置信息,及根据所述第二衣服控制点的位置信息,计算所述衣服在标准状态下的第二转换三角形与所述第二转换三角形内的第二任意点的相对参数;所述第二转换三角形为所述第二衣服控制点构成的三角形区域,所述第二任意点为标准状态下所述衣服类型对应衣服在二维平面的投影点;
位置确定单元,用于根据所述第一衣服控制点的位置信息,确定所述衣服在当前状态下的第一转换三角形,及根据所述第一转换三角形以及所述相对参数,确定所述第一转换三角形内的第一任意点的位置信息,所述第一任意点为当前状态下所述衣服类型对应衣服在二维平面的投影点;
纹理展示单元,用于根据第一任意点的位置信息展示所述待处理图像中衣服的纹理。
本发明实施例第三方面提供一种存储介质,所述存储介质储存多条指令,所述指令适于由处理器加载并执行如本发明实施例第一方面所述的衣服图像展示方法。
本发明实施例第四方面提供一种终端设备,包括处理器和存储介质,所述处理器,用于实现各个指令;
所述存储介质用于储存多条指令,所述指令用于由处理器加载并执行如本发明实施例第一方面所述的衣服图像展示方法。
可见,在本实施例的方法中,衣服图像展示装置会根据二维图像即待处理图像中衣服的衣服类型,确定对应衣服在标准状态下的第二衣服控制点所构成的第二转换三角形内第二任意点,与第二转换三角形的相对参数,再结合二维图像中第一衣服控制点的位置信息即可得到当前状态下,衣服在二维图像中的投影点即第一任意点的位置信息,进而根据第一任意点的位置信息可以展示衣服的纹理。由于同一类型的衣服在不同状态下,衣服在二维平面投影的各个投影点与投影点所在的转换三角形(由衣服控制点构成)的相对参数是不会发生变化的,则通过得到标准状态下衣服在二维平面的投影点与第二转换三角形的相对参数,及衣服在任意状态下的衣服控制点的位置信息,可以推算出任意状态下衣服在二维平面的各个投影点,进而可以逼真地展示任意状态下衣服的纹理,即通过简单的运算方法实现二维的衣服图像到三维图像的展示。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1是本发明实施例提供的一种衣服图像展示方法的示意图;
图2是本发明一个实施例提供的一种衣服图像展示方法的流程图;
图3是本发明一个实施例中长袖外套类型的衣服的衣服控制点的示意图;
图4是本发明一个实施例中长袖T恤类型的衣服的衣服控制点所组成转换三角形的示意图;
图5是本发明一个实施例中长袖T恤类型的衣服的三维点的示意图;
图6a是本发明一个实施例中衣服图像展示装置展示的当前状态的衣服纹理的示意图;
图6b是本发明一个实施例中衣服图像展示装置展示的调整后状态的衣服纹理的示意图;
图7是本发明应用实施例中在衣服图像展示装置中预置各个衣服类型的衣服中任意点的相对参数的示意图;
图8是本发明应用实施例中在衣服图像展示装置对待处理的二维图像进行三维展示的示意图;
图9是本发明实施例提供的一种衣服图像展示装置的结构示意图;
图10是本发明实施例提供的一种终端设备的结构示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”、“第三”“第四”等(如果存在)是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的本发明的实施例能够以除了在这里图示或描述的那些以外的顺序实施。此外,术语“包括”和“具有”以及他们的任何变形,意图在于覆盖不排它的包含,例如,包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
本发明实施例提供一种衣服图像展示方法,主要是通过二维的衣服图像对衣服进行三维展示,使得展示后的衣服图像更逼真,参考图1所示,本发明实施例的衣服图像展示装置具体可以按照如下步骤实现虚拟衣服的展示:
确定待处理图像中衣服的衣服类型,及确定所述衣服在当前状态下的第一衣服控制点的位置信息;获取所述衣服类型对应衣服在标准状态下的第二衣服控制点的位置信息,及根据所述第二衣服控制点的位置信息,计算所述衣服在标准状态下的第二转换三角形与所述第二转换三角形内的第二任意点的相对参数,所述第二转换三角形为所述第二衣服控制点构成的三角形区域,所述第二任意点为标准状态下所述衣服类型对应衣服在二维平面的投影点;根据所述第一衣服控制点的位置信息,确定所述衣服在当前状态下的第一转换三角形,及根据所述第一转换三角形及所述相对参数,确定所述第一转换三角形内的第一任意点的位置信息,所述第一任意点为当前状态下所受衣服类型对应衣服在二维平面的投影点;根据第一任意点的位置信息展示所述待处理图像中衣服的纹理。
这样,由于同一类型的衣服在不同状态下,衣服在二维平面投影的各个投影点与投影点所在的转换三角形(由衣服控制点构成)的相对参数是不会发生变化的,则通过得到标准状态下衣服在二维平面的投影点与第二转换三角形的相对参数,及衣服在任意状态下的衣服控制点的位置信息,可以推算出任意状态下衣服在二维平面的各个投影点,进而可以逼真地展示任意状态下衣服的纹理,即通过简单的运算方法实现二维的衣服图像到三维图像的展示。
通过本发明实施例的方法,一方面可以大大提高衣服图像的展示效率,进而可以通过大量二维的衣服图像生成衣服的三维模型数据库,即各种衣服类型的衣服在各种状态下在二维平面的投影点的位置。另一方面,可以通过拍摄大量的真实图片,得知图片中人物衣服的三维模型;并将这些衣服的三维模型应用在真人人体模型上(比如虚拟试衣),或是为以真人模型为基础的游戏提供大量的素材,或是与真人模型、动作和场景结合后生成视频内容。
本发明实施例提供一种衣服图像展示方法,主要是由衣服图像展示装置所执行的方法,流程图如图2所示,包括:
步骤101,确定待处理图像中衣服的衣服类型,及确定衣服在当前状态下的第一衣服控制点的位置信息。
可以理解,用户可以通过衣服图像展示装置输入二维图像或一段视频,并操作衣服图像展示装置,以发起本实施例的衣服图像展示流程,衣服图像展示装置会接收用户输入二维图像或视频,并将用户输入的二维图像或将视频中的视频帧作为待处理图像,发起本实施例的流程。在待处理图像中包括衣服图像,该衣服图像可以是设置在人物身体上的衣服图像,也可以是不包含人物的衣服图像。
这里,衣服类型可以包括但不限于如下任一类型:短袖T恤、长袖T恤、短袖外套、长袖外套、背心、吊带、短裤、长裤、短袖裙子、长袖裙子、背心裙和吊带裙等。
待处理图像中衣服所处的状态随着待处理图像中衣服姿态的变化而变化,例如,待处理图像中人物是将两个手臂举过头顶,则其中人物上衣的状态是上衣袖子向上的状态;第一衣服控制点是指组成待处理图像中衣服轮廓关键的点,比如衣服转角的点等,例如图3所示的长袖外套类型的衣服包括37个控制点;而第一衣服控制点的位置信息是指第一衣服控制点在待处理图像中所处位置的坐标信息。
具体地,衣服图像展示装置可以通过深度学习的神经网络等方法确定待处理图像中衣服的衣服类型及第一衣服控制点的位置信息。
步骤102,获取上述衣服类型对应衣服在标准状态下的第二衣服控制点的位置信息,及根据第二衣服控制点的位置信息,计算衣服在标准状态下的第二转换三角形与第二转换三角形内的第二任意点的相对参数=,其中,第二转换三角形为第二衣服控制点构成的三角形区域,第二任意点为标准状态下上述衣服类型对应衣服在二维平面的投影点。
这里,衣服的标准状态是指图像中衣服包括的所有部分可见且处于图像正面的状态,例如图4中衣服的状态。当获取衣服在标准状态下的第二衣服控制点的位置信息时,可以通过深度学习的神经网络等方法来获取。
在计算第二转换三角形与第二转换三角形内的第二任意点的相对参数时,可以先将标准状态下的衣服根据第二衣服控制点进行三角化,三角化形成的所有第二转换三角形组成了标准状态下衣服的覆盖部位;如果标准状态下的上述衣服的三维图像中某些三维点在二维平面的投影落入这些第二转换三角形中,则这些三维点在二维平面的投影点即为第二任意点。例如图4所示的对长袖T恤类型衣服进行三角化后形成多个转换三角形,比如衣服控制点1、2和3所组成的转换三角形,衣服控制点8、9和15所组成的转换三角形等。
可以得知,上述衣服类型对应衣服在标准状态下的第二衣服控制点所构成的第二转换三角形有多个,且任一第二转换三角形内的第二任意点包括多个,则衣服图像展示装置在计算第二转换三角形与第二转换三角形内的第二任意点的相对参数时,针对每个第二任意点可以得到一个相对参数。在一种具体应用中,对于某一第二转换三角形中的某一第二任意点来说,当某一第二任意点为衣服类型对应衣服在二维平面的某一投影点时,根据某一投影点的坐标信息,及某一第二转换三角形中三个顶点的坐标信息,计算某一投影点分别与三个顶点中每两个顶点组成的三角形的第一面积,及计算某一第二转换三角形的第二面积;然后将第一面积与第二面积的比值作为某一第二任意点的相对参数,这样,每个第二任意点的相对参数都不相同。其中,某一投影点分别与三个顶点中每两个顶点组成的转换三角形包括3个转换三角形,例如投影点为P,三个顶点为ABC,则组成的转换三角形包括转换三角形PBA、PAC和PCB。
其中,衣服图像展示装置在得到各个投影点的坐标信息时,可以先通过扫描等方式获取上述衣服类型对应的衣服在标准状态下的各个三维点的坐标信息(即三维坐标),然后分别将这些三维点投影到二维平面得到各个三维点对应的投影点的坐标信息(即二维坐标),从投影点中选择某些关键点作为第二衣服控制点。例如图5中长袖T恤类型的衣服的各个三维点,需要将这些三维点投影到二维平面得到各个三维点对应的投影点,图中深黑色点所示的三维点对应的投影点可以作为该衣服的衣服控制点,浅灰色点为该衣服的其他三维点。
例如,某一第二转换三角形的三个顶点为A、B和C,第二任意点为P,则先可以通过如下公式1计算第二转换三角形ABC的第二面积TriangleABCArea,其中,A、B和C分别为三个顶点的坐标信息,θ为BA边与CA边的夹角:
Figure GDA0002273551450000071
且可以按照类似的方法分别计算三角形PAB、PAC和PBC的第一面积,分别记为TrianglePABArea、TrianglePACArea和TrianglePBCArea,按照如下公式2可以将第一面积与第二面积的比值作为任意点P的相对参数u、v和w:
Figure GDA0002273551450000072
Figure GDA0002273551450000073
Figure GDA0002273551450000074
需要说明的是,在一种情况下,可以事先通过上述计算第二转换三角形内第二任意点的相对参数的方法,获取到各个衣服类型对应衣服在标准状态下衣服控制点所构成的转换三角形中任意点的相对参数,并储存到衣服图像展示装置中,具体地,储存衣服类型与任意点的相对参数之间的对应关系。当发起衣服图像展示流程时,执行了上述步骤101后,在执行本步骤102时,可以直接从本地存储的对应关系中提取到相应衣服类型对应的各个任意点的相对参数。
在另一种情况下,在衣服图像展示装置中未预置上述的对应关系,则当发起衣服图像展示流程时,执行了上述步骤101后,在执行本步骤102时,衣服图像展示装置会通过上述的方法计算相应衣服类型对应衣服的第二任意点的相对参数。
另外需要说明的是,当同一类型的衣服的状态发生变化时,对应的衣服控制点的数量及衣服控制点构成的转换三角形中任意点的相对参数(即上述的u、v和w)是不会改变的,但是衣服控制点的位置信息会发生改变。
步骤103,根据上述步骤101获取的第一衣服控制点的位置信息,确定衣服在当前状态下的第一转换三角形,及根据第一转换三角形及上述步骤102计算的第二任意点的相对参数,确定第一转换三角形内的第一任意点的位置信息,该第一任意点为当前状态下上述衣服类型对应衣服在二维平面的投影点。
具体地,衣服图像展示装置会根据第一衣服控制点所构成的第一转换三角形中三个顶点的位置信息,及与第一转换三角形对应的第二转换三角形内第二任意点的相对参数,与第一转换三角形内的第一任意点的位置信息之间的函数对应关系,确定第一任意点的位置信息。这里函数对应关系可以是事先预置在衣服图像展示装置中的,具体可以包括第一任意点的位置信息为相对参数分别与三个顶点的位置信息的乘积之和。
例如,第一转换三角形A'B'C'中的任意点P'的坐标信息可以通过如下公式3计算得到,其中,第一转换三角形A'B'C'为一个非标准状态下衣服的衣服控制点A'、B'和C'组成的三角形,第一转换三角形A'B'C'中的任意点P',与标准状态下该衣服相同部位(比如都属于衣服袖子角上的第三个衣服控制点)的衣服控制点A、B和C构成的第二转换三角形ABC中的任意点P相对应,在计算该任意点P'的坐标信息时,可以根据任意点P对应的相对参数(u、v和w)计算得到:
P'=u*A'+v*B'+w*C' (3)
需要说明的是,如果当前状态下衣服的至少一个三维点在二维平面的投影落入第一衣服控制点所构成的某一第一转换三角形中,则该至少一个三维点的投影点为该第一转换三角形中的第一任意点。
步骤104,根据第一任意点的位置信息展示待处理图像中衣服的纹理。
由于上述步骤103确定的第一任意点的位置信息具体是当前状态下衣服在二维平面的投影点的坐标信息,则可以根据第一任意点的位置信息确定待处理图像中衣服的纹理,比如由于第一衣服控制点构成的第一转换三角形中不包含第一任意点的部分为没有衣服的三维点投影的部分,可以设置为阴影部分,例如图6a中某一状态的衣服中的阴影部分,具体地,衣服图像展示装置可以将第一衣服控制点构成的第一转换三角形中非第一任意点的像素值设置为黑色像素值。
进一步地,衣服图像展示装置在执行上述步骤104后,用户可以操作衣服图像展示装置,使得衣服图像展示装置根据用户操作调整待处理图像中衣服的状态时,还会确定衣服在调整后状态下的第三衣服控制点的位置信息,并根据第三衣服控制点的位置信息确定衣服在调整后状态下的第三转换三角形,及根据第三转换三角形及上述第二任意点的相对参数,确定第三衣服控制点所构成的第三转换三角形中第三任意点的位置信息,具体确定方法类似于上述步骤103中的方法,在此不进行赘述;最后衣服图像展示装置还会根据第三任意点的位置信息展示调整后待处理图像中衣服的纹理,具体展示方法与上述步骤104方法类似,在此不进行赘述。这里,第三任意点为调整后状态下上述衣服类型的衣服在二维平面的投影点。
例如图6a所示为通过执行上述步骤103展示的当前状态下的衣服纹理,其中包括非第一任意点组成的阴影部分,图6b为调整状态后衣服图像展示装置展示的衣服纹理,较为逼真地展示了衣服在各个状态下的纹理。
可见,在本实施例的方法中,衣服图像展示装置会根据二维图像即待处理图像中衣服的衣服类型,确定对应衣服在标准状态下的第二衣服控制点所构成的第二转换三角形内第二任意点,与第二转换三角形的相对参数,再结合二维图像中第一衣服控制点的位置信息即可得到当前状态下,衣服在二维图像中的投影点即第一任意点的位置信息,进而根据第一任意点的位置信息可以展示衣服的纹理。由于同一类型的衣服在不同状态下,衣服在二维平面投影的各个投影点与投影点所在的转换三角形(由衣服控制点构成)的相对参数是不会发生变化的,则通过得到标准状态下衣服在二维平面的投影点与第二转换三角形的相对参数,及衣服在任意状态下的衣服控制点的位置信息,可以推算出任意状态下衣服在二维平面的各个投影点,进而可以逼真地展示任意状态下衣服的纹理,即通过简单的运算方法实现二维的衣服图像到三维图像的展示。
以下以一个具体的应用实例来说明本发明实施例中的衣服图像展示方法,具体包括如下两个部分:
(1)参考图7所示,可以通过如下步骤在衣服图像展示装置中预置各种衣服类型的衣服在二维平面的投影点的相对参数,主要是针对标准状态下的衣服进行的处理:
步骤201,衣服图像展示装置通过扫描等方式获取各种衣服类型的衣服的三维点的三维坐标信息。
步骤202,衣服图像展示装置根据各个衣服类型的衣服的三维点的三维坐标信息,将各个衣服类型的衣服的三维点投影到二维平面上,得到各个衣服类型的衣服的二维衣服图像,并获取到各个衣服类型的衣服的二维衣服图像中投影点的二维坐标信息。
步骤203,衣服图像展示装置从各个衣服类型的衣服的二维衣服图像的投影点中选取某些投影点作为各个衣服类型的衣服的衣服控制点,根据各个衣服类型的衣服的衣服控制点,对各个衣服类型的衣服的二维衣服图像进行三角化,即通过衣服控制点构成多个转换三角形,这多个转换三角形覆盖了二维衣服图像中衣服的所有部位,且每个转换三角形内包括的投影点即为转换三角形内的任意点。
通过本步骤可以得到各个衣服类型的衣服的衣服控制点的坐标信息,及衣服控制点构成的各个转换三角形中任意点的坐标信息。
步骤204,衣服图像展示装置可以通过上述步骤203得到的坐标信息,及申述公式1和2计算得到各个衣服类型的衣服的衣服控制点所构成的转换三角形中每个任意点的相对参数。
步骤205,衣服图像展示装置储存衣服类型,与对应衣服类型的衣服的衣服控制点所构成的转换三角形中每个任意点的相对参数之间的对应关系。
(2)参考图8所示,通过如下步骤实现对任一待处理图像中衣服图像进行展示:
步骤301,用户通过衣服图像展示装置输入某一二维的衣服图像,当衣服图像展示装置接收到用户输入的衣服图像,将用户输入的衣服图像作为待处理图像,先确定待处理图像中衣服的衣服类型,及确定衣服在当前状态下的衣服控制点的位置信息。
步骤302,衣服图像展示装置根据上述步骤301确定的衣服类型,从本地储存的对应关系中,查找到与该衣服类型对应的衣服在标准状态下的衣服控制点所构成的转换三角形中每个任意点的相对参数。
步骤303,衣服图像展示装置可以根据步骤302中查找到的每个任意点的相对参数,及上述公式3,计算得到衣服在当前状态下的衣服控制点所构成的转换三角形中任意点的位置信息,即当前状态下的衣服在二维平面的投影点的位置信息。
步骤304,衣服图像展示装置根据303计算得到当前状态下的衣服在二维平面的投影点的位置信息,展示当前状态下衣服的纹理。
本发明实施例还提供一种衣服图像展示装置,其结构示意图如图9所示,具体可以包括:
当前信息确定单元10,用于确定待处理图像中衣服的衣服类型,及确定所述衣服在当前状态下的第一衣服控制点的位置信息。
相对参数单元11,用于获取所述当前信息确定单元10确定的衣服类型对应衣服在标准状态下的第二衣服控制点的位置信息,及根据所述第二衣服控制点的位置信息,计算所述衣服在标准状态下的第二转换三角形与所述第二转换三角形内的第二任意点的相对参数;所述第二转换三角形为所述第二衣服控制点构成的三角形区域,所述第二任意点为标准状态下所述衣服类型对应衣服在二维平面的投影点。
这里,所述衣服类型对应衣服在标准状态下的第二衣服控制点所构成的第二转换三角形有多个,任一第二转换三角形中的第二任意点包括多个。该相对参数单元11,具体用于当某一第二任意点为所述衣服类型对应衣服在二维平面的某一投影点时,根据所述某一投影点的坐标信息,及所述某一第二转换三角形中三个顶点的坐标信息,计算某一投影点分别与三个顶点中每两个顶点组成的三角形的第一面积,及计算所述某一第二转换三角形的第二面积;将所述第一面积与第二面积的比值作为某一第二任意点的相对参数。
位置确定单元12,用于根据所述当前信息确定单元10确定的第一衣服控制点的位置信息,确定所述衣服在当前状态下的第一转换三角形,及根据所述第一转换三角形以及所述相对参数单元11计算的相对参数,确定所述第一转换三角形内的第一任意点的位置信息,所述第一任意点为当前状态下所述衣服类型对应衣服在二维平面的投影点。
该位置确定单元12,具体用于根据所述第一衣服控制点所构成的第一转换三角形中三个顶点的位置信息,及与所述第一转换三角形对应的第二转换三角形内第二任意点的相对参数,与所述第一转换三角形内的第一任意点的位置信息之间的函数对应关系,确定所述第一任意点的位置信息。其中,所述函数对应关系包括:所述第一任意点的位置信息为所述相对参数分别与所述三个顶点的位置信息的乘积之和。
纹理展示单元13,用于根据所述位置确定单元12确定的第一任意点的位置信息展示所述待处理图像中衣服的纹理。
进一步地,上述当前信息确定单元10,还用于当调整所述待处理图像中衣服的状态时,确定所述衣服在调整后状态下的第三衣服控制点的位置信息;则上述位置确定单元12,还用于根据所述第三衣服控制点的位置信息确定所述衣服在调整后状态下的第三转换三角形,及根据所述第三转换三角形及第二任意点的相对参数,确定所述第三转换三角形中第三任意点的位置信息;所述第三任意点为所述调整后状态下衣服在二维平面的投影点;而纹理展示单元13,还用于根据第三任意点的位置信息展示所述调整后待处理图像中衣服的纹理。
在本实施例的装置中,相对参数单元11会根据二维图像即待处理图像中衣服的衣服类型,确定对应衣服在标准状态下的第二衣服控制点所构成的第二转换三角形内第二任意点,与第二转换三角形的相对参数,位置确定单元12再结合二维图像中第一衣服控制点的位置信息即可得到当前状态下,衣服在二维图像中的投影点即第一任意点的位置信息,进而纹理展示单元13根据第一任意点的位置信息可以展示衣服的纹理。由于同一类型的衣服在不同状态下,衣服在二维平面投影的各个投影点与投影点所在的转换三角形(由衣服控制点构成)的相对参数是不会发生变化的,则通过得到标准状态下衣服在二维平面的投影点与第二转换三角形的相对参数及,衣服在任意状态下的衣服控制点的位置信息,可以推算出任意状态下衣服在二维平面的各个投影点,进而可以逼真地展示任意状态下衣服的纹理,即通过简单的运算方法实现二维的衣服图像到三维图像的展示。
本发明实施例还提供一种终端设备,其结构示意图如图10所示,该终端设备可因配置或性能不同而产生比较大的差异,可以包括一个或一个以上中央处理器(centralprocessing units,CPU)20(例如,一个或一个以上处理器)和存储器21,一个或一个以上存储应用程序221或数据222的存储介质22(例如一个或一个以上海量存储设备)。其中,存储器21和存储介质22可以是短暂存储或持久存储。存储在存储介质22的程序可以包括一个或一个以上模块(图示没标出),每个模块可以包括对终端设备中的一系列指令操作。更进一步地,中央处理器20可以设置为与存储介质22通信,在终端设备上执行存储介质22中的一系列指令操作。
具体地,在存储介质22中储存的应用程序221包括衣服图像展示的应用程序,且该程序可以包括上述衣服图像展示装置中的当前信息确定单元10,相对参数单元11,位置确定单元12和纹理展示单元13,在此不进行赘述。更进一步地,中央处理器20可以设置为与存储介质22通信,在终端设备上执行存储介质22中储存的衣服图像展示的应用程序对应的一系列操作。
终端设备还可以包括一个或一个以上电源23,一个或一个以上有线或无线网络接口24,一个或一个以上输入输出接口25,和/或,一个或一个以上操作系统223,例如WindowsServerTM,Mac OS XTM,UnixTM,LinuxTM,FreeBSDTM等等。
上述方法实施例中所述的由衣服图像展示装置所执行的步骤可以基于该图10所示的终端设备的结构。
本发明实施例还提供一种存储介质,所述存储介质储存多条指令,所述指令适于由处理器加载并执行如上述衣服图像展示装置所执行的衣服图像展示方法。
本发明实施例还提供一种终端设备,包括处理器和存储介质,所述处理器,用于实现各个指令;所述存储介质用于储存多条指令,所述指令用于由处理器加载并执行如上述衣服图像展示装置所执行的衣服图像展示方法。
本领域普通技术人员可以理解上述实施例的各种方法中的全部或部分步骤是可以通过程序来指令相关的硬件来完成,该程序可以存储于一计算机可读存储介质中,存储介质可以包括:只读存储器(ROM)、随机存取存储器RAM)、磁盘或光盘等。
以上对本发明实施例所提供的衣服图像展示方法、装置及存储介质和终端设备进行了详细介绍,本文中应用了具体个例对本发明的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本发明的方法及其核心思想;同时,对于本领域的一般技术人员,依据本发明的思想,在具体实施方式及应用范围上均会有改变之处,综上所述,本说明书内容不应理解为对本发明的限制。

Claims (7)

1.一种衣服图像展示方法,其特征在于,包括:
确定待处理图像中衣服的衣服类型,及确定所述衣服在当前状态下的第一衣服控制点的位置信息;
获取所述衣服类型对应衣服在标准状态下的第二衣服控制点的位置信息,及根据所述第二衣服控制点的位置信息,计算所述衣服在标准状态下的第二转换三角形与所述第二转换三角形内的第二任意点的相对参数;所述第二转换三角形为所述第二衣服控制点构成的三角形区域,所述第二任意点为标准状态下所述衣服类型对应衣服在二维平面的投影点;
根据所述第一衣服控制点的位置信息,确定所述衣服在当前状态下的第一转换三角形,及根据所述第一转换三角形以及所述相对参数,确定所述第一转换三角形内的第一任意点的位置信息,所述第一任意点为当前状态下所述衣服类型对应衣服在二维平面的投影点;
根据第一任意点的位置信息展示所述待处理图像中衣服的纹理;
所述第二衣服控制点的位置信息为所述第二衣服控制点的坐标信息,则所述计算所述衣服在标准状态下的某一第二转换三角形与所述某一第二转换三角形内的某一第二任意点的相对参数,具体包括:
当所述某一第二任意点为所述衣服类型对应衣服在二维平面的某一投影点时,根据所述某一投影点的坐标信息,及所述某一第二转换三角形中三个顶点的坐标信息,计算某一投影点分别与三个顶点中每两个顶点组成的三角形的第一面积,及计算所述某一第二转换三角形的第二面积;
将所述第一面积与第二面积的比值作为所述某一第二任意点的相对参数;
所述根据所述第一转换三角形以及所述相对参数,确定所述第一转换三角形内的第一任意点的位置信息,具体包括:
根据所述第一衣服控制点所构成的第一转换三角形中三个顶点的位置信息,及与所述第一转换三角形对应的第二转换三角形内第二任意点的相对参数,与所述第一转换三角形内的第一任意点的位置信息之间的函数对应关系,确定所述第一任意点的位置信息。
2.如权利要求1所述的方法,其特征在于,所述衣服类型对应衣服在标准状态下的第二衣服控制点所构成的第二转换三角形有多个,任一第二转换三角形中的第二任意点包括多个。
3.如权利要求1所述的方法,其特征在于,所述函数对应关系包括:
所述第一任意点的位置信息为所述相对参数分别与所述三个顶点的位置信息的乘积之和。
4.如权利要求1-3中任一所述的方法,其特征在于,所述方法还包括:
当调整所述待处理图像中衣服的状态时,确定所述衣服在调整后状态下的第三衣服控制点的位置信息;
根据所述第三衣服控制点的位置信息确定所述衣服在调整后状态下的第三转换三角形,及根据所述第三转换三角形及第二任意点的相对参数,确定所述第三转换三角形中第三任意点的位置信息;所述第三任意点为所述调整后状态下衣服在二维平面的投影点;
根据第三任意点的位置信息展示调整后的所述待处理图像中衣服的纹理。
5.一种衣服图像展示装置,其特征在于,包括:
当前信息确定单元,用于确定待处理图像中衣服的衣服类型,及确定所述衣服在当前状态下的第一衣服控制点的位置信息;
相对参数单元,用于获取所述衣服类型对应衣服在标准状态下的第二衣服控制点的位置信息,及根据所述第二衣服控制点的位置信息,计算所述衣服在标准状态下的第二转换三角形与所述第二转换三角形内的第二任意点的相对参数;所述第二转换三角形为所述第二衣服控制点构成的三角形区域,所述第二任意点为标准状态下所述衣服类型对应衣服在二维平面的投影点;
位置确定单元,用于根据所述第一衣服控制点的位置信息,确定所述衣服在当前状态下的第一转换三角形,及根据所述第一转换三角形以及所述相对参数,确定所述第一转换三角形内的第一任意点的位置信息,所述第一任意点为当前状态下所述衣服类型对应衣服在二维平面的投影点;
纹理展示单元,用于根据第一任意点的位置信息展示所述待处理图像中衣服的纹理;
其中所述相对参数单元,具体用于当某一第二任意点为所述衣服类型对应衣服在二维平面的某一投影点时,根据所述某一投影点的坐标信息,及所述某一第二转换三角形中三个顶点的坐标信息,计算某一投影点分别与三个顶点中每两个顶点组成的三角形的第一面积,及计算所述某一第二转换三角形的第二面积;将所述第一面积与第二面积的比值作为某一第二任意点的相对参数;
所述位置确定单元,具体用于根据所述第一衣服控制点所构成的第一转换三角形中三个顶点的位置信息,及与所述第一转换三角形对应的第二转换三角形内第二任意点的相对参数,与所述第一转换三角形内的第一任意点的位置信息之间的函数对应关系,确定所述第一任意点的位置信息。
6.一种存储介质,其特征在于,所述存储介质储存多条指令,所述指令适于由处理器加载并执行如权利要求1至4任一项所述的衣服图像展示方法。
7.一种终端设备,其特征在于,包括处理器和存储介质,所述处理器,用于实现各个指令;
所述存储介质用于储存多条指令,所述指令用于由处理器加载并执行如权利要求1至4任一项所述的衣服图像展示方法。
CN201910881749.4A 2019-09-18 2019-09-18 一种衣服图像展示方法、装置及存储介质和终端设备 Active CN110610537B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910881749.4A CN110610537B (zh) 2019-09-18 2019-09-18 一种衣服图像展示方法、装置及存储介质和终端设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910881749.4A CN110610537B (zh) 2019-09-18 2019-09-18 一种衣服图像展示方法、装置及存储介质和终端设备

Publications (2)

Publication Number Publication Date
CN110610537A CN110610537A (zh) 2019-12-24
CN110610537B true CN110610537B (zh) 2022-08-26

Family

ID=68891765

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910881749.4A Active CN110610537B (zh) 2019-09-18 2019-09-18 一种衣服图像展示方法、装置及存储介质和终端设备

Country Status (1)

Country Link
CN (1) CN110610537B (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111369658B (zh) * 2020-03-24 2024-02-02 北京畅游天下网络技术有限公司 一种渲染方法及装置

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108694741A (zh) * 2017-04-07 2018-10-23 杭州海康威视数字技术股份有限公司 一种三维重建方法及装置
CN110163064A (zh) * 2018-11-30 2019-08-23 腾讯科技(深圳)有限公司 一种道路标志物的识别方法、装置及存储介质

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103473806B (zh) * 2013-09-23 2016-03-16 北京航空航天大学 一种基于单幅图像的服装三维模型构建方法
US9613424B2 (en) * 2013-09-23 2017-04-04 Beihang University Method of constructing 3D clothing model based on a single image
US9396585B2 (en) * 2013-12-31 2016-07-19 Nvidia Corporation Generating indirection maps for texture space effects
CN104036532B (zh) * 2014-05-29 2017-03-15 浙江工业大学 基于三维到二维服装图案无缝映射的服装制作方法
EP3335197A1 (en) * 2015-08-14 2018-06-20 Metail Limited Method and system for generating an image file of a 3d garment model on a 3d body model
CN105354876B (zh) * 2015-10-20 2018-10-09 何家颖 一种基于移动终端的实时立体试衣方法
CN109242954B (zh) * 2018-08-16 2022-12-16 叠境数字科技(上海)有限公司 基于模板变形的多视角三维人体重建方法

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108694741A (zh) * 2017-04-07 2018-10-23 杭州海康威视数字技术股份有限公司 一种三维重建方法及装置
CN110163064A (zh) * 2018-11-30 2019-08-23 腾讯科技(深圳)有限公司 一种道路标志物的识别方法、装置及存储介质

Also Published As

Publication number Publication date
CN110610537A (zh) 2019-12-24

Similar Documents

Publication Publication Date Title
CN109325990B (zh) 图像处理方法及图像处理装置、存储介质
US20220327709A1 (en) Garment segmentation
JP2019510297A (ja) ユーザの真実の人体モデルへの仮想的な試着
US11836862B2 (en) External mesh with vertex attributes
US11908083B2 (en) Deforming custom mesh based on body mesh
CN105389090B (zh) 游戏交互界面显示的方法及装置、移动终端和电脑终端
US20230074826A1 (en) Body fitted accessory with physics simulation
US11321916B1 (en) System and method for virtual fitting
US11673054B2 (en) Controlling AR games on fashion items
US11636662B2 (en) Body normal network light and rendering control
US20220230375A1 (en) Three-dimensional avatar generation and customization
US20240096040A1 (en) Real-time upper-body garment exchange
US20230169739A1 (en) Light and rendering of garments
US20240013463A1 (en) Applying animated 3d avatar in ar experiences
CN115082608A (zh) 虚拟角色服装渲染方法、装置、电子设备和存储介质
CN110610537B (zh) 一种衣服图像展示方法、装置及存储介质和终端设备
KR100828935B1 (ko) 디지털 패션 디자인용 실사 기반 가상 드레이핑 시뮬레이션방법
US20230196602A1 (en) Real-time garment exchange
CN113313796B (zh) 场景生成方法、装置、计算机设备和存储介质
US11620801B2 (en) Information-processing device, storage medium, information-processing system, and information-processing method
WO2018151612A1 (en) Texture mapping system and method
JP2024511343A (ja) 下層のボディおよび/または衣服レイヤに適合する重ねられた衣服
CN116543093B (zh) 柔体对象渲染方法、装置、计算机设备和存储介质
CN112316422B (zh) 服饰变化方法、装置、电子设备和存储介质
US20230316666A1 (en) Pixel depth determination for object

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
TA01 Transfer of patent application right
TA01 Transfer of patent application right

Effective date of registration: 20220609

Address after: 519000 5-196, floor 5, Yunxi Valley Digital Industrial Park, No. 168, Youxing Road, Xiangzhou District, Zhuhai City, Guangdong Province (block B, Meixi Commercial Plaza) (centralized office area)

Applicant after: Zhuhai Prometheus Vision Technology Co.,Ltd.

Address before: 518000 room 217, R & D building, Founder science and Technology Industrial Park, north of Songbai highway, Longteng community, Shiyan street, Bao'an District, Shenzhen City, Guangdong Province

Applicant before: SHENZHEN PROMETHEUS VISION TECHNOLOGY Co.,Ltd.

GR01 Patent grant
GR01 Patent grant