TWI526948B

TWI526948B - Method and apparatus for processing virtual image of a model

Info

Publication number: TWI526948B
Application number: TW103122602A
Authority: TW
Inventors: Gang Zhao
Priority date: 2013-08-19
Filing date: 2014-07-01
Publication date: 2016-03-21
Also published as: WO2015024397A1; US9792700B2; HK1192045A1; TW201508650A; CN103456032B; CN103456032A; US20160196668A1

Description

處理虛擬試衣模特兒圖像的方法和裝置

本發明涉及一種處理虛擬試衣模特兒圖像的方法和裝置。

虛擬試衣是指利用電腦技術讓虛擬模特兒代替真實使用者試穿網上出售的服裝，通過虛擬模特兒試穿呈現的效果對使用者選購網上服裝形成參考，便於使用者購買到合適的服裝。

目前的虛擬試衣方案主要利用圖庫中的虛擬試衣模特兒，由使用者選擇虛擬試衣模特兒和衣服，從而可以通過該模特兒穿著該衣服的效果來挑選服裝。

本發明提供一種處理虛擬試衣模特兒圖像的方法和裝置，有助於使虛擬試衣模特兒的試衣效果更接近使用者本人的試衣效果。

為實現上述目的，根據本發明的一個方面，提供了一種處理虛擬試衣模特兒圖像的方法。

本發明的處理虛擬試衣模特兒圖像的方法包括：確定參考圖像中的預選區域的人體膚色平均值，並計算該人體膚色平均值除以虛擬試衣模特兒圖像的膚色平均值得到的比值；對所述虛擬試衣模特兒圖像中的身體區域的各個圖元值乘以所述比值，將相乘的結果作為虛擬試衣模特兒圖像中身體區域的各個圖元值。

可選地，所述預選區域為人臉區域；所述確定參考圖像中的預選區域的人體膚色平均值的步驟包括：確定人臉區域中顏色屬於膚色範圍的圖元的集合；將所述圖元的集合中所有圖元的顏色平均值作為參考圖像中的預選區域的人體膚色平均值。

可選地，根據以下條件確定所述人臉區域中顏色屬於膚色範圍的圖元：Y>0.35且R>0.39G>0.15且B>0.09且V1-V2>0.07且R/G<1.8且R/B<3.0且G/B<3.0且R>G且R>B；其中：Y=R×0.299+G×0.587+B×0.114，V1=max(R,G,B)，V2=min(R,G,B)；R，G，B分別表示圖元的紅色、綠色、藍色分量值。

可選地，所述計算該人體膚色平均值除以虛擬試衣模特兒圖像的膚色平均值得到的比值的步驟之前，該方法還包括：計算虛擬試衣模特兒圖像的膚色平均值。

可選地，所述確定參考圖像中的預選區域的人體膚色平均值的步驟之前，該方法還包括：接收用於確定參考圖像中的預選區域的資訊。

根據本發明的另一方面，提供了一種處理虛擬試衣模特兒圖像的裝置。

本發明的處理虛擬試衣模特兒圖像的裝置包括：第一計算模組，用於確定參考圖像中的預選區域的人體膚色平均值；第二計算模組，用於計算所述人體膚色平均值除以虛擬試衣模特兒圖像的膚色平均值得到的比值；第三計算模組，用於對所述虛擬試衣模特兒圖像中的身體區域的各個圖元值乘以所述比值；輸出模組，用於輸出處理後的虛擬試衣模特兒圖像，該虛擬試衣模特兒圖像中身體區域的圖元值為所述第三計算模組的相乘結果。

可選地，所述第一計算模組還用於：確定人臉區域中顏色屬於膚色範圍的圖元的集合；將所述圖元的集合中所有圖元的顏色平均值作為參考圖像中的預選區域的人體膚色平均值。

可選地，所述第一計算模組還用於根據以下條件確定所述人臉區域中顏色屬於膚色範圍的圖元：Y>0.35且R>0.39G>0.15且B>0.09且V1-V2>0.07且R/G<1.8且R/B<3.0且G/B<3.0且R>G且R>B；其中：Y=R×0.299+G×0.587+B×0.114，V1=max(R,G,B)，V2=min(R,G,B)；R，G，B分別表示圖元的紅色、綠色、藍色分量值。

可選地，所述第一計算模組還用於：計算虛擬試衣模特兒圖像的膚色平均值。

可選地，還包括接收模組，用於：接收用於確定參考圖像中的預選區域的資訊。

根據本發明的技術方案，通過根據使用者提供的人臉或人身體的圖像的顏色來調節虛擬試衣模特兒圖像中身體區域的顏色，能夠使虛擬試衣模特兒的皮膚顏色與使用者本人的皮膚顏色相接近，從而有助於使虛擬試衣模特兒的試衣效果更接近使用者本人的試衣效果。

S11~S15‧‧‧步驟

20‧‧‧圖像

21‧‧‧頭像

30‧‧‧圖像

40‧‧‧圖像

50‧‧‧圖像

60‧‧‧處理圖像裝置模組

61‧‧‧第一計算模組

62‧‧‧第二計算模組

63‧‧‧第三計算模組

64‧‧‧輸出模組

附圖用於更好地理解本發明，不構成對本發明的不當限定。其中：圖1是根據本發明實施例的處理虛擬試衣模特兒圖像的方法的主要步驟的示意圖；圖2是根據本發明實施例的在照片上圈出人臉區域的示意圖；圖3是與本發明實施例有關的人臉圖像中屬於膚色範圍的圖元的示意圖；圖4是與本發明實施例有關的虛擬試衣模特兒的示意圖；圖5是根據本發明實施例的調整膚色之後的虛擬試衣模特兒的示意圖；圖6是根據本發明實施例的處理虛擬試衣模特兒圖像的裝置的基本組成部分的示意圖。

以下結合附圖對本發明的示範性實施例做出說明，其中包括本發明實施例的各種細節以助於理解，應當將它們認為僅僅是示範性的。因此，本領域普通技術人員應當認識到，可以對這裡描述的實施例做出各種改變和修改，而不會背離本發明的範圍和精神。同樣，為了清楚和簡明，以下的描述中省略了對公知功能和結構的描述。

圖1是根據本發明實施例的處理虛擬試衣模特兒圖像的方法的主要步驟的示意圖。如圖1所示，該方法可以由與電子商務有關的伺服器來執行，主要包括以下步驟：步驟S11：確定參考圖像中的預選區域的人體膚色平均值。該參考圖像一般是由使用者通過終端設備例如個人電腦，向伺服器提供的使用者本人的照片，也可以是使用者截取的照片局部，該局部為人像上的一塊皮膚區域。

如果參考圖像是人臉的照片，則因為背景中有可能存在一些顏色與皮膚接近的圖元，所以需要使用者在該照片中選擇出人臉區域，上傳給伺服器的照片應當是對人臉區域已做出選擇的照片，例如圖2所示，圖2是根據本發明實施例的在照片上圈出人臉區域的示意圖。使用者在照片20上圈出臉部範圍21，然後將照片20上傳給伺服器。

圖3是與本發明實施例有關的人臉圖像中屬於膚色範圍的圖元的示意圖。參考圖3，由於五官的存在，人的臉部不完全是皮膚，人臉圖像30中只有一部分圖元是屬於膚色範圍的圖元。因此需先確定人臉區域中顏色屬於膚色範圍的圖元的集合，然後將該圖元的集合中所有圖元的顏色平均值作為參考圖像中的預選區域的人體膚色平均值。集合中的圖元的膚色平均值可根據如下公式計算：Ravg=(ΣNR)/N

Gavg=(ΣNG)/N

Bavg=(ΣNB)/N

式中：R、G、B分別表示集合中的圖元的紅色、綠色、藍色分量值；Ravg、Gavg、Bavg分別表示集合中的圖元的紅色分量、綠色分量、藍色分量的平均值；N表示集合中的圖元的個數。

對於圖像中圖元的顏色是否屬於膚色範圍的圖元即哪些圖元屬於上述集合，可以根據以下條件來判斷：Y>0.35且R>0.39G>0.15且B>0.09且V1-V2>0.07且R/G<1.8且R/B<3.0且G/B<3.0且R>G且R>B。其中：Y=R×0.299+G×0.587+B×0.114，V1=max(R,G,B)，V2=min(R,G,B)；R，G，B分別表示圖元的紅色、綠色、藍色分量值。

如上所述，參考圖像可以是使用者截取的照片局部，該局部為人像上的一塊皮膚區域，此時上述的預選區域可以是伺服器在該皮膚區域上選擇的小塊連續或非連續的區域，而不根據使用者截取的全部區域計算，以節省運算時間。

步驟S12：計算虛擬試衣模特兒圖像的膚色平均值。如果在伺服器中已經記錄了虛擬試衣模特兒圖庫中各圖像的膚色平均值，則本步驟可以省略。這裡的膚色平均值的計算方式與上述的集合中的圖元的膚色平均值的計算方式相似，但此處應將虛擬試衣模特兒圖像的屬於膚色範圍的圖元作為該集合的元素。

步驟S13：計算步驟S11中確定的人體膚色平均值除以虛擬試衣模特兒圖像的膚色平均值得到的比值。

步驟S14：對虛擬試衣模特兒圖像中的身體區域的各個圖元值乘以步驟S13中得出的比值。本步驟的計算即得到了虛擬試衣模特兒圖像中身體區域的各個圖元的顏色的調整後的值。

步驟S15：將相乘的結果作為虛擬試衣模特兒圖像中身體區域的各個圖元值，輸出虛擬試衣模特兒圖像，並且在輸出的虛擬試衣模圖像中，身體區域的各個圖元值應當為步驟S14中調整後的值。

以參考圖像是人臉的照片為例：在步驟S13中，具體可根據下式計算上述比值：KR=Ravg-head/Ravg-body

KG=Gavg-head/Gavg-body

KB=Bavg-head/Bavg-body

在步驟S14中，具體可根據下式計算：Rbody-after=Rbody-before×KR

Gbody-after=Gbody-before×KG

Bbody-after=Bbody-before×KB

Ravg-head、Gavg-head、Bavg-head分別表示人體膚色即頭像中的膚色的紅色、綠色、藍色分量平均值，Ravg-body、Gavg-body、Bavg-body分別表示虛擬試衣模特兒圖像的膚色的紅色、綠色、藍色分量平均值；Rbody-before、Gbody-before、Bbody-before分別表示虛擬試衣模特兒圖像的膚色的紅色、綠色、藍色分量的初始值，Rbody-after、Gbody-after、Bbody-after相應為調整後的值。

至此，虛擬試衣模特兒的皮膚顏色得到了調整，變得更加接近使用者提供的膚色，圖4是與本發明實施例有關的虛擬試衣模特兒的示意圖，圖5是根據本發明實施例的調整膚色之後的虛擬試衣模特兒的示意圖。在圖4和圖5中同時示出了使用者頭像，從圖4和圖5可以看出，與圖片40中的原虛擬試衣模特兒相比，圖片50中的調整膚色之後的虛擬試衣模特兒的膚色更加接近人臉顏色。

以下對本發明實施例中的處理虛擬試衣模特兒圖像的裝置做出說明。該裝置可以設置在上文中的伺服器內。參考圖6，圖6是根據本發明實施例的處理虛擬試衣模特兒圖像的裝置的基本組成部分的示意圖，如圖6所示，處理虛擬試衣模特兒圖像的裝置60主要包括第一計算模組61、第二計算模組62、第三計算模組63、輸出模組64。

第一計算模組61用於確定參考圖像中的預選區域的人體膚色平均值；第二計算模組62用於計算人體膚色平均值除以虛擬試衣模特兒圖像的膚色平均值得到的比值；第三計算模組63用於對虛擬試衣模特兒圖像中的身體區域的各個圖元值乘以上述比值；輸出模組64用於輸出處理後的虛擬試衣模特兒圖像，該虛擬試衣模特兒圖像中身體區域的圖元值為第三計算模組63的相乘結果。

第一計算模組61還可用於：確定人臉區域中顏色屬於膚色範圍的圖元的集合；將所述圖元的集合中所有圖元的顏色平均值作為參考圖像中的預選區域的人體膚色平均值。

第一計算模組61還可用於根據以下條件確定人臉區域中顏色屬於膚色範圍的圖元：Y>0.35且R>0.39G>0.15且B>0.09且V1-V2>0.07且R/G<1.8且R/B<3.0且G/B<3.0且R>G且R>B。其中：Y=R×0.299+G×0.587+B×0.114，V1=max(R,G,B)，V2=min(R,G,B)；R，G，B分別表示圖元的紅色、綠色、藍色分量值。

第一計算模組61還可用於：計算虛擬試衣模特兒圖像的膚色平均值。

處理虛擬試衣模特兒圖像的裝置60還可以包括接收模組(圖中未示出)，該接收模組用於：接收用於確定參考圖像中的預選區域的資訊。

根據本發明實施例的技術方案，通過根據使用者提供的人臉或人身體的圖像的顏色來調節虛擬試衣模特兒圖像中身體區域的顏色，能夠使虛擬試衣模特兒的皮膚顏色與使用者本人的皮膚顏色相接近，從而有助於使虛擬試衣模特兒的試衣效果更接近使用者本人的試衣效果。

以上結合具體實施例描述了本發明的基本原理，但是，需要指出的是，對本領域的普通技術人員而言，能夠理解本發明的方法和設備的全部或者任何步驟或者部件，可以在任何計算裝置(包括處理器、儲存媒體等)或者計算裝置的網路中，以硬體、固件、軟體或者它們的組合加以實現，這是本領域普通技術人員在閱讀了本發明的說明的情況下運用他們的基本程式設計技能就能實現的。

因此，本發明的目的還可以通過在任何計算裝置上運行一個程式或者一組程式來實現。所述計算裝置可以是公知的通用裝置。因此，本發明的目的也可以僅僅通過提供包含實現所述方法或者裝置的程式碼的程式產品來實現。也就是說，這樣的程式產品也構成本發明，並且存儲有這樣的程式產品的儲存媒體也構成本發明。顯然，所述儲存媒體可以是任何公知的儲存媒體或者將來開發出的任何儲存媒體。

還需要指出的是，在本發明的裝置和方法中，顯然，各部件或各步驟是可以分解和/或重新組合的。這些分解和/或重新組合應視為本發明的等效方案。並且，執行上述系列處理的步驟可以自然地按照說明的順序按時間循序執行，但是並不需要一定按照時間循序執行。某些步驟可以並行或彼此獨立地執行。

上述具體實施方式，並不構成對本發明保護範圍的限制。本領域技術人員應該明白的是，取決於設計要求和其他因素，可以發生各種各樣的修改、組合、子組合和替代。任何在本發明的精神和原則之內所作的修改、等同替換和改進等，均應包含在本發明保護範圍之內。

S11~S15‧‧‧步驟

Claims

一種處理虛擬試衣模特兒圖像的方法，包括：確定參考圖像中的預選區域的人體膚色平均值；計算虛擬試衣模特兒圖像中身體區域的膚色平均值；並計算該人體膚色平均值除以該虛擬試衣模特兒圖像中身體區域的膚色平均值得到的比值；以及對所述虛擬試衣模特兒圖像中身體區域的各個圖元值乘以所述比值，將相乘的結果作為更新之虛擬試衣模特兒圖像中身體區域的各個圖元值，使得該更新之虛擬試衣模特兒圖像中身體區域的膚色平均值，與該參考圖像中的預選區域的人體膚色平均值相同。
如申請專利範圍第1項所述的處理虛擬試衣模特兒圖像的方法，其中所述預選區域為人臉區域；所述確定參考圖像中的預選區域的人體膚色平均值的步驟包括：確定人臉區域中顏色屬於膚色範圍的圖元的集合；以及將所述圖元的集合中所有圖元的顏色平均值作為參考圖像中的預選區域的人體膚色平均值。
如申請專利範圍第2項所述的處理虛擬試衣模特兒圖像的方法，其中根據以下條件確定所述人臉區域中顏色屬於膚色範圍的圖元：Y>0.35且R>0.39G>0.15且B>0.09且V1-V2>0.07且R/G<1.8且R/B<3.0且G/B<3.0且R>G且R>B；其中：Y=R×0.299+G×0.587+B×0.114，V1=max(R,G,B)V2=min(R,G,B)；R，G，B分別表示圖元的紅色、綠色、藍色分量值。
如申請專利範圍第1，2，或3項所述的處理虛擬試衣模特兒圖像的方法，其中所述確定參考圖像中的預選區域的人體膚色平均值的步驟之前，該方法還包括：接收用於確定參考圖像中的預選區域的資訊。
一種處理虛擬試衣模特兒圖像的裝置，包括：第一計算模組，用於確定參考圖像中的預選區域的人體膚色平均值，以及計算虛擬試衣模特兒圖像中身體區域的膚色平均值；第二計算模組，用於計算所述人體膚色平均值除以該虛擬試衣模特兒圖像中身體區域的膚色平均值得到的比值；第三計算模組，用於對所述虛擬試衣模特兒圖像中身體區域的各個圖元值乘以所述比值；以及輸出模組，用於輸出處理後的虛擬試衣模特兒圖像，該虛擬試衣模特兒圖像中身體區域的圖元值為所述第三計算模組的相乘結果，使得該輸出處理後的該虛擬試衣模特兒圖像中身體區域的膚色平均值，與該參考圖像中的預選區域的人體膚色平均值相同。
如申請專利範圍第5項所述的處理虛擬試衣模特兒圖像的裝置，其中，所述第一計算模組還用於：確定人臉區域中顏色屬於膚色範圍的圖元的集合；以及將所述圖元的集合中所有圖元的顏色平均值作為參考圖像中的預選區域的人體膚色平均值。
如申請專利範圍第6項所述的處理虛擬試衣模特兒圖像的裝置，其中，所述第一計算模組還用於根據以下條件確定所述人臉區域中顏色屬於膚色範圍的圖元：Y>0.35且R>0.39G>0.15且B>0.09且V1-V2>0.07且R/G<1.8且R/B<3.0且G/B<3.0且R>G且R>B；其中：Y=R×0.299+G×0.587+B×0.114，V1=max(R，G，B)，V2=min(R,G,B)；R，G，B分別表示圖元的紅色、綠色、藍色分量值。
如申請專利範圍第5，6或7項所述的處理虛擬試衣模特兒圖像的裝置，其中，還包括接收模組，用於：接收用於確定參考圖像中的預選區域的資訊。