TWI564840B - 立體試衣方法及裝置 - Google Patents

立體試衣方法及裝置 Download PDF

Info

Publication number
TWI564840B
TWI564840B TW101118219A TW101118219A TWI564840B TW I564840 B TWI564840 B TW I564840B TW 101118219 A TW101118219 A TW 101118219A TW 101118219 A TW101118219 A TW 101118219A TW I564840 B TWI564840 B TW I564840B
Authority
TW
Taiwan
Prior art keywords
human body
stereo
model
clothing
fitting
Prior art date
Application number
TW101118219A
Other languages
English (en)
Other versions
TW201346834A (zh
Inventor
范錦華
Original Assignee
晨星半導體股份有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 晨星半導體股份有限公司 filed Critical 晨星半導體股份有限公司
Publication of TW201346834A publication Critical patent/TW201346834A/zh
Application granted granted Critical
Publication of TWI564840B publication Critical patent/TWI564840B/zh

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T17/00—Three dimensional [3D] modelling, e.g. data description of 3D objects
    • G06T17/10—Constructive solid geometry [CSG] using solid primitives, e.g. cylinders, cubes
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2210/00—Indexing scheme for image generation or computer graphics
    • G06T2210/16—Cloth

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Computer Graphics (AREA)
  • Software Systems (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Geometry (AREA)
  • Computer Hardware Design (AREA)
  • General Engineering & Computer Science (AREA)
  • Processing Or Creating Images (AREA)

Description

立體試衣方法及裝置
本案涉及顯示領域，特別涉及立體試衣方法及裝置。
隨著電子商務的普及，網上購物以其便捷、省時及省錢等特點為人們所青睞。網路購物已經成為消費者的生活習慣，廣泛地滲透到了人們的日常生活中。
然而，對於網上購買衣服，消費者會遇到無法試穿衣服，不知道自己穿上去效果如何的煩惱。儘管一些網站提供了“虛擬試衣間”的功能，但這些功能都是基於用戶頭像和網站衣服的簡單二維貼圖拼接來顯示試衣效果，對於衣服是否合身、是否起皺等很多細節卻無法顯示。因此，目前網路購衣因為不合身而產生的退換貨比例非常高，直接導致了消費者通過網路購衣的效率很低。
本案提供一種立體試衣方法及裝置，以解決現有技術的網路購衣過程無法向消費者真實展示試衣效果的問題。
本案實施例提供一種立體試衣方法，包括：獲取一用戶的不同視角的兩幅人體圖像；根據所述兩幅人體圖像構建一人體立體模型；在一服裝資料庫中查詢與所述人體立體模型之尺寸相匹配的一服裝立體模型；以及根據所述服裝立體模型和所述人體立體模型生成一立體試衣效果圖。
本案另一實施例提供一種立體試衣裝置，包括：一圖像獲取單元，用於獲取一用戶的不同視角的兩幅人體圖像；一人體立體模型構建單元，用於根據所述兩幅人體圖 像構建一人體立體模型；一匹配單元，用於在一服裝資料庫中查詢與所述人體立體模型之尺寸相匹配的一服裝立體模型；以及一合成單元，用於根據所述服裝立體模型和所述人體立體模型生成一立體試衣效果圖。
為了對本案之上述及其他方面有更佳的瞭解，下文特舉實施例，並配合所附圖式，作詳細說明如下：
下面結合附圖和實施例對本案進行詳細說明。
請參閱第1圖，本案實施例的立體試衣方法包括如下步驟：步驟S1，獲取用戶的不同視角的兩幅人體圖像；步驟S2，根據該兩幅人體圖像構建人體立體模型；步驟S3，在服裝資料庫中查詢與人體立體模型之尺寸匹配的服裝立體模型；步驟S4，根據服裝立體模型和人體立體模型生成立體試衣效果圖。
在步驟S1中，可以採用圖像輸入設備獲取人體圖像，例如可以利用間隔預定距離設置的兩個攝像頭來獲取用戶的不同視角的兩幅人體圖像。本步驟中所用的攝像頭比如為數位攝像頭，例如：高解析度的USB CCD攝像頭。在本技術領域人員理解的範圍內，本步驟還包括通過有線或無線方式獲取預先已拍攝好的不同視角的兩幅人體圖像。
請參閱第2圖，本實施例的步驟S2的具體流程進一步包括： 步驟S21，獲取一人體特徵點分別於兩幅人體圖像上的圖像座標；步驟S22，根據圖像座標和兩個攝像頭的位置關係計算出人體特徵點的空間座標；步驟S23，根據多個人體特徵點的空間座標構建出人體立體模型。
在步驟S21中，將已獲取的兩幅人體圖像進行過濾，找出若干人體特徵點。具體的過濾方式可根據人體特徵點與背景之間的色彩、明暗度等差異實現。這些人體特徵點包括人體的頭頂、腳底和左右指尖等能夠體現人體尺寸(例如，身高、臂長或腰圍)的人體特徵點，並進一步獲取同一特徵點在兩幅人體圖像上的不同圖像座標。
在步驟S22中，根據兩幅人體圖像中的同一特徵點的圖像座標差異以及兩個攝像頭的位置關係，根據透鏡成像原理通過三角運算或其他運算方式可以計算出該人體特徵點相對於攝像頭或其他參照物的空間座標。
請參閱第3圖，以人體的頭頂為例，假設頭頂與兩個攝像頭處於同一Y平面上。XZ坐標系以中點O為原點，中點O則是第3圖所示的以兩個攝像頭的透鏡中心之間連線的中點。根據三角關係推導出頭頂的空間座標可由如下公式獲得：z0=d=f×b/(X2+X1)；x0=(X2-X1)×d/f=(X2-X1)×b/(X2+X1)；其中，f為兩個攝像頭的透鏡中心相對于各自成像面的距離，b為兩個攝像頭的透鏡中心之間的距離，X1和 X2分別為頭頂在上述兩個成像面上的圖像座標。
進一步，如第4圖所示，當頭頂與兩個攝像頭不處於同一平面上時，可根據透鏡成像原理，通過特徵點的圖像座標以及兩個攝像頭的位置關係計算出頭頂的空間座標。具體來說，第4圖中，以O為圓點的X、Y、Z坐標系中，於計算頭頂點p的座標，根據三角關係，利用兩個USB攝像的距離b、p點在上述兩個成像面上的圖像座標p1(u1,v1)與p2(u2,v2)以及透鏡與成像平面的距離f分別計算出p點對應的x、y、z座標。
在步驟23中，通過綜合大量的人體特徵點的空間座標之間的差異，可以計算出用戶的人體尺寸，例如身高、臂長、腰圍等，進而可以構建出對應的人體立體模型。本案採用雙目立體視覺(Binocular Stereo Vision)3D重構技術構建人體立體模型，可以採用但不限於以下演算法：(1)Marr-Poggio-Grimson演算法；(2)R.Nevatia-G.Medioni演算法；(3)R.Y.Wong演算法；(4)K.Price-R.Reddy演算法；(5)C.S.Clark-A.L.Luck-C.A.McNary演算法；(6)K.E.Price演算法；(7)R.Horaud-T.Skorads演算法；(8)W.Hoff-N.Ahuja演算法。
在步驟S3中，讀出服裝資料庫中的各種服裝立體模型的對應尺寸，並將人體立體模型與之進行尺寸匹配計算，判斷是否合身。若判斷為合身，則獲取該合適尺寸的 服裝立體模型，並計算出服裝立體模型的衣領、袖子及腰腹部等各個部位與人體立體模型的差異，獲得計算結果。
在步驟S3中，可從遠端伺服器獲取服裝資料庫，該服裝資料庫存儲有不同尺寸的服裝立體模型，從而確保資料的即時更新。獲取服裝資料庫時所採用的通信連接方式包括但不限於有線或無線模式，具體如RJ45、RS232、Wifi、藍牙、Zigbee、紅外線和3G等。
在步驟S4中，根據步驟S3中獲得的計算結果生成立體模型，並進行3D渲染，最終生成立體試衣效果圖。當然，還可以在立體試衣效果圖上進一步拼接用戶的真實頭像，以便更逼真地顯示出試衣效果。
立體試衣效果圖可以是單幅圖像，並通過顯示系統進行平面顯示。此外，立體試衣效果圖也可以是用於立體顯示的左右眼圖像，進而通過顯示系統進行立體顯示。
在上述立體試衣方法，各步驟可以在同一終端上完成，也可以是通過雲計算技術在不同終端上完成。
請參見第5圖，第5圖是本案實施例的立體試衣裝置的示意框圖。如第5圖所示，立體試衣裝置100包括圖像獲取單元110、人體立體模型構建單元120、匹配單元130以及合成單元140。
圖像獲取單元110用於獲取用戶的不同視角的兩幅人體圖像。本實施例中，圖像獲取單元110可包括有間隔預定距離設置的兩個攝像頭，進而獲取站在立體試衣裝置100前的用戶的不同視角的兩幅人體圖像。
此外，圖像獲取單元110可以是能夠與外部設備保持 通訊的任意適當硬體或軟體，以從外部設備獲取已拍攝好的不同視角的兩幅人體圖像。
人體立體模型構建單元120用於根據兩幅人體圖像構建人體立體模型。在本實施例中，人體立體模型構建單元120是基於立體視覺的立體模型重建的圖像計算處理模組，其能夠根據輸入的不同視角的兩幅人體圖像計算出用戶的各種人體尺寸，進而構建出對應的人體立體模型。
請參見第6圖，第6圖是本案實施例的人體立體模型構建單元的示意框圖。如第6圖所示，人體立體模型構建單元120包括圖像座標獲取模組121、空間座標獲取模組122以及構建模組123。圖像座標獲取模組121用於獲取一人體特徵點分別於兩幅人體圖像上的圖像座標。空間座標獲取模組122用於根據圖像座標和該兩個攝像頭的位置關係計算出人體特徵點的空間座標。構建模組123用於根據多個人體特徵點的空間座標構建出人體立體模型。上述模組的具體實現過程，已在上文中進行了詳細描述，在此不再贅述。
匹配單元130用於在服裝資料庫中查詢與人體立體模型尺寸相匹配的服裝立體模型。匹配單元130可以從遠端伺服器獲取服裝資料庫，該服裝資料庫中存儲有不同尺寸的服裝立體模型。
合成單元140用於根據服裝立體模型和人體立體模型生成立體試衣效果圖。合成單元140還用於在立體試衣效果圖上進一步拼接用戶的真實頭像。
在本實施例中，立體試衣裝置100可以是智慧電視機 系統。目前，智慧電視機系統已經從簡單的傳統電視節目收看功能向數位化、網路化、智慧化轉變，並已將電腦的部分功能融合進來。智慧電視機系統在能實現流覽網頁、視頻通話、網上購物等功能外，同時還具有大螢幕、高清晰以及三維顯示等普通電腦不具備的優點。因此，該立體試衣裝置100還包括現有技術的智慧電視機具備的電視信號接收模組、網路通信模組、人機交互模組以及顯示模組。
電視信號接收模組是一般電視信號接收處理功能的模組，用於實現電視節目觀看功能。網路通信模組是智慧電視機具備的網路介面，用戶可以通過它上互聯網並進行網路購物，購物網站的服裝資料庫中的各種款式各種尺寸的服裝立體模型也可通過該模組下載到本地。人機交互模組是一般電視機中央處理控制單元，控制系統硬體以及人機交互介面的顯示處理等系統功能。顯示模組是電視機螢幕，用於電視圖像以及立體試衣效果圖在高清晰大螢幕上的立體顯示。
本案實施例的有益效果是：區別于現有技術的情況，該立體試衣方法及裝置能以立體形式向消費者顯示試衣效果，其過程方便快捷且效果逼真，在極大地提升用戶體驗的同時也提高了消費者的購衣效率。
綜上所述，雖然本案已以實施例揭露如上，然其並非用以限定本案。本案所屬技術領域中具有通常知識者，在不脫離本案之精神和範圍內，當可作各種之更動與潤飾。因此，本案之保護範圍當視後附之申請專利範圍所界定者為準。
S1~S4、S21~S23
100‧‧‧立體試衣裝置
110‧‧‧圖像獲取單元
120‧‧‧人體立體模型構建單元
130‧‧‧匹配單元
140‧‧‧合成單元
121‧‧‧圖像座標獲取模組
122‧‧‧空間座標獲取模組
123‧‧‧構建模組
第1圖是本案實施例的立體試衣方法的流程示意圖。
第2圖是第1圖的立體試衣方法根據兩幅人體圖像構建人體立體模型的流程示意圖。
第3圖是本案一實施例的人體特徵點的空間座標與圖像座標的關係示意圖。
第4圖是本案另一實施例的人體特徵點的空間座標和圖像座標的關係示意圖。
第5圖是本案實施例的立體試衣裝置的示意框圖。
第6圖是本案實施例的人體立體模型構建單元的示意框圖。
S1~S4‧‧‧步驟

Claims (6)

  1. 一種立體試衣方法，包括：利用間隔一預定距離設置的兩個攝像頭獲取一用戶的不同視角的兩幅人體圖像；獲取一人體特徵點分別於所述兩幅人體圖像上的圖像座標；根據所述圖像座標和所述兩個攝像頭的一位置關係計算出所述人體特徵點的一空間座標；根據多個人體特徵點的空間座標構建出一人體立體模型；在一服裝資料庫中查詢與所述人體立體模型之尺寸相匹配的一服裝立體模型；以及根據所述服裝立體模型和所述人體立體模型生成一立體試衣效果圖。
  2. 根據權利要求1所述的立體試衣方法，其中，所述在所述服裝資料庫中查詢與所述人體立體模型尺寸相匹配的所述服裝立體模型的步驟包括：從一遠端伺服器獲取所述服裝資料庫，所述服裝資料庫中存儲有不同尺寸的服裝立體模型。
  3. 根據權利要求1所述的立體試衣方法，其中，所述根據所述服裝立體模型和所述人體立體模型生成所述立體試衣效果圖的步驟包括：在所述立體試衣效果圖上拼接所述用戶的一真實頭像。
  4. 一種立體試衣裝置，包括： 一圖像獲取單元，包括間隔一預定距離設置的兩個攝像頭，所述圖像獲取單元用於獲取一用戶的不同視角的兩幅人體圖像；一人體立體模型構建單元，用於根據所述兩幅人體圖像構建一人體立體模型，所述人體立體模型構建單元包括：一圖像座標獲取模組，用於獲取一人體特徵點分別於所述兩幅人體圖像上的圖像座標；一空間座標獲取模組，用於根據所述圖像座標和該兩個攝像頭的一位置關係計算出所述人體特徵點的一空間座標；一構建模組，用於根據多個人體特徵點的空間座標構建出所述人體立體模型；一匹配單元，用於在一服裝資料庫中查詢與所述人體立體模型之尺寸相匹配的一服裝立體模型；以及一合成單元，用於根據所述服裝立體模型和所述人體立體模型生成一立體試衣效果圖。
  5. 根據權利要求4所述的立體試衣裝置，所述匹配單元從一遠端伺服器獲取所述服裝資料庫，該服裝資料庫中存儲有不同尺寸的服裝立體模型。
  6. 根據權利要求4所述的立體試衣裝置，所述合成單元在所述立體試衣效果圖上拼接所述用戶的一真實頭像。
TW101118219A 2012-05-09 2012-05-22 立體試衣方法及裝置 TWI564840B (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN2012101420877A CN102682211A (zh) 2012-05-09 2012-05-09 一种立体试衣方法及装置

Publications (2)

Publication Number Publication Date
TW201346834A TW201346834A (zh) 2013-11-16
TWI564840B true TWI564840B (zh) 2017-01-01

Family

ID=46814127

Family Applications (1)

Application Number Title Priority Date Filing Date
TW101118219A TWI564840B (zh) 2012-05-09 2012-05-22 立體試衣方法及裝置

Country Status (3)

Country Link
US (1) US20130300739A1 (zh)
CN (1) CN102682211A (zh)
TW (1) TWI564840B (zh)

Families Citing this family (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104021590A (zh) * 2013-02-28 2014-09-03 北京三星通信技术研究有限公司 虚拟试穿试戴系统和虚拟试穿试戴方法
CN103208099A (zh) * 2013-03-18 2013-07-17 深圳市朵唯志远科技有限公司 用于互联网的人体识别方法及系统
TWI514252B (zh) * 2014-02-11 2015-12-21 Xyzprinting Inc 立體模型合成方法與立體模型合成裝置
CN103871099B (zh) * 2014-03-24 2017-12-19 惠州Tcl移动通信有限公司 一种基于移动终端进行3d模拟搭配处理方法及系统
CN104008501B (zh) 2014-06-13 2017-11-14 北京京东尚科信息技术有限公司 一种获取衣服图像属性点的方法和装置
JP6320237B2 (ja) * 2014-08-08 2018-05-09 株式会社東芝 仮想試着装置、仮想試着方法、およびプログラム
JP2016038811A (ja) 2014-08-08 2016-03-22 株式会社東芝 仮想試着装置、仮想試着方法、およびプログラム
CN106157358A (zh) * 2015-03-26 2016-11-23 成都理想境界科技有限公司 基于视频图像的对象融合方法及终端
CN104966284A (zh) * 2015-05-29 2015-10-07 北京旷视科技有限公司 基于深度数据获得对象尺寸信息的方法及设备
CN105205672A (zh) * 2015-07-16 2015-12-30 维沃移动通信有限公司 应用在移动终端的试衣方法及移动终端
CN106204201A (zh) * 2016-06-29 2016-12-07 乐视控股（北京）有限公司 一种数据处理方法和装置
CN107174826A (zh) * 2017-05-25 2017-09-19 合肥泽诺信息科技有限公司 一种基于增强现实的游戏角色扮演用换装试衣系统
CN110622218A (zh) * 2017-06-30 2019-12-27 Oppo广东移动通信有限公司 一种图像显示方法、装置、存储介质和终端
CN107633440A (zh) * 2017-08-11 2018-01-26 捷开通讯(深圳)有限公司 虚拟试衣的方法、用于虚拟试衣的移动终端及存储设备
CN107728779A (zh) * 2017-09-15 2018-02-23 周易 一种基于3d显示的虚拟陪护装置
WO2019134342A1 (zh) * 2018-01-08 2019-07-11 菲达有限公司 女式内衣设计系统
CN110415062A (zh) * 2018-04-28 2019-11-05 香港乐蜜有限公司 基于服饰试穿的信息处理方法和装置
CN110189202A (zh) * 2019-05-30 2019-08-30 广东元一科技实业有限公司 一种三维虚拟试衣方法及系统
CN111179417B (zh) * 2019-12-31 2023-11-24 武汉科技大学 一种虚拟试穿、试戴系统及电子设备

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TW201019265A (en) * 2008-11-11 2010-05-16 Univ Far East Auxiliary design system and method for drawing and real-time displaying 3D objects
TW201120652A (en) * 2009-12-02 2011-06-16 Univ Far East Method of utilizing captured physical image to carry out real-time 3D dynamic display of costumes.

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6310627B1 (en) * 1998-01-20 2001-10-30 Toyo Boseki Kabushiki Kaisha Method and system for generating a stereoscopic image of a garment
US20020024517A1 (en) * 2000-07-14 2002-02-28 Komatsu Ltd. Apparatus and method for three-dimensional image production and presenting real objects in virtual three-dimensional space
JP4216824B2 (ja) * 2005-03-07 2009-01-28 株式会社東芝 ３次元モデル生成装置、３次元モデル生成方法および３次元モデル生成プログラム
US20100030578A1 (en) * 2008-03-21 2010-02-04 Siddique M A Sami System and method for collaborative shopping, business and entertainment
US8700477B2 (en) * 2009-05-26 2014-04-15 Embodee Corp. Garment fit portrayal system and method
CN102032878B (zh) * 2009-09-24 2014-06-18 黑龙江省科学院自动化研究所 基于双目立体视觉测量系统的精确在线测量方法
US8650591B2 (en) * 2010-03-09 2014-02-11 Yolanda Prieto Video enabled digital devices for embedding user data in interactive applications
US20110298897A1 (en) * 2010-06-08 2011-12-08 Iva Sareen System and method for 3d virtual try-on of apparel on an avatar
CN102062596A (zh) * 2010-11-12 2011-05-18 中兴通讯股份有限公司 一种利用双摄像头测距的方法和装置
CN202058154U (zh) * 2011-02-17 2011-11-30 上海天道启科电子有限公司 商业网络多媒体试衣成像比较系统
CN102156810A (zh) * 2011-03-30 2011-08-17 北京触角科技有限公司 增强现实实时虚拟试衣系统及方法
CN102298797A (zh) * 2011-08-31 2011-12-28 深圳市美丽同盟科技有限公司 三维虚拟试衣的方法、装置及系统

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TW201019265A (en) * 2008-11-11 2010-05-16 Univ Far East Auxiliary design system and method for drawing and real-time displaying 3D objects
TW201120652A (en) * 2009-12-02 2011-06-16 Univ Far East Method of utilizing captured physical image to carry out real-time 3D dynamic display of costumes.

Also Published As

Publication number Publication date
US20130300739A1 (en) 2013-11-14
TW201346834A (zh) 2013-11-16
CN102682211A (zh) 2012-09-19

Similar Documents

Publication Publication Date Title
TWI564840B (zh) 立體試衣方法及裝置
US11164381B2 (en) Clothing model generation and display system
US10755485B2 (en) Augmented reality product preview
US9420253B2 (en) Presenting realistic designs of spaces and objects
US10440352B2 (en) Image processing apparatus and method
US11212515B2 (en) Information processing device and information processing method
US20140192164A1 (en) System and method for determining depth information in augmented reality scene
CN102509349B (zh) 基于移动终端的试衣方法、装置及移动终端
CN111161336B (zh) 三维重建方法、三维重建装置和计算机可读存储介质
JP6677890B2 (ja) 情報処理システム、その制御方法、及びプログラム、並びに情報処理装置、その制御方法、及びプログラム
KR20140057610A (ko) 모션 패럴랙스를 이용한 2d 이미지로부터의 3d 지각 생성
US10147240B2 (en) Product image processing method, and apparatus and system thereof
US20170148225A1 (en) Virtual dressing system and virtual dressing method
KR101556158B1 (ko) 실사 영상 기반의 스마트 피팅장치를 이용한 소셜 서비스시스템
WO2023226454A1 (zh) 商品信息处理方法、装置、终端设备及存储介质
CN112929651A (zh) 一种显示方法、装置、电子设备及存储介质
Giancola et al. State-of-the-art devices comparison
KR20140130638A (ko) 실사 영상 기반의 스마트 피팅장치 및 그 방법
CN203706134U (zh) 360度全景展示体感互动系统
KR20170089917A (ko) 실제 크기의 상호작용 오브젝트의 생성 및 디스플레이
WO2019000464A1 (zh) 一种图像显示方法、装置、存储介质和终端
CN109803126A (zh) 用于多屏显示的控制方法、控制端及多屏显示系统
CN202810235U (zh) 一种交互式的多功能试衣间
CN111652973A (zh) 一种基于混合现实的监控方法、系统及相关设备
CN205302896U (zh) 一种虚拟现实显示装置

Legal Events

Date Code Title Description
MM4A Annulment or lapse of patent due to non-payment of fees