JP3742394B2 - Virtual try-on display device, virtual try-on display method, virtual try-on display program, and computer-readable recording medium storing the program - Google Patents

Virtual try-on display device, virtual try-on display method, virtual try-on display program, and computer-readable recording medium storing the program Download PDF

Info

Publication number
JP3742394B2
JP3742394B2 JP2003061447A JP2003061447A JP3742394B2 JP 3742394 B2 JP3742394 B2 JP 3742394B2 JP 2003061447 A JP2003061447 A JP 2003061447A JP 2003061447 A JP2003061447 A JP 2003061447A JP 3742394 B2 JP3742394 B2 JP 3742394B2
Authority
JP
Japan
Prior art keywords
image
clothing
mask
human body
storage means
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2003061447A
Other languages
Japanese (ja)
Other versions
JP2004272530A (en
Inventor
秋徳 鈴木
Original Assignee
デジタルファッション株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by デジタルファッション株式会社 filed Critical デジタルファッション株式会社
Priority to JP2003061447A priority Critical patent/JP3742394B2/en
Priority to PCT/JP2004/002644 priority patent/WO2004079652A1/en
Publication of JP2004272530A publication Critical patent/JP2004272530A/en
Application granted granted Critical
Publication of JP3742394B2 publication Critical patent/JP3742394B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/387Composing, repositioning or otherwise geometrically modifying originals
    • H04N1/3872Repositioning or masking
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T17/00Three dimensional [3D] modelling, e.g. data description of 3D objects
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2210/00Indexing scheme for image generation or computer graphics
    • G06T2210/16Cloth

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Software Systems (AREA)
  • Signal Processing (AREA)
  • Computer Graphics (AREA)
  • Geometry (AREA)
  • Multimedia (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Processing Or Creating Images (AREA)
  • Image Processing (AREA)
  • Editing Of Facsimile Originals (AREA)
  • Image Analysis (AREA)

Description

【0001】
【発明の属する技術分野】
本発明は、人体画像に衣服画像を合成することによって仮想的な試着状態を表示する仮想試着表示装置、仮想試着表示方法、仮想試着表示プログラム及び同プログラムを記録したコンピュータ読み取り可能な記録媒体に関するものである。
【0002】
【従来の技術】
従来より、アパレル業界では、衣服などのファッション商品の販売等を目的として、コンピュータ上でモデルとなる人体画像とユーザが所望する衣服画像とを重ね合わせて合成画像としてモニタ上に表示することによって衣服の仮想的な試着状態のシミュレーションが行われている(例えば、特許文献1参照)。
【0003】
図20は、従来の処理を行った場合における人体画像と第1の衣服画像と第2の衣服画像とを合成した合成画像の一例を示す図である。人体Mを表す人体画像と、第1の衣服Uを表す第1の衣服画像と、第2の衣服Jを表す第2の衣服画像とを合成した場合、合成画像GG4が作成される。
【0004】
【特許文献1】
特開平11−203347号公報
【0005】
【発明が解決しようとする課題】
ところで、上記のようにして合成画像を作成することで仮想的な試着状態のシミュレーションを行う場合、人体の上に試着される衣服を表す第1の衣服が、第1の衣服のさらに上に試着される衣服を表す第2の衣服よりも大きいとき、実際には第2の衣服に覆われて見えないはずの第1の衣服が第2の衣服からはみ出して表示されてしまう。
【0006】
図20に示すように、人体Mと、人体の上に試着される例えばシャツ等の第1の衣服Uと、シャツの上に試着される例えばニットシャツ等の第2の衣服Jとを重ね合わせて表示した場合、第1の衣服Uの袖部分、胴部分及び裾部分(図中の斜線部分)等が第2の衣服Jからはみ出して表示される。そのため、人体に第1の衣服及び第2の衣服を仮想的に試着した試着状態が非常に違和感のあるものとなってしまう。
【0007】
このような問題を解決するために、従来では全ての衣服の組み合わせに関して手作業ではみ出し部分を除去する等の修正を加えていた。しかしながら、手作業による修正は、非常に手間のかかる作業であり、試着状態をシミュレーションする衣服の数が増えると、その組み合わせの数も膨大なものとなり、修正しなければならない合成画像の数も膨大なものとなってしまい、手作業による修正を行うことは困難となる。
【0008】
また、2次元画像でこのような合成画像を作成する場合、試着状態が360度どの方向からでもわかるようにするため、例えば22.5度毎に分割された16方向の各視点から撮影された16の画像を全ての衣服画像に関してあらかじめ用意している。そのため、試着状態のシミュレーションに使用する衣服画像の数がさらに膨大なものとなり、手作業による修正を行うことはより困難となる。
【0009】
本発明は、上記の問題を解決するためになされたもので、人体を表す人体画像に複数の衣服を表す衣服画像を重ね合わせた場合の仮想的な試着状態を違和感なく表示することができる仮想試着表示装置、仮想試着表示方法、仮想試着表示プログラム及び同プログラムを記録したコンピュータ読み取り可能な記録媒体を提供することを目的とするものである。
【0010】
【課題を解決するための手段】
本発明に係る仮想試着表示装置は、2次元の人体画像に2次元の衣服画像を合成することによって仮想的な試着状態を表示する仮想試着表示装置であって、前記衣服画像は、前記人体画像の上に仮想的に試着される2次元の第1の衣服画像と、前記第1の衣服画像の上に仮想的に試着される2次元の第2の衣服画像とを含み、前記人体画像、第1の衣服画像及び第2の衣服服画像を記憶する記憶手段と、前記記憶手段から読み出された前記人体画像と、前記記憶手段から読み出された第2の衣服画像とを重ね合わせたマスク画像を作成するマスク画像作成手段と、前記記憶手段から読み出された第1の衣服画像を前記記憶手段から読み出された前記人体画像に重ね合わせた画像に対して、前記マスク画像作成手段によって作成されたマスク画像を用いてマスキングするマスキング手段と、前記マスキング手段によってマスキングされた画像と、前記記憶手段から読み出された第2の衣服画像とを重ね合わせた描画画像を作成する描画画像作成手段と、前記描画画像作成手段によって作成された描画画像を表示する画像表示手段とを備え、前記記憶手段は、複数種類の第2の衣服画像を記憶し、前記マスク画像作成手段は、複数種類の第2の衣服画像の重なり領域の論理積を求めることによって作成された画像と、前記人体画像との重なり領域の論理和を求めることによってマスク画像を作成し、前記マスキング手段は、前記記憶手段から読み出された第1の衣服画像を前記記憶手段から読み出された前記人体画像に重ね合わせた画像に対して、前記マスク画像作成手段によって作成されたマスク画像を用いてマスキングし、前記描画画像作成手段は、前記マスキング手段によってマスキングされた画像と、前記記憶手段から読み出された1の第2の衣服画像とを重ね合わせた描画画像を作成し、前記画像表示手段は、前記描画画像作成手段によって作成された描画画像を表示することを特徴としている。
【0011】
この構成によれば、人体画像の上に仮想的に試着される第1の衣服画像が人体画像に重ね合わされた画像に対して、人体画像と第2の衣服画像とが重ね合わされたマスク画像を用いてマスキングされ、マスキングされた画像と第2の衣服画像とを重ね合わせた描画画像が作成され、作成された描画画像が表示されるので、第1の衣服画像が第2の衣服画像よりも大きい場合でも、第2の衣服画像から第1の衣服画像をはみ出させずに表示することができ、仮想的に試着した試着状態を違和感なく表示することができる。
【0012】
また、複数種類の第2の衣服画像の重なり領域の論理積を求めることによって作成された画像と、人体画像との重なり領域の論理和を求めることによってマスク画像が作成され、第1の衣服画像を人体画像に重ね合わせた画像に対してマスク画像が用いられてマスキングされ、マスキングされた画像と1の第2の衣服画像とを重ね合わせた描画画像が作成され、作成された描画画像が表示される。したがって、複数種類の第2の衣服画像を全て含むとともに、人体画像を含むマスク画像によって、第1の衣服画像がマスキングされるので、複数種類の第2の衣服画像のうちの1の第2の衣服画像を第1の衣服画像と人体画像とに合成したとしても、第1の衣服画像が第2の衣服画像からはみ出すことなく表示することができる。
【0013】
本発明に係る仮想試着表示装置2次元の人体画像に2次元の衣服画像を合成することによって仮想的な試着状態を表示する仮想試着表示装置であって、前記衣服画像は、前記人体画像の上に仮想的に試着される2次元の第1の衣服画像と、前記第1の衣服画像の上に仮想的に試着される2次元の第2の衣服画像とを含み、前記人体画像、第1の衣服画像及び第2の衣服服画像を記憶する記憶手段と、前記記憶手段から読み出された前記人体画像と、前記記憶手段から読み出された第2の衣服画像とを重ね合わせたマスク画像を作成するマスク画像作成手段と、前記記憶手段から読み出された第1の衣服画像を前記記憶手段から読み出された前記人体画像に重ね合わせた画像に対して、前記マスク画像作成手段によって作成されたマスク画像を用いてマスキングするマスキング手段と、前記マスキング手段によってマスキングされた画像と、前記記憶手段から読み出された第2の衣服画像とを重ね合わせた描画画像を作成する描画画像作成手段と、前記描画画像作成手段によって作成された描画画像を表示する画像表示手段とを備え、前記衣服画像は、前記第2の衣服画像のさらに上に仮想的に試着される2次元の第3の衣服画像を含み、前記記憶手段は、複数種類の第3の衣服画像を記憶し、前記マスク画像作成手段は、複数種類の第3の衣服画像の重なり領域の論理積を求めることによって作成された画像と、前記人体画像との重なり領域の論理和を求めることによってマスク画像を作成し、前記マスキング手段は、前記記憶手段から読み出された第2の衣服画像を前記記憶手段から読み出された前記人体画像に重ね合わせた画像に対して、前記マスク画像作成手段によって作成されたマスク画像を用いてマスキングし、前記描画画像作成手段は、前記マスキング手段によってマスキングされた画像と、前記記憶手段から読み出された第3の衣服画像とを重ね合わせた描画画像を作成し、前記画像表示手段は、前記描画画像作成手段によって作成された描画画像を表示することを特徴としている
【0014】
この構成によれば、人体画像の上に仮想的に試着される第1の衣服画像が人体画像に重ね合わされた画像に対して、人体画像と第2の衣服画像とが重ね合わされたマスク画像を用いてマスキングされ、マスキングされた画像と第2の衣服画像とを重ね合わせた描画画像が作成され、作成された描画画像が表示されるので、第1の衣服画像が第2の衣服画像よりも大きい場合でも、第2の衣服画像から第1の衣服画像をはみ出させずに表示することができ、仮想的に試着した試着状態を違和感なく表示することができる。
【0015】
また、第2の衣服画像のさらに上に第3の衣服画像が仮想的に試着される場合、複数種類の第3の衣服画像の重なり領域の論理積を求めることによって作成された画像と、人体画像との重なり領域の論理和を求めることによってマスク画像が作成され、第2の衣服画像を人体画像に重ね合わせた画像に対してマスク画像が用いられてマスキングされ、マスキングされた画像と1の第3の衣服画像とを重ね合わせた描画画像が作成され、作成された描画画像が表示される。したがって、複数種類の第3の衣服画像を全て含むとともに、人体画像を含むマスク画像によって、第2の衣服画像がマスキングされるので、複数種類の第3の衣服画像のうちの1の第3の衣服画像を第2の衣服画像と人体画像とに合成したとしても、第2の衣服画像が第3の衣服画像からはみ出すことなく表示することができる。
【0016】
また、上記の仮想試着表示装置において、前記記憶手段は、人体を中心点とする円の当該中心点を基準とする所定の角度ずつに均等に分割する線と、当該円の円弧とが交わる点を視点とする複数の視点から撮影された複数の前記人体画像、前記第1の衣服画像及び前記第2の衣服画像を記憶しており、前記マスク画像作成手段は、前記記憶手段から読み出された特定の視点から見た前記人体画像と、前記記憶手段から読み出された前記人体画像と同一の視点から見た第2の衣服画像とを重ね合わせたマスク画像を作成し、前記マスキング手段は、前記記憶手段から読み出された前記人体画像と同一の視点から見た第1の衣服画像を前記記憶手段から読み出された前記人体画像に重ね合わせた画像に対して、前記マスク画像作成手段によって作成されたマスク画像を用いてマスキングし、前記描画画像作成手段は、前記マスキング手段によってマスキングされた画像と、前記記憶手段から読み出された前記人体画像と同一の視点から見た第2の衣服画像とを重ね合わせた描画画像を作成し、前記画像表示手段は、前記描画画像作成手段によって作成された描画画像を表示することが好ましい。
【0017】
この構成によれば、人体を中心点とする円の当該中心点を基準とする所定の角度ずつに均等に分割する線と、当該円の円弧とが交わる点を視点とし、それぞれ同一視点において撮影又は作成された複数の人体画像と第2の衣服画像とを重ね合わせたマスク画像が作成され、第1の衣服画像を人体画像に重ね合わせた画像に対して、マスク画像が用いられてマスキングされ、マスキングされた画像と第2の画像とを重ねあわせた描画画像が作成され、作成された描画画像が表示される。したがって、第1の衣服画像が第2の衣服画像よりも大きい場合でも、第2の衣服画像から第1の衣服画像をはみ出させずに表示することができ、仮想的に試着した試着状態を2次元の画像を用いて3次元的に表示することができ、複数の視点から見た試着状態を確認することができる。
【0018】
また、上記の仮想試着表示装置において、前記マスク画像作成手段によって作成されたマスク画像の前記第1の衣服画像の外形形状に応じた修正を受け付けるマスク画像修正受付手段をさらに備え、前記マスキング手段は、前記描画画像作成手段によって作成された描画画像を、マスク画像修正受付手段によって修正されたマスク画像を用いてマスキングすることが好ましい。
【0019】
この構成によれば、ユーザによるマスク画像作成手段によって作成されたマスク画像の第1の衣服画像の外形形状に応じた修正が受け付けられ、描画画像作成手段によって作成された描画画像が、マスク画像修正受付手段によって修正されたマスク画像を用いてマスキングされるため、仮想的に試着した試着状態をさらに違和感なく表示することができるとともに、実際に試着した状態をリアルに再現することができる。
【0020】
本発明に係る仮想試着表示方法は、2次元の人体画像に2次元の衣服画像を合成することによって仮想的な試着状態を表示する仮想試着表示方法であって、前記衣服画像は、前記人体画像の上に仮想的に試着される2次元の第1の衣服画像と、前記第1の衣服画像の上に仮想的に試着される2次元の第2の衣服画像とを含み、コンピュータが、前記人体画像、第1の衣服画像及び第2の衣服服画像を記憶する記憶手段から読み出された前記人体画像と、前記記憶手段から読み出された第2の衣服画像とを重ね合わせたマスク画像を作成するマスク画像作成ステップと、コンピュータが、前記記憶手段から読み出された第1の衣服画像を前記記憶手段から読み出された前記人体画像に重ね合わせた画像に対して、前記マスク画像作成ステップにおいて作成されたマスク画像を用いてマスキングするマスキングステップと、コンピュータが、前記マスキングステップにおいてマスキングされた画像と、前記記憶手段から読み出された第2の衣服画像とを重ね合わせた描画画像を作成する描画画像作成ステップと、コンピュータが、前記描画画像作成ステップにおいて作成された描画画像を表示する画像表示ステップとを含み、前記記憶手段は、複数種類の第2の衣服画像を記憶し、前記マスク画像作成ステップは、複数種類の第2の衣服画像の重なり領域の論理積を求めることによって作成された画像と、前記人体画像との重なり領域の論理和を求めることによってマスク画像を作成し、前記マスキングステップは、前記記憶手段から読み出された第1の衣服画像を前記記憶手段から読み出された前記人体画像に重ね合わせた画像に対して、前記マスク画像作成ステップにおいて作成されたマスク画像を用いてマスキングし、前記描画画像作成ステップは、前記マスキングステップにおいてマスキングされた画像と、前記記憶手段から読み出された1の第2の衣服画像とを重ね合わせた描画画像を作成し、前記画像表示ステップは、前記描画画像作成ステップにおいて作成された描画画像を表示することを特徴としている。
【0021】
この構成によれば、人体画像の上に仮想的に試着される第1の衣服画像が人体画像に重ね合わされた画像に対して、人体画像と第2の衣服画像とが重ね合わされたマスク画像を用いてマスキングされ、マスキングされた画像と第2の衣服画像とを重ね合わせた描画画像が作成され、作成された描画画像が表示されるので、第1の衣服画像が第2の衣服画像よりも大きい場合でも、第2の衣服画像から第1の衣服画像をはみ出させずに表示することができ、仮想的に試着した試着状態を違和感なく表示することができる。
【0022】
また、複数種類の第2の衣服画像の重なり領域の論理積を求めることによって作成された画像と、人体画像との重なり領域の論理和を求めることによってマスク画像が作成され、第1の衣服画像を人体画像に重ね合わせた画像に対してマスク画像が用いられてマスキングされ、マスキングされた画像と1の第2の衣服画像とを重ね合わせた描画画像が作成され、作成された描画画像が表示される。したがって、複数種類の第2の衣服画像を全て含むとともに、人体画像を含むマスク画像によって、第1の衣服画像がマスキングされるので、複数種類の第2の衣服画像のうちの1の第2の衣服画像を第1の衣服画像と人体画像とに合成したとしても、第1の衣服画像が第2の衣服画像からはみ出すことなく表示することができる。
【0023】
本発明に係る仮想試着表示プログラムは、2次元の人体画像に2次元の衣服画像を合成することによって仮想的な試着状態を表示するための仮想試着表示プログラムであって、前記衣服画像は、前記人体画像の上に仮想的に試着される2次元の第1の衣服画像と、前記第1の衣服画像の上に仮想的に試着される2次元の第2の衣服画像とを含み、前記人体画像、第1の衣服画像及び第2の衣服服画像を記憶する記憶手段と、前記記憶手段から読み出された前記人体画像と、前記記憶手段から読み出された第2の衣服画像とを重ね合わせたマスク画像を作成するマスク画像作成手段と、前記記憶手段から読み出された第1の衣服画像を前記記憶手段から読み出された前記人体画像に重ね合わせた画像に対して、前記マスク画像作成手段によって作成されたマスク画像を用いてマスキングするマスキング手段と、前記マスキング手段によってマスキングされた画像と、前記記憶手段から読み出された第2の衣服画像とを重ね合わせた描画画像を作成する描画画像作成手段と、前記描画画像作成手段によって作成された描画画像を表示する画像表示手段としてコンピュータを機能させ、前記記憶手段は、複数種類の第2の衣服画像を記憶し、前記マスク画像作成手段は、複数種類の第2の衣服画像の重なり領域の論理積を求めることによって作成された画像と、前記人体画像との重なり領域の論理和を求めることによってマスク画像を作成し、前記マスキング手段は、前記記憶手段から読み出された第1の衣服画像を前記記憶手段から読み出された前記人体画像に重ね合わせた画像に対して、前記マスク画像作成手段によって作成されたマスク画像を用いてマスキングし、前記描画画像作成手段は、前記マスキング手段によってマスキングされた画像と、前記記憶手段から読み出された1の第2の衣服画像とを重ね合わせた描画画像を作成し、前記画像表示手段は、前記描画画像作成手段によって作成された描画画像を表示することを特徴としている。
【0024】
この構成によれば、人体画像の上に仮想的に試着される第1の衣服画像が人体画像に重ね合わされた画像に対して、人体画像と第2の衣服画像とが重ね合わされたマスク画像を用いてマスキングされ、マスキングされた画像と第2の衣服画像とを重ね合わせた描画画像が作成され、作成された描画画像が表示されるので、第1の衣服画像が第2の衣服画像よりも大きい場合でも、第2の衣服画像から第1の衣服画像をはみ出させずに表示することができ、仮想的に試着した試着状態を違和感なく表示することができる。
【0025】
また、複数種類の第2の衣服画像の重なり領域の論理積を求めることによって作成された画像と、人体画像との重なり領域の論理和を求めることによってマスク画像が作成され、第1の衣服画像を人体画像に重ね合わせた画像に対してマスク画像が用いられてマスキングされ、マスキングされた画像と1の第2の衣服画像とを重ね合わせた描画画像が作成され、作成された描画画像が表示される。したがって、複数種類の第2の衣服画像を全て含むとともに、人体画像を含むマスク画像によって、第1の衣服画像がマスキングされるので、複数種類の第2の衣服画像のうちの1の第2の衣服画像を第1の衣服画像と人体画像とに合成したとしても、第1の衣服画像が第2の衣服画像からはみ出すことなく表示することができる。
【0026】
本発明に係る仮想試着表示プログラムを記録したコンピュータ読み取り可能な記録媒体は、2次元の人体画像に2次元の衣服画像を合成することによって仮想的な試着状態を表示するための仮想試着表示プログラムを記録したコンピュータ読み取り可能な記録媒体であって、前記衣服画像は、前記人体画像の上に仮想的に試着される2次元の第1の衣服画像と、前記第1の衣服画像の上に仮想的に試着される2次元の第2の衣服画像とを含み、前記人体画像、第1の衣服画像及び第2の衣服服画像を記憶する記憶手段と、前記記憶手段から読み出された前記人体画像と、前記記憶手段から読み出された第2の衣服画像とを重ね合わせたマスク画像を作成するマスク画像作成手段と、前記記憶手段から読み出された第1の衣服画像を前記記憶手段から読み出された前記人体画像に重ね合わせた画像に対して、前記マスク画像作成手段によって作成されたマスク画像を用いてマスキングするマスキング手段と、前記マスキング手段によってマスキングされた画像と、前記記憶手段から読み出された第2の衣服画像とを重ね合わせた描画画像を作成する描画画像作成手段と、前記描画画像作成手段によって作成された描画画像を表示する画像表示手段としてコンピュータを機能させ、前記記憶手段は、複数種類の第2の衣服画像を記憶し、前記マスク 画像作成手段は、複数種類の第2の衣服画像の重なり領域の論理積を求めることによって作成された画像と、前記人体画像との重なり領域の論理和を求めることによってマスク画像を作成し、前記マスキング手段は、前記記憶手段から読み出された第1の衣服画像を前記記憶手段から読み出された前記人体画像に重ね合わせた画像に対して、前記マスク画像作成手段によって作成されたマスク画像を用いてマスキングし、前記描画画像作成手段は、前記マスキング手段によってマスキングされた画像と、前記記憶手段から読み出された1の第2の衣服画像とを重ね合わせた描画画像を作成し、前記画像表示手段は、前記描画画像作成手段によって作成された描画画像を表示することを特徴としている。
【0027】
この構成によれば、人体画像の上に仮想的に試着される第1の衣服画像が人体画像に重ね合わされた画像に対して、人体画像と第2の衣服画像とが重ね合わされたマスク画像を用いてマスキングされ、マスキングされた画像と第2の衣服画像とを重ね合わせた描画画像が作成され、作成された描画画像が表示されるので、第1の衣服画像が第2の衣服画像よりも大きい場合でも、第2の衣服画像から第1の衣服画像をはみ出させずに表示することができ、仮想的に試着した試着状態を違和感なく表示することができる。
【0028】
また、複数種類の第2の衣服画像の重なり領域の論理積を求めることによって作成された画像と、人体画像との重なり領域の論理和を求めることによってマスク画像が作成され、第1の衣服画像を人体画像に重ね合わせた画像に対してマスク画像が用いられてマスキングされ、マスキングされた画像と1の第2の衣服画像とを重ね合わせた描画画像が作成され、作成された描画画像が表示される。したがって、複数種類の第2の衣服画像を全て含むとともに、人体画像を含むマスク画像によって、第1の衣服画像がマスキングされるので、複数種類の第2の衣服画像のうちの1の第2の衣服画像を第1の衣服画像と人体画像とに合成したとしても、第1の衣服画像が第2の衣服画像からはみ出すことなく表示することができる。
【0029】
本発明に係る仮想試着表示方法は、2次元の人体画像に2次元の衣服画像を合成することによって仮想的な試着状態を表示する仮想試着表示方法であって、前記衣服画像は、前記人体画像の上に仮想的に試着される2次元の第1の衣服画像と、前記第1の衣服画像の上に仮想的に試着される2次元の第2の衣服画像とを含み、コンピュータが、前記人体画像、第1の衣服画像及び第2の衣服服画像を記憶する記憶手段から読み出された前記人体画像と、前記記憶手段から読み出された第2の衣服画像とを重ね合わせたマスク画像を作成するマスク画像作成ステップと、コンピュータが、前記記憶手段から読み出された第1の衣服画像を前記記憶手段から読み出された前記人体画像に重ね合わせた画像に対して、前記マスク画像作成ステップにおいて作成されたマスク画像を用いてマスキングするマスキングステップと、コンピュータが、前記マスキングステップにおいてマスキングされた画像と、前記記憶手段から読み出された第2の衣服画像とを重ね合わせた描画画像を作成する描画画像作成ステップと、コンピュータが、前記描画画像作成ステップにおいて作成された描画画像を表示する画像表示ステップとを含み、前記衣服画像は、前記第2の衣服画像のさらに上に仮想的に試着される2次元の第3の衣服画像を含み、前記記憶手段は、複数種類の第3の衣服画像を記憶し、前記マスク画像作成ステップは、複数種類の第3の衣服画像の重なり領域の論理積を求めることによって作成された画像と、前記人体画像との重なり領域の論理和を求めることによってマスク画像を作成し、前記マスキングステップは、前記記憶手段から読み出された第2の衣服画像を前記記憶手段から読み出された前記人体画像に重ね合わせた画像に対して、前記マスク画像作成ステップにおいて作成されたマスク画像を用いてマスキングし、前記描画画像作成ステップは、前記マスキングステップにおいてマスキングされた画像と、前記記憶手段から読み出された第3の衣服画像とを重ね合わせた描画画像を作成し、前記画像表示ステップは、前記描画画像作成ステップにおいて作成された描画画像を表示することを特徴としている。
【0030】
この構成によれば、人体画像の上に仮想的に試着される第1の衣服画像が人体画像に重ね合わされた画像に対して、人体画像と第2の衣服画像とが重ね合わされたマスク画像を用いてマスキングされ、マスキングされた画像と第2の衣服画像とを重ね合わせた描画画像が作成され、作成された描画画像が表示されるので、第1の衣服画像が第2の衣服画像よりも大きい場合でも、第2の衣服画像から第1の衣服画像をはみ出させずに表示することができ、仮想的に試着した試着状態を違和感なく表示することができる。
【0031】
また、第2の衣服画像のさらに上に第3の衣服画像が仮想的に試着される場合、複数種類の第3の衣服画像の重なり領域の論理積を求めることによって作成された画像と、人体画像との重なり領域の論理和を求めることによってマスク画像が作成され、第2の衣服画像を人体画像に重ね合わせた画像に対してマスク画像が用いられてマスキングされ、マスキングされた画像と1の第3の衣服画像とを重ね合わせた描画画像が作成され、作成された描画画像が表示される。したがって、複数種類の第3の衣服画像を全て含むとともに、人体画像を含むマスク画像によって、第2の衣服画像がマスキングされるので、複数種類の第3の衣服画像のうちの1の第3の衣服画像を第2の衣服画像と人体画像とに合成したとしても、第2の衣服画像が第3の衣服画像からはみ出すことなく表示することができる。
【0032】
本発明に係る仮想試着表示プログラムは、2次元の人体画像に2次元の衣服画像を合成することによって仮想的な試着状態を表示するための仮想試着表示プログラムであって、前記衣服画像は、前記人体画像の上に仮想的に試着される2次元の第1の衣服画像と、前記第1の衣服画像の上に仮想的に試着される2次元の第2の衣服画像とを含み、前記人体画像、第1の衣服画像及び第2の衣服服画像を記憶する記憶手段と、前記記憶手段から読み出された前記人体画像と、前記記憶手段から読み出された第2の衣服画像とを重ね合わせたマスク画像を作成するマスク画像作成手段と、前記記憶手段から読み出された第1の衣服画像を前記記憶手段から読み出された前記人体画像に重ね合わせた画像に対して、前記マスク画像作成手段によって作成されたマスク画像を用いてマスキングするマスキング手段と、前記マスキング手段によってマスキングされた画像と、前記記憶手段から読み出された第2の衣服画像とを重ね合わせた描画画像を作成する描画画像作成手段と、前記描画画像作成手段によって作成された描画画像を表示する画像表示手段としてコンピュータを機能させ、前記衣服画像は、前記第2の衣服画像のさらに上に仮想的に試着される2次元の第3の衣服画像を含み、前記記憶手段は、複数種類の第3の衣服画像を記憶し、前記マスク画像作成手段は、複数種類の第3の衣服画像の重なり領域の論理積を求めることによって作成された画像と、前記人体画像との重なり領域の論理和を求めることによってマスク画像を作成し、前記マスキング手段は、前記記憶手段から読み出された第2の衣服画像を前記記憶手段から読み出された前記人体画像に重ね合わせた画像に対して、前記マスク画像作成手段によって作成されたマスク画像を用いてマスキングし、前記描画画像作成手段は、前記マスキング手段によってマスキングされた画像と、前記記憶手段から読み出された第3の衣服画像とを重ね合わせた描画画像を作成し、前記画像表示手段は、前記描画画像作成手段によって作成された描画画像を表示することを特徴としている。
【0033】
この構成によれば、人体画像の上に仮想的に試着される第1の衣服画像が人体画像に重ね合わされた画像に対して、人体画像と第2の衣服画像とが重ね合わされたマスク画像を用いてマスキングされ、マスキングされた画像と第2の衣服画像とを重ね合わせた描画画像が作成され、作成された描画画像が表示されるので、第1の衣服画像が第2の衣服画像よりも大きい場合でも、第2の衣服画像から第1の衣服画像をはみ出させずに表示することができ、仮想的に試着した試着状態を違和感なく表示することができる。
【0034】
また、第2の衣服画像のさらに上に第3の衣服画像が仮想的に試着される場合、複数種類の第3の衣服画像の重なり領域の論理積を求めることによって作成された画像と、人体 画像との重なり領域の論理和を求めることによってマスク画像が作成され、第2の衣服画像を人体画像に重ね合わせた画像に対してマスク画像が用いられてマスキングされ、マスキングされた画像と1の第3の衣服画像とを重ね合わせた描画画像が作成され、作成された描画画像が表示される。したがって、複数種類の第3の衣服画像を全て含むとともに、人体画像を含むマスク画像によって、第2の衣服画像がマスキングされるので、複数種類の第3の衣服画像のうちの1の第3の衣服画像を第2の衣服画像と人体画像とに合成したとしても、第2の衣服画像が第3の衣服画像からはみ出すことなく表示することができる。
【0035】
本発明に係る仮想試着表示プログラムを記録したコンピュータ読み取り可能な記録媒体は、2次元の人体画像に2次元の衣服画像を合成することによって仮想的な試着状態を表示するための仮想試着表示プログラムを記録したコンピュータ読み取り可能な記録媒体であって、前記衣服画像は、前記人体画像の上に仮想的に試着される2次元の第1の衣服画像と、前記第1の衣服画像の上に仮想的に試着される2次元の第2の衣服画像とを含み、前記人体画像、第1の衣服画像及び第2の衣服服画像を記憶する記憶手段と、前記記憶手段から読み出された前記人体画像と、前記記憶手段から読み出された第2の衣服画像とを重ね合わせたマスク画像を作成するマスク画像作成手段と、前記記憶手段から読み出された第1の衣服画像を前記記憶手段から読み出された前記人体画像に重ね合わせた画像に対して、前記マスク画像作成手段によって作成されたマスク画像を用いてマスキングするマスキング手段と、前記マスキング手段によってマスキングされた画像と、前記記憶手段から読み出された第2の衣服画像とを重ね合わせた描画画像を作成する描画画像作成手段と、前記描画画像作成手段によって作成された描画画像を表示する画像表示手段としてコンピュータを機能させ、前記衣服画像は、前記第2の衣服画像のさらに上に仮想的に試着される2次元の第3の衣服画像を含み、前記記憶手段は、複数種類の第3の衣服画像を記憶し、前記マスク画像作成手段は、複数種類の第3の衣服画像の重なり領域の論理積を求めることによって作成された画像と、前記人体画像との重なり領域の論理和を求めることによってマスク画像を作成し、前記マスキング手段は、前記記憶手段から読み出された第2の衣服画像を前記記憶手段から読み出された前記人体画像に重ね合わせた画像に対して、前記マスク画像作成手段によって作成されたマスク画像を用いてマスキングし、前記描画画像作成手段は、前記マスキング手段によってマスキングされた画像と、前記記憶手段から読み出された第3の衣服画像とを重ね合わせた描画画像を作成し、前記画像表示手段は、前記描画画像作成手段によって作成された描画画像を表示することを特徴としている。
【0036】
この構成によれば、人体画像の上に仮想的に試着される第1の衣服画像が人体画像に重ね合わされた画像に対して、人体画像と第2の衣服画像とが重ね合わされたマスク画像を用いてマスキングされ、マスキングされた画像と第2の衣服画像とを重ね合わせた描画画像が作成され、作成された描画画像が表示されるので、第1の衣服画像が第2の衣服画像よりも大きい場合でも、第2の衣服画像から第1の衣服画像をはみ出させずに表示することができ、仮想的に試着した試着状態を違和感なく表示することができる。
【0037】
また、第2の衣服画像のさらに上に第3の衣服画像が仮想的に試着される場合、複数種類の第3の衣服画像の重なり領域の論理積を求めることによって作成された画像と、人体画像との重なり領域の論理和を求めることによってマスク画像が作成され、第2の衣服画像を人体画像に重ね合わせた画像に対してマスク画像が用いられてマスキングされ、マスキングされた画像と1の第3の衣服画像とを重ね合わせた描画画像が作成され、作成された描画画像が表示される。したがって、複数種類の第3の衣服画像を全て含むとともに、人体画像を含むマスク画像によって、第2の衣服画像がマスキングされるので、複数種類の第3の衣服画像のうちの1の第3の衣服画像を第2の衣服画像と人体画像とに合成したとしても、第2の衣服画像が第3の衣服画像からはみ出すことなく表示することができる。
【0038】
【発明の実施の形態】
以下、本発明に係る実施形態を図面に基づいて説明する。
【0039】
(第1の実施形態)
図1は、本発明の第1の実施形態による仮想試着表示装置の構成を示すブロック図である。図1に示す仮想試着表示装置は、パーソナルコンピュータ等から構成され、入力装置1、ROM(リードオンリメモリ)2、CPU(中央演算処理装置)3、RAM(ランダムアクセスメモリ)4、外部記憶装置5、表示装置6及び記録媒体駆動装置7を備える。各ブロックは内部のバスに接続され、このバスを介して種々のデータ等が各ブロック間で入出力され、CPU3の制御の下、種々の処理が実行される。
【0040】
入力装置1は、キーボード、マウス等から構成され、オペレータが操作指令等を入力するために用いられる。ROM2には、システムプログラム等が予め記憶される。外部記憶装置5は、ハードディスクドライブ等から構成され、後述する仮想試着表示プログラム等を記憶している。CPU3は、外部記憶装置5から仮想試着表示プログラム等を読み出し、後述する仮想試着表示処理等を実行して各ブロックの動作を制御する。RAM4は、CPU3の作業領域等として用いられる。表示装置6は、CRT(陰極線管)又は液晶表示装置等から構成され、CPU3の制御の下、種々の画面を表示する。
【0041】
なお、仮想試着表示プログラム等は、CD−ROM、フレキシブルディスク等から構成されるコンピュータ読み出し可能な記録媒体8に記録するようにしてもよい。この場合、CD−ROMドライブ、フレキシブルディスクドライブ等から構成される記録媒体駆動装置7を用いて記録媒体8から読み出された仮想試着表示プログラム等が外部記憶装置5にインストールされる。また、仮想試着表示プログラム等がネットワークを介して接続されている他のコンピュータ等に記憶されている場合、当該コンピュータ等からネットワークを介して仮想試着表示プログラム等をダウンロードするようにしてもよい。
【0042】
次に、上記のように構成された仮想試着表示装置の主要な機能について説明する。図2は、第1の実施形態における図1に示す仮想試着表示装置の主要機能ブロック図である。
【0043】
図2に示すように、仮想試着表示装置は、機能的には、操作部10、プログラム実行部20、記憶部30及び表示部40を備える。プログラム実行部20は、視点情報受付部21、マスク画像作成部22、合成画像作成部23、マスキング部24、描画画像作成部25及び表示制御部26を含む。記憶部30は、人体画像記憶部31、衣服画像記憶部32、マスク画像記憶部33、合成画像記憶部34及び描画画像記憶部35を含む。
【0044】
操作部10は、入力装置1等から構成され、仮想試着表示装置のオペレータが種々の操作指令を入力するために使用される。
【0045】
プログラム実行部20は、CPU3等から構成され、CPU3等が外部記憶装置5に記憶されている仮想試着表示プログラム等を実行することによって、視点情報受付部21、マスク画像作成部22、合成画像作成部23、マスキング部24、描画画像作成部25及び表示制御部26として機能する。記憶部30は、外部記憶装置5等から構成され、人体画像記憶部31、衣服画像記憶部32、マスク画像記憶部33、合成画像記憶部34及び描画画像記憶部35として機能する。
【0046】
人体画像記憶部31は、マネキンなどの試着対象物である人体の人体画像をあらかじめ記憶する。図3は、人体画像記憶部31に記憶されている人体画像MGの一例を示す図である。人体画像記憶部31は、図3に示すような人体画像MGを画像データとして記憶している。人体画像MGは、あらかじめ作成された2次元画像である。人体画像記憶部31は、人体を中心点とする円の当該中心点を基準とする所定の角度ずつに均等に分割する線と、当該円の円弧とが交わる点を視点とする各視点から見た人体画像MGを画像データとして記憶しており、例えば、人体を中心点とする円を22.5度ごとに区切った16の視点から見た16の人体画像MGを記憶する。なお、人体画像MGは、例えばデジタルカメラ等を用いて試着する人物を直接撮影した画像データを用いてもよい。また、スキャナ等によって写真を取り込むことによって人体画像MGの画像データを得てもよい。
【0047】
衣服画像記憶部32は、人体画像の上に仮想的に試着される第1の衣服画像の画像データと、第1の衣服画像のさらに上に仮想的に試着され、人体の最も外側に仮想的に試着される第2の衣服画像の画像データとをあらかじめ記憶する。第1の衣服画像は、種類が異なる複数種類の第1の衣服に関する画像データであり、衣服画像記憶部32は、複数種類の第1の衣服に関する画像データを記憶している。同様に、第2の衣服画像は、種類が異なる複数種類の第2の衣服に関する画像データであり、衣服画像記憶部32は、複数種類の第2の衣服に関する画像データを記憶している。
【0048】
図4は、衣服画像記憶部32に記憶されている第1の衣服画像TGの一例を示す図であり、図5は、衣服画像記憶部32に記憶されている他の第1の衣服画像SGの一例を示す図であり、図6は、衣服画像記憶部32に記憶されている第2の衣服画像JKの一例を示す図である。衣服画像記憶部32は、図4及び図5に示すような第1の衣服画像TG,SGを画像データとして記憶するとともに、図6に示すような第2の衣服画像JKを画像データとして記憶している。
【0049】
第1の衣服画像TG,SG及び第2の衣服画像JKは2次元画像である。衣服画像記憶部32は、人体を中心点とする円の当該中心点を基準とする所定の角度ずつに均等に分割する線と、当該円の円弧とが交わる点を視点とする各視点から見た衣服の画像データを記憶しており、例えば、人体を中心点とする円を22.5度ごとに区切った16の視点から見た16の画像データを1種類ごとに記憶している。第1の衣服及び第2の衣服は、例えば人体の上半身に仮想的に試着される衣服であり、第1の衣服としては、例えばTシャツやボタンシャツ等であり、第2の衣服としては、例えばジャケット等である。
【0050】
図4に示す第1の衣服画像TGは、Tシャツを表す第1の衣服画像であり、図5に示す第1の衣服画像SGは、セーターを表す第1の衣服画像である。図6に示す第2の衣服画像JKは、ジャケットを表す第2の衣服画像である。なお、第1の衣服画像TG,SG及び第2の衣服画像JKは、例えばデジタルカメラ等を用いて衣服を着用した人物を直接撮影し、撮影された画像を画像処理することによって、人物を除く衣服のみで構成される衣服画像を作成し、作成された衣服画像を画像データとして用いてもよい。
【0051】
なお、本実施形態では、人体画像、第1の衣服画像及び第2の衣服画像は、同一の種類の衣服画像に対してそれぞれ16の画像データが記憶されているとしたが、本発明は特にこれに限定されず、例えば周囲360度を30度ごとに区切った12の画像データをそれぞれ用いてもよく、周囲360度を90度ごとに区切った4の画像データをそれぞれ用いてもよく、また、周囲360度を10度ごとに区切った36の画像データをそれぞれ用いてもよい。さらに、人体画像、第1の衣服画像及び第2の衣服画像は、複数の視点から見た画像ではなく、所定の方向から見た1の画像のみを用いてもよい。
【0052】
図2に戻り、視点情報受付部21は、衣服の人体への仮想的な試着状態を複数の視点のうちのどの方向から見るかを受け付け、複数の視点のうちどの視点から衣服の人体への仮想的な試着状態を表示するかを視点情報として受け付ける。本実施の形態では、衣服を仮想的に試着した人体を中心点とする円の当該中心点を基準とする22.5度ずつに均等に分割する線と、当該円の円弧とが交わる点を視点とする16の視点から見た人体画像、第1の衣服画像及び第2の衣服画像が用意されているため、視点情報受付部21は、衣服の人体への仮想的な試着状態を16の視点のうちのどの方向から見るかを受け付け、16の視点のうちのどの視点から衣服の人体への仮想的な試着状態を表示するかを視点情報として受け付ける。なお、視点情報は、操作部10のマウス又はキーボードを用いて入力される。
【0053】
マスク画像作成部22は、人体画像記憶部31から読み出された人体画像と、衣服画像記憶部32から読み出された第2の衣服画像とを重ね合わせたマスク画像を作成する。ここで、第1の衣服画像に適用されるマスク画像MASK_Sは、複数種類の第2の衣服画像の重なり領域の論理積を求めることによって作成された画像と、前記人体画像との重なり領域の論理和を求めることによって作成され、下記の(1)式で表される。
【0054】
MASK_S=(JK1∩JK2∩JK3・・・)∪BODY・・・・(1)
なお、上記(1)式において、MASK_Sは第1の衣服画像に適用されるマスク画像を表し、JK1,JK2,JK3はそれぞれ第2の衣服画像を表し、BODYは人体画像を表し、∩は論理積(AND)を表し、∪は論理和(OR)を表している。
【0055】
上記(1)式に示すように、マスク画像MASK_Sは、複数種類の第2の衣服画像を全て含むとともに、人体画像を含む画像である。また、マスク画像MASK_Sは、複数種類の第2の衣服画像と人体画像とを重ね合わせた画像を“0”と“1”とに2値化し、透過させたい領域を黒(“0”)又は白(“1”)にする。本実施形態におけるマスク画像MASK_Sでは、透過させる領域を黒で表し、それ以外の背景となる領域を白で表す。すなわち、マスク画像作成部22は、複数種類の第2の衣服画像の重なり領域の論理積を求めることによって作成される画像と、人体画像との重なり領域の論理和を求めることによって作成される画像を黒で表し、背景を白で表す白黒画像をマスク画像MASK_Sとして作成し、作成されたマスク画像MASK_Sをマスク画像記憶部33に記憶する。マスク画像記憶部33は、マスク画像作成部22によって作成されたマスク画像MASK_Sを記憶する。
【0056】
合成画像作成部23は、衣服画像記憶部32から読み出された第1の衣服画像を、人体画像記憶部31から読み出された人体画像に重ね合わせた合成画像を作成する。この際、合成画像作成部23は、視点情報受付部21によって受け付けられた視点情報に基づいて人体画像、第1の衣服画像を読み出す。つまり、正面から見た試着状態を表示する場合、人体を正面から見た画像、第1の衣服を正面から見た画像をそれぞれ読み出し、読み出された各画像を重ね合わせた合成画像を作成する。なお、合成画像作成部23は、人体画像の上に第1の衣服画像を合成することで合成画像を作成する。合成画像記憶部34は、合成画像作成部23によって作成された人体画像と、第1の衣服画像とを重ね合わせた合成画像を記憶する。
【0057】
マスキング部24は、合成画像作成部23によって作成され、合成画像記憶部34に記憶されている合成画像を読み出すとともに、マスク画像作成部22によって作成され、マスク画像記憶部33に記憶されているマスク画像を読み出し、人体画像に第1の衣服画像を重ね合わせた合成画像に対してマスク画像を用いてマスキングする。マスキング部24によってマスキングされた画像は、再び合成画像記憶部34に記憶される。
【0058】
描画画像作成部25は、マスク画像によってマスキングされた第1の衣服画像と人体画像との合成画像を合成画像記憶部34から読み出すとともに、第2の衣服画像を衣服画像記憶部32から読み出し、合成画像と第2の衣服画像とを合成することによって描画画像を作成し、作成した描画画像を描画画像記憶部35に記憶する。描画画像記憶部35は、描画画像作成部25によって作成された描画画像を記憶する。
【0059】
表示制御部26は、描画画像記憶部35に記憶されている描画画像を表示部40に出力するよう制御する。表示部40は、表示装置6から構成され、描画画像記憶部35から出力される描画画像を表示する。
【0060】
なお、本実施形態において、人体画像記憶部31及び衣服画像記憶部32が記憶手段に相当し、マスク画像作成部22がマスク画像作成手段に相当し、マスキング部24がマスキング手段に相当し、描画画像作成部25が合成画像作成手段に相当し、表示制御部26及び表示部40が表示手段に相当する。
【0061】
図7は、図2に示す第1の実施形態における仮想試着表示装置による仮想試着表示処理を説明するためのフローチャートである。図8〜図11は、第1の実施形態における仮想試着表示処理を説明するための図である。
【0062】
ステップS1において、視点情報受付部21は、操作部10を用いてユーザによって入力された視点情報を受け付ける。視点情報は、複数の視点のうちの所定の視点からの試着状態を表示するための情報であり、本実施形態では、衣服が仮想的に試着される人体を中心点とする円の当該中心点を基準とする22.5度ずつに均等に分割する線と、当該円の円弧とが交わる点を視点とする16方向の各視点から見た16の人体画像、第1の衣服画像及び第2の衣服画像がそれぞれ記憶部30に記憶されている。したがって、視点情報受付部21は、16の視点のうちのどの視点から見た画像を表示するかを受け付ける。
【0063】
ステップS2において、マスク画像作成部22は、人体画像記憶部31から視点情報に基づく人体画像を読み出すとともに、衣服画像記憶部32から視点情報に基づく第2の衣服画像を読み出し、人体画像記憶部31から読み出された人体画像のうちの人体を表す領域と、衣服画像記憶部32から読み出された第2の衣服画像のうちの第2の衣服を表す領域とを重ね合わせた領域を黒色にし、人体画像の人体を表す領域及び第2の衣服画像の第2の衣服を表す領域以外の背景を表す領域を白色にすることで、白黒2色のマスク画像を作成する。ステップS3において、マスク画像作成部22は、ステップS2で作成されたマスク画像をマスク画像記憶部33に記憶する。
【0064】
図8は、マスク画像MASK_Sの一例を示す図である。図8に示すように、マスク画像MASK_Sは、人体画像MGの人体を表す領域と第2の衣服画像JKの第2の衣服を表す領域とを重ね合わせた重なり領域を黒色で表し、背景を白色で表した画像である。なお、図8では、人体画像MGの人体を表す領域と第2の衣服画像JKの第2の衣服を表す領域とを重ね合わせた重なり領域をハッチングによって表しているが、本来は黒色で表される。そのため、マスク画像MASK_Sの外形形状は、第2の衣服画像JKの外形形状と人体画像MGの外形形状とで形成される。
【0065】
図7に戻り、ステップS4において、合成画像作成部23は、人体画像記憶部31から視点情報に基づく人体画像を読み出すとともに、衣服画像記憶部32から視点情報に基づく第1の衣服画像を読み出し、衣服画像記憶部32から読み出された第1の衣服画像を、人体画像記憶部31から読み出された人体画像に重ね合わせた合成画像を作成する。ステップS5において、ステップS4で合成画像作成部23は、作成した合成画像を合成画像記憶部34に記憶する。
【0066】
図9は、図3に示す人体画像MGに図4に示す第1の衣服画像TGを合成した合成画像GG1の一例を示す図であり、図10は、図3に示す人体画像MGに図4に示す第1の衣服画像TG及び図6に示す第2の衣服画像JKを合成した合成画像GG2の一例を示す図である。人体画像MGに第1の衣服画像TGを重ね合わせて合成した場合、図9に示す合成画像GG1が作成される。また、人体画像MGに第1の衣服画像TG及び第2の衣服画像JKを重ね合わせて合成した場合、図10に示す合成画像GG2が作成される。人体画像MGに第1の衣服画像TGと第2の衣服画像JKとを重ね合わせる際に、第2の衣服画像の第2の衣服よりも第1の衣服画像の第1の衣服のほうが大きい場合、第1の衣服の一部分が第2の衣服よりはみ出して表示される場合がある。図10では、第1の衣服の袖部分Aが第2の衣服よりはみ出して表示されている。そこで、マスク画像を作成し、合成画像GG1をマスク画像でマスキングすることによって、はみ出す部分を除去する。
【0067】
図7に戻り、ステップS6において、マスキング部24は、合成画像記憶部34から合成画像を読み出すとともに、マスク画像記憶部33からマスク画像MASK_Sを読み出し、合成画像記憶部34から読み出された合成画像をマスク画像記憶部33から読み出されたマスク画像MASK_Sを用いてマスキングする。マスク画像MASK_Sの黒色領域、つまり、マスク画像MASK_Sのうちの人体及び第2の衣服を表す領域は透過するため、合成画像の上にマスク画像を重ねると、合成画像のうちの人体及び第2の衣服を表す領域以外は覆い隠されることとなり、第2の衣服からはみ出した第1の衣服は除去されることとなる。ステップS7において、マスキング部24は、ステップS6でマスキングされた合成画像を合成画像記憶部34に記憶する。
【0068】
ステップS8において、描画画像作成部25は、合成画像記憶部34から合成画像を読み出すとともに、衣服画像記憶部32から第2の衣服画像を読み出し、合成画像記憶部34から読み出された合成画像に、衣服画像記憶部32から読み出された第2の衣服画像を重ね合わせて合成することで描画画像を作成する。ステップS9において、描画画像作成部25は、ステップS8で作成された描画画像を描画画像記憶部35に記憶する。
【0069】
図11は、図9に示す合成画像GG1を図8に示すマスク画像MASK_Sを用いてマスキングした合成画像に図6に示す第2の衣服画像を合成した描画画像BG1の一例を示す図である。図11に示すように、描画画像BG1は、第1の衣服画像TGと人体画像MGとを合成した合成画像が、人体画像MGと第2の衣服画像JKとで作成されたマスク画像を用いてマスキングされているため、外形形状が人体及び第2の衣服の外形形状となり、第2の衣服から第1の衣服がはみ出すことなく合成される。
【0070】
ステップS10において、表示制御部26は、描画画像記憶部35から描画画像BG1を読み出し、描画画像記憶部35から読み出された描画画像BG1を表示部40に出力する。表示部40は、表示制御部26から出力された描画画像BG1を表示する。したがって、人体画像MGに第1の衣服画像TGを重ね合わせた図9に示す合成画像GG1を、人体画像MGと第2の衣服画像JKとから作成された図8に示すマスク画像MASK_Sを用いてマスキングすることによって、第2の衣服からはみ出した第1の衣服の袖部分Aが除去され、違和感なく試着状態を表示することができるようになる。
【0071】
このように、人体画像MGの上に仮想的に試着される第1の衣服画像TGが人体画像MGに重ね合わされた画像に対して、人体画像MGと第2の衣服画像JKとが重ね合わされたマスク画像MASK_Sを用いてマスキングされ、マスキングされた画像と第2の衣服画像JKとを重ね合わせた合成画像が作成され、作成された合成画像が表示されるので、第1の衣服画像TGが第2の衣服画像JKよりも大きい場合でも、第2の衣服画像JKから第1の衣服画像TGをはみ出させずに表示することができ、仮想的に試着した試着状態を違和感なく表示することができる。
【0072】
また、複数種類の第2の衣服画像の重なり領域の論理積を求めることによって作成された画像と、人体画像MGとの重なり領域の論理和を求めることによってマスク画像MASK_Sが作成され、第1の衣服画像TGを人体画像MGに重ね合わせた画像に対してマスク画像MASK_Sが用いられてマスキングされ、マスキングされた画像と1の第2の衣服画像JKとを重ね合わせた合成画像が作成され、作成された合成画像が表示される。したがって、複数種類の第2の衣服画像を全て含むとともに、人体画像MGを含むマスク画像MASK_Sによって、第1の衣服画像TGがマスキングされるので、複数種類の第2の衣服画像のうちの1の第2の衣服画像JKを第1の衣服画像TGと人体画像MGとに合成したとしても、第1の衣服画像TGが第2の衣服画像JKからはみ出すことなく表示することができる。また、マスク画像作成部22は、複数種類の第2の衣服画像を全て含むとともに人体画像を含むマスク画像を作成するので、作成されたマスク画像を全ての第2の衣服画像の合成に用いることができる。
【0073】
さらに、人体を中心点とする円の当該中心点を基準とする所定の角度ずつに均等に分割する線と、当該円の円弧とが交わる点を視点とし、それぞれ同一視点において撮影又は作成された人体画像MGと第2の衣服画像JKとを重ね合わせたマスク画像MASK_Sが作成され、第1の衣服画像TGを人体画像MGに重ね合わせた画像に対して、マスク画像MASK_Sが用いられてマスキングされ、マスキングされた画像と第2の画像JKとを重ねあわせた合成画像が作成され、作成された合成画像が表示される。したがって、第1の衣服画像TGが第2の衣服画像JKよりも大きい場合でも、第2の衣服画像JKから第1の衣服画像TGをはみ出させずに表示することができ、仮想的に試着した試着状態を2次元の画像を用いて3次元的に表示することができ、複数の視点から見た試着状態を確認することができる。
【0074】
(第2の実施形態)
次に、第2の実施形態における仮想試着表示装置について説明する。第2の実施形態における仮想試着表示装置は、自動的に作成されたマスク画像の修正を受け付けることによってさらに違和感のない試着状態の表示を実現する。
【0075】
図12は、第2の実施形態における図1に示す仮想試着表示装置の主要機能ブロック図である。
【0076】
図12に示すように、仮想試着表示装置は、機能的には、操作部10、プログラム実行部20、記憶部30及び表示部40を備える。プログラム実行部20は、視点情報受付部21、マスク画像作成部22、合成画像作成部23、マスキング部24、描画画像作成部25、表示制御部26及びマスク画像修正受付部27を含む。記憶部30は、人体画像記憶部31、衣服画像記憶部32、マスク画像記憶部33、合成画像記憶部34及び描画画像記憶部35を含む。なお、図12に示す第2の実施形態における仮想試着表示装置は、図2に示す仮想試着表示装置とほぼ同じ構成であるので、異なる構成のみを以下に説明する。
【0077】
マスク画像修正受付部27は、操作部10によるマスク画像の修正を受け付け、マスク画像作成部22によって作成されたマスク画像を、第1の衣服画像の外形形状に応じて修正する。具体的には、第1の実施形態において作成されたマスク画像MASK_Sに違和感を解消させるための形状SSを付加することで修正マスク画像MASK_S’を作成する。このことは、下記の(2)式で表すことができる。
【0078】
MASK_S’=MASK_S∪SS・・・・(2)
なお、上記(2)式において、MASK_S’は修正後のマスク画像を表し、MASK_Sはマスク画像作成部22において自動的に作成された人体画像及び第2の衣服画像からなるマスク画像を表し、SSはマスク画像MASK_Sの違和感を解消させるために新たに付加される画像を表し、∪は論理和(OR)を表している。
【0079】
マスク画像修正受付部27は、修正されたマスク画像をマスク画像記憶部33に記憶する。なお、本実施形態において、マスク画像修正受付部27がマスク画像修正受付手段に相当する。
【0080】
図13は、図12に示す第2の実施形態における仮想試着表示装置による仮想試着表示処理を説明するためのフローチャートである。図14〜図17は、第2の実施形態における仮想試着表示処理を説明するための図である。
【0081】
なお、図13に示すステップS21及びステップS22の処理は、図7のフローチャートに示すステップS1及びステップS2の処理と同じであるので説明を省略する。
【0082】
また、ステップS25において、合成画像作成部23は、図3に示す人体画像MGと、図5に示す第1の衣服画像SGとを重ね合わせた合成画像を作成する。図14は、図3に示す人体画像MGに図5に示す第1の衣服画像SGを合成した合成画像GG3の一例を示す図であり、図15は、人体画像MGに第1の衣服画像SG及び第2の衣服画像JKを合成し、図8に示すマスク画像MASK_Sを用いてマスキングした描画画像BG2の一例を示す図である。人体画像MGに第1の衣服画像SGを重ね合わせて合成した場合、図14に示す合成画像GG3が作成される。また、人体画像MGに第1の衣服画像SG及び第2の衣服画像JKを重ね合わせて合成し、マスク画像作成部22によって作成されたマスク画像MASK_Sを用いてマスキングした場合、図15に示す描画画像BG2が作成される。人体画像MGに第1の衣服画像SGを重ね合わせて合成した合成画像を、図6に示すマスク画像MASK_Sを用いてマスキングした場合、図15に示すように、第1の衣服画像SGの手首の袖口部分Bもマスキングされてしまう。これは、マスク画像MASK_Sの透過する領域が人体画像の人体を表す領域と第2の衣服画像の第2の衣服を表す領域とから構成されるためであり、図15に示すように、第2の衣服の袖口部分が手首とはなれており、且つ第1の衣服が手首まである場合、第1の衣服の袖口部分Bの形状が人体に密着した形状となり、違和感のある試着状態となってしまう。そこで、以下のようにしてマスク画像を修正する。
【0083】
ステップS23において、マスク画像修正受付部27は、ステップS22において作成されたマスク画像の修正を受け付ける。ここで、ユーザは、マスク画像作成部22によって作成されたマスク画像を、操作部10を用いて第1の衣服の外形形状に応じて修正する。図16は、修正されたマスク画像MASK_S’の一例を示す図である。図16に示すように、修正されたマスク画像MASK_S’は、図8に示すマスク画像MASK_Sの外形形状に違和感を解消させるための形状SSが付加されている。なお、図16では、人体画像MGの人体を表す領域と第2の衣服画像JKの第2の衣服を表す領域とを重ね合わせた重なり領域をハッチングによって表し、マスク画像MASK_Sの外形形状に違和感を解消させるための領域を斜線によって表しているが、本来はいずれも黒色で表される。ステップS24において、マスク画像修正受付部27は、修正したマスク画像をマスク画像記憶部33に記憶する。
【0084】
なお、図13に示すステップS25からステップS31までの処理は、図7のフローチャートに示すステップS4からステップS10までの処理と同じであるので説明を省略する。
【0085】
図17は、人体画像MGと第1の衣服画像SGとが合成された合成画像を図16に示すマスク画像を用いてマスキングし、第2の衣服画像JKを合成した描画画像BG3の一例を示す図である。図17に示すように、人体画像MGに第1の衣服画像SGを重ね合わせて合成した合成画像を、図16に示す修正されたマスク画像MASK_S’を用いてマスキングし、図6に示す第2の衣服画像JKを合成することによって、第1の衣服画像SGにおける袖口部分Bを違和感なく表示することができる。
【0086】
このように、マスク画像作成部22によって作成されたマスク画像MASK_Sが、第1の衣服画像SGの外形形状に応じて修正され、合成画像作成部23によって作成された合成画像が、マスク画像修正受付部27によって修正されたマスク画像MASK_S’を用いてマスキングされるため、仮想的に試着した試着状態をさらに違和感なく表示することができるとともに、実際に試着した状態をリアルに再現することができる。また、マスク画像は、ユーザの手作業によって修正されるが、自動的に作成されたマスク画像を用いて修正されるため、マスク画像を1からユーザの手作業によって作成するよりも短時間にマスク画像を作成することができる。
【0087】
(第3の実施形態)
次に、第3の実施形態について説明する。第3の実施形態では、衣服画像記憶部32が、第2の衣服画像のさらに上に仮想的に試着される2次元の第3の衣服画像を記憶しており、人体画像と第1の衣服画像と第2の衣服画像と第3の衣服画像とが合成され、合成された画像が表示される。
【0088】
図18は、第3の実施形態における図1に示す仮想試着表示装置の主要機能ブロック図である。
【0089】
図18に示すように、仮想試着表示装置は、機能的には、操作部10、プログラム実行部20、記憶部30及び表示部40を備える。プログラム実行部20は、視点情報受付部21、マスク画像作成部22、合成画像作成部23、マスキング部24、描画画像作成部25、表示制御部26及びマスク画像修正受付部27を含む。記憶部30は、人体画像記憶部31、衣服画像記憶部32、マスク画像記憶部33、合成画像記憶部34及び描画画像記憶部35を含む。なお、図18に示す第2の実施形態における仮想試着表示装置は、図2に示す仮想試着表示装置とほぼ同じ構成であるので、異なる構成のみを以下に説明する。
【0090】
衣服画像記憶部32は、人体画像の上に仮想的に試着される第1の衣服画像の画像データと、第1の衣服画像のさらに上に仮想的に試着される第2の衣服画像の画像データと、第2の衣服画像のさらに上に仮想的に試着される第3の衣服画像の画像データとをあらかじめ記憶する。第3の衣服画像は、種類が異なる複数種類の第3の衣服に関する画像データであり、衣服画像記憶部32は、複数種類の第3の衣服に関する画像データを記憶している。
【0091】
第3の衣服画像は2次元画像である。衣服画像記憶部32は、人体を中心点とする円の当該中心点を基準とする所定の角度ずつに均等に分割する線と、当該円の円弧とが交わる点を視点とする各視点から見た衣服の画像データを記憶しており、例えば、人体を中心点とする円を22.5度ごとに区切った16の視点から見た16の画像データを1種類ごとに記憶している。第3の衣服は、例えば人体の上半身に仮想的に試着される衣服であり、例えばコート等である。
【0092】
マスク画像作成部22は、人体画像記憶部31から読み出された人体画像と、衣服画像記憶部32から読み出された第3の衣服画像とを重ね合わせたマスク画像を作成する。ここで、第2の衣服画像に適用されるマスク画像MASK_Jは、複数種類の第3の衣服画像の重なり領域の論理積を求めることによって作成された画像と、前記人体画像との重なり領域の論理和を求めることによって作成され、下記の(3)式で表される。
【0093】
MASK_J=(CT1∩CT2∩CT3・・・)∪BODY・・・・(3)
なお、上記(3)式において、MASK_Jは第2の衣服画像に適用されるマスク画像を表し、CT1,CT2,CT3はそれぞれ第3の衣服画像を表し、BODYは人体画像を表し、∩は論理積(AND)を表し、∪は論理和(OR)を表している。
【0094】
上記(3)式に示すように、マスク画像MASK_Jは、複数種類の第3の衣服画像を全て含むとともに、人体画像を含む画像である。また、マスク画像MASK_Jは、複数種類の第3の衣服画像と人体画像とを重ね合わせた画像を“0”と“1”とに2値化し、透過させたい領域を黒(“0”)又は白(“1”)にする。本実施形態におけるマスク画像MASK_Jでは、透過させる領域を黒で表し、それ以外の背景を白で表す。すなわち、マスク画像作成部22は、複数種類の第3の衣服画像の重なり領域の論理積を求めることによって作成される画像と、人体画像との重なり領域の論理和を求めることによって作成される画像を黒で表し、背景を白で表す白黒画像をマスク画像MASK_Jとして作成し、作成されたマスク画像MASK_Jをマスク画像記憶部33に記憶する。マスク画像記憶部33は、マスク画像作成部22によって作成されたマスク画像MASK_Jを記憶する。
【0095】
合成画像作成部23は、衣服画像記憶部32から読み出された第2の衣服画像を、合成画像記憶部31から読み出された人体画像と第1の衣服画像とマスク画像MASK_Sとを合成した合成画像に重ね合わせた合成画像を作成する。この際、合成画像作成部23は、視点情報受付部21によって受け付けられた視点情報に基づいて第2の衣服画像を読み出す。つまり、正面から見た試着状態を表示する場合、第2の衣服を正面から見た画像を読み出し、読み出された画像を重ね合わせた合成画像を作成する。なお、合成画像作成部23は、合成画像の上に第2の衣服画像を合成することで合成画像を作成する。合成画像記憶部34は、合成画像作成部23によって作成された第2の衣服画像と、合成画像とを重ね合わせた合成画像を記憶する。
【0096】
マスキング部24は、合成画像作成部23によって作成され、合成画像記憶部34に記憶されている合成画像を、マスク画像作成部22によって作成され、マスク画像記憶部33に記憶されているマスク画像を用いてマスキングする。マスキング部24によってマスキングされた画像は、再び合成画像記憶部34に記憶される。
【0097】
描画画像作成部25は、マスク画像によってマスキングされた第1の衣服画像と第2の衣服画像と人体画像との合成画像を合成画像記憶部34から読み出すとともに、第3の衣服画像を衣服画像記憶部32から読み出し、合成画像と第3の衣服画像とを合成することによって描画画像を作成し、作成した描画画像を描画画像記憶部35に記憶する。描画画像記憶部35は、描画画像作成部25によって作成された描画画像を記憶する。
【0098】
図19は、図18に示す第3の実施形態における仮想試着表示装置による仮想試着表示処理を説明するためのフローチャートである。なお、図19に示すステップS41及びステップS47までの処理は、図7のフローチャートに示すステップS1及びステップS7までの処理と同じであるので説明を省略する。
【0099】
ステップS48において、マスク画像作成部22は、人体画像記憶部31から視点情報に基づく人体画像を読み出すとともに、衣服画像記憶部32から視点情報に基づく第3の衣服画像を読み出し、人体画像記憶部31から読み出された人体画像のうちの人体を表す領域と、衣服画像記憶部32から読み出された第3の衣服画像のうちの第3の衣服を表す領域とを重ね合わせた重なり領域を黒色にし、人体画像の人体を表す領域及び第3の衣服画像の第3の衣服を表す領域以外の背景を表す領域を白色にすることで、白黒2色のマスク画像を作成する。ステップS49において、マスク画像作成部22は、ステップS48で作成されたマスク画像をマスク画像記憶部33に記憶する。
【0100】
ステップS50において、合成画像作成部23は、合成画像記憶部34から人体画像と第1の衣服画像とマスク画像MASK_Sとを合成した合成画像を読み出すとともに、衣服画像記憶部32から視点情報に基づく第2の衣服画像を読み出し、人体画像記憶部31から読み出された第2の衣服画像を、人体画像合成画像記憶部34から読み出された合成画像に重ね合わせた合成画像を作成する。ステップS51において、合成画像作成部23は、ステップS50で作成した合成画像を合成画像記憶部34に記憶する。
【0101】
ステップS52において、マスキング部24は、合成画像記憶部34から合成画像を読み出すとともに、マスク画像記憶部33からマスク画像MASK_Jを読み出し、合成画像記憶部34から読み出された合成画像をマスク画像記憶部33から読み出されたマスク画像MASK_Jを用いてマスキングする。マスク画像MASK_Jの黒色領域、つまり、マスク画像MASK_Jのうちの人体及び第3の衣服を表す領域は透過するため、合成画像の上にマスク画像を重ねると、合成画像のうちの人体及び第3の衣服の領域以外は覆い隠されることとなり、第3の衣服からはみ出した第2の衣服は除去されることとなる。ステップS53において、マスキング部24は、ステップS52でマスキングされた合成画像を合成画像記憶部34に記憶する。
【0102】
ステップS54において、描画画像作成部25は、合成画像記憶部34から合成画像を読み出すとともに、衣服画像記憶部32から第3の衣服画像を読み出し、合成画像記憶部34から読み出された合成画像に、衣服画像記憶部32から読み出された第3の衣服画像を重ね合わせて合成することで描画画像を作成する。ステップS55において、描画画像作成部25は、ステップS54で作成された描画画像を描画画像記憶部35に記憶する。
【0103】
ステップS56において、表示制御部26は、描画画像記憶部35から描画画像を読み出し、描画画像記憶部35から読み出された描画画像を表示部40に出力する。表示部40は、表示制御部26から出力された描画画像を表示する。したがって、人体画像に第1の衣服画像と第2の衣服画像とを重ね合わせた合成画像を、人体画像と第3の衣服画像とから作成されたマスク画像を用いてマスキングすることによって、第3の衣服からはみ出した第2の衣服が除去され、違和感なく試着状態を表示することができるようになる。
【0104】
このように、第2の衣服画像JKのさらに上に第3の衣服画像CTが仮想的に試着される場合、複数種類の第3の衣服画像の重なり領域の論理積を求めることによって作成された画像と、人体画像MGとの重なり領域の論理和を求めることによってマスク画像MASK_Jが作成され、第2の衣服画像JKを人体画像MGに重ね合わせた画像に対してマスク画像MASK_Jが用いられてマスキングされ、マスキングされた画像と1の第3の衣服画像CTとを重ね合わせた合成画像が作成され、作成された合成画像が表示される。したがって、複数種類の第3の衣服画像を全て含むとともに、人体画像MGを含むマスク画像MASK_Jによって、第2の衣服画像JKがマスキングされるので、複数種類の第3の衣服画像のうちの1の第3の衣服画像CTを第2の衣服画像JKと人体画像MGとに合成したとしても、第2の衣服画像JKが第3の衣服画像CTからはみ出すことなく表示することができる。
【0105】
なお、本実施形態において、デジタルカメラ等で人物の顔画像を取り込んで予め記憶しておき、マネキンの顔部分に相当する領域に貼り付けて人体画像MGとして用いてもよい。つまり、記憶部30は、あらかじめ撮影された人物の顔画像を記憶し、合成画像作成部23は、記憶部30から読み出された第1の衣服画像TG,SG及び第2の衣服画像JKを、記憶部30から読み出された人体画像MGに重ね合わせるとともに、人体画像MGの顔部分に相当する領域に記憶部30から読み出された顔画像を重ね合わせた合成画像を作成する。この場合、あらかじめ撮影された人物の顔画像が人体画像の顔画像に重ね合わされた合成画像が作成されるため、所望の人物の顔画像を用いて仮想的な試着状態を確認することができる。
【0106】
本実施形態では、被試着対象物として人体を用いて説明したが、本発明は特にこれに限定されず、例えば犬、猫等の動物であってもよく、また、アニメーション等の架空のキャラクタであってもよい。
【0107】
【発明の効果】
本発明によれば、人体画像の上に仮想的に試着される第1の衣服画像が人体画像に重ね合わされた画像に対して、人体画像と第2の衣服画像とが重ね合わされたマスク画像を用いてマスキングされ、マスキングされた画像と第2の衣服画像とを重ね合わせた描画画像が作成され、作成された描画画像が表示されるので、第1の衣服画像が第2の衣服画像よりも大きい場合でも、第2の衣服画像から第1の衣服画像をはみ出させずに表示することができ、仮想的に試着した試着状態を違和感なく表示することができる。
【0108】
また、複数種類の第2の衣服画像を全て含むとともに、人体画像を含むマスク画像によって、第1の衣服画像がマスキングされるので、複数種類の第2の衣服画像のうちの1の第2の衣服画像を第1の衣服画像と人体画像とに合成したとしても、第1の衣服画像が第2の衣服画像からはみ出すことなく表示することができる。
【図面の簡単な説明】
【図1】 本発明の第1の実施形態による仮想試着表示装置の構成を示すブロック図である。
【図2】 第1の実施形態における図1に示す仮想試着表示装置の主要機能ブロック図である。
【図3】 人体画像記憶部に記憶されている人体画像の一例を示す図である。
【図4】 衣服画像記憶部に記憶されている第1の衣服画像の一例を示す図である。
【図5】 衣服画像記憶部に記憶されている他の第1の衣服画像の一例を示す図である。
【図6】 衣服画像記憶部に記憶されている第2の衣服画像の一例を示す図である。
【図7】 図2に示す第1の実施形態における仮想試着表示装置による仮想試着表示処理を説明するためのフローチャートである。
【図8】 マスク画像の一例を示す図である。
【図9】 図3に示す人体画像に図4に示す第1の衣服画像を合成した合成画像の一例を示す図である。
【図10】 図3に示す人体画像に図4に示す第1の衣服画像及び図6に示す第2の衣服画像を合成した合成画像の一例を示す図である。
【図11】 図9に示す合成画像を図8に示すマスク画像を用いてマスキングした合成画像に図6に示す第2の衣服画像を合成した描画画像の一例を示す図である。
【図12】 第2の実施形態における図1に示す仮想試着表示装置の主要機能ブロック図である。
【図13】 図12に示す第2の実施形態における仮想試着表示装置による仮想試着表示処理を説明するためのフローチャートである。
【図14】 図3に示す人体画像に図5に示す第1の衣服画像を合成した合成画像の一例を示す図である。
【図15】 人体画像に第1の衣服画像及び第2の衣服画像を合成し、図10に示すマスク画像を用いてマスキングした描画画像の一例を示す図である。
【図16】 修正されたマスク画像の一例を示す図である。
【図17】 人体画像と第1の衣服画像とが合成された合成画像を図16に示すマスク画像を用いてマスキングした描画画像の一例を示す図である。
【図18】 第3の実施形態における図1に示す仮想試着表示装置の主要機能ブロック図である。
【図19】 図18に示す第3の実施形態における仮想試着表示装置による仮想試着表示処理を説明するためのフローチャートである。
【図20】 従来の処理を行った場合に表示される表示画面の一例を示す図である。
【符号の説明】
10 操作部
20 プログラム実行部
21 視点情報受付部
22 マスク画像作成部
23 合成画像作成部
24 マスキング部
25 描画画像作成部
26 表示制御部
27 マスク画像修正受付部
30 記憶部
31 人体画像記憶部
32 衣服画像記憶部
33 マスク画像記憶部
34 合成画像記憶部
35 描画画像記憶部
40 表示部
[0001]
BACKGROUND OF THE INVENTION
  The present invention relates to a virtual try-on display device that displays a virtual try-on state by combining a clothing image with a human body image, a virtual try-on display method, a virtual try-on display program, and a computer-readable recording medium on which the program is recorded. It is.
[0002]
[Prior art]
  Conventionally, in the apparel industry, for the purpose of selling fashion items such as clothes, clothing images are displayed on a monitor by superimposing a human body image as a model on a computer and a clothing image desired by a user on a monitor. A virtual fitting state simulation is performed (for example, see Patent Document 1).
[0003]
  FIG. 20 is a diagram illustrating an example of a combined image obtained by combining a human body image, a first clothing image, and a second clothing image when a conventional process is performed. When the human body image representing the human body M, the first clothing image representing the first clothing U, and the second clothing image representing the second clothing J are synthesized, a composite image GG4 is created.
[0004]
[Patent Document 1]
          JP-A-11-203347
[0005]
[Problems to be solved by the invention]
  By the way, when a virtual fitting state simulation is performed by creating a composite image as described above, a first garment representing a garment to be tried on a human body is tried on further above the first garment. When the size is larger than the second clothing representing the clothing to be displayed, the first clothing that is actually covered with the second clothing and should not be seen is displayed outside the second clothing.
[0006]
  As shown in FIG. 20, a human body M is superimposed on a first garment U such as a shirt that is tried on the human body and a second garment J such as a knit shirt that is tried on the shirt. Displayed, the sleeve portion, the torso portion, the hem portion (the hatched portion in the figure) of the first garment U and the like protrude from the second garment J. For this reason, the fitting state in which the first and second clothes are virtually tried on the human body becomes very uncomfortable.
[0007]
  In order to solve such a problem, conventionally, corrections such as removing the protruding portion by manual work have been made for all combinations of clothes. However, manual correction is a very time-consuming operation, and as the number of clothes simulating a try-on state increases, the number of combinations increases and the number of composite images that must be corrected also increases. Therefore, it is difficult to perform manual correction.
[0008]
  Also, when creating such a composite image with a two-dimensional image, for example, the fitting condition was taken from each viewpoint in 16 directions divided every 22.5 degrees so that the fitting state can be seen from any direction of 360 degrees. Sixteen images are prepared in advance for all clothing images. For this reason, the number of clothing images used for the simulation of the try-on state becomes enormous, and it becomes more difficult to perform manual correction.
[0009]
  The present invention has been made to solve the above-described problem, and can virtually display a virtual fitting state when a clothing image representing a plurality of clothes is superimposed on a human body image representing a human body. An object of the present invention is to provide a try-on display device, a virtual try-on display method, a virtual try-on display program, and a computer-readable recording medium on which the program is recorded.
[0010]
[Means for Solving the Problems]
  A virtual try-on display device according to the present invention is a virtual try-on display device that displays a virtual try-on state by synthesizing a two-dimensional human body image with a two-dimensional human body image, and the clothes image is the human body image. A two-dimensional first clothes image virtually tried on the first clothes image, and a two-dimensional second clothes image virtually tried on the first clothes image, the human body image, The storage means for storing the first clothes image and the second clothes clothes image, the human body image read from the storage means, and the second clothes image read from the storage means are superimposed. Mask image creating means for creating a mask image, and the mask image creating means for an image obtained by superimposing the first clothing image read from the storage means on the human body image read from the storage means Mask picture created by A masking means for masking using a mask, a drawing image creation means for creating a drawing image in which an image masked by the masking means and a second clothing image read from the storage means are superimposed, and the drawing Image display means for displaying a drawing image created by the image creation meansThe storage means stores a plurality of types of second clothing images, and the mask image creation means includes an image created by calculating a logical product of overlapping regions of the plurality of types of second clothing images, and A mask image is created by calculating a logical sum of an overlapping area with the human body image, and the masking means converts the first clothing image read from the storage means to the human body image read from the storage means. The superimposed image is masked using the mask image created by the mask image creating means, and the drawn image creating means is read from the storage means and the image masked by the masking means. A drawing image is created by superimposing the first second clothing image, and the image display means displays the drawing image created by the drawing image creation meansIt is characterized by that.
[0011]
  According to this configuration, the mask image in which the human body image and the second clothing image are superimposed on the image in which the first clothing image virtually tried on the human body image is superimposed on the human body image. Since the drawing image created by superimposing the masked image and the second clothing image is created and the created drawing image is displayed, the first clothing image is more than the second clothing image. Even when the size is large, the first clothing image can be displayed without protruding from the second clothing image, and the virtually tried-on fitting state can be displayed without a sense of incongruity.
[0012]
  In addition, a mask image is created by calculating a logical sum of an overlap area between an image created by obtaining an overlap area of a plurality of types of second clothes images and a human body image, and the first clothes image is obtained. A mask image is used to mask the image superimposed on the human body image, and a masked image and a first clothing image are superimposed to create a rendered image. The created rendered image is displayed. Is done. Therefore, since the first clothing image is masked by the mask image including all of the plurality of types of second clothing images and the human body image, the second one of the plurality of types of second clothing images. Even if the clothing image is combined with the first clothing image and the human body image, the first clothing image can be displayed without protruding from the second clothing image.
[0013]
  According to the present inventionVirtual try-on displayIs,A virtual try-on display device that displays a virtual try-on state by combining a two-dimensional human body image with a two-dimensional clothes image, wherein the clothes image is virtually tried on the human body image 2 A first-dimensional clothing image and a two-dimensional second clothing image virtually tried on the first clothing image, the human body image, the first clothing image, and the second clothing Storage means for storing clothing images; mask image creation means for creating a mask image in which the human body image read from the storage means and the second clothing image read from the storage means are superimposed; And masking the first clothing image read from the storage means on the human body image read from the storage means by using the mask image created by the mask image creation means Maskin A drawing image creating means for creating a drawing image in which the image masked by the masking means and the second clothing image read from the storage means are superimposed, and the drawing image creating means Image display means for displaying the drawn image,The clothing image includes a two-dimensional third clothing image virtually tried on the second clothing image, and the storage means stores a plurality of types of third clothing images, The mask image creating means creates a mask image by obtaining a logical sum of an overlap area between the image created by obtaining the logical product of the overlapping areas of a plurality of types of third clothing images and the human body image, The masking means is a mask image created by the mask image creating means for an image obtained by superimposing the second clothing image read from the storage means on the human body image read from the storage means. The drawing image creating means overlays the image masked by the masking means and the third clothing image read from the storage means. Create an image, said image display means, displaying a drawing image created by the drawing image creating meansIt is characterized by.
[0014]
According to this configuration, the mask image in which the human body image and the second clothing image are superimposed on the image in which the first clothing image virtually tried on the human body image is superimposed on the human body image. Since the drawing image created by superimposing the masked image and the second clothing image is created and the created drawing image is displayed, the first clothing image is more than the second clothing image. Even when the size is large, the first clothing image can be displayed without protruding from the second clothing image, and the virtually tried-on fitting state can be displayed without a sense of incongruity.
[0015]
  AlsoWhen a third clothes image is virtually tried on further above the second clothes image, an image created by calculating a logical product of overlapping areas of a plurality of types of third clothes images, and a human body image A mask image is created by calculating the logical sum of the overlapping areas with the image, and the mask image is used to mask the image obtained by superimposing the second clothing image on the human body image. A drawing image obtained by superimposing the clothes image 3 is created, and the created drawing image is displayed. Therefore, since the second clothing image is masked by the mask image including all of the plurality of types of third clothing images and the human body image, the third one of the plurality of types of third clothing images. Even if the clothing image is synthesized with the second clothing image and the human body image, the second clothing image can be displayed without protruding from the third clothing image.
[0016]
  Further, in the virtual try-on display device, the storage means includes a point where a line equally dividing the circle centered on the human body at a predetermined angle with respect to the center point and an arc of the circle intersect. A plurality of the human body images, the first clothing image, and the second clothing image taken from a plurality of viewpoints having the viewpoint as the viewpoint are stored, and the mask image creating means is read from the storage means. Creating a mask image in which the human body image viewed from a specific viewpoint and the second clothing image viewed from the same viewpoint as the human body image read from the storage unit are superimposed, and the masking unit includes: The mask image creating means for an image in which the first clothing image viewed from the same viewpoint as the human body image read from the storage means is superimposed on the human body image read from the storage means Made by The drawing image creating means is configured to mask the image that has been masked by the masking means and the second clothing image viewed from the same viewpoint as the human body image read from the storage means. It is preferable that a drawing image is created by superimposing and the image display means displays the drawing image created by the drawing image creation means.
[0017]
  According to this configuration, a point at which a line that equally divides into a predetermined angle with respect to the center point of the circle centered on the human body and the arc of the circle intersect is used as a viewpoint, and each image is taken from the same viewpoint. Alternatively, a mask image is created by superimposing the plurality of created human body images and the second clothing image, and the mask image is used to mask the image obtained by superposing the first clothing image on the human body image. A drawing image obtained by superimposing the masked image and the second image is created, and the created drawing image is displayed. Therefore, even when the first clothing image is larger than the second clothing image, the first clothing image can be displayed without protruding from the second clothing image, and the try-on state virtually tried on is 2 A three-dimensional image can be displayed using a three-dimensional image, and the fitting state seen from a plurality of viewpoints can be confirmed.
[0018]
  The virtual try-on display device may further include a mask image correction receiving unit that receives a correction according to an outer shape of the first clothing image of the mask image created by the mask image creating unit, The drawing image created by the drawing image creation means is preferably masked using the mask image modified by the mask image modification acceptance means.
[0019]
  According to this configuration, the correction according to the outer shape of the first clothing image of the mask image created by the mask image creation means by the user is accepted, and the drawing image created by the drawing image creation means is the mask image correction Since masking is performed using the mask image corrected by the accepting means, it is possible to display a virtually tried-on state without any discomfort and to realistically reproduce the actually tried-on state.
[0020]
  The virtual try-on display method according to the present invention is a virtual try-on display method for displaying a virtual try-on state by synthesizing a two-dimensional human body image with a two-dimensional human body image, wherein the clothes image is the human body image. A two-dimensional first clothing image virtually tried on the computer and a two-dimensional second clothing image virtually tried on the first clothing image, Mask image obtained by superimposing the human body image read from the storage unit storing the human body image, the first clothing image, and the second clothing image and the second clothing image read from the storage unit A mask image creation step for creating a mask image for an image obtained by superimposing the first clothing image read from the storage means on the human body image read from the storage means To step A masking step of masking using the mask image created in step S3, and a computer creating a drawing image in which the image masked in the masking step and the second clothing image read out from the storage means are superimposed. A drawing image creating step, and an image display step in which the computer displays the drawing image created in the drawing image creating step.The storage means stores a plurality of types of second clothing images, and the mask image creation step includes an image created by calculating a logical product of overlapping regions of the plurality of types of second clothing images; A mask image is created by obtaining a logical sum of an overlapping area with the human body image, and the masking step includes the first human body image read from the storage means and the human body image read from the storage means. Is masked using the mask image created in the mask image creating step, and the drawing image creating step is read from the storage means and the image masked in the masking step. A drawing image is created by superimposing the second image on the second clothes, and the image display step includes the drawing image creation step. To display the drawing image that was created hadIt is characterized by that.
[0021]
  According to this configuration, the mask image in which the human body image and the second clothing image are superimposed on the image in which the first clothing image virtually tried on the human body image is superimposed on the human body image. Since the drawing image created by superimposing the masked image and the second clothing image is created and the created drawing image is displayed, the first clothing image is more than the second clothing image. Even when the size is large, the first clothing image can be displayed without protruding from the second clothing image, and the virtually tried-on fitting state can be displayed without a sense of incongruity.
[0022]
In addition, a mask image is created by calculating a logical sum of an overlap area between an image created by obtaining an overlap area of a plurality of types of second clothes images and a human body image, and the first clothes image is obtained. A mask image is used to mask the image superimposed on the human body image, and a masked image and a first clothing image are superimposed to create a rendered image. The created rendered image is displayed. Is done. Therefore, since the first clothing image is masked by the mask image including all of the plurality of types of second clothing images and the human body image, the second one of the plurality of types of second clothing images. Even if the clothing image is combined with the first clothing image and the human body image, the first clothing image can be displayed without protruding from the second clothing image.
[0023]
  The virtual try-on display program according to the present invention is a virtual try-on display program for displaying a virtual try-on state by combining a two-dimensional human body image with a two-dimensional clothes image, A two-dimensional first clothing image virtually tried on a human body image; and a two-dimensional second clothing image virtually tried on the first clothing image, An image, a first clothing image and a second clothing image are stored, and the human body image read from the storage device and the second clothing image read from the storage device are overlapped. A mask image creating means for creating a combined mask image, and an image obtained by superimposing the first clothing image read from the storage means on the human body image read from the storage means; By creation means Masking means for masking using the formed mask image, drawing image creation for creating a drawing image in which the image masked by the masking means and the second clothing image read from the storage means are superimposed And a computer functioning as image display means for displaying the drawn image created by the drawn image creating means.The storage means stores a plurality of types of second clothing images, and the mask image creation means includes an image created by calculating a logical product of overlapping regions of the plurality of types of second clothing images, and A mask image is created by calculating a logical sum of an overlapping area with the human body image, and the masking means converts the first clothing image read from the storage means to the human body image read from the storage means. The superimposed image is masked using the mask image created by the mask image creating means, and the drawn image creating means is read from the storage means and the image masked by the masking means. A drawing image is created by superimposing the first second clothing image, and the image display means displays the drawing image created by the drawing image creation meansIt is characterized by that.
[0024]
  According to this configuration, the mask image in which the human body image and the second clothing image are superimposed on the image in which the first clothing image virtually tried on the human body image is superimposed on the human body image. Since the drawing image created by superimposing the masked image and the second clothing image is created and the created drawing image is displayed, the first clothing image is more than the second clothing image. Even when the size is large, the first clothing image can be displayed without protruding from the second clothing image, and the virtually tried-on fitting state can be displayed without a sense of incongruity.
[0025]
In addition, a mask image is created by calculating a logical sum of an overlap area between an image created by obtaining an overlap area of a plurality of types of second clothes images and a human body image, and the first clothes image is obtained. A mask image is used to mask the image superimposed on the human body image, and a masked image and a first clothing image are superimposed to create a rendered image. The created rendered image is displayed. Is done. Therefore, since the first clothing image is masked by the mask image including all of the plurality of types of second clothing images and the human body image, the second one of the plurality of types of second clothing images. Even if the clothing image is combined with the first clothing image and the human body image, the first clothing image can be displayed without protruding from the second clothing image.
[0026]
  A computer-readable recording medium on which a virtual fitting display program according to the present invention is recorded is a virtual fitting display program for displaying a virtual fitting state by combining a two-dimensional clothing image with a two-dimensional human body image. A recorded computer-readable recording medium, wherein the clothing image includes a two-dimensional first clothing image virtually tried on the human body image and a virtual image on the first clothing image. A storage means for storing the human body image, the first clothing image, and the second clothing image, and the human body image read from the storage means. A mask image creating means for creating a mask image by superimposing the second clothing image read from the storage means, and the first clothing image read from the storage means as the storage hand. Masking means for masking an image superimposed on the human body image read from the image using the mask image created by the mask image creating means, an image masked by the masking means, and the storage means A computer that functions as a drawing image creation unit that creates a drawing image by superimposing the second clothing image read out from the image, and an image display unit that displays the drawing image created by the drawing image creation unit.The storage means stores a plurality of types of second clothing images, and the mask The image creating means creates a mask image by obtaining a logical sum of an overlap area between an image created by obtaining a logical product of overlapping areas of a plurality of types of second clothing images and the human body image, The masking means applies the mask image created by the mask image creating means to an image obtained by superimposing the first clothing image read from the storage means on the human body image read from the storage means. The drawing image creating means creates a drawing image in which the image masked by the masking means and the first second clothing image read from the storage means are superimposed, and the image The display means displays the drawing image created by the drawing image creation means.It is characterized by that.
[0027]
  According to this configuration, the mask image in which the human body image and the second clothing image are superimposed on the image in which the first clothing image virtually tried on the human body image is superimposed on the human body image. Since the drawing image created by superimposing the masked image and the second clothing image is created and the created drawing image is displayed, the first clothing image is more than the second clothing image. Even when the size is large, the first clothing image can be displayed without protruding from the second clothing image, and the virtually tried-on fitting state can be displayed without a sense of incongruity.
[0028]
In addition, a mask image is created by calculating a logical sum of an overlap area between an image created by obtaining an overlap area of a plurality of types of second clothes images and a human body image, and the first clothes image is obtained. A mask image is used to mask the image superimposed on the human body image, and a masked image and a first clothing image are superimposed to create a rendered image. The created rendered image is displayed. Is done. Therefore, since the first clothing image is masked by the mask image including all of the plurality of types of second clothing images and the human body image, the second one of the plurality of types of second clothing images. Even if the clothing image is combined with the first clothing image and the human body image, the first clothing image can be displayed without protruding from the second clothing image.
[0029]
The virtual try-on display method according to the present invention is a virtual try-on display method for displaying a virtual try-on state by synthesizing a two-dimensional human body image with a two-dimensional human body image, wherein the clothes image is the human body image. A two-dimensional first clothing image virtually tried on the computer and a two-dimensional second clothing image virtually tried on the first clothing image, Mask image obtained by superimposing the human body image read from the storage unit storing the human body image, the first clothing image, and the second clothing image and the second clothing image read from the storage unit A mask image creation step for creating a mask image for an image obtained by superimposing the first clothing image read from the storage means on the human body image read from the storage means To step A masking step of masking using the mask image created in step S3, and a computer creating a drawing image in which the image masked in the masking step and the second clothing image read out from the storage means are superimposed. A drawing image creating step, and an image display step in which the computer displays the drawing image created in the drawing image creating step, and the clothing image is virtually tried on further above the second clothing image. The storage means stores a plurality of types of third clothing images, and the mask image creation step includes a logic of an overlapping area of the plurality of types of third clothing images. A mask image is created by calculating the logical sum of the overlapping area between the image created by obtaining the product and the human body image. The masking step is created in the mask image creating step with respect to an image obtained by superimposing the second clothing image read from the storage means on the human body image read from the storage means. Masking using a mask image, the drawing image creation step creates a drawing image in which the image masked in the masking step and the third clothing image read from the storage means are superimposed, The image display step displays the drawing image created in the drawing image creation step.
[0030]
According to this configuration, the mask image in which the human body image and the second clothing image are superimposed on the image in which the first clothing image virtually tried on the human body image is superimposed on the human body image. Since the drawing image created by superimposing the masked image and the second clothing image is created and the created drawing image is displayed, the first clothing image is more than the second clothing image. Even when the size is large, the first clothing image can be displayed without protruding from the second clothing image, and the virtually tried-on fitting state can be displayed without a sense of incongruity.
[0031]
In addition, when the third clothing image is virtually tried on further above the second clothing image, an image created by calculating a logical product of overlapping regions of a plurality of types of third clothing images, and the human body A mask image is created by calculating the logical sum of the overlapping area with the image, and the mask image is used to mask the image obtained by superimposing the second clothing image on the human body image. A drawing image obtained by superimposing the third clothing image is created, and the created drawing image is displayed. Therefore, since the second clothing image is masked by the mask image including all of the plurality of types of third clothing images and the human body image, the third one of the plurality of types of third clothing images. Even if the clothing image is synthesized with the second clothing image and the human body image, the second clothing image can be displayed without protruding from the third clothing image.
[0032]
The virtual try-on display program according to the present invention is a virtual try-on display program for displaying a virtual try-on state by combining a two-dimensional human body image with a two-dimensional clothes image, A two-dimensional first clothing image virtually tried on a human body image; and a two-dimensional second clothing image virtually tried on the first clothing image, An image, a first clothing image and a second clothing image are stored, and the human body image read from the storage device and the second clothing image read from the storage device are overlapped. A mask image creating means for creating a combined mask image, and an image obtained by superimposing the first clothing image read from the storage means on the human body image read from the storage means; By creation means Masking means for masking using the formed mask image, drawing image creation for creating a drawing image in which the image masked by the masking means and the second clothing image read from the storage means are superimposed And a computer functioning as an image display means for displaying the drawing image created by the drawing image creation means, and the clothes image is virtually tried on the second clothes image. Including a third clothing image, the storage means stores a plurality of types of third clothing images, and the mask image creation means obtains a logical product of overlapping regions of the plurality of types of third clothing images. A mask image is created by calculating a logical sum of overlapping areas between the created image and the human body image, and the masking means is the storage means. Masking the read second clothes image on the human body image read from the storage means by using the mask image created by the mask image creating means, and drawing image The creating means creates a drawing image in which the image masked by the masking means and the third clothing image read from the storage means are superimposed, and the image display means is created by the drawing image creating means. It is characterized by displaying the created drawing image.
[0033]
According to this configuration, the mask image in which the human body image and the second clothing image are superimposed on the image in which the first clothing image virtually tried on the human body image is superimposed on the human body image. Since the drawing image created by superimposing the masked image and the second clothing image is created and the created drawing image is displayed, the first clothing image is more than the second clothing image. Even when the size is large, the first clothing image can be displayed without protruding from the second clothing image, and the virtually tried-on fitting state can be displayed without a sense of incongruity.
[0034]
In addition, when the third clothing image is virtually tried on further above the second clothing image, an image created by calculating a logical product of overlapping regions of a plurality of types of third clothing images, and the human body A mask image is created by calculating the logical sum of the overlapping area with the image, and the mask image is used to mask the image obtained by superimposing the second clothing image on the human body image. A drawing image obtained by superimposing the third clothing image is created, and the created drawing image is displayed. Therefore, since the second clothing image is masked by the mask image including all of the plurality of types of third clothing images and the human body image, the third one of the plurality of types of third clothing images. Even if the clothing image is synthesized with the second clothing image and the human body image, the second clothing image can be displayed without protruding from the third clothing image.
[0035]
A computer-readable recording medium on which a virtual fitting display program according to the present invention is recorded is a virtual fitting display program for displaying a virtual fitting state by combining a two-dimensional clothing image with a two-dimensional human body image. A recorded computer-readable recording medium, wherein the clothing image includes a two-dimensional first clothing image virtually tried on the human body image and a virtual image on the first clothing image. A storage means for storing the human body image, the first clothing image, and the second clothing image, and the human body image read from the storage means. A mask image creating means for creating a mask image by superimposing the second clothing image read from the storage means, and the first clothing image read from the storage means as the storage hand. Masking means for masking an image superimposed on the human body image read from the image using the mask image created by the mask image creating means, an image masked by the masking means, and the storage means A computer that functions as a drawing image creation unit that creates a drawing image in which the second clothing image read from the image is superimposed, and an image display unit that displays the drawing image created by the drawing image creation unit, The clothing image includes a two-dimensional third clothing image virtually tried on the second clothing image, and the storage means stores a plurality of types of third clothing images, and the mask The image creation means includes an overlap between an image created by obtaining a logical product of overlapping regions of a plurality of types of third clothing images and the human body image. A mask image is created by calculating a logical sum of the areas, and the masking means overlays the second clothing image read from the storage means on the human body image read from the storage means. On the other hand, masking is performed using the mask image created by the mask image creating means, and the drawing image creating means includes an image masked by the masking means and a third clothing image read from the storage means. And the image display means displays the drawing image created by the drawing image creation means.
[0036]
According to this configuration, the mask image in which the human body image and the second clothing image are superimposed on the image in which the first clothing image virtually tried on the human body image is superimposed on the human body image. Since the drawing image created by superimposing the masked image and the second clothing image is created and the created drawing image is displayed, the first clothing image is more than the second clothing image. Even when the size is large, the first clothing image can be displayed without protruding from the second clothing image, and the virtually tried-on fitting state can be displayed without a sense of incongruity.
[0037]
In addition, when the third clothing image is virtually tried on further above the second clothing image, an image created by calculating a logical product of overlapping regions of a plurality of types of third clothing images, and the human body A mask image is created by calculating the logical sum of the overlapping area with the image, and the mask image is used to mask the image obtained by superimposing the second clothing image on the human body image. A drawing image obtained by superimposing the third clothing image is created, and the created drawing image is displayed. Therefore, since the second clothing image is masked by the mask image including all of the plurality of types of third clothing images and the human body image, the third one of the plurality of types of third clothing images. Even if the clothing image is synthesized with the second clothing image and the human body image, the second clothing image can be displayed without protruding from the third clothing image.
[0038]
DETAILED DESCRIPTION OF THE INVENTION
  Embodiments according to the present invention will be described below with reference to the drawings.
[0039]
  (First embodiment)
  FIG. 1 is a block diagram showing a configuration of a virtual try-on display device according to the first embodiment of the present invention. The virtual try-on display device shown in FIG. 1 includes a personal computer or the like, and includes an input device 1, a ROM (read only memory) 2, a CPU (central processing unit) 3, a RAM (random access memory) 4, and an external storage device 5. And a display device 6 and a recording medium driving device 7. Each block is connected to an internal bus, and various data and the like are input / output between the blocks via this bus, and various processes are executed under the control of the CPU 3.
[0040]
  The input device 1 includes a keyboard, a mouse, and the like, and is used by an operator to input operation commands and the like. The ROM 2 stores a system program and the like in advance. The external storage device 5 is composed of a hard disk drive or the like, and stores a virtual try-on display program and the like to be described later. The CPU 3 reads a virtual try-on display program or the like from the external storage device 5 and executes a virtual try-on display process described later to control the operation of each block. The RAM 4 is used as a work area for the CPU 3. The display device 6 includes a CRT (cathode ray tube), a liquid crystal display device, or the like, and displays various screens under the control of the CPU 3.
[0041]
  Note that the virtual try-on display program or the like may be recorded on a computer-readable recording medium 8 composed of a CD-ROM, a flexible disk, or the like. In this case, a virtual try-on display program read from the recording medium 8 using the recording medium driving device 7 constituted by a CD-ROM drive, a flexible disk drive or the like is installed in the external storage device 5. Further, when a virtual try-on display program or the like is stored in another computer or the like connected via a network, the virtual try-on display program or the like may be downloaded from the computer or the like via the network.
[0042]
  Next, main functions of the virtual try-on display device configured as described above will be described. FIG. 2 is a main functional block diagram of the virtual try-on display device shown in FIG. 1 in the first embodiment.
[0043]
  As shown in FIG. 2, the virtual try-on display device functionally includes an operation unit 10, a program execution unit 20, a storage unit 30, and a display unit 40. The program execution unit 20 includes a viewpoint information reception unit 21, a mask image creation unit 22, a composite image creation unit 23, a masking unit 24, a drawing image creation unit 25, and a display control unit 26. The storage unit 30 includes a human body image storage unit 31, a clothing image storage unit 32, a mask image storage unit 33, a composite image storage unit 34, and a drawing image storage unit 35.
[0044]
  The operation unit 10 includes the input device 1 and the like, and is used by an operator of the virtual try-on display device to input various operation commands.
[0045]
  The program execution unit 20 includes a CPU 3 and the like, and the CPU 3 and the like execute a virtual try-on display program and the like stored in the external storage device 5, whereby a viewpoint information reception unit 21, a mask image creation unit 22, and a composite image creation Functions as a unit 23, a masking unit 24, a drawing image creation unit 25, and a display control unit 26. The storage unit 30 includes the external storage device 5 and the like, and functions as a human body image storage unit 31, a clothing image storage unit 32, a mask image storage unit 33, a composite image storage unit 34, and a drawing image storage unit 35.
[0046]
  The human body image storage unit 31 stores in advance a human body image of a human body that is a fitting object such as a mannequin. FIG. 3 is a diagram illustrating an example of the human body image MG stored in the human body image storage unit 31. The human body image storage unit 31 stores a human body image MG as shown in FIG. 3 as image data. The human body image MG is a two-dimensional image created in advance. The human body image storage unit 31 is viewed from each viewpoint having a viewpoint where a line that equally divides the circle centered on the human body at a predetermined angle with respect to the center point and an arc of the circle intersect. The human body image MG is stored as image data. For example, 16 human body images MG viewed from 16 viewpoints obtained by dividing a circle centered on the human body every 22.5 degrees are stored. The human body image MG may be image data obtained by directly photographing a person trying on using a digital camera or the like, for example. Further, image data of the human body image MG may be obtained by taking a photograph with a scanner or the like.
[0047]
  The clothing image storage unit 32 is virtually tried on the image data of the first clothing image virtually tried on the human body image and further on the first clothing image, and virtually on the outermost side of the human body. The image data of the second clothing image to be tried on is stored in advance. The first clothes image is image data related to a plurality of types of first clothes of different types, and the clothes image storage unit 32 stores image data related to a plurality of types of first clothes. Similarly, the second clothing image is image data relating to a plurality of types of second clothing, and the clothing image storage unit 32 stores image data relating to a plurality of types of second clothing.
[0048]
  FIG. 4 is a diagram illustrating an example of the first clothing image TG stored in the clothing image storage unit 32, and FIG. 5 illustrates another first clothing image SG stored in the clothing image storage unit 32. FIG. 6 is a diagram illustrating an example of the second clothing image JK stored in the clothing image storage unit 32. The clothing image storage unit 32 stores first clothing images TG and SG as shown in FIGS. 4 and 5 as image data, and stores a second clothing image JK as shown in FIG. 6 as image data. ing.
[0049]
  The first clothing images TG and SG and the second clothing image JK are two-dimensional images. The clothing image storage unit 32 is viewed from each viewpoint with the point at which the line that equally divides the circle centered on the human body at a predetermined angle with respect to the center point and the arc of the circle intersect. For example, 16 types of image data viewed from 16 viewpoints obtained by dividing a circle centered on the human body every 22.5 degrees are stored for each type. The first clothes and the second clothes are clothes that are virtually tried on the upper body of the human body, for example, and the first clothes are, for example, T-shirts and button shirts, and the second clothes are: For example, a jacket.
[0050]
  The first clothing image TG shown in FIG. 4 is a first clothing image representing a T-shirt, and the first clothing image SG shown in FIG. 5 is a first clothing image representing a sweater. A second clothing image JK shown in FIG. 6 is a second clothing image representing a jacket. The first clothing images TG and SG and the second clothing image JK exclude a person by directly photographing a person wearing clothes using, for example, a digital camera and performing image processing on the photographed image. A clothing image composed only of clothing may be created, and the created clothing image may be used as image data.
[0051]
  In the present embodiment, the human body image, the first clothing image, and the second clothing image are stored as 16 pieces of image data for the same type of clothing image, respectively. For example, twelve image data obtained by dividing 360 degrees around every 30 degrees may be used, and four image data obtained by dividing 360 degrees around every 90 degrees may be used. 36 image data obtained by dividing 360 degrees around every 10 degrees may be used. Furthermore, as the human body image, the first clothing image, and the second clothing image, only one image viewed from a predetermined direction may be used instead of an image viewed from a plurality of viewpoints.
[0052]
  Returning to FIG. 2, the viewpoint information receiving unit 21 receives from which direction of the plurality of viewpoints the virtual fitting state of the clothes on the human body is viewed, and from which viewpoint of the plurality of viewpoints to the human body of the clothes Whether to display a virtual try-on state is accepted as viewpoint information. In the present embodiment, a point where a line that is equally divided into 22.5 degrees with respect to the center point of a circle centered on a human body on which clothes are virtually tried and a circular arc of the circle intersect is defined. Since the human body image, the first clothing image, and the second clothing image viewed from the 16 viewpoints as the viewpoint are prepared, the viewpoint information receiving unit 21 indicates the virtual try-on state of the clothing on the human body. The direction from which the viewpoint is viewed is accepted, and the viewpoint from which one of the 16 viewpoints to display the virtual try-on state of the clothes on the human body is accepted as the viewpoint information. The viewpoint information is input using the mouse or keyboard of the operation unit 10.
[0053]
  The mask image creation unit 22 creates a mask image in which the human body image read from the human body image storage unit 31 and the second clothing image read from the clothing image storage unit 32 are superimposed. Here, the mask image MASK_S applied to the first clothing image is the logic of the overlapping region between the image created by calculating the logical product of the overlapping regions of a plurality of types of second clothing images and the human body image. It is created by calculating the sum and is expressed by the following equation (1).
[0054]
  MASK_S = (JK1∩JK2∩JK3 ...) ∪BODY (1)
  In the above equation (1), MASK_S represents the mask image applied to the first clothing image, JK1, JK2, and JK3 represent the second clothing image, BODY represents the human body image, and ∩ represents the logic. Represents product (AND), and ∪ represents logical sum (OR).
[0055]
  As shown in the above equation (1), the mask image MASK_S is an image that includes all of a plurality of types of second clothing images and includes a human body image. In addition, the mask image MASK_S binarizes an image obtained by superimposing a plurality of types of second clothing images and a human body image into “0” and “1”, and a region to be transmitted is black (“0”) or Set to white (“1”). In the mask image MASK_S in the present embodiment, the area to be transmitted is represented in black, and the other background area is represented in white. That is, the mask image creation unit 22 creates an image created by obtaining a logical sum of an overlap area between an image created by obtaining an overlap area of a plurality of types of second clothing images and a human body image. A black-and-white image with a black background and a white background is created as a mask image MASK_S, and the created mask image MASK_S is stored in the mask image storage unit 33. The mask image storage unit 33 stores the mask image MASK_S created by the mask image creation unit 22.
[0056]
  The composite image creation unit 23 creates a composite image in which the first clothing image read from the clothing image storage unit 32 is superimposed on the human body image read from the human body image storage unit 31. At this time, the composite image creating unit 23 reads out the human body image and the first clothing image based on the viewpoint information received by the viewpoint information receiving unit 21. That is, when displaying the try-on state viewed from the front, an image of the human body viewed from the front and an image of the first clothing viewed from the front are read out, and a composite image is created by superimposing the read out images. . The composite image creation unit 23 creates a composite image by compositing the first clothing image on the human body image. The composite image storage unit 34 stores a composite image obtained by superimposing the human body image created by the composite image creation unit 23 and the first clothing image.
[0057]
  The masking unit 24 reads out the composite image created by the composite image creation unit 23 and stored in the composite image storage unit 34, and also creates a mask created by the mask image creation unit 22 and stored in the mask image storage unit 33. The image is read out, and a masked image is used to mask the synthesized image obtained by superimposing the first clothing image on the human body image. The image masked by the masking unit 24 is stored in the composite image storage unit 34 again.
[0058]
  The drawing image creating unit 25 reads out a composite image of the first clothing image masked by the mask image and the human body image from the composite image storage unit 34 and reads out a second clothing image from the clothing image storage unit 32 and combines it. A drawing image is created by combining the image and the second clothing image, and the created drawing image is stored in the drawing image storage unit 35. The drawing image storage unit 35 stores the drawing image created by the drawing image creation unit 25.
[0059]
  The display control unit 26 controls to output the drawing image stored in the drawing image storage unit 35 to the display unit 40. The display unit 40 includes the display device 6 and displays a drawing image output from the drawing image storage unit 35.
[0060]
  In the present embodiment, the human body image storage unit 31 and the clothing image storage unit 32 correspond to a storage unit, the mask image generation unit 22 corresponds to a mask image generation unit, the masking unit 24 corresponds to a masking unit, and drawing The image creation unit 25 corresponds to a composite image creation unit, and the display control unit 26 and the display unit 40 correspond to a display unit.
[0061]
  FIG. 7 is a flowchart for explaining virtual try-on display processing by the virtual try-on display device in the first embodiment shown in FIG. 8 to 11 are diagrams for explaining virtual try-on display processing in the first embodiment.
[0062]
  In step S <b> 1, the viewpoint information reception unit 21 receives viewpoint information input by the user using the operation unit 10. The viewpoint information is information for displaying a try-on state from a predetermined viewpoint among a plurality of viewpoints. In this embodiment, the center point of a circle whose center is a human body on which clothes are virtually tried on. 16 human body images, the first clothing image, and the second image viewed from each of 16 viewpoints with the point at which the line that equally divides 22.5 degrees and the arc of the circle intersect Are stored in the storage unit 30. Therefore, the viewpoint information receiving unit 21 receives from which of the 16 viewpoints the image viewed is displayed.
[0063]
  In step S <b> 2, the mask image creation unit 22 reads out the human body image based on the viewpoint information from the human body image storage unit 31 and reads out the second clothing image based on the viewpoint information from the clothing image storage unit 32. A region obtained by superimposing a region representing the human body in the human body image read out from the region and a region representing the second clothing out of the second clothing image read out from the clothing image storage unit 32 is blackened. A white and black mask image is created by whitening the region representing the human body image and the region representing the background other than the region representing the second clothing of the second clothing image. In step S <b> 3, the mask image creation unit 22 stores the mask image created in step S <b> 2 in the mask image storage unit 33.
[0064]
  FIG. 8 is a diagram illustrating an example of the mask image MASK_S. As shown in FIG. 8, the mask image MASK_S represents the overlapping region in which the region representing the human body of the human body image MG and the region representing the second clothing of the second clothing image JK are superimposed in black, and the background is white. It is an image represented by. In FIG. 8, an overlapping area where the area representing the human body in the human body image MG and the area representing the second clothes in the second clothing image JK are overlapped is represented by hatching, but is originally represented in black. The Therefore, the outer shape of the mask image MASK_S is formed by the outer shape of the second clothing image JK and the outer shape of the human body image MG.
[0065]
  Returning to FIG. 7, in step S <b> 4, the composite image creation unit 23 reads the human body image based on the viewpoint information from the human body image storage unit 31, and reads the first clothing image based on the viewpoint information from the clothing image storage unit 32. A composite image is created by superimposing the first clothing image read from the clothing image storage unit 32 on the human body image read from the human body image storage unit 31. In step S5, the composite image creation unit 23 stores the created composite image in the composite image storage unit 34 in step S4.
[0066]
  9 is a diagram illustrating an example of a composite image GG1 obtained by combining the first clothing image TG illustrated in FIG. 4 with the human body image MG illustrated in FIG. 3, and FIG. 10 illustrates the human body image MG illustrated in FIG. FIG. 7 is a diagram illustrating an example of a composite image GG2 obtained by combining the first clothing image TG illustrated in FIG. 6 and the second clothing image JK illustrated in FIG. When the first clothing image TG is superimposed on the human body image MG and synthesized, a synthesized image GG1 shown in FIG. 9 is created. Further, when the first clothing image TG and the second clothing image JK are superimposed on the human body image MG and synthesized, a synthesized image GG2 shown in FIG. 10 is created. When the first clothing image TG and the second clothing image JK are superimposed on the human body image MG, the first clothing of the first clothing image is larger than the second clothing of the second clothing image In some cases, a part of the first garment is displayed so as to protrude beyond the second garment. In FIG. 10, the sleeve portion A of the first garment is displayed so as to protrude from the second garment. Accordingly, a mask image is created, and the portion that protrudes is removed by masking the composite image GG1 with the mask image.
[0067]
  Returning to FIG. 7, in step S <b> 6, the masking unit 24 reads the composite image from the composite image storage unit 34, reads the mask image MASK_S from the mask image storage unit 33, and reads the composite image read from the composite image storage unit 34. Is masked using the mask image MASK_S read from the mask image storage unit 33. Since the black region of the mask image MASK_S, that is, the region representing the human body and the second clothing in the mask image MASK_S is transmitted, if the mask image is superimposed on the composite image, the human body and the second body in the composite image are transmitted. Areas other than the area representing the clothes are covered and the first clothes protruding from the second clothes are removed. In step S <b> 7, the masking unit 24 stores the composite image masked in step S <b> 6 in the composite image storage unit 34.
[0068]
  In step S <b> 8, the drawing image creation unit 25 reads the composite image from the composite image storage unit 34, reads the second clothing image from the clothing image storage unit 32, and converts the composite image read from the composite image storage unit 34. A drawing image is created by superimposing and synthesizing the second clothing image read from the clothing image storage unit 32. In step S <b> 9, the drawing image creation unit 25 stores the drawing image created in step S <b> 8 in the drawing image storage unit 35.
[0069]
  FIG. 11 is a diagram illustrating an example of a drawing image BG1 obtained by combining the second clothing image illustrated in FIG. 6 with the combined image obtained by masking the combined image GG1 illustrated in FIG. 9 using the mask image MASK_S illustrated in FIG. As shown in FIG. 11, the drawing image BG1 is a composite image obtained by combining the first clothing image TG and the human body image MG, using a mask image created from the human body image MG and the second clothing image JK. Since it is masked, the outer shape becomes the outer shape of the human body and the second garment, and the first garment is synthesized without protruding from the second garment.
[0070]
  In step S 10, the display control unit 26 reads the drawing image BG 1 from the drawing image storage unit 35 and outputs the drawing image BG 1 read from the drawing image storage unit 35 to the display unit 40. The display unit 40 displays the drawing image BG1 output from the display control unit 26. Therefore, the composite image GG1 shown in FIG. 9 in which the first clothing image TG is superimposed on the human body image MG is used by using the mask image MASK_S shown in FIG. 8 created from the human body image MG and the second clothing image JK. By masking, the sleeve portion A of the first garment that protrudes from the second garment is removed, and the fitting state can be displayed without a sense of incongruity.
[0071]
  In this way, the human body image MG and the second clothing image JK are superimposed on the image in which the first clothing image TG virtually tried on the human body image MG is superimposed on the human body image MG. Masking is performed using the mask image MASK_S, and a composite image obtained by superimposing the masked image and the second clothing image JK is created, and the created composite image is displayed, so that the first clothing image TG is the first clothing image TG. Even if it is larger than the second clothing image JK, the first clothing image TG can be displayed without protruding from the second clothing image JK, and the try-on state virtually tried on can be displayed without a sense of incongruity. .
[0072]
  Also, a mask image MASK_S is created by obtaining the logical sum of the overlapping area of the image created by obtaining the logical product of the overlapping areas of the plurality of types of second clothing images and the human body image MG. A mask image MASK_S is used to mask an image obtained by overlaying the clothing image TG on the human body image MG, and a composite image is created by overlaying the masked image and the first second clothing image JK. The synthesized image is displayed. Therefore, since the first clothing image TG is masked by the mask image MASK_S including all of the plurality of types of second clothing images and including the human body image MG, one of the plurality of types of second clothing images is included. Even if the second clothing image JK is combined with the first clothing image TG and the human body image MG, the first clothing image TG can be displayed without protruding from the second clothing image JK. In addition, since the mask image creation unit 22 creates a mask image that includes all of a plurality of types of second clothing images and also includes a human body image, the created mask image is used for the synthesis of all the second clothing images. Can do.
[0073]
  Furthermore, the point of view is the point where a line that equally divides the circle centered on the human body at a predetermined angle with respect to the center point and the arc of the circle intersect, and each was photographed or created from the same viewpoint. A mask image MASK_S in which the human body image MG and the second clothing image JK are superimposed is created, and the mask image MASK_S is used to mask the image in which the first clothing image TG is superimposed on the human body image MG. Then, a composite image is created by superimposing the masked image and the second image JK, and the created composite image is displayed. Therefore, even when the first clothing image TG is larger than the second clothing image JK, the first clothing image TG can be displayed without protruding from the second clothing image JK, and the first clothing image TG is virtually tried on. The try-on state can be displayed three-dimensionally using a two-dimensional image, and the try-on state seen from a plurality of viewpoints can be confirmed.
[0074]
  (Second Embodiment)
  Next, a virtual try-on display device in the second embodiment will be described. The virtual try-on display device according to the second embodiment realizes a display of a try-on state without further discomfort by accepting correction of an automatically created mask image.
[0075]
  FIG. 12 is a main functional block diagram of the virtual try-on display device shown in FIG. 1 in the second embodiment.
[0076]
  As shown in FIG. 12, the virtual try-on display device functionally includes an operation unit 10, a program execution unit 20, a storage unit 30, and a display unit 40. The program execution unit 20 includes a viewpoint information reception unit 21, a mask image creation unit 22, a composite image creation unit 23, a masking unit 24, a drawing image creation unit 25, a display control unit 26, and a mask image correction reception unit 27. The storage unit 30 includes a human body image storage unit 31, a clothing image storage unit 32, a mask image storage unit 33, a composite image storage unit 34, and a drawing image storage unit 35. Note that the virtual try-on display device in the second embodiment shown in FIG. 12 has substantially the same configuration as the virtual try-on display device shown in FIG. 2, and only the different configuration will be described below.
[0077]
  The mask image correction acceptance unit 27 accepts the correction of the mask image by the operation unit 10 and corrects the mask image created by the mask image creation unit 22 according to the outer shape of the first clothing image. Specifically, a corrected mask image MASK_S ′ is created by adding a shape SS for eliminating the uncomfortable feeling to the mask image MASK_S created in the first embodiment. This can be expressed by the following equation (2).
[0078]
  MASK_S ′ = MASK_S∪SS (2)
  In the above equation (2), MASK_S ′ represents a mask image after correction, MASK_S represents a mask image composed of a human body image and a second clothing image automatically created by the mask image creation unit 22, and SS Represents an image newly added in order to eliminate the uncomfortable feeling of the mask image MASK_S, and ∪ represents a logical sum (OR).
[0079]
  The mask image correction receiving unit 27 stores the corrected mask image in the mask image storage unit 33. In the present embodiment, the mask image correction receiving unit 27 corresponds to a mask image correction receiving unit.
[0080]
  FIG. 13 is a flowchart for explaining virtual try-on display processing by the virtual try-on display device in the second embodiment shown in FIG. 14 to 17 are diagrams for explaining virtual try-on display processing in the second embodiment.
[0081]
  Note that the processing in step S21 and step S22 shown in FIG. 13 is the same as the processing in step S1 and step S2 shown in the flowchart of FIG.
[0082]
  In step S25, the composite image creation unit 23 creates a composite image in which the human body image MG shown in FIG. 3 and the first clothing image SG shown in FIG. 5 are superimposed. 14 is a diagram showing an example of a composite image GG3 obtained by combining the first clothing image SG shown in FIG. 5 with the human body image MG shown in FIG. 3, and FIG. 15 shows the first clothing image SG added to the human body image MG. FIG. 9 is a diagram illustrating an example of a drawing image BG2 obtained by combining the second clothing image JK and masking using the mask image MASK_S illustrated in FIG. 8. When the first clothing image SG is superimposed on the human body image MG and synthesized, a synthesized image GG3 shown in FIG. 14 is created. Further, when the first clothing image SG and the second clothing image JK are superimposed on the human body image MG and combined and masked using the mask image MASK_S created by the mask image creation unit 22, the drawing shown in FIG. An image BG2 is created. When the synthesized image obtained by superimposing the first clothing image SG on the human body image MG is masked using the mask image MASK_S shown in FIG. 6, the wrist of the first clothing image SG is shown in FIG. The cuff portion B is also masked. This is because the region through which the mask image MASK_S is transmitted is composed of a region representing the human body in the human body image and a region representing the second clothing in the second clothing image. As shown in FIG. When the cuff part of the first garment is separated from the wrist and the first garment is up to the wrist, the shape of the cuff part B of the first garment is in close contact with the human body, resulting in an uncomfortable fitting state. . Therefore, the mask image is corrected as follows.
[0083]
  In step S23, the mask image correction receiving unit 27 receives correction of the mask image created in step S22. Here, the user corrects the mask image created by the mask image creation unit 22 according to the outer shape of the first garment using the operation unit 10. FIG. 16 is a diagram illustrating an example of the corrected mask image MASK_S ′. As shown in FIG. 16, in the corrected mask image MASK_S ′, a shape SS for eliminating a sense of incongruity is added to the outer shape of the mask image MASK_S shown in FIG. In FIG. 16, an overlapping region obtained by overlapping the region representing the human body of the human body image MG and the region representing the second clothing of the second clothing image JK is represented by hatching, and the external shape of the mask image MASK_S is uncomfortable. Although the area | region for canceling is represented by the oblique line, originally all are represented by black. In step S <b> 24, the mask image correction receiving unit 27 stores the corrected mask image in the mask image storage unit 33.
[0084]
  Note that the processing from step S25 to step S31 shown in FIG. 13 is the same as the processing from step S4 to step S10 shown in the flowchart of FIG.
[0085]
  FIG. 17 shows an example of a drawing image BG3 obtained by masking a synthesized image obtained by synthesizing the human body image MG and the first clothing image SG using the mask image shown in FIG. 16 and synthesizing the second clothing image JK. FIG. As shown in FIG. 17, the synthesized image obtained by superimposing the first clothing image SG on the human body image MG is masked using the modified mask image MASK_S ′ shown in FIG. 16, and the second image shown in FIG. By synthesizing the clothes image JK, the cuff portion B in the first clothes image SG can be displayed without a sense of incongruity.
[0086]
  In this way, the mask image MASK_S created by the mask image creation unit 22 is modified according to the outer shape of the first clothing image SG, and the composite image created by the composite image creation unit 23 is received as a mask image modification acceptance. Since masking is performed using the mask image MASK_S ′ corrected by the unit 27, the virtually tried-on state can be displayed without a sense of incongruity, and the actually tried-on state can be reproduced realistically. Further, the mask image is corrected by the user's manual work, but is corrected using the automatically created mask image. Therefore, the mask image can be masked in a shorter time than the case where the mask image is manually created by the user. Images can be created.
[0087]
  (Third embodiment)
  Next, a third embodiment will be described. In the third embodiment, the clothing image storage unit 32 stores a two-dimensional third clothing image virtually tried on the second clothing image, and the human body image and the first clothing. The image, the second clothing image, and the third clothing image are combined, and the combined image is displayed.
[0088]
  FIG. 18 is a main functional block diagram of the virtual try-on display device shown in FIG. 1 according to the third embodiment.
[0089]
  As illustrated in FIG. 18, the virtual try-on display device functionally includes an operation unit 10, a program execution unit 20, a storage unit 30, and a display unit 40. The program execution unit 20 includes a viewpoint information reception unit 21, a mask image creation unit 22, a composite image creation unit 23, a masking unit 24, a drawing image creation unit 25, a display control unit 26, and a mask image correction reception unit 27. The storage unit 30 includes a human body image storage unit 31, a clothing image storage unit 32, a mask image storage unit 33, a composite image storage unit 34, and a drawing image storage unit 35. Since the virtual try-on display device in the second embodiment shown in FIG. 18 has almost the same configuration as the virtual try-on display device shown in FIG. 2, only the different configuration will be described below.
[0090]
  The clothing image storage unit 32 includes image data of a first clothing image virtually tried on a human body image, and an image of a second clothing image virtually tried on further above the first clothing image. Data and image data of a third clothes image virtually tried on the second clothes image are stored in advance. The third clothing image is image data relating to a plurality of types of third clothing of different types, and the clothing image storage unit 32 stores image data relating to a plurality of types of third clothing.
[0091]
  The third clothing image is a two-dimensional image. The clothing image storage unit 32 is viewed from each viewpoint with the point at which the line that equally divides the circle centered on the human body at a predetermined angle with respect to the center point and the arc of the circle intersect. For example, 16 types of image data viewed from 16 viewpoints obtained by dividing a circle centered on the human body every 22.5 degrees are stored for each type. The third clothing is, for example, clothing that is virtually tried on the upper body of the human body, and is, for example, a coat.
[0092]
  The mask image creation unit 22 creates a mask image in which the human body image read from the human body image storage unit 31 and the third clothing image read from the clothing image storage unit 32 are superimposed. Here, the mask image MASK_J applied to the second clothing image is the logic of the overlapping region between the image created by calculating the logical product of the overlapping regions of a plurality of types of third clothing images and the human body image. It is created by calculating the sum and is expressed by the following equation (3).
[0093]
  MASK_J = (CT1∩CT2∩CT3 ...) ∪BODY ... (3)
  In the above equation (3), MASK_J represents a mask image applied to the second clothing image, CT1, CT2, and CT3 represent the third clothing image, BODY represents the human body image, and ∩ represents the logic. Represents product (AND), and ∪ represents logical sum (OR).
[0094]
  As shown in the above equation (3), the mask image MASK_J is an image including all of a plurality of types of third clothing images and a human body image. The mask image MASK_J binarizes an image obtained by superimposing a plurality of types of third clothing images and a human body image into “0” and “1”, and black (“0”) Set to white (“1”). In the mask image MASK_J in the present embodiment, the area to be transmitted is represented by black, and the other background is represented by white. That is, the mask image creation unit 22 creates an image created by calculating a logical sum of an overlap area between an image created by calculating an overlap area of a plurality of types of third clothing images and a human body image. A black-and-white image with a black background and a white background is created as a mask image MASK_J, and the created mask image MASK_J is stored in the mask image storage unit 33. The mask image storage unit 33 stores the mask image MASK_J created by the mask image creation unit 22.
[0095]
  The composite image creation unit 23 combines the second clothing image read from the clothing image storage unit 32 with the human body image read from the composite image storage unit 31, the first clothing image, and the mask image MASK_S. Create a composite image superimposed on the composite image. At this time, the composite image creation unit 23 reads the second clothing image based on the viewpoint information received by the viewpoint information reception unit 21. That is, when displaying the try-on state seen from the front, an image obtained by viewing the second clothing from the front is read, and a composite image is created by superimposing the read images. The composite image creation unit 23 creates a composite image by compositing the second clothing image on the composite image. The composite image storage unit 34 stores a composite image obtained by superimposing the second clothing image created by the composite image creation unit 23 and the composite image.
[0096]
  The masking unit 24 creates the composite image created by the composite image creation unit 23 and stored in the composite image storage unit 34, and the mask image created by the mask image creation unit 22 and stored in the mask image storage unit 33. Use to mask. The image masked by the masking unit 24 is stored in the composite image storage unit 34 again.
[0097]
  The drawing image creation unit 25 reads out a composite image of the first clothing image, the second clothing image, and the human body image masked by the mask image from the composite image storage unit 34 and stores the third clothing image in the clothing image storage. A drawing image is created by reading from the unit 32 and synthesizing the synthesized image and the third clothing image, and the created drawing image is stored in the drawing image storage unit 35. The drawing image storage unit 35 stores the drawing image created by the drawing image creation unit 25.
[0098]
  FIG. 19 is a flowchart for explaining virtual try-on display processing by the virtual try-on display device in the third embodiment shown in FIG. Note that the processing up to step S41 and step S47 shown in FIG. 19 is the same as the processing up to step S1 and step S7 shown in the flowchart of FIG.
[0099]
  In step S <b> 48, the mask image creation unit 22 reads out the human body image based on the viewpoint information from the human body image storage unit 31 and reads out the third clothing image based on the viewpoint information from the clothing image storage unit 32. The overlapping region obtained by superimposing the region representing the human body in the human body image read out from the region and the region representing the third clothing out of the third clothing image read out from the clothing image storage unit 32 is black. In addition, a white and black mask image is created by whitening the region representing the human body image and the region representing the background other than the region representing the third clothing of the third clothing image. In step S49, the mask image creation unit 22 stores the mask image created in step S48 in the mask image storage unit 33.
[0100]
  In step S50, the composite image creation unit 23 reads a composite image obtained by combining the human body image, the first clothing image, and the mask image MASK_S from the composite image storage unit 34, and also reads the composite image from the clothing image storage unit 32 based on the viewpoint information. The second clothing image is read out, and the second clothing image read out from the human body image storage unit 31 is superimposed on the composite image read out from the human body image composite image storage unit 34 to create a composite image. In step S51, the composite image creation unit 23 stores the composite image created in step S50 in the composite image storage unit 34.
[0101]
  In step S52, the masking unit 24 reads the composite image from the composite image storage unit 34, reads the mask image MASK_J from the mask image storage unit 33, and reads the composite image read from the composite image storage unit 34 into the mask image storage unit. Masking is performed using the mask image MASK_J read from 33. Since the black region of the mask image MASK_J, that is, the region representing the human body and the third clothing in the mask image MASK_J is transparent, when the mask image is superimposed on the composite image, the human body and the third body in the composite image are transmitted. The area other than the clothes area is covered and the second clothes protruding from the third clothes are removed. In step S53, the masking unit 24 stores the composite image masked in step S52 in the composite image storage unit 34.
[0102]
  In step S <b> 54, the drawing image creation unit 25 reads the composite image from the composite image storage unit 34, reads the third clothing image from the clothing image storage unit 32, and converts the composite image read from the composite image storage unit 34. A drawing image is created by superimposing and synthesizing the third clothing image read from the clothing image storage unit 32. In step S55, the drawing image creation unit 25 stores the drawing image created in step S54 in the drawing image storage unit 35.
[0103]
  In step S <b> 56, the display control unit 26 reads a drawing image from the drawing image storage unit 35 and outputs the drawing image read from the drawing image storage unit 35 to the display unit 40. The display unit 40 displays the drawing image output from the display control unit 26. Therefore, by masking a composite image obtained by superimposing the first clothing image and the second clothing image on the human body image using the mask image created from the human body image and the third clothing image, the third image is obtained. The second clothes protruding from the clothes are removed, and the fitting state can be displayed without a sense of incongruity.
[0104]
  In this way, when the third clothing image CT is virtually tried on the second clothing image JK, it is created by calculating the logical product of the overlapping areas of the plurality of types of third clothing images. A mask image MASK_J is created by calculating the logical sum of the overlapping areas of the image and the human body image MG, and the mask image MASK_J is used to mask the image obtained by overlaying the second clothing image JK on the human body image MG. Then, a composite image is created by superimposing the masked image and the first third clothing image CT, and the created composite image is displayed. Therefore, since the second clothing image JK is masked by the mask image MASK_J including all of the plurality of types of third clothing images and the human body image MG, one of the plurality of types of third clothing images is included. Even if the third clothing image CT is combined with the second clothing image JK and the human body image MG, the second clothing image JK can be displayed without protruding from the third clothing image CT.
[0105]
  In the present embodiment, a human face image may be captured and stored in advance with a digital camera or the like, and pasted on an area corresponding to the mannequin face portion, and used as the human body image MG. That is, the storage unit 30 stores a face image of a person photographed in advance, and the composite image creation unit 23 stores the first clothing images TG and SG and the second clothing image JK read from the storage unit 30. Then, a composite image is created by superimposing the human body image MG read from the storage unit 30 and superimposing the face image read from the storage unit 30 on an area corresponding to the face portion of the human body image MG. In this case, since a composite image is created by superimposing the face image of the person photographed in advance on the face image of the human body image, the virtual try-on state can be confirmed using the face image of the desired person.
[0106]
  In the present embodiment, the human body is used as the object to be tried on. However, the present invention is not particularly limited to this, and may be an animal such as a dog or a cat, or may be an imaginary character such as an animation. There may be.
[0107]
【The invention's effect】
  According to the present invention, a mask image in which a human body image and a second clothing image are superimposed on an image in which a first clothing image virtually tried on a human body image is superimposed on a human body image. Since the drawing image created by superimposing the masked image and the second clothing image is created and the created drawing image is displayed, the first clothing image is more than the second clothing image. Even when the size is large, the first clothing image can be displayed without protruding from the second clothing image, and the virtually tried-on fitting state can be displayed without a sense of incongruity.
[0108]
In addition, since the first clothing image is masked by the mask image including all of the plurality of types of second clothing images and the human body image, the second one of the plurality of types of second clothing images. Even if the clothing image is combined with the first clothing image and the human body image, the first clothing image can be displayed without protruding from the second clothing image.
[Brief description of the drawings]
FIG. 1 is a block diagram showing a configuration of a virtual try-on display device according to a first embodiment of the present invention.
FIG. 2 is a main functional block diagram of the virtual try-on display device shown in FIG. 1 according to the first embodiment.
FIG. 3 is a diagram illustrating an example of a human body image stored in a human body image storage unit.
FIG. 4 is a diagram illustrating an example of a first clothing image stored in a clothing image storage unit.
FIG. 5 is a diagram illustrating an example of another first clothing image stored in a clothing image storage unit.
FIG. 6 is a diagram illustrating an example of a second clothing image stored in a clothing image storage unit.
FIG. 7 is a flowchart for explaining virtual try-on display processing by the virtual try-on display device in the first embodiment shown in FIG. 2;
FIG. 8 is a diagram illustrating an example of a mask image.
9 is a diagram showing an example of a synthesized image obtained by synthesizing the first clothing image shown in FIG. 4 with the human body image shown in FIG. 3;
10 is a diagram illustrating an example of a combined image obtained by combining the first clothing image illustrated in FIG. 4 and the second clothing image illustrated in FIG. 6 with the human body image illustrated in FIG. 3;
11 is a diagram illustrating an example of a drawn image obtained by combining the second clothing image illustrated in FIG. 6 with the combined image obtained by masking the combined image illustrated in FIG. 9 using the mask image illustrated in FIG. 8;
FIG. 12 is a main functional block diagram of the virtual try-on display device shown in FIG. 1 in the second embodiment.
FIG. 13 is a flowchart for explaining virtual try-on display processing by the virtual try-on display device in the second embodiment shown in FIG. 12;
14 is a diagram illustrating an example of a combined image obtained by combining the first clothing image illustrated in FIG. 5 with the human body image illustrated in FIG. 3;
15 is a diagram illustrating an example of a drawn image obtained by synthesizing a first clothing image and a second clothing image with a human body image and performing masking using the mask image illustrated in FIG. 10;
FIG. 16 is a diagram illustrating an example of a corrected mask image.
17 is a diagram showing an example of a drawn image obtained by masking a composite image obtained by combining a human body image and a first clothing image using the mask image shown in FIG.
FIG. 18 is a main functional block diagram of the virtual try-on display device shown in FIG. 1 according to the third embodiment.
FIG. 19 is a flowchart for explaining virtual try-on display processing by the virtual try-on display device in the third embodiment shown in FIG. 18;
FIG. 20 is a diagram illustrating an example of a display screen displayed when a conventional process is performed.
[Explanation of symbols]
  10 Operation part
  20 Program execution part
  21 Viewpoint information reception part
  22 Mask image creation part
  23 Composite image creation unit
  24 Masking part
  25 Drawing image creation part
  26 Display controller
  27 Mask Image Correction Reception Department
  30 storage unit
  31 Human body image storage
  32 Clothes image storage
  33 Mask image storage unit
  34 Composite Image Storage Unit
  35. Drawing image storage unit
  40 display section

Claims (10)

2次元の人体画像に2次元の衣服画像を合成することによって仮想的な試着状態を表示する仮想試着表示装置であって、
前記衣服画像は、前記人体画像の上に仮想的に試着される2次元の第1の衣服画像と、前記第1の衣服画像の上に仮想的に試着される2次元の第2の衣服画像とを含み、
前記人体画像、第1の衣服画像及び第2の衣服服画像を記憶する記憶手段と、
前記記憶手段から読み出された前記人体画像と、前記記憶手段から読み出された第2の衣服画像とを重ね合わせたマスク画像を作成するマスク画像作成手段と、
前記記憶手段から読み出された第1の衣服画像を前記記憶手段から読み出された前記人体画像に重ね合わせた画像に対して、前記マスク画像作成手段によって作成されたマスク画像を用いてマスキングするマスキング手段と、
前記マスキング手段によってマスキングされた画像と、前記記憶手段から読み出された第2の衣服画像とを重ね合わせた描画画像を作成する描画画像作成手段と、
前記描画画像作成手段によって作成された描画画像を表示する画像表示手段とを備え
前記記憶手段は、複数種類の第2の衣服画像を記憶し、
前記マスク画像作成手段は、複数種類の第2の衣服画像の重なり領域の論理積を求めることによって作成された画像と、前記人体画像との重なり領域の論理和を求めることによってマスク画像を作成し、
前記マスキング手段は、前記記憶手段から読み出された第1の衣服画像を前記記憶手段から読み出された前記人体画像に重ね合わせた画像に対して、前記マスク画像作成手段によって作成されたマスク画像を用いてマスキングし、
前記描画画像作成手段は、前記マスキング手段によってマスキングされた画像と、前記記憶手段から読み出された1の第2の衣服画像とを重ね合わせた描画画像を作成し、
前記画像表示手段は、前記描画画像作成手段によって作成された描画画像を表示することを特徴とする仮想試着表示装置。
A virtual try-on display device that displays a virtual try-on state by combining a two-dimensional human body image with a two-dimensional clothing image,
The clothing image includes a two-dimensional first clothing image virtually tried on the human body image and a two-dimensional second clothing image virtually tried on the first clothing image. Including
Storage means for storing the human body image, the first clothing image, and the second clothing image,
Mask image creation means for creating a mask image in which the human body image read from the storage means and the second clothing image read from the storage means are superimposed;
Masking an image obtained by superimposing the first clothing image read from the storage means on the human body image read from the storage means, using the mask image created by the mask image creation means Masking means,
A drawing image creation means for creating a drawing image in which the image masked by the masking means and the second clothing image read from the storage means are superimposed;
Image display means for displaying the drawn image created by the drawn image creating means ,
The storage means stores a plurality of types of second clothing images,
The mask image creating means creates a mask image by obtaining a logical sum of an overlap area between an image created by obtaining a logical product of overlapping areas of a plurality of types of second clothing images and the human body image. ,
The masking means is a mask image created by the mask image creating means for an image obtained by superimposing the first clothing image read from the storage means on the human body image read from the storage means. Mask with
The drawing image creation means creates a drawing image in which the image masked by the masking means and the first second clothing image read from the storage means are superimposed,
The image display means, virtual try display device comprising you to view the rendered image created by the drawing image creating device.
2次元の人体画像に2次元の衣服画像を合成することによって仮想的な試着状態を表示する仮想試着表示装置であって、A virtual try-on display device that displays a virtual try-on state by combining a two-dimensional human body image with a two-dimensional clothing image,
前記衣服画像は、前記人体画像の上に仮想的に試着される2次元の第1の衣服画像と、前記第1の衣服画像の上に仮想的に試着される2次元の第2の衣服画像とを含み、  The clothing image includes a two-dimensional first clothing image virtually tried on the human body image and a two-dimensional second clothing image virtually tried on the first clothing image. Including
前記人体画像、第1の衣服画像及び第2の衣服服画像を記憶する記憶手段と、  Storage means for storing the human body image, the first clothing image and the second clothing image,
前記記憶手段から読み出された前記人体画像と、前記記憶手段から読み出された第2の衣服画像とを重ね合わせたマスク画像を作成するマスク画像作成手段と、  Mask image creation means for creating a mask image in which the human body image read from the storage means and the second clothing image read from the storage means are superimposed;
前記記憶手段から読み出された第1の衣服画像を前記記憶手段から読み出された前記人体画像に重ね合わせた画像に対して、前記マスク画像作成手段によって作成されたマスク画像を用いてマスキングするマスキング手段と、  Masking the first clothing image read from the storage means on the human body image read from the storage means using the mask image created by the mask image creation means Masking means,
前記マスキング手段によってマスキングされた画像と、前記記憶手段から読み出された第2の衣服画像とを重ね合わせた描画画像を作成する描画画像作成手段と、  A drawing image creation means for creating a drawing image in which the image masked by the masking means and the second clothing image read from the storage means are superimposed;
前記描画画像作成手段によって作成された描画画像を表示する画像表示手段とを備え、  Image display means for displaying the drawn image created by the drawn image creating means,
前記衣服画像は、前記第2の衣服画像のさらに上に仮想的に試着される2次元の第3の衣服画像を含み、  The clothes image includes a two-dimensional third clothes image virtually tried on the second clothes image.
前記記憶手段は、複数種類の第3の衣服画像を記憶し、  The storage means stores a plurality of types of third clothes images,
前記マスク画像作成手段は、複数種類の第3の衣服画像の重なり領域の論理積を求めることによって作成された画像と、前記人体画像との重なり領域の論理和を求めることによってマスク画像を作成し、  The mask image creating means creates a mask image by obtaining a logical sum of an overlap area between an image created by calculating an overlap area of a plurality of types of third clothing images and the human body image. ,
前記マスキング手段は、前記記憶手段から読み出された第2の衣服画像を前記記憶手段から読み出された前記人体画像に重ね合わせた画像に対して、前記マスク画像作成手段によって作成されたマスク画像を用いてマスキングし、  The masking means is a mask image created by the mask image creating means for an image obtained by superimposing the second clothing image read from the storage means on the human body image read from the storage means. Mask with
前記描画画像作成手段は、前記マスキング手段によってマスキングされた画像と、前記記憶手段から読み出された第3の衣服画像とを重ね合わせた描画画像を作成し、  The drawing image creating means creates a drawing image in which the image masked by the masking means and the third clothing image read from the storage means are superimposed,
前記画像表示手段は、前記描画画像作成手段によって作成された描画画像を表示することを特徴とする仮想試着表示装置。  The virtual try-on display device, wherein the image display means displays the drawing image created by the drawing image creation means.
前記記憶手段は、人体を中心点とする円の当該中心点を基準とする所定の角度ずつに均等に分割する線と、当該円の円弧とが交わる点を視点とする複数の視点から撮影された複数の前記人体画像、前記第1の衣服画像及び前記第2の衣服画像を記憶しており、The storage means is photographed from a plurality of viewpoints whose viewpoints are points where a line that equally divides the circle centered on the human body at a predetermined angle with respect to the center point and an arc of the circle intersect. A plurality of the human body image, the first clothing image and the second clothing image,
前記マスク画像作成手段は、前記記憶手段から読み出された特定の視点から見た前記人体画像と、前記記憶手段から読み出された前記人体画像と同一の視点から見た第2の衣服画像とを重ね合わせたマスク画像を作成し、  The mask image creating means includes the human body image viewed from a specific viewpoint read from the storage means, and a second clothing image viewed from the same viewpoint as the human body image read from the storage means. Create a mask image with
前記マスキング手段は、前記記憶手段から読み出された前記人体画像と同一の視点から見た第1の衣服画像を、前記記憶手段から読み出された前記人体画像に重ね合わせた画像に対して、前記マスク画像作成手段によって作成されたマスク画像を用いてマスキングし、  The masking means is an image obtained by superimposing the first clothing image viewed from the same viewpoint as the human body image read from the storage means on the human body image read from the storage means. Masking using the mask image created by the mask image creating means,
前記描画画像作成手段は、前記マスキング手段によってマスキングされた画像と、前記記憶手段から読み出された前記人体画像と同一の視点から見た第2の衣服画像とを重ね合わせた描画画像を作成し、  The drawing image creation means creates a drawing image in which the image masked by the masking means and the second clothing image viewed from the same viewpoint as the human body image read from the storage means are superimposed. ,
前記画像表示手段は、前記描画画像作成手段によって作成された描画画像を表示することを特徴とする請求項1又は2記載の仮想試着表示装置。  3. The virtual try-on display device according to claim 1, wherein the image display means displays the drawn image created by the drawn image creating means.
前記マスク画像作成手段によって作成されたマスク画像の前記第1の衣服画像の外形形状に応じた修正を受け付けるマスク画像修正受付手段をさらに備え、A mask image correction receiving means for receiving correction according to the outer shape of the first clothing image of the mask image created by the mask image creating means;
前記マスキング手段は、前記記憶手段から読み出された第1の衣服画像を前記記憶手段から読み出された前記人体画像に重ね合わせた画像に対して、前記マスク画像修正受付手段によって修正されたマスク画像を用いてマスキングすることを特徴とする請求項1又は2記載の仮想試着表示装置。  The masking means is a mask corrected by the mask image correction receiving means with respect to an image obtained by superimposing the first clothing image read from the storage means on the human body image read from the storage means. 3. The virtual try-on display device according to claim 1, wherein masking is performed using an image.
2次元の人体画像に2次元の衣服画像を合成することによって仮想的な試着状態を表示する仮想試着表示方法であって、A virtual fitting display method for displaying a virtual fitting state by combining a two-dimensional human body image with a two-dimensional clothing image,
前記衣服画像は、前記人体画像の上に仮想的に試着される2次元の第1の衣服画像と、前記第1の衣服画像の上に仮想的に試着される2次元の第2の衣服画像とを含み、  The clothing image includes a two-dimensional first clothing image virtually tried on the human body image and a two-dimensional second clothing image virtually tried on the first clothing image. Including
コンピュータが、前記人体画像、第1の衣服画像及び第2の衣服服画像を記憶する記憶手段から読み出された前記人体画像と、前記記憶手段から読み出された第2の衣服画像とを重ね合わせたマスク画像を作成するマスク画像作成ステップと、  The computer superimposes the human body image read from the storage unit storing the human body image, the first clothing image, and the second clothing image, and the second clothing image read from the storage unit. A mask image creating step for creating a combined mask image;
コンピュータが、前記記憶手段から読み出された第1の衣服画像を前記記憶手段から読み出された前記人体画像に重ね合わせた画像に対して、前記マスク画像作成ステップにおいて作成されたマスク画像を用いてマスキングするマスキングステップと、  A computer uses the mask image created in the mask image creation step for an image obtained by superimposing the first clothing image read from the storage means on the human body image read from the storage means. A masking step for masking
コンピュータが、前記マスキングステップにおいてマスキングされた画像と、前記記憶手段から読み出された第2の衣服画像とを重ね合わせた描画画像を作成する描画画像作成ステップと、  A drawing image creating step in which a computer creates a drawing image in which the image masked in the masking step and the second clothing image read out from the storage means are superimposed;
コンピュータが、前記描画画像作成ステップにおいて作成された描画画像を表示する画像表示ステップとを含み、  An image display step of displaying a drawing image created in the drawing image creation step;
前記記憶手段は、複数種類の第2の衣服画像を記憶し、  The storage means stores a plurality of types of second clothing images,
前記マスク画像作成ステップは、複数種類の第2の衣服画像の重なり領域の論理積を求めることによって作成された画像と、前記人体画像との重なり領域の論理和を求めることによってマスク画像を作成し、  The mask image creating step creates a mask image by obtaining a logical sum of an overlap area between an image created by calculating an overlap area of a plurality of types of second clothing images and the human body image. ,
前記マスキングステップは、前記記憶手段から読み出された第1の衣服画像を前記記憶手段から読み出された前記人体画像に重ね合わせた画像に対して、前記マスク画像作成ステップにおいて作成されたマスク画像を用いてマスキングし、  In the masking step, the mask image created in the mask image creating step is applied to an image obtained by superimposing the first clothing image read from the storage means on the human body image read from the storage means. Mask with
前記描画画像作成ステップは、前記マスキングステップにおいてマスキングされた画像と、前記記憶手段から読み出された1の第2の衣服画像とを重ね合わせた描画画像を作成  The drawing image creation step creates a drawing image in which the image masked in the masking step and the first second clothing image read from the storage means are superimposed. し、And
前記画像表示ステップは、前記描画画像作成ステップにおいて作成された描画画像を表示することを特徴とする仮想試着表示方法。  A virtual try-on display method, wherein the image display step displays the drawing image created in the drawing image creation step.
2次元の人体画像に2次元の衣服画像を合成することによって仮想的な試着状態を表示するための仮想試着表示プログラムであって、A virtual fitting display program for displaying a virtual fitting state by combining a two-dimensional clothing image with a two-dimensional human body image,
前記衣服画像は、前記人体画像の上に仮想的に試着される2次元の第1の衣服画像と、前記第1の衣服画像の上に仮想的に試着される2次元の第2の衣服画像とを含み、  The clothing image includes a two-dimensional first clothing image virtually tried on the human body image and a two-dimensional second clothing image virtually tried on the first clothing image. Including
前記人体画像、第1の衣服画像及び第2の衣服服画像を記憶する記憶手段と、  Storage means for storing the human body image, the first clothing image and the second clothing image,
前記記憶手段から読み出された前記人体画像と、前記記憶手段から読み出された第2の衣服画像とを重ね合わせたマスク画像を作成するマスク画像作成手段と、  Mask image creation means for creating a mask image in which the human body image read from the storage means and the second clothing image read from the storage means are superimposed;
前記記憶手段から読み出された第1の衣服画像を前記記憶手段から読み出された前記人体画像に重ね合わせた画像に対して、前記マスク画像作成手段によって作成されたマスク画像を用いてマスキングするマスキング手段と、  Masking the first clothing image read from the storage means on the human body image read from the storage means using the mask image created by the mask image creation means Masking means,
前記マスキング手段によってマスキングされた画像と、前記記憶手段から読み出された第2の衣服画像とを重ね合わせた描画画像を作成する描画画像作成手段と、  A drawing image creation means for creating a drawing image in which the image masked by the masking means and the second clothing image read from the storage means are superimposed;
前記描画画像作成手段によって作成された描画画像を表示する画像表示手段としてコンピュータを機能させ、  Causing the computer to function as image display means for displaying the drawn image created by the drawn image creating means;
前記記憶手段は、複数種類の第2の衣服画像を記憶し、  The storage means stores a plurality of types of second clothing images,
前記マスク画像作成手段は、複数種類の第2の衣服画像の重なり領域の論理積を求めることによって作成された画像と、前記人体画像との重なり領域の論理和を求めることによってマスク画像を作成し、  The mask image creating means creates a mask image by obtaining a logical sum of an overlap area between an image created by calculating an overlap area of a plurality of types of second clothing images and the human body image. ,
前記マスキング手段は、前記記憶手段から読み出された第1の衣服画像を前記記憶手段から読み出された前記人体画像に重ね合わせた画像に対して、前記マスク画像作成手段によって作成されたマスク画像を用いてマスキングし、  The masking means is a mask image created by the mask image creating means on an image obtained by superimposing the first clothing image read from the storage means on the human body image read from the storage means. Mask with
前記描画画像作成手段は、前記マスキング手段によってマスキングされた画像と、前記記憶手段から読み出された1の第2の衣服画像とを重ね合わせた描画画像を作成し、  The drawing image creation means creates a drawing image in which the image masked by the masking means and the first second clothing image read from the storage means are superimposed,
前記画像表示手段は、前記描画画像作成手段によって作成された描画画像を表示することを特徴とする仮想試着表示プログラム。  A virtual try-on display program characterized in that the image display means displays the drawing image created by the drawing image creation means.
2次元の人体画像に2次元の衣服画像を合成することによって仮想的な試着状態を表示するための仮想試着表示プログラムを記録したコンピュータ読み取り可能な記録媒体であって、A computer-readable recording medium recording a virtual fitting display program for displaying a virtual fitting state by combining a two-dimensional clothing image with a two-dimensional human body image,
前記衣服画像は、前記人体画像の上に仮想的に試着される2次元の第1の衣服画像と、前記第1の衣服画像の上に仮想的に試着される2次元の第2の衣服画像とを含み、  The clothing image includes a two-dimensional first clothing image virtually tried on the human body image and a two-dimensional second clothing image virtually tried on the first clothing image. Including
前記人体画像、第1の衣服画像及び第2の衣服服画像を記憶する記憶手段と、  Storage means for storing the human body image, the first clothing image and the second clothing image,
前記記憶手段から読み出された前記人体画像と、前記記憶手段から読み出された第2の衣服画像とを重ね合わせたマスク画像を作成するマスク画像作成手段と、  Mask image creation means for creating a mask image in which the human body image read from the storage means and the second clothing image read from the storage means are superimposed;
前記記憶手段から読み出された第1の衣服画像を前記記憶手段から読み出された前記人体画像に重ね合わせた画像に対して、前記マスク画像作成手段によって作成されたマスク画像を用いてマスキングするマスキング手段と、  Masking the first clothing image read from the storage means on the human body image read from the storage means using the mask image created by the mask image creation means Masking means,
前記マスキング手段によってマスキングされた画像と、前記記憶手段から読み出された第2の衣服画像とを重ね合わせた描画画像を作成する描画画像作成手段と、  A drawing image creation means for creating a drawing image in which the image masked by the masking means and the second clothing image read from the storage means are superimposed;
前記描画画像作成手段によって作成された描画画像を表示する画像表示手段としてコンピュータを機能させ、  Causing the computer to function as image display means for displaying the drawn image created by the drawn image creating means;
前記記憶手段は、複数種類の第2の衣服画像を記憶し、  The storage means stores a plurality of types of second clothing images,
前記マスク画像作成手段は、複数種類の第2の衣服画像の重なり領域の論理積を求めることによって作成された画像と、前記人体画像との重なり領域の論理和を求めることによってマスク画像を作成し、  The mask image creating means creates a mask image by obtaining a logical sum of an overlap area between an image created by calculating an overlap area of a plurality of types of second clothing images and the human body image. ,
前記マスキング手段は、前記記憶手段から読み出された第1の衣服画像を前記記憶手段から読み出された前記人体画像に重ね合わせた画像に対して、前記マスク画像作成手段によって作成されたマスク画像を用いてマスキングし、  The masking means is a mask image created by the mask image creating means on an image obtained by superimposing the first clothing image read from the storage means on the human body image read from the storage means. Mask with
前記描画画像作成手段は、前記マスキング手段によってマスキングされた画像と、前記記憶手段から読み出された1の第2の衣服画像とを重ね合わせた描画画像を作成し、  The drawing image creation means creates a drawing image in which the image masked by the masking means and the first second clothing image read from the storage means are superimposed,
前記画像表示手段は、前記描画画像作成手段によって作成された描画画像を表示することを特徴とする仮想試着表示プログラムを記録したコンピュータ読み取り可能な記録媒体。  The image display means displays a drawing image created by the drawing image creation means, and is a computer-readable recording medium recording a virtual try-on display program.
2次元の人体画像に2次元の衣服画像を合成することによって仮想的な試着状態を表示する仮想試着表示方法であって、A virtual fitting display method for displaying a virtual fitting state by combining a two-dimensional human body image with a two-dimensional clothing image,
前記衣服画像は、前記人体画像の上に仮想的に試着される2次元の第1の衣服画像と、前記第1の衣服画像の上に仮想的に試着される2次元の第2の衣服画像とを含み、  The clothing image includes a two-dimensional first clothing image virtually tried on the human body image and a two-dimensional second clothing image virtually tried on the first clothing image. Including
コンピュータが、前記人体画像、第1の衣服画像及び第2の衣服服画像を記憶する記憶手段から読み出された前記人体画像と、前記記憶手段から読み出された第2の衣服画像とを重ね合わせたマスク画像を作成するマスク画像作成ステップと、  The computer superimposes the human body image read from the storage unit storing the human body image, the first clothing image, and the second clothing image, and the second clothing image read from the storage unit. A mask image creating step for creating a combined mask image;
コンピュータが、前記記憶手段から読み出された第1の衣服画像を前記記憶手段から読み出された前記人体画像に重ね合わせた画像に対して、前記マスク画像作成ステップにおいて作成されたマスク画像を用いてマスキングするマスキングステップと、  A computer uses the mask image created in the mask image creation step for an image obtained by superimposing the first clothing image read from the storage means on the human body image read from the storage means. A masking step for masking
コンピュータが、前記マスキングステップにおいてマスキングされた画像と、前記記憶手段から読み出された第2の衣服画像とを重ね合わせた描画画像を作成する描画画像作成ステップと、  A drawing image creating step in which a computer creates a drawing image in which the image masked in the masking step and the second clothing image read out from the storage means are superimposed;
コンピュータが、前記描画画像作成ステップにおいて作成された描画画像を表示する画像表示ステップとを含み、  An image display step of displaying a drawing image created in the drawing image creation step;
前記衣服画像は、前記第2の衣服画像のさらに上に仮想的に試着される2次元の第3の衣服画像を含み、  The clothes image includes a two-dimensional third clothes image virtually tried on the second clothes image.
前記記憶手段は、複数種類の第3の衣服画像を記憶し、  The storage means stores a plurality of types of third clothes images,
前記マスク画像作成ステップは、複数種類の第3の衣服画像の重なり領域の論理積を求めることによって作成された画像と、前記人体画像との重なり領域の論理和を求めることによってマスク画像を作成し、  The mask image creating step creates a mask image by obtaining a logical sum of an overlap area between an image created by calculating an overlap area of a plurality of types of third clothing images and an image of the human body. ,
前記マスキングステップは、前記記憶手段から読み出された第2の衣服画像を前記記憶手段から読み出された前記人体画像に重ね合わせた画像に対して、前記マスク画像作成ステップにおいて作成されたマスク画像を用いてマスキングし、  In the masking step, the mask image created in the mask image creating step is applied to an image obtained by superimposing the second clothing image read from the storage means on the human body image read from the storage means. Mask with
前記描画画像作成ステップは、前記マスキングステップにおいてマスキングされた画像と、前記記憶手段から読み出された第3の衣服画像とを重ね合わせた描画画像を作成し、  The drawing image creation step creates a drawing image in which the image masked in the masking step and the third clothing image read from the storage means are superimposed,
前記画像表示ステップは、前記描画画像作成ステップにおいて作成された描画画像を表示することを特徴とする仮想試着表示方法。  A virtual try-on display method, wherein the image display step displays the drawing image created in the drawing image creation step.
2次元の人体画像に2次元の衣服画像を合成することによって仮想的な試着状態を表示するための仮想試着表示プログラムであって、A virtual fitting display program for displaying a virtual fitting state by combining a two-dimensional clothing image with a two-dimensional human body image,
前記衣服画像は、前記人体画像の上に仮想的に試着される2次元の第1の衣服画像と、前記第1の衣服画像の上に仮想的に試着される2次元の第2の衣服画像とを含み、  The clothing image includes a two-dimensional first clothing image virtually tried on the human body image and a two-dimensional second clothing image virtually tried on the first clothing image. Including
前記人体画像、第1の衣服画像及び第2の衣服服画像を記憶する記憶手段と、  Storage means for storing the human body image, the first clothing image and the second clothing image,
前記記憶手段から読み出された前記人体画像と、前記記憶手段から読み出された第2の衣服画像とを重ね合わせたマスク画像を作成するマスク画像作成手段と、  Mask image creation means for creating a mask image in which the human body image read from the storage means and the second clothing image read from the storage means are superimposed;
前記記憶手段から読み出された第1の衣服画像を前記記憶手段から読み出された前記人体画像に重ね合わせた画像に対して、前記マスク画像作成手段によって作成されたマスク画像を用いてマスキングするマスキング手段と、  Masking the first clothing image read from the storage means on the human body image read from the storage means using the mask image created by the mask image creation means Masking means,
前記マスキング手段によってマスキングされた画像と、前記記憶手段から読み出された第2の衣服画像とを重ね合わせた描画画像を作成する描画画像作成手段と、  A drawing image creation means for creating a drawing image in which the image masked by the masking means and the second clothing image read from the storage means are superimposed;
前記描画画像作成手段によって作成された描画画像を表示する画像表示手段としてコンピュータを機能させ、  Causing the computer to function as image display means for displaying the drawn image created by the drawn image creating means;
前記衣服画像は、前記第2の衣服画像のさらに上に仮想的に試着される2次元の第3の衣服画像を含み、  The clothes image includes a two-dimensional third clothes image virtually tried on the second clothes image.
前記記憶手段は、複数種類の第3の衣服画像を記憶し、  The storage means stores a plurality of types of third clothes images,
前記マスク画像作成手段は、複数種類の第3の衣服画像の重なり領域の論理積を求めることによって作成された画像と、前記人体画像との重なり領域の論理和を求めることによってマスク画像を作成し、  The mask image creating means creates a mask image by obtaining a logical sum of an overlap area between an image created by calculating an overlap area of a plurality of types of third clothing images and the human body image. ,
前記マスキング手段は、前記記憶手段から読み出された第2の衣服画像を前記記憶手段から読み出された前記人体画像に重ね合わせた画像に対して、前記マスク画像作成手段によって作成されたマスク画像を用いてマスキングし、  The masking means is a mask image created by the mask image creating means for an image obtained by superimposing the second clothing image read from the storage means on the human body image read from the storage means. Mask with
前記描画画像作成手段は、前記マスキング手段によってマスキングされた画像と、前記記憶手段から読み出された第3の衣服画像とを重ね合わせた描画画像を作成し、  The drawing image creating means creates a drawing image in which the image masked by the masking means and the third clothing image read from the storage means are superimposed,
前記画像表示手段は、前記描画画像作成手段によって作成された描画画像を表示することを特徴とする仮想試着表示プログラム。  A virtual try-on display program characterized in that the image display means displays the drawing image created by the drawing image creation means.
2次元の人体画像に2次元の衣服画像を合成することによって仮想的な試着状態を表示するための仮想試着表示プログラムを記録したコンピュータ読み取り可能な記録媒体であって、A computer-readable recording medium recording a virtual fitting display program for displaying a virtual fitting state by combining a two-dimensional clothing image with a two-dimensional human body image,
前記衣服画像は、前記人体画像の上に仮想的に試着される2次元の第1の衣服画像と、前記第1の衣服画像の上に仮想的に試着される2次元の第2の衣服画像とを含み、  The clothing image includes a two-dimensional first clothing image virtually tried on the human body image and a two-dimensional second clothing image virtually tried on the first clothing image. Including
前記人体画像、第1の衣服画像及び第2の衣服服画像を記憶する記憶手段と、  Storage means for storing the human body image, the first clothing image and the second clothing image,
前記記憶手段から読み出された前記人体画像と、前記記憶手段から読み出された第2の衣服画像とを重ね合わせたマスク画像を作成するマスク画像作成手段と、  Mask image creation means for creating a mask image in which the human body image read from the storage means and the second clothing image read from the storage means are superimposed;
前記記憶手段から読み出された第1の衣服画像を前記記憶手段から読み出された前記人体画像に重ね合わせた画像に対して、前記マスク画像作成手段によって作成されたマスク画像を用いてマスキングするマスキング手段と、  Masking the first clothing image read from the storage means on the human body image read from the storage means using the mask image created by the mask image creation means Masking means,
前記マスキング手段によってマスキングされた画像と、前記記憶手段から読み出された第2の衣服画像とを重ね合わせた描画画像を作成する描画画像作成手段と、  A drawing image creation means for creating a drawing image in which the image masked by the masking means and the second clothing image read from the storage means are superimposed;
前記描画画像作成手段によって作成された描画画像を表示する画像表示手段としてコンピュータを機能させ、  Causing the computer to function as image display means for displaying the drawn image created by the drawn image creating means;
前記衣服画像は、前記第2の衣服画像のさらに上に仮想的に試着される2次元の第3の衣服画像を含み、  The clothes image includes a two-dimensional third clothes image virtually tried on the second clothes image.
前記記憶手段は、複数種類の第3の衣服画像を記憶し、  The storage means stores a plurality of types of third clothes images,
前記マスク画像作成手段は、複数種類の第3の衣服画像の重なり領域の論理積を求めることによって作成された画像と、前記人体画像との重なり領域の論理和を求めることによってマスク画像を作成し、  The mask image creating means creates a mask image by obtaining a logical sum of an overlap area between an image created by calculating an overlap area of a plurality of types of third clothing images and the human body image. ,
前記マスキング手段は、前記記憶手段から読み出された第2の衣服画像を前記記憶手段から読み出された前記人体画像に重ね合わせた画像に対して、前記マスク画像作成手段によって作成されたマスク画像を用いてマスキングし、  The masking means is a mask image created by the mask image creating means for an image obtained by superimposing the second clothing image read from the storage means on the human body image read from the storage means. Mask with
前記描画画像作成手段は、前記マスキング手段によってマスキングされた画像と、前記記憶手段から読み出された第3の衣服画像とを重ね合わせた描画画像を作成し、  The drawing image creating means creates a drawing image in which the image masked by the masking means and the third clothing image read from the storage means are superimposed,
前記画像表示手段は、前記描画画像作成手段によって作成された描画画像を表示することを特徴とする仮想試着表示プログラムを記録したコンピュータ読み取り可能な記録媒体。  The image display means displays a drawing image created by the drawing image creation means, and is a computer-readable recording medium recording a virtual try-on display program.
JP2003061447A 2003-03-07 2003-03-07 Virtual try-on display device, virtual try-on display method, virtual try-on display program, and computer-readable recording medium storing the program Expired - Fee Related JP3742394B2 (en)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2003061447A JP3742394B2 (en) 2003-03-07 2003-03-07 Virtual try-on display device, virtual try-on display method, virtual try-on display program, and computer-readable recording medium storing the program
PCT/JP2004/002644 WO2004079652A1 (en) 2003-03-07 2004-03-03 Virtual try-on display apparatus, virtual try-on display method, virtual try-on display program, and computer readable recording medium in which that program has been recorded

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2003061447A JP3742394B2 (en) 2003-03-07 2003-03-07 Virtual try-on display device, virtual try-on display method, virtual try-on display program, and computer-readable recording medium storing the program

Publications (2)

Publication Number Publication Date
JP2004272530A JP2004272530A (en) 2004-09-30
JP3742394B2 true JP3742394B2 (en) 2006-02-01

Family

ID=32958959

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2003061447A Expired - Fee Related JP3742394B2 (en) 2003-03-07 2003-03-07 Virtual try-on display device, virtual try-on display method, virtual try-on display program, and computer-readable recording medium storing the program

Country Status (2)

Country Link
JP (1) JP3742394B2 (en)
WO (1) WO2004079652A1 (en)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112258389A (en) * 2020-12-23 2021-01-22 北京沃东天骏信息技术有限公司 Virtual reloading method and related equipment
US11836833B2 (en) 2019-05-11 2023-12-05 Kabushiki Kaisha Kitemiru Image creation apparatus, method and program, and virtual fitting system

Families Citing this family (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5002795B2 (en) * 2007-02-28 2012-08-15 株式会社カプコン Program, image composition device, and virtual society construction device
JP2011129001A (en) * 2009-12-19 2011-06-30 Cocone Corp Avatar in virtual space and avatar creation system
JP5722603B2 (en) * 2010-12-03 2015-05-20 新日鉄住金ソリューションズ株式会社 Augmented reality presentation device, augmented reality presentation method and program
JP5786463B2 (en) 2011-06-01 2015-09-30 ソニー株式会社 Image processing apparatus, image processing method, and program
CN102982581B (en) * 2011-09-05 2017-04-05 北京三星通信技术研究有限公司 System for virtually trying and method based on image
WO2013086137A1 (en) 2011-12-06 2013-06-13 1-800 Contacts, Inc. Systems and methods for obtaining a pupillary distance measurement using a mobile computing device
US9286715B2 (en) 2012-05-23 2016-03-15 Glasses.Com Inc. Systems and methods for adjusting a virtual try-on
US9483853B2 (en) * 2012-05-23 2016-11-01 Glasses.Com Inc. Systems and methods to display rendered images
US20130314401A1 (en) 2012-05-23 2013-11-28 1-800 Contacts, Inc. Systems and methods for generating a 3-d model of a user for a virtual try-on product
JP6002058B2 (en) * 2013-02-22 2016-10-05 株式会社東芝 Image processing apparatus, method, and program
CN103324860A (en) * 2013-07-08 2013-09-25 刘优然 Intelligent integrated costume designing and fitting system
CN103366401B (en) * 2013-08-05 2016-08-17 上海趣搭网络科技有限公司 Quick display method for multi-level virtual clothes fitting
CN105096246B (en) * 2014-05-08 2019-09-17 腾讯科技(深圳)有限公司 Image composition method and system
JP6352044B2 (en) * 2014-05-09 2018-07-04 セーレン株式会社 Layered image processing apparatus and method
JP2014179135A (en) * 2014-07-01 2014-09-25 Toshiba Corp Image processing system, method and program
JP6262105B2 (en) * 2014-09-04 2018-01-17 株式会社東芝 Image processing apparatus, image processing system, image processing method, and program
CN104408702B (en) * 2014-12-03 2018-11-23 浩云星空信息技术(北京)有限公司 A kind of image processing method and device
US10521429B2 (en) 2015-06-09 2019-12-31 Microsoft Technology Licensing, Llc. Interactive graphical system for estimating body measurements
JP6008025B2 (en) * 2015-07-16 2016-10-19 ソニー株式会社 Image processing apparatus, image processing method, and program
KR102044348B1 (en) * 2017-11-09 2019-11-13 (주)코아시아 Apparatus system for virtual fitting cloth based on augmented reality
JP6631988B1 (en) * 2018-07-02 2020-01-15 株式会社ブルームスキーム Virtual fitting device, virtual fitting method, and virtual fitting program
CN112242007B (en) * 2020-10-12 2023-06-20 新疆爱华盈通信息技术有限公司 Virtual fitting method
JP7094342B2 (en) * 2020-10-22 2022-07-01 株式会社サイバーエージェント Image generation program, image generation device and image generation method

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH09102033A (en) * 1995-08-03 1997-04-15 Sanyo Electric Co Ltd Picture synthesis method
JP2001273410A (en) * 2000-08-28 2001-10-05 Taro Sato System and method for simulating fitting
JP2003263632A (en) * 2002-03-11 2003-09-19 Digital Fashion Ltd Virtual trying-on display device, virtual trying-on display method, virtual trying-on display program and computer-readable recording medium with its program recorded

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11836833B2 (en) 2019-05-11 2023-12-05 Kabushiki Kaisha Kitemiru Image creation apparatus, method and program, and virtual fitting system
CN112258389A (en) * 2020-12-23 2021-01-22 北京沃东天骏信息技术有限公司 Virtual reloading method and related equipment
CN112258389B (en) * 2020-12-23 2021-11-02 北京沃东天骏信息技术有限公司 Virtual reloading method and related equipment

Also Published As

Publication number Publication date
WO2004079652A1 (en) 2004-09-16
JP2004272530A (en) 2004-09-30

Similar Documents

Publication Publication Date Title
JP3742394B2 (en) Virtual try-on display device, virtual try-on display method, virtual try-on display program, and computer-readable recording medium storing the program
JP4950834B2 (en) Image processing apparatus and image processing method
JP6302132B2 (en) Image processing apparatus, image processing system, image processing method, and program
JP5632469B2 (en) Character generation system, character generation method and program
JP3314704B2 (en) Method of synthesizing image showing fitting state and virtual fitting system using the method
JP3804328B2 (en) Image processing apparatus and image processing method
JP2000113217A (en) Making method of 3d face model from starting facial image
JPWO2006057267A1 (en) Face image synthesis method and face image synthesis apparatus
JP2011209887A (en) Method and program for creating avatar, and network service system
JP2005216131A (en) Makeup simulation apparatus, method and program
WO2015167039A1 (en) Apparatus and method for generating virtual clothes for augmented reality-based virtual fitting
US10249100B2 (en) Method and system for progressive drape update on avatar morph for virtual fitting
JP2003263632A (en) Virtual trying-on display device, virtual trying-on display method, virtual trying-on display program and computer-readable recording medium with its program recorded
JP4189339B2 (en) Three-dimensional model generation method, generation apparatus, program, and recording medium
JPH09102033A (en) Picture synthesis method
JP2012120080A (en) Stereoscopic photography apparatus
JP2007102478A (en) Image processor, image processing method, and semiconductor integrated circuit
JPH11328443A (en) System and method for generating three-dimensional panorama image and recording media therefor
JP2013084171A (en) Try-on image creation system and clothes image data
JP6545847B2 (en) Image processing apparatus, image processing method and program
CN113011935A (en) Intelligent fitting method and device, electronic equipment and storage medium
US20240046551A1 (en) Generating geometry and texture for volumetric video from 2d images with a limited viewpoint
JP2002056405A (en) Texture mapping processor
CN114782299A (en) Image synthesis method, device, equipment and storage medium
JPH08272849A (en) Dress design display device

Legal Events

Date Code Title Description
A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20050802

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20050908

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20051018

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20051110

R150 Certificate of patent or registration of utility model

Ref document number: 3742394

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20091118

Year of fee payment: 4

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20091118

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20101118

Year of fee payment: 5

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20111118

Year of fee payment: 6

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20121118

Year of fee payment: 7

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

S531 Written request for registration of change of domicile

Free format text: JAPANESE INTERMEDIATE CODE: R313531

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20121118

Year of fee payment: 7

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20121118

Year of fee payment: 7

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20131118

Year of fee payment: 8

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees