JP2003085411A - 画像入出力装置 - Google Patents

Abstract

(57)【要約】 【課題】 衣服の購入希望者等が、衣服を着用すること
なく、容易にコーディネイトイメージを認識することの
できる画像入出力装置を提供すること。 【解決手段】 予め衣服の撮影等を行うことによって、
衣服に関する第１の衣服画像データを画像メモリ９に記
憶しておく。ユーザが衣服の販売店等において購入した
と思う衣服があった場合等にその衣服を撮影することに
よって第２の衣服画像データを生成する。データ処理部
２０においては、第１の衣服画像データの人体における
着用部位と、第２の衣服画像データの人体における着用
部位とに応じて、第１の衣服画像データと第２衣服画像
データとの合成処理を行ってフィッティング画像データ
が生成されて、その合成処理の結果が表示部４に表示さ
れる。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】この発明は、撮影して得られ
る画像を、他の画像と合成して表示する画像入出力装置
に関する。

【０００２】

【従来の技術】従来、衣服等の販売店等に設置される装
置として、仮想的に衣服のフィッティングイメージを表
示する装置、すなわち衣服の購入希望者が自分の体型に
関する情報を入力して、その体型に応じた人体モデルを
生成し、その人体モデルに衣服の画像を合成して表示す
ることによって、購入希望者が購入を希望する衣服を着
用した状態を視認することができる装置が知られてい
る。

【０００３】

【発明が解決しようとする課題】しかしながら、従来の
装置は、購入を希望する衣服が購入希望者の体型にフィ
ットするか否かを示すことを目的とする装置であり、購
入希望者自身が保有している他の衣服と着用した場合
に、どのような着用イメージになるのかということは表
示することができない。

【０００４】一般に、衣服の購入希望者が店舗で販売さ
れる衣服を購入する場合、その人が現在保有している他
の衣服に合うかどうか、すなわち自身の感覚に適したコ
ーディネイトを行うことができるか否か等を考えて購入
する場合が多い。そのため、入店時に購入希望者がコー
ディネイトの対象とする衣服を着用していない場合に
は、コーディネイト対象となる衣服に対して購入対象と
なる衣服を実際に合わせてみることができず、適したコ
ーディネイトを行うことができるか否かは曖昧な状態と
なる。

【０００５】したがって、衣服を購入した場合、購入希
望者が想像したコーディネイトイメージと実際のコーデ
ィネイトイメージとが異なり、購入したことを後悔する
ことがある。また、衣服を購入しなかった場合にも帰宅
後にコーディネイト対象の衣服を確認して、店舗内で想
像したコーディネイトイメージが適切であったことを知
り、購入しなかったことを後悔することもある。

【０００６】また、上述した従来の装置は、購入希望者
が店舗側の装置に自身の体型に関する情報を入力する必
要があるが、購入希望者が管理できない装置に対して自
身の体型に関する情報を入力することに抵抗感を感じる
人は少なくない。

【０００７】そこで、この発明は、上記課題に鑑みてな
されたものであって、衣服の購入希望者等が容易にコー
ディネイトイメージを認識することのできる画像入出力
装置を提供することを目的とする。

【０００８】

【課題を解決するための手段】上記目的を達成するため
に、請求項１に記載の発明は、画像入出力装置であっ
て、衣服に関する第１の衣服画像データを記憶する記憶
手段と、衣服を撮影することによって第２の衣服画像デ
ータを生成する撮影手段と、前記第１の衣服画像データ
の人体における着用部位と、前記第２の衣服画像データ
の人体における着用部位とに応じて、前記第１の衣服画
像データと前記第２衣服画像データとの合成処理を行っ
てフィッティング画像データを生成する合成処理手段
と、前記フィッティング画像データに基づいて前記合成
処理の結果を表示する表示手段と、を備えている。

【０００９】請求項２に記載の発明は、請求項１に記載
の画像入出力装置において、人体各部の計測データを入
力し、前記計測データに基づいて人体モデルを生成する
モデル生成手段をさらに備え、前記合成処理手段が、前
記人体モデルに対して前記第１の衣服画像データと前記
第２の衣服画像データとをフィッティングさせることで
前記合成処理を行うことを特徴としている。

【００１０】請求項３に記載の発明は、請求項２に記載
の画像入出力装置において、前記合成処理手段が、前記
撮影手段によって撮影された顔画像データが存在する場
合、前記人体モデルに対して前記顔画像データをフィッ
ティングさせることを特徴としている。

【００１１】請求項４に記載の発明は、請求項１乃至３
のいずれかに記載の画像入出力装置において、前記撮影
手段によって衣服と同時に大きさの既知な基準物体を撮
影した際に、前記撮影手段から得られる画像データにお
ける前記基準物体の画像成分に基づいて、前記第２の衣
服画像データにおける衣服のサイズを検出するサイズ検
出手段をさらに備え、前記合成処理手段が、前記サイズ
に応じて前記第２の衣服画像データの拡大又は縮小処理
を行って、前記合成処理を行うことを特徴としている。

【００１２】請求項５に記載の発明は、請求項１乃至４
のいずれかに記載の画像入出力装置において、前記第１
の衣服画像データ及び前記第２の衣服画像データが、そ
れぞれの衣服についての３次元データであり、前記合成
処理手段によって得られる前記フィッティング画像デー
タも３次元データとして生成され、前記表示手段が、前
記フィッティング画像データに基づいて前記合成処理の
結果を表示することを特徴としている。

【００１３】

【発明の実施の形態】以下、この発明の実施の形態につ
いて図面を参照しつつ詳細に説明する。ただし、以下の
実施の形態では、この発明にかかる画像入出力装置が主
としてデジタルカメラで構成される例について説明す
る。

【００１４】＜１．第１の実施の形態＞図１及び図２
は、第１の実施の形態におけるデジタルカメラ１を示す
図である。まず、図１に示すようにデジタルカメラ１の
上面側にはユーザが撮影指示を入力するレリーズボタン
２が設けられ、また正面側には被写体像をカメラ内部に
導くための撮影レンズ３が設けられている。また、図２
に示すようにデジタルカメラ１の背面側には、ユーザに
対して画像等の情報を表示するための表示部４と、ユー
ザがデジタルカメラ１に対してデータ入力を行ったり、
動作モードの切り換え等を行うためのデータ入力ボタン
５とが設けられている。

【００１５】次に、図３は第１の実施の形態におけるデ
ジタルカメラ１の内部構成を示すブロック図である。図
３に示すようにデジタルカメラ１の内部機構として、Ｃ
ＣＤ撮像素子１１、バッファメモリ１２、標準人体モデ
ルデータ記憶部１３、データ処理部２０、及び、画像メ
モリ９を備えている。

【００１６】ＣＣＤ撮像素子１１は撮影レンズ３を介し
て入射する被写体像を光電変換して画像データを生成す
るものであり、ＣＣＤ撮像素子１１で生成された画像デ
ータはバッファメモリ１２に出力されて一時的に保持さ
れる。

【００１７】データ処理部２０はＣＰＵが所定のプログ
ラムを実行することによって実現される処理部であり、
バッファメモリ１２に格納されている画像データを入力
し、その画像データから衣服に関する画像成分を抽出し
て衣服画像データを生成する衣服成分抽出部４１、その
衣服画像データに対してカラー調整を行うカラー調整部
４２、衣服画像データにおける衣服のサイズを特定して
衣服に関する衣服属性データを生成するサイズ特定部４
３、衣服画像データと衣服属性データとを対応づけて画
像メモリ９に記録する記録処理部５０、デジタルカメラ
１のユーザに適合した人体モデルデータを生成して画像
メモリ９に保存する人体モデル生成部３０、バッファメ
モリ１２に格納されている画像データからユーザ自身等
の顔画像成分を抽出する顔画像抽出部３１、人体モデル
データの顔部分に対して顔画像を合成する顔画像合成部
３２、及び、画像メモリ９に格納されている衣服画像デ
ータと、サイズ特定部４３から入力する衣服画像データ
とを人体モデルデータに合成する合成処理部６０として
の機能を実現する。

【００１８】このデジタルカメラ１は、デジタルカメラ
１のユーザが在宅時等に自身の保有する衣服を撮影する
ことによってユーザの保有する衣服画像データを予め登
録しておくことができるように構成されるとともに、ユ
ーザの体型に関する計測データをユーザがデータ入力ボ
タン５より入力することによってユーザの体型に合致し
た人体モデルデータを予め生成しておくように構成され
る。そして、ユーザが衣服の販売店に立ち寄った際に、
デジタルカメラ１を用いて購入希望の衣服を撮影すれ
ば、ユーザ自身が保有している衣服画像と、購入希望の
衣服画像とがユーザの体型に適合した人体モデルにフィ
ッティング（合成）され、その結果生成されるフィッテ
ィング画像が表示部４に表示されるように構成される。

【００１９】このためデジタルカメラ１における動作モ
ードとしては、通常の被写体を撮影して画像メモリ９に
記録する一般的な通常撮影モードの他に、ユーザの保有
する衣服画像データを登録する登録モードと、ユーザの
体型に適合した人体モデルを生成する人体モデル生成モ
ードと、衣服等の販売店において衣服を撮影した際にユ
ーザ自身が保有する衣服画像とのフィッティング画像を
生成する仮想フィッティングモードとが存在する。

【００２０】まず、登録モードについて説明する。登録
モード時には、データ処理部２０において衣服成分抽出
部４１とカラー調整部４２とサイズ特定部４３と記録処
理部５０とが機能する。そして、ユーザ自身が保有して
いる衣服を撮影した場合に、その撮影画像のうちから衣
服画像が抽出されて衣服画像データが生成されるととも
に、その衣服に関する衣服属性データが生成され、それ
らが対応づけられて画像メモリ９に記録される。

【００２１】衣服画像の抽出としては、例えば特定色を
有する背景の前に衣服を設置して撮影を行い、その撮影
画像から特定色の背景部分を除去することによって行う
ことができるが、他の画像処理によって衣服画像を抽出
するようにしてもよい。

【００２２】また、ユーザは衣服を撮影する際の環境光
の条件（例えば、太陽光下での撮影、蛍光灯下での撮
影、又は白熱灯下での撮影等）を選択入力し、その入力
された条件に応じてカラー調整部４２が衣服画像のカラ
ー調整を行うように構成される。このカラー調整部４２
の処理により、衣服画像を登録する際の環境光の影響に
よって衣服画像の色の調子が実際の色調子と異なる状態
に登録されることを防止することができる。

【００２３】サイズ特定部４３が衣服属性データを生成
する際には、例えばユーザがその衣服に関する情報をデ
ータ入力ボタン５より入力するように構成してもよい
し、またユーザが衣服を撮影する際にその衣服の近くに
予めサイズの既知な基準物体を設置して衣服と同時に基
準物体を撮影し、サイズ特定部４３が撮影画像中におけ
る基準物体像のサイズを判別することによって衣服画像
における衣服のサイズを検出するように構成してもよ
い。ユーザが衣服に関する情報を手入力する場合には、
サイズ特定部４３において複雑な処理を行う必要がない
のでデータ処理部２０の構成を簡単に構成することが可
能になるというメリットがある一方、サイズ特定部４３
が基準物体像に基づいて自動で衣服のサイズを検出する
場合には、ユーザの走査負担を軽減することができると
いうメリットがある。

【００２４】ここで、登録モード時における処理手順の
詳細について説明する。図４は登録モード時における処
理手順（衣服画像データの登録処理）を示すフローチャ
ートである。

【００２５】図４に示すように登録モード時には、ユー
ザが自身で保有する衣服を所定の状態に設置し（ステッ
プＳ１０１）、その衣服をデジタルカメラ１を用いて撮
影する（ステップＳ１０２）。１着の衣服の撮影が終了
すると、データ処理部２０において衣服成分抽出部４１
が機能し、衣服成分の抽出処理が行われる（ステップＳ
１０３）。

【００２６】その後、表示部４において、光源の種類、
すなわちユーザが衣服を撮影した際の環境光の条件につ
いての入力をユーザに促すための画面表示が行われ、ユ
ーザは表示部４における画面表示に従って光源の種類を
選択して入力する（ステップＳ１０４）。ユーザによっ
て光源の種類の入力が行われると、データ処理部２０に
おいてはカラー調整部４２が機能し、入力された光源の
種類に応じて衣服画像データに対する色の調整処理が行
われる（ステップＳ１０５）。

【００２７】その後、表示部４において、ステップＳ１
０２において撮影した衣服の種類（例えば、「ズボン」
や「シャツ」等）及びサイズについての入力をユーザに
促すための表示が行われ、ユーザは表示部４における画
面表示に従って、衣服の種類及びサイズを選択して入力
する（ステップＳ１０６，Ｓ１０７）。サイズ特定部４
３はこれらの情報に基づいて衣服属性データを生成する
（ステップＳ１０８）。なお、衣服のサイズについては
サイズ特定部４３が撮影された画像データから自動認識
するように構成される場合は、ステップＳ１０７におい
てサイズ特定処理が行われることになる。

【００２８】そして、データ処理部２０においては衣服
画像データと衣服属性データとを対応づける処理が行わ
れる（ステップＳ１０９）。図５は衣服画像データＣＤ
と衣服属性データＩＤとの関係を示す図である。衣服属
性データＩＤは、着用部位情報ＩＤ１とサイズ情報ＩＤ
２とを有するデータである。着用部位情報ＩＤ１とは、
人体における衣服の着用部位を示す情報であり、ステッ
プＳ１０６で入力される衣服の種類に基づいて特定され
る。例えば、衣服の種類がズボンである場合には、着用
部位は下半身ということなる一方、衣服の種類がシャツ
である場合には、着用部位は上半身ということになる。
また、サイズ情報ＩＤ２は、ステップＳ１０７において
入力された衣服のサイズに関する情報、又は自動認識さ
れたサイズ情報である。

【００２９】そしてステップＳ１０３で生成される衣服
画像データＣＤに対して、ステップＳ１０８で生成され
る衣服属性データを対応づけることにより、衣服画像デ
ータＣＤが示す衣服画像が人体モデルのどのような部位
に着用され、かつ、どのようなサイズであるかを特定す
ることが可能になるのである。

【００３０】その後、データ処理部２０において記録処
理部５０が機能し、図５に示す衣服画像データＣＤと、
それに対応付けられた衣服属性データとを画像メモリ９
に記憶させる記憶処理が行われる（ステップＳ１１
０）。この処理によってユーザが自身で保有している衣
服の衣服画像データがデジタルカメラ１に登録されるこ
とになる。

【００３１】そして次に撮影する衣服がある場合には、
ステップＳ１０１からの手順を繰り返すことにより（ス
テップＳ１１１）、複数枚の衣服について登録処理を行
うことになる。一方、次に撮影する衣服がない場合に
は、登録モード時における処理を終了する。したがっ
て、ユーザが複数の衣服を保有している場合には、撮影
動作は複数回行われ、各衣服ごとに衣服画像データが生
成されて、衣服属性データとともに画像メモリ９に記録
されることになる。

【００３２】次に、人体モデル生成モードについて説明
する。人体モデル生成モード時には、データ処理部２０
において人体モデル生成部３０と顔画像抽出部３１と顔
画像合成部３２とが機能する（図３参照）。そしてユー
ザが自信の体型に関する情報をデータ入力ボタン５より
入力すると、人体モデル生成部３０は標準人体モデルデ
ータ記憶部１３から標準的な体型に設定された標準人体
モデルデータを読み出し、この標準人体モデルデータの
各部の値をユーザが入力した情報に基づいて変換するこ
とにより、ユーザの体型に適合した人体モデルデータを
生成する。

【００３３】また、人体モデル生成モード時には、ユー
ザはデジタルカメラ１によって自身の顔を撮影し、顔画
像抽出部３１がその撮影画像から顔画像を抽出する。そ
して顔画像合成部３２が機能して、ユーザ自身の顔画像
を人体モデルにおける顔部分に合成する。この結果、顔
部分にユーザの顔画像が張り付けられた人体モデルデー
タが生成されることになり、その人体モデルデータは画
像メモリ９に格納保存される。

【００３４】なお、ユーザの顔画像を人体モデルに合成
するか否かは任意的な処理であり、ユーザが人体モデル
データに対して自身の顔画像を張り付けることを希望し
ない場合であって、ユーザが自分の顔を撮影しなかった
場合には、顔画像の合成処理は行われず、人体モデル生
成部３０において生成された人体モデルデータがそのま
ま画像メモリ９に格納保存されるように構成される。

【００３５】ここで、人体モデル生成モード時における
処理手順の詳細について説明する。図６は人体モデル生
成モード時における処理手順（人体モデルの生成処理）
を示すフローチャートである。

【００３６】図６に示すように人体モデル生成モード時
には、まず、データ処理部２０において人体モデル生成
部３０が機能し、標準人体モデルデータ記憶部１３に格
納されている標準人体モデルデータが読み出される（ス
テップＳ２０１）。そして表示部４において、ユーザ自
身の人体各部計測データの入力を、ユーザに促すための
表示が行われる。ユーザは表示部４における画面表示に
従って自身の各部についての計測データを入力する（ス
テップＳ２０２）。ユーザによって計測データの入力が
行われると、人体モデル生成部３０は、計測データに基
づいて標準人体モデルデータの変換処理を行う（ステッ
プＳ２０３）。

【００３７】次に、ユーザによる顔画像の撮影が行われ
る（ステップＳ２０４）。ユーザの顔画像が撮影される
と、その撮影画像のうちから顔画像が抽出され、計測デ
ータに基づいて変換された人体モデルの顔部分に顔画像
が合成処理される（ステップＳ２０５）。そして最終的
に生成される人体モデルデータが画像メモリ９に記録さ
れることにより（ステップＳ２０６）、人体モデル生成
モード時における処理を終了する。

【００３８】なお、顔画像の合成処理を行わない場合に
は、ステップＳ２０４及びＳ２０５の処理は行われな
い。

【００３９】次に、仮想フィッティングモードについて
説明する。仮想フィッティングモード時には、データ処
理部２０において衣服成分抽出部４１とカラー調整部４
２とサイズ特定部４３と合成処理部６０とが機能する。
ユーザが衣服の店舗等に立ち寄った際に購入を希望する
衣服が自身の保有する衣服に合うかどうかを確認したく
なった場合に、デジタルカメラ１の動作モードを仮想フ
ィッティングモードに設定する。そして、購入を希望す
る衣服を撮影する。撮影された画像データはバッファメ
モリ１２に格納され、衣服成分抽出部４１がその画像デ
ータを取得して撮影画像のうちから衣服画像を抽出す
る。また、購入を希望する衣服に関する衣服属性データ
が生成され、それらが対応づけられて合成処理部６０に
出力される。

【００４０】仮想フィッティングモード時における衣服
画像の抽出についても、登録モード時と同様に、例えば
特定色を有する背景の前に衣服を設置して撮影を行い、
その撮影画像から特定色の背景部分を除去することによ
って行うことができる。ただし、特定色の背景部分を除
去することによって衣服画像を抽出する場合には、店舗
内等に特定色の背景板等が用意されていることが好まし
い。なお、他の画像処理によって衣服画像を抽出するよ
うにしてもよい。

【００４１】また、ユーザは店舗内の環境光の条件を選
択入力し、その入力された条件に応じてカラー調整部４
２が衣服成分抽出部４１で生成される衣服画像データの
カラー調整を行うように構成される。仮想フィッティン
グモード時におけるカラー調整部４２の処理により、店
舗内で衣服を撮影した際の環境光の影響によって衣服画
像の色の調子が実際の色調子と異なる状態になることを
防止することができる。

【００４２】サイズ特定部４３が衣服属性データを生成
する際には、例えばユーザがその衣服に関する情報をデ
ータ入力ボタン５より入力するように構成してもよい
し、またユーザが衣服を撮影する際にその衣服の近くに
予めサイズの既知な基準物体（例えばマネキン人形等）
を設置して衣服と同時に基準物体を撮影し、サイズ特定
部４３が撮影画像中における基準物体像のサイズを判別
することによって衣服画像における衣服のサイズを検出
するように構成してもよい。ユーザが衣服に関する情報
を手入力する場合には、サイズ特定部４３において複雑
な処理を行う必要がないのでデータ処理部２０の構成を
簡単に構成することが可能になるというメリットがある
一方、サイズ特定部４３が基準物体像に基づいて自動で
衣服のサイズを検出する場合には、ユーザの走査負担を
軽減することができるというメリットがある。

【００４３】そして、合成処理部６０が機能すると、ま
ず、表示部４に対して画像メモリ９に登録されている衣
服画像データの一覧表示を行い、ユーザに対して登録さ
れた衣服画像データのうちからフィッティング対象とな
る衣服画像データの選択を促す。これに伴い、ユーザは
画像メモリ９に登録された複数の衣服画像のうちから仮
想フィッティング処理を希望する衣服画像の選択し、デ
ータ入力ボタン５よりその衣服画像を指定するための入
力操作を行う。

【００４４】合成処理部６０は、ユーザによって指定さ
れた衣服画像データと人体モデルデータとを画像メモリ
９から読み出し、人体モデルデータに対して指定された
衣服画像データと購入対象の衣服画像データとを合成す
る。このとき、合成処理部６０は各衣服画像データに対
応づけられる衣服属性データに基づいて、各衣服画像が
人体モデルに対してどのような部位に着用されるかを判
定し、その判定された部位に各衣服画像を合成する。

【００４５】また、合成処理部６０は各衣服画像に対応
づけられた衣服属性データを取得し、その衣服属性デー
タに基づいて各衣服画像のサイズに応じた衣服画像の拡
大処理又は縮小処理を行う。そして人体モデルにおける
サイズの基準に適合したサイズに各衣服画像を調整した
上で、各衣服画像を人体モデルに合成する処理を行い、
各衣服画像が人体モデルにフィッティングされたフィッ
ティング画像を生成する。

【００４６】合成処理部６０は衣服画像を人体モデルに
合成させて得られるフィッティング画像データを表示部
４に与え、ユーザに対してフィッティング画像を表示す
る。この結果、ユーザは、自身が保有する衣服であって
コーディネイト対象とする衣服をその時点で着用してい
ない場合でも、購入対象の衣服を着用した場合にどのよ
うな姿態になるかを容易に把握することが可能になる。

【００４７】ここで、仮想フィッティングモード時にお
ける処理手順の詳細について説明する。図７及び図８は
仮想フィッティングモード時における処理手順（店舗内
での仮想フィッティング処理）を示すフローチャートで
ある。ただし、図７のフローチャートにおいてはサイズ
特定部４３が衣服のサイズを自動検知する場合を例示し
ている。

【００４８】図７に示すように仮想フィッティングモー
ド時には、基準物体とともに購入対象の衣服を設置し
（ステップＳ３０１）、その衣服をデジタルカメラ１を
用いて撮影する（ステップＳ３０２）。１着の衣服の撮
影が終了すると、データ処理部２０において衣服成分抽
出部４１が機能し、基準物体の画像成分と衣服の画像成
分との抽出処理が行われる（ステップＳ３０３）。基準
物体の画像成分はサイズ特定部４３に与えられ、基準物
体の画像成分に基づいて衣服画像データにおける衣服の
サイズが検出される（ステップＳ３０４）。

【００４９】その後、表示部４において、光源の種類に
ついての入力をユーザに促すための画面表示が行われ、
ユーザは表示部４における画面表示に従って光源の種類
を選択して入力する（ステップＳ３０５）。ユーザによ
って光源の種類の入力が行われると、データ処理部２０
においてはカラー調整部４２が機能し、入力された光源
の種類に応じて購入対象の衣服画像データに対する色の
調整処理が行われる（ステップＳ３０６）。これによ
り、例えば店舗内の特殊な照明効果によって衣服の色の
調子が実際のものと異なって見えている場合でも、衣服
画像データにおける色の状態を実際の色調子に適合させ
ることが可能になる。

【００５０】その後、表示部４において、衣服の種類に
ついての入力をユーザに促すための画面表示が行われ、
ユーザは表示部４における画面表示に従って、衣服の種
類を選択して入力する（ステップＳ３０７）。サイズ特
定部４３は、入力された衣服の種類、及び、ステップＳ
３０４で検出した衣服のサイズ、に関する情報に基づい
て衣服属性データを生成する（ステップＳ３０８）。

【００５１】そして合成処理部６０が機能し、撮影され
た購入対象の衣服画像と、予め登録されていた衣服画像
とをユーザに適合した人体モデルに合成するフィッティ
ング処理が行われる（ステップＳ３０９）。

【００５２】図８はフィッティング処理（ステップＳ３
０９）における処理手順の詳細を示すフローチャートで
ある。

【００５３】合成処理部６０は、表示部４に対して画像
メモリ９に登録されている衣服画像データの一覧表示を
行い、ユーザに対して登録された衣服画像データのうち
からフィッティング対象となる衣服画像データの選択を
促す。これにより、ユーザは画像メモリ９に登録された
複数の衣服画像のうちから仮想フィッティング処理を希
望する衣服画像の選択・入力を行う（ステップＳ３２
１）。すると、合成処理部６０は、画像メモリ９から選
択された衣服画像データとそれに関連づけられた衣服属
性データを読み出すとともに、人体モデルデータを読み
出す（ステップＳ３２２）。

【００５４】そして、合成処理部６０は、選択された衣
服画像データと、店舗内での撮影によって得られた購入
対象の衣服に関する衣服画像データとを、衣服属性デー
タに基づいて人体モデルデータにフィッティングさせる
（ステップＳ３２３）。このとき、各衣服のサイズに応
じて衣服画像データは拡大又は縮小処理される。そして
フィッティング処理によってフィッティング画像データ
が生成される。

【００５５】図９は合成処理の概念を示す図である。図
９に示すように合成処理部６０は、予め登録されていた
衣服画像データＣＤ１と、店舗内で撮影された購入対象
の衣服に関する衣服画像データＣＤ２と、ユーザの体型
に適合したモデルである人体モデルデータＭＤとを取得
すると、衣服属性データに基づいて合成処理を行い、フ
ィッティング画像データＦＤを生成する。

【００５６】そして合成処理部６０は、合成処理によっ
て生成されるフィッティング画像データを表示部４に与
えることにより、フィッティング画像を表示する（ステ
ップＳ３２４）。これにより、ユーザは店舗内の衣服を
試着することなく、自宅に保存してある衣服と同時着用
した状態を視認することが可能である。

【００５７】そして図７のフローチャートに戻り、ユー
ザが他に購入を希望する衣服がある場合には、ステップ
Ｓ３０１からの手順を繰り返し行う（ステップＳ３１
０）。一方、他に購入を希望する衣服がない場合には、
仮想フィッティングモードにおける処理を終了する。

【００５８】以上説明したように、この実施の形態のデ
ジタルカメラ１においては、ユーザが自ら保有する衣服
に関する衣服画像データを予め第１の衣服画像データと
して登録しておき、店舗内等において購入を希望する衣
服を撮影することによって第２の衣服画像データを生成
し、第１の衣服画像データの人体における着用部位と、
第２の衣服画像データの人体における着用部位とに応じ
て、第１の衣服画像データと第２衣服画像データとの合
成処理を行ってフィッティング画像を生成して表示する
ように構成されているため、衣服の購入希望者等が衣服
の試着を行うことなく、容易にコーディネイトイメージ
を把握することが可能になる。

【００５９】また、デジタルカメラ１においては、ユー
ザ自身の人体各部の計測データを入力し、その計測デー
タに基づいて人体モデルを生成するように構成される。
そして合成処理の際には、その人体モデルに対して、予
め登録されている第１の衣服画像データと、ユーザが購
入を希望する衣服についての第２の衣服画像データとを
フィッティングさせる処理が行われるので、ユーザは単
に自身が保有している衣服と店舗で販売されている衣服
との色調が合うかどうかだけでなく、ユーザ自身の体型
に適合するか否かについても確認することが可能であ
る。

【００６０】さらに、ユーザの顔画像を人体モデルに合
成してフィッティング画像を表示することにより、ユー
ザの体型だけでなく、顔を含めたユーザの全姿態に適合
するか否かを確認することが可能である。

【００６１】＜２．第２の実施の形態＞次に、第２の実
施の形態について説明する。図１０は第２の実施の形態
におけるデジタルカメラ１ａの内部構成を示すブロック
図である。ただし、図１０において上述した構成部材と
同様の構成部材については同一符号を付しているため、
ここではそれらの詳細な説明は省略する。

【００６２】この実施の形態におけるデジタルカメラ１
ａが、第１の実施の形態に示したデジタルカメラ１と異
なる点は、標準人体モデルデータ記憶部１３ａ、３次元
人体モデル生成部３０ａ、及び、３次元化処理部４５で
ある。すなわち、この実施の形態のデジタルカメラ１ａ
では、衣服画像データと人体モデルデータとが３次元デ
ータ（３次元画像データ）で管理され、合成処理によっ
て生成されるフィッティング画像データも３次元データ
として生成されるように構成される。

【００６３】デジタルカメラ１ａにおける登録モード時
には、データ処理部２０において衣服成分抽出部４１と
３次元化処理部４５とカラー調整部４２とサイズ特定部
４３と記録処理部５０とが機能する。そして、ユーザ自
身が保有している衣服を撮影する際に、その衣服を形状
が既知のマネキン人形に着用させる。そのマネキン人形
には、撮影時のデジタルカメラ１ａの視線方向（撮影方
向）を特定することができるマーキングが付される。そ
して、ユーザはマネキン人形に衣服を着用させた状態
で、マーキングが視野範囲に入るようにして衣服の撮影
を行う。また、ユーザはマネキン人形の周囲を移動して
複数の方向から複数回衣服を撮影する。この結果、形状
既知のマネキン人形が着用している衣服をマーキングと
ともに撮影した撮影画像が複数枚得られる。

【００６４】衣服成分抽出部４１は各撮影方向について
得られた撮影画像から衣服画像を抽出する。そして、３
次元化処理部４５は、撮影画像に含まれるマーキング画
像から撮影時のデジタルカメラ１ａの位置及び姿勢を特
定し、その撮影画像に含まれる衣服画像の３次元マッピ
ングを行う。この３次元マッピングの処理を各撮影画像
について行い、撮影対象となった衣服（ユーザが保有す
る衣服）についての３次元データを生成する。

【００６５】衣服についての３次元データは３次元形状
だけでなく、表面のカラー情報をも含むデータである。
そして、カラー調整部４２は、ユーザが入力する環境光
の条件に応じてカラー情報を調整し、衣服画像を登録す
る際の環境光の影響によって衣服画像の色の調子が実際
の色調子と異なる状態に登録されることを防止する。

【００６６】次に、サイズ特定部４３が機能し、マネキ
ン人形の像のサイズから衣服のサイズを特定するととも
に、マネキン人形に対して着用された部位を解析して撮
影された衣服の着用部位を特定する。そして衣服属性デ
ータを生成する。

【００６７】そして記録処理部５０が機能して、撮影さ
れた衣服について得られる３次元データを衣服画像デー
タとして画像メモリ９に記録する。このとき、記録処理
部５０は、衣服画像データと衣服属性データとを対応づ
けた状態にして画像メモリ９に記録する。

【００６８】次に、人体モデル生成モード時には、デー
タ処理部２０において３次元人体モデル生成部３０ａと
顔画像抽出部３１と顔画像合成部３２とが機能する。そ
してユーザが自信の体型に関する情報をデータ入力ボタ
ン５より入力すると、３次元人体モデル生成部３０ａは
標準人体モデルデータ記憶部１３ａに記録されている標
準的な体型に設定された３次元データである、標準人体
モデルデータを読み出し、この標準人体モデルデータの
各部の値（３次元形状）をユーザが入力した情報に基づ
いて変換することにより、ユーザの体型に適合した人体
モデルデータを生成する。このとき生成される人体モデ
ルデータは３次元データである。

【００６９】また、人体モデル生成モード時には、ユー
ザはデジタルカメラ１によって自身の顔を撮影し、顔画
像抽出部３１がその撮影画像から顔画像を抽出する。そ
して顔画像合成部３２が機能して、ユーザ自身の顔画像
を人体モデルにおける顔部分に合成する。

【００７０】なお、顔画像については平面的な２次元デ
ータであっても構わない。また、第１の実施の形態と同
様に、ユーザの顔画像を人体モデルに合成するか否かは
任意的な処理であり、必須のものではない。

【００７１】そして人体モデル生成モードにおいても、
３次元データとして生成される人体モデルデータが画像
メモリ９に格納保存されることになる。

【００７２】次に、仮想フィッティングモード時には、
データ処理部２０において衣服成分抽出部４１と、３次
元化処理部４５と、カラー調整部４２と、サイズ特定部
４３と、合成処理部６０とが機能する。ユーザが衣服の
店舗等に立ち寄った際に購入を希望する衣服が自身の保
有する衣服に合うかどうかを確認したくなった場合に、
デジタルカメラ１の動作モードを仮想フィッティングモ
ードに設定する。

【００７３】そして、ユーザが購入を希望する衣服を撮
影する際に、その衣服を形状が既知のマネキン人形に着
用させる。そのマネキン人形には、撮影時のデジタルカ
メラ１ａの視線方向（撮影方向）を特定することができ
るマーキングが付される。なお、このようなマネキン人
形は店舗側に常備されることになる。

【００７４】そして、ユーザはマネキン人形に衣服を着
用させた状態で、マーキングが視野範囲に入るようにし
て衣服の撮影を行う。また、ユーザはマネキン人形の周
囲を移動して複数の方向から複数回衣服を撮影する。こ
の結果、形状既知のマネキン人形が着用している衣服を
マーキングとともに撮影した撮影画像が複数枚得られ
る。

【００７５】衣服成分抽出部４１は各撮影方向について
得られた撮影画像から衣服画像を抽出する。そして、３
次元化処理部４５は、撮影画像に含まれるマーキング画
像から撮影時のデジタルカメラ１ａの位置及び姿勢を特
定し、その撮影画像に含まれる衣服画像の３次元マッピ
ングを行う。この３次元マッピングの処理を各撮影画像
について行い、撮影対象となった衣服（購入を希望する
衣服）についての３次元データを生成する。

【００７６】そして登録時と同様にカラー調整処理及び
サイズ特定処理等が行われ、３次元化された衣服画像デ
ータとともに、衣服属性データが合成処理部６０に与え
られる。

【００７７】合成処理部６０は、ユーザが選択した衣服
（ユーザが保有する衣服）についての衣服画像データ
と、人体モデルデータとを画像メモリ９から読み出し、
人体モデルデータに対して、選択された衣服画像データ
と、店舗内等で撮影された衣服画像データとの合成処理
を行い、フィッティング画像データを生成する。ただ
し、合成処理部６０に入力する合成対象のデータ（衣服
画像データ及び人体モデルデータ）は全て３次元データ
であるため、生成されるフィッティング画像データも３
次元データである。そして、合成処理部６０はその３次
元化されたフィッティング画像データに基づいて一の視
点から見た場合の表示画像を生成して、表示部４に与え
ることにより、フィッティング結果を表示する。

【００７８】ユーザは表示部４に表示される画面を視認
することにより、仮想的なフィッティング状態を視認す
ることができる。また、ユーザが別の視線方向から見た
フィッティング状態を確認したい場合には、データ入力
ボタン５から視線方向を切り換えるための入力を行うこ
とにより、合成処理部６０が他の視点から見た表示画像
を生成し、表示部４に表示させる。

【００７９】このように衣服画像データ及び人体モデル
データを３次元データとして管理することにより、多視
点からフィッティング状態を確認することが可能にな
り、ユーザは容易かつ完全にコーディネイトイメージを
把握することが可能になる。

【００８０】＜３．変形例＞以上、この発明の実施の形
態について説明したが、この発明は上記説明した内容の
ものに限定されるものではない。

【００８１】例えば上記説明においては、デジタルカメ
ラ１，１ａを画像入出力装置の一例に挙げて説明した
が、これに限定されるものではなく、撮像手段の設けら
れた携帯電話器等にも本発明を適用することは可能であ
る。

【００８２】また、ユーザが自宅においてインターネッ
トを介した通信販売等で衣服等を購入しようとする場合
の自宅設置型コンピュータにも適用することが可能であ
る。

【００８３】また、上記説明においては説明を簡単にす
るために、２つの衣服画像をフィッティングする場合に
ついて説明したが、これに限定されるものでもなく、３
以上の衣服画像を合成してそのフィッティング画像を表
示するように構成してもよい。

【００８４】また、上記説明においては、予め登録され
た衣服画像と、店舗等で撮影された衣服画像とを人体モ
デルに対してフィッティングさせる例について説明した
が、ユーザが双方の衣服の色調が自分の趣味感に適合す
るかどうかだけを知りたい場合には、特に人体モデルに
対して衣服画像をフィッティングさせる必要はない。

【００８５】図１１は合成処理の変形例を示す図であ
る。図１１に示すように合成処理部６０は、予め登録さ
れた衣服画像データＣＤ１と、店舗等で撮影された衣服
画像データＣＤ２とをそれぞれの着用部位に基づいて合
成して、単に複数の衣服を合わせただけのフィッティン
グ画像データＦＤ２を生成して表示するようにしてもよ
い。このように構成すれば、画像入出力装置における処
理負担が軽減されるため、効率的な処理が可能になる。

【００８６】

【発明の効果】以上説明したように、請求項１に記載の
発明によれば、衣服に関する第１の衣服画像データを記
憶しておき、衣服を撮影することによって第２の衣服画
像データを生成するように構成される。そして、第１の
衣服画像データの人体における着用部位と、第２の衣服
画像データの人体における着用部位とに応じて、第１の
衣服画像データと第２衣服画像データとの合成処理を行
ってフィッティング画像データが生成されて、合成処理
の結果が表示されるため、ユーザが衣服の試着を行うこ
となく、容易にコーディネイトイメージを把握すること
が可能になる。

【００８７】請求項２に記載の発明によれば、計測デー
タに基づいて人体モデルを生成し、その人体モデルに対
して第１の衣服画像データと第２の衣服画像データとを
フィッティングさせることで合成処理を行うように構成
されるため、ユーザの体型に適合するか否かについても
確認することが可能である。

【００８８】請求項３に記載の発明によれば、顔画像デ
ータが存在する場合、人体モデルに対して顔画像データ
をフィッティングさせるように構成されるため、顔を含
めたユーザの全姿態に適合するか否かを確認することが
可能である。

【００８９】請求項４に記載の発明によれば、基準物体
の画像成分に基づいて検出された第２の衣服画像データ
の衣服サイズに応じて、第２の衣服画像データの拡大又
は縮小処理を行って、合成処理を行うように構成されて
いるため、適切な合成処理を行うことが可能である。

【００９０】請求項５に記載の発明によれば、第１の衣
服画像データ及び第２の衣服画像データはそれぞれの衣
服についての３次元データであり、フィッティング画像
データも３次元データとして生成されるため、ユーザが
任意の視点からのコーディネイトイメージを把握するこ
とが可能になる。

【図面の簡単な説明】

【図１】第１の実施の形態におけるデジタルカメラの正
面を含む斜視図である。

【図２】第１の実施の形態におけるデジタルカメラの背
面を含む斜視図である。

【図３】第１の実施の形態におけるデジタルカメラの内
部構成を示すブロック図である。

【図４】登録モード時における処理手順を示すフローチ
ャートである。

【図５】衣服画像データと衣服属性データとの関係を示
す図である。

【図６】人体モデル生成モード時における処理手順を示
すフローチャートである。

【図７】仮想フィッティングモード時における処理手順
を示すフローチャートである。

【図８】フィッティング処理の詳細を示すフローチャー
トである。

【図９】合成処理の概念を示す図である。

【図１０】第２の実施の形態におけるデジタルカメラの
内部構成を示すブロック図である。

【図１１】合成処理の変形例を示す図である。

【符号の説明】

１，１ａ デジタルカメラ（画像入出力装置） ４ 表示部（表示手段） ９ 画像メモリ（記憶手段） １１ ＣＣＤ撮像素子（撮影手段） １３，１３ａ 標準人体モデルデータ記憶部 ２０ データ処理部 ３０ 人体モデル生成部（モデル生成手段） ３０ａ ３次元人体モデル生成部（モデル生成手段） ３１ 顔画像抽出部 ３２ 顔画像合成部 ４１ 衣服成分抽出部 ４２ カラー調整部 ４３ サイズ特定部（サイズ検出手段） ４５ ３次元化処理部 ５０ 記録処理部 ６０ 合成処理部（合成処理手段）

───────────────────────────────────────────────────── フロントページの続き (72)発明者 藤原 浩次 大阪府大阪市中央区安土町二丁目３番13号 大阪国際ビル ミノルタ株式会社内 (72)発明者 浅野 雅己 大阪府大阪市中央区安土町二丁目３番13号 大阪国際ビル ミノルタ株式会社内 Ｆターム(参考） 5B057 AA18 BA01 BA02 BA23 CA01 CA08 CA12 CA13 CA16 CB01 CB08 CB12 CB13 CB16 CD05 CE08 CE09 CE16 CH11 CH20 DA16 DA17 DC02 5C062 AA01 AA05 AB17 AB23 AC02 AC05 AC24 AC67 AE01 AF11 BD00

Claims (5)

【特許請求の範囲】
1. 【請求項１】 衣服に関する第１の衣服画像データを記
   憶する記憶手段と、 衣服を撮影することによって第２の衣服画像データを生
   成する撮影手段と、 前記第１の衣服画像データの人体における着用部位と、
   前記第２の衣服画像データの人体における着用部位とに
   応じて、前記第１の衣服画像データと前記第２衣服画像
   データとの合成処理を行ってフィッティング画像データ
   を生成する合成処理手段と、 前記フィッティング画像データに基づいて前記合成処理
   の結果を表示する表示手段と、を備える画像入出力装
   置。
2. 【請求項２】 請求項１に記載の画像入出力装置におい
   て、 人体各部の計測データを入力し、前記計測データに基づ
   いて人体モデルを生成するモデル生成手段をさらに備
   え、 前記合成処理手段は、前記人体モデルに対して前記第１
   の衣服画像データと前記第２の衣服画像データとをフィ
   ッティングさせることで前記合成処理を行うことを特徴
   とする画像入出力装置。
3. 【請求項３】 請求項２に記載の画像入出力装置におい
   て、 前記合成処理手段は、前記撮影手段によって撮影された
   顔画像データが存在する場合、前記人体モデルに対して
   前記顔画像データをフィッティングさせることを特徴と
   する画像入出力装置。
4. 【請求項４】 請求項１乃至３のいずれかに記載の画像
   入出力装置において、 前記撮影手段によって衣服と同時に大きさの既知な基準
   物体を撮影した際に、前記撮影手段から得られる画像デ
   ータにおける前記基準物体の画像成分に基づいて、前記
   第２の衣服画像データにおける衣服のサイズを検出する
   サイズ検出手段をさらに備え、 前記合成処理手段は、前記サイズに応じて前記第２の衣
   服画像データの拡大又は縮小処理を行って、前記合成処
   理を行うことを特徴とする画像入出力装置。
5. 【請求項５】 請求項１乃至４のいずれかに記載の画像
   入出力装置において、 前記第１の衣服画像データ及び前記第２の衣服画像デー
   タは、それぞれの衣服についての３次元データであり、
   前記合成処理手段によって得られる前記フィッティング
   画像データも３次元データとして生成され、 前記表示手段は、前記フィッティング画像データに基づ
   いて前記合成処理の結果を表示することを特徴とする画
   像入出力装置。