JP4423929B2 - 画像出力装置、画像出力方法、画像出力処理プログラム、および画像配信サーバ、画像配信処理プログラム - Google Patents

Description

本発明は、デジタルカメラやカメラ付携帯端末などにおける撮影画像に応じた画像を合成して出力するための画像出力装置、画像出力方法、画像出力処理プログラム、および画像配信サーバ、画像配信処理プログラムに関する。

従来、各種のスチルカメラやビデオカメラにおいて、撮影した画像に対し他の画像を合成して表示あるいは印刷して出力するものがある。

例えば撮影フレームの固定した位置に予め用意された花や人気キャラクタなどのアニメ画像を合成して出力するものや、同予め用意されたアニメ画像を撮影フレーム内の希望の位置に合成して出力するものなどが実用されている。

また、デジタルカメラにより撮影された画像をパーソナルコンピュータの表示画面上に表示させて他の画像と合成して編集することもできるが、この場合に他の画像は例えば他の画像ファイルから選択的に切り出したり、インターネット上の任意のホームページ画面からダウンロードしたりするなどして取得され、撮影画像上の希望位置に合成される。

また、デジタルカメラにより撮影された画像の任意の領域（例えば顔の部分）を切り出し、この切り出し画像を予め用意されたアニメ画像（例えばアニメキャラクタの顔部分）に合成させて新たな別の画像を作成するものや、任意の画像の指定した領域に対して、これに関連付けたアニメ画像を合成する（青空と推定される青色領域に雲画像を合成したり雪景色と推定される白色領域に雪像を合成したりする）ものも考えられている（例えば、特許文献１参照。）。
特開２００１−２３０９７２号公報

前記従来の画像処理システムでは、撮影画像に対して、予め用意された画像をそのまま固定あるいは希望の位置に合成して出力したり、あるいは任意の切り出し画像に対して予め用意された画像を合成して出力したりするだけのものであるため、撮影画像以外の合成画像が常に固定的で変化が無く、またインターネットから多様な画像をダウンロードして利用するにしても、個々の撮影画像とは密接に関係しない単なる飾りなどでしかないため、面白味に欠け飽きが来やすい問題がある。

一方で近年、小型のデジタルカメラやデジタルカメラ付きの携帯電話が大幅に普及したことにより、各ユーザは常にこれを持ち歩き、何処でも，何時でも画像の撮影ができる状況となっている。

本発明は、前記のような問題に鑑みてなされたもので、撮影画像に対して単に固定的な画像を合成するのではなく、場所や季節（時間）に応じて被写体画像に対応したポーズの衣装画像を合成して出力することが可能になる画像出力装置、画像出力方法、画像出力処理プログラム、および画像配信サーバ、画像配信処理プログラムを提供することを目的とする。

本発明の請求項１に係る画像出力装置では、位置情報に応じた種類の衣装で複数のポーズからなる一連の衣装画像を記憶するポーズ別衣装画像記憶手段を有し、撮影画像取得手段により取得された撮影画像から合成対象の人物画像を対象画像抽出手段によって抽出し、前記撮影画像を撮影した位置情報を位置情報取得手段によって取得する。すると、この位置情報取得手段により取得された撮影画像の撮影位置情報に対応し、かつ、前記対象画像抽出手段により抽出された合成対象の人物画像に応じたポーズの衣装画像が、前記ポーズ別衣装画像記憶手段により記憶された一連の衣装画像の中から対応画像取得手段によって取得される。そして、この対応画像取得手段により取得された衣装画像は、前記対象画像抽出手段により抽出された撮影画像の中の合成対象の人物画像に対して、当該人物画像の顔部分を残し画像合成手段によって合成され、この画像合成手段により前記合成対象の人物画像に対応したポーズの衣装画像が合成された合成画像が画像出力手段によって出力される。

これによれば、撮影画像の中の合成対象の人物画像に応じたポーズの衣装画像を取得して当該合成対象の人物画像と顔部分のみ残し合成して出力できるだけでなく、この撮影画像の撮影位置（場所）に応じた種類の衣装画像として前記合成対象の人物画像と合成することで、撮影画像上の人物画像をそのままのポーズで撮影位置（場所）に応じた衣装に着せ替えた合成画像として出力できることになる。

本発明の請求項２に係る画像出力装置では、時間情報に応じた種類の衣装で複数のポーズからなる一連の衣装画像を記憶するポーズ別衣装画像記憶手段を有し、撮影画像取得手段により取得された撮影画像から合成対象の人物画像を対象画像抽出手段によって抽出し、前記撮影画像を撮影した時間情報を時間情報取得手段によって取得する。すると、この時間情報取得手段により取得された撮影画像の撮影時間情報に対応し、かつ、前記対象画像抽出手段により抽出された合成対象の人物画像に応じたポーズの衣装画像が、前記ポーズ別衣装画像記憶手段により記憶された一連の衣装画像の中から対応画像取得手段によって取得される。そして、この対応画像取得手段により取得された衣装画像は、前記対象画像抽出手段により抽出された撮影画像の中の合成対象の人物画像に対して、当該人物画像の顔部分を残し画像合成手段によって合成され、この画像合成手段により前記合成対象の人物画像に対応したポーズの衣装画像が合成された合成画像が画像出力手段によって出力される。

これによれば、撮影画像の中の合成対象の人物画像に応じたポーズの衣装画像を取得して当該合成対象の人物画像と顔部分のみ残し合成して出力できるだけでなく、この撮影画像の撮影時間（時期）に応じた種類の衣装画像として前記合成対象の人物画像と合成することで、撮影画像上の人物画像をそのままのポーズで撮影時間（時期）に応じた衣装に着せ替えた合成画像として出力できることになる。

本発明の請求項３に係る画像出力装置は、前記請求項１または請求項２に係る画像出力装置にあって、前記対象画像抽出手段では、前記撮影画像取得手段により取得された一連の複数の撮影画像の中から変化部分を合成対象の人物画像として抽出する。

これによれば、撮影に際して連続的にサンプリングされて取り込まれた一連の複数の撮影画像に基づき、その変化部分を合成対象の人物画像として容易に抽出できることになる。

本発明の請求項４に係る画像出力装置は、前記請求項１または請求項２に係る画像出力装置にあって、前記対象画像抽出手段では、前記撮影画像取得手段により取得された撮影画像の各画像部分間の距離情報に応じて合成対象の人物画像を抽出する。

これによれば、撮影された１枚の撮影画像の各画像部分の撮影距離に基づき、その手前画像部分を合成対象者の人物画像として容易に抽出できることになる。

本発明の請求項５に係る画像出力装置は、前記請求項１ないし請求項４の何れか１項に係る画像出力装置にあって、前記対応画像取得手段では、前記対象画像抽出手段により抽出された撮影画像における合成対象の人物画像と前記ポーズ別衣装画像記憶手段により記憶された各ポーズごとの衣装画像との類似度を評価する類似度評価手段を有し、この類似度評価手段により評価された合成対象の人物画像と各衣装画像との類似度に応じて当該合成対象の人物画像に対応したポーズの衣装画像を取得する。

これによれば、撮影画像における合成対象の人物画像のポーズにまねて合成すべき、撮影位置（場所）または撮影時間（時期）に応じた種類の衣装画像を容易に取得できることになる。

本発明の請求項６に係る画像出力装置は、前記請求項１ないし請求項４の何れか１項に係る画像出力装置にあって、前記対応画像取得手段では、前記ポーズ別衣装画像記憶手段により記憶された衣装画像の各ポーズに対応付けた複数のポーズのモデル画像を記憶するモデル画像記憶手段と、前記対象画像抽出手段により抽出された撮影画像における合成対象の人物画像と前記モデル画像記憶手段により記憶された各ポーズのモデル画像との類似度を評価する類似度評価手段とを有し、この類似度評価手段により評価された合成対象の人物画像と各モデル画像との類似度に応じて当該モデル画像のポーズに対応付けられて前記ポーズ別衣装画像記憶手段により記憶された衣装画像を取得する。

これによれば、撮影画像における合成対象の人物画像のポーズにまねて合成すべき、撮影位置（場所）または撮影時間（時期）に応じた種類の衣装画像を容易に取得できるだけでなく、類似度の評価対象に標準的モデルを用いることから合成対象の人物画像との高い類似(まね)度が得られやすく、より表現上違和感のない衣装画像を取得できることになる。

本発明の請求項１に係る画像出力装置によれば、撮影画像の中の合成対象の人物画像に応じたポーズの衣装画像を取得して当該合成対象の人物画像と顔部分のみ残し合成して出力できるだけでなく、この撮影画像の撮影位置（場所）に応じた種類の衣装画像として前記合成対象の人物画像と合成することで、撮影画像上の人物画像をそのままのポーズで撮影位置（場所）に応じた衣装に着せ替えた合成画像として出力できるようになる。

本発明の請求項２に係る画像出力装置によれば、撮影画像の中の合成対象の人物画像に応じたポーズの衣装画像を取得して当該合成対象の人物画像と顔部分のみ残し合成して出力できるだけでなく、この撮影画像の撮影時間（時期）に応じた種類の衣装画像として前記合成対象の人物画像と合成することで、撮影画像上の人物画像をそのままのポーズで撮影時間（時期）に応じた衣装に着せ替えた合成画像として出力できるようになる。

本発明の請求項３に係る画像出力装置によれば、前記請求項１または請求項２に係る画像出力装置にあって、撮影に際して連続的にサンプリングされて取り込まれた一連の複数の撮影画像に基づき、その変化部分を合成対象の人物画像として容易に抽出できるようになる。

本発明の請求項４に係る画像出力装置によれば、前記請求項１または請求項２に係る画像出力装置にあって、撮影された１枚の撮影画像の各画像部分の撮影距離に基づき、その手前画像部分を合成対象者の人物画像として容易に抽出できるようになる。

本発明の請求項５に係る画像出力装置によれば、前記請求項１ないし請求項４の何れか１項に係る画像出力装置にあって、撮影画像における合成対象の人物画像のポーズにまねて合成すべき、撮影位置（場所）または撮影時間（時期）に応じた種類の衣装画像を容易に取得できるようになる。

本発明の請求項６に係る画像出力装置によれば、前記請求項１ないし請求項４の何れか１項に係る画像出力装置にあって、撮影画像における合成対象の人物画像のポーズにまねて合成すべき、撮影位置（場所）または撮影時間（時期）に応じた種類の衣装画像を容易に取得できるだけでなく、類似度の評価対象に標準的モデルを用いることから合成対象の人物画像との高い類似(まね)度が得られやすく、より表現上違和感のない衣装画像を取得できるようになる。

よって、本発明によれば、撮影画像に対して単に固定的な画像を合成するのではなく、場所や季節（時間）に応じて被写体画像に対応したポーズの衣装画像を合成して出力することが可能になる。

以下、図面を参照して本発明の実施の形態について説明する。

（第１実施形態）
図１は本発明の第１実施形態に係る画像出力装置１０の電子回路の構成を示すブロック図である。

この画像出力装置１０は、デジタルカメラ、デジタルカメラ付き携帯電話、デジタルカメラ付きＰＤＡ(personal digital assistants)などの携帯機器として構成されるもので、各種の記録媒体に記録されたプログラム、又は、伝送されたプログラムを読み込んで、その読み込んだプログラムによって動作が制御されるコンピュータによって構成され、その電子回路には、ＣＰＵ(central processing unit)１１が備えられる。

ＣＰＵ１１は、メモリ１２内に予め記憶された装置制御プログラム、あるいはＣＤ−ＲＯＭなどの外部記録媒体１３から記録媒体読取部１４を介して前記メモリ１２に読み込まれた装置制御プログラム、あるいはインターネットＮ上のＷｅｂサーバ２１（この場合はプログラムサーバ）から電送制御部１５を介して前記メモリ１２に読み込まれた装置制御プログラムに応じて、回路各部の動作を制御するもので、前記メモリ１２に記憶された装置制御プログラムは、キーやタッチパネルからなる入力部１６からのユーザ操作に応じた入力信号、あるいは画像入力部１７を介して入力される画像信号、あるいは位置情報検出部(GPS:Global Positioning System)１８ｘを介して入力される現在位置情報、あるいは電送制御部１５を介して接続されるインターネットＮ上の各Ｗｅｂサーバ２１…との通信信号に応じて起動される。

前記ＣＰＵ１１には、前記メモリ１２、記録媒体読取部１４、電送制御部１５、入力部１６、画像入力部１７、位置情報検出部１８ｘが接続される他に、距離センサ１８、ＬＣＤからなる表示部１９、画像出力部２０などが接続される。

画像入力部１７は、撮影画像データを入力するもので、この撮影画像データは、デジタルカメラ部１７Ａ、デジタルビデオムービー部１７Ｂなどの画像撮影手段から選択的に取得される。なお、これらの画像撮影手段（１７Ａ）（１７Ｂ）は、携帯機器である画像出力装置１０の本体とは別体にして、接続ケーブルにより接続して使用したり、コネクタにより合体一体化して使用したりする構成としてもよい。

距離センサ１８は、前記画像入力部１７において入力される撮影画像の被写体までの距離を検出する。

画像出力部２０は、前記画像入力部１７から入力された撮影画像に基づき本装置により処理された画像データを出力するもので、この出力画像データは、メモリカード２０Ａ、ＶＴＲ（録画装置）２０Ｂ、画像印刷機２０Ｃに選択的に出力され、当該画像の記憶，録画，印刷が行われる。

メモリ１２には、当該画像出力装置１０の全体の動作を司るシステムプログラムや電送制御部１５を介してインターネットＮ上の各Ｗｅｂサーバ２１…とデータ通信するための通信プログラムが記憶される他に、画像入力部１７や画像出力部２０を介して撮影画像における合成（まね）対象画像(被写体人物像)に応じた対応衣装画像(例えば被写体人物像のポーズを真似た各種衣装画像)への置き換え（着せ替え）合成出力処理をその撮影場所（位置）や月日（時間）に関連付けて行うための画像出力処理プログラム１２ａなどが記憶される。

また、このメモリ１２には、モデルポーズ画像メモリ１２ｂ、衣装１「時代劇」ポーズ画像メモリ１２ｃ、衣装２「ウエスタン」ポーズ画像メモリ１２ｄ、衣装３「中世ヨーロッパ」ポーズ画像メモリ１２ｅ…や衣装１３「夏（６月〜９月）」ポーズ画像メモリ１２ｆ、衣装１４「春秋（４，５，１０，１１月）」ポーズ画像メモリ１２ｇ、衣装１５「冬（１２月〜３月）」ポーズ画像メモリ１２ｈなどが用意され、さらに撮影画像メモリ１２ｉ、合成（まね）対象画像位置メモリ１２ｊ、位置情報登録メモリ１２ｋ、現在年月日メモリ１２ｌ、そしてワークエリア１２ｍなどが用意される。

図２は前記画像出力装置１０の衣装１「時代劇」ポーズ画像メモリ１２ｃ：衣装２「ウエスタン」ポーズ画像メモリ１２ｄ…衣装１３「夏（６月〜９月）」ポーズ画像メモリ１２ｆにそれぞれ記憶された各種のポーズに対応する各男性版の衣装画像１２cM，１２dM，１２fMを示す図である。

図３は前記画像出力装置１０の衣装１「時代劇」ポーズ画像メモリ１２ｃ：衣装２「ウエスタン」ポーズ画像メモリ１２ｄ…衣装１３「夏（６月〜９月）」ポーズ画像メモリ１２ｆにそれぞれ記憶された各種のポーズに対応する各女性版の衣装画像１２cW，１２dW，１２fWを示す図である。

この衣装１「時代劇」，２「ウエスタン」，３「中世ヨーロッパ」の各ポーズ画像メモリ１２ｃ，１２ｄ，１２ｅ，…や衣装１３「夏（６月〜９月）」，衣装１４「春秋（４，５，１０，１１月）」，衣装１５「冬（１２月〜３月）」の各ポーズ画像メモリ１２ｆ，１２ｇ，１２ｈ，…に記憶された各衣装それぞれの各種のポーズ画像は、画像入力部１７から入力された撮影画像上の被写体人物像（合成（まね）対象画像）のポーズを真似た衣装画像として選択的に使用されるもので、異なるポーズ毎にそのポーズＮｏ．が対応付けられて記憶される。またこれらの各衣装それぞれのポーズ画像が撮影画像上の被写体人物像（合成（まね）対象画像）のポーズを真似た衣装画像として使用される際には、そのときの場所（位置）や季節（年月日時刻）に応じて指定される種類の衣装のポーズ画像が使用される。

図４は前記画像出力装置１０のモデルポーズ画像メモリ１２ｂに記憶されたモデルポーズに対応するモデル画像を示す図である。

このモデルポーズ画像メモリ１２ｂに記憶された各種ポーズのモデル画像は、画像入力部１７から入力された撮影画像上の被写体人物像（合成（まね）対象画像）のポーズに応じた類似のモデル画像を取得するために使用されるもので、異なるポーズ毎にそのポーズＮｏ．が対応付けられて記憶され、さらに各ポーズＮｏ．毎に３種のバリエーションＡ，Ｂ，Ｃのモデル画像が記憶される。

そして、前記衣装１「時代劇」，２「ウエスタン」，３「中世ヨーロッパ」の各ポーズ画像メモリ１２ｃ，１２ｄ，１２ｅ，…や衣装１３「夏（６月〜９月）」，１４「春秋（４，５，１０，１１月）」，１５「冬（１２月〜３月）」の各ポーズ画像メモリ１２ｆ，１２ｇ，１２ｈ，…にそれぞれ記憶された各衣装画像には、前記モデルポーズ画像メモリ１２ｂに記憶された全てのポーズＮｏ．（Ｎｏ．1A,1B,1C、2A,2B,2C、〜、nA,nB,nC）に対応する同じポーズの衣装画像が用意されて記憶される。

なお、前記各衣装のポーズ画像メモリ１２ｃ〜１２ｈに記憶される各衣装画像は、髪型および首から下の全胴体部分を衣装画像とし、顔の部分のみ抜かされて透明画像とされ、撮影画像における合成（まね）対象画像への重ね合わせによる置き換え画像合成を行うことで、合成（まね）対象画像の顔部分のみ残して衣装を着せ替えた合成画像が作成される。

撮影画像メモリ１２ｉには、画像入力部１７を介して入力された撮影画像データおよびこれに基づき作成された合成画像データがその撮影画像単位１，２，…で記憶される。なお、この撮影画像メモリ１２ｉに記憶される各撮影画像データには、当該撮影画像の撮影時直前（例えばシャッタ半押し中）にサンプリングされた複数枚の撮影準備画像が共に記憶されるか、または当該撮影画像のＡＦ(auto focus)処理に伴い取得された画像領域各部における撮影距離データが共に記憶される。

合成（まね）対象画像位置メモリ１２ｊには、前記撮影画像メモリ１２ｉに記憶された撮影画像１，２，…のそれぞれにおいて抽出された合成（まね）対象である各被写体人物像の位置情報が座標情報などにより各撮影画像単位１，２，…で記憶される。

位置情報登録メモリ１２ｋには、前記各衣装１「時代劇」，２「ウエスタン」，３「中世ヨーロッパ」のポーズ画像１２ｃ，１２ｄ，１２ｅを指定するためのテーマパークやイベント施設，アミューズメント施設である、例えば時代劇村，ウエスタン村，ユーロ村などの各衣装に応じた特定の場所（位置）の情報が、緯度・経度の情報として各場所（位置）単位１，２，…で登録される。

現在年月日メモリ１２ｌには、例えば前記ＣＰＵ１１から出力されるクロック信号に基づき計時される現在の年・月・日・時間（時刻）のデータが記憶される。

ワークエリア１２ｍには、前記画像出力処理プログラム１２ａに従い処理される画像データがその画像処理に応じて一時記憶される。

このように構成された画像出力装置１０について、その合成画像作成動作の概要を説明する。

図５は前記画像出力装置１０の撮影画像の合成（まね）対象人物像に対する撮影場所（時代劇村）に応じた衣装ポーズ画像の置き換え（着せ替え）合成状態を示す図である。

図５（Ａ）に示すように、例えば時代劇村において、入力部１６におけるシャッタの半押し操作に伴い、画像入力部１７から撮影画像１２i1が取り込まれて表示部１９に表示されると、この撮影表示中の撮影画像１２i1の中から、図５（Ｂ）に示すように、合成（まね）対象としての被写体画像（人物画像）Ｈ１，Ｈ２，Ｈ３が抽出される。そして、位置情報検出部１８ｘにより検出される現在の撮影位置（場所）が位置情報登録メモリ１２ｋに登録された時代劇村であると判断されると、図５（Ｃ）に示すように、被写体画像（人物画像）Ｈ１，Ｈ２，Ｈ３それぞれのポーズに類似（真似）のポーズＮｏ．１９「しゃがむ」の男性版および女性版の時代劇衣装のポーズ画像１２cM(19)，１２cW(19)，１２cM(19)が衣装１「時代劇」ポーズ画像メモリ１２ｃから読み出される。すると、図５（Ｄ）に示すように、撮影画像１２i1上の合成（まね）対象である各被写体画像（人物画像）Ｈ１，Ｈ２，Ｈ３それぞれの位置に、前記衣装１「時代劇」ポーズ画像メモリ（男性版／女性版）１２ｃから読み出されたポーズＮｏ．１９「しゃがむ」の時代劇スタイルの各ポーズ画像１２cM(19)，１２cW(19)，１２cM(19)が元の撮影画像１２i1の顔部分のみ残し置き換え（着せ替え）られて合成される。

これにより、位置情報登録メモリ１２ｋに登録された時代劇村で撮影した場合には、撮影画像１２i1における各被写体（人物画像）Ｈ１，Ｈ２，Ｈ３のポーズの真似をした「時代劇」スタイルの衣装ポーズ画像１２cM(19)，１２cW(19)，１２cM(19)が当該各被写体（人物画像）Ｈ１，Ｈ２，Ｈ３と顔部分のみ残して置き換え合成され、元の被写体画像Ｈ１，Ｈ２，Ｈ３のコスチュームを時代劇衣装に着せ替えて表示取得できるようになる。

なお、撮影画像１２i1から抽出された各被写体人物像Ｈ１，Ｈ２，Ｈ３それぞれの男性／女性の区別は、当該各被写体人物像Ｈ１，Ｈ２，Ｈ３の抽出表示画面上でユーザにより指定区別されて衣装１「時代劇」ポーズ画像メモリ（男性版：図２参照）１２ｃから類似ポーズの男性衣装画像１２cM(19)が読み出されるか、同衣装１「時代劇」ポーズ画像メモリ（女性版：図３参照）１２ｃから類似ポーズの女性衣装画像１２cW(19)が読み出される。また、各被写体人物像Ｈ１，Ｈ２，Ｈ３の抽出表示画面上でのユーザによる男性／女性の指定区別を行わない場合には、場所情報に対応した衣装１「時代劇」ポーズ画像メモリ（男性版／女性版）１２ｃから類似度が高い方の男性または女性の衣装ポーズ画像１２cM(19)または１２cW(19)が読み出される。

図６は前記画像出力装置１０の撮影画像の合成（まね）対象人物像に対する撮影場所（ウエスタン村）に応じた衣装ポーズ画像の置き換え（着せ替え）合成状態を示す図である。

図６（Ａ）に示すように、例えばウエスタン村において、入力部１６におけるシャッタの半押し操作に伴い、画像入力部１７から撮影画像１２i2が取り込まれて表示部１９に表示されると、この撮影表示中の撮影画像１２i2の中から、図６（Ｂ）に示すように、合成（まね）対象としての被写体画像（人物画像）Ｈ１，Ｈ２，Ｈ３が抽出される。そして、位置情報検出部１８ｘにより検出される現在の撮影位置（場所）が位置情報登録メモリ１２ｋに登録されたウエスタン村であると判断されると、図６（Ｃ）に示すように、被写体画像（人物画像）Ｈ１，Ｈ２，Ｈ３それぞれのポーズに類似（真似）のポーズＮｏ．４「歩く（横）反転」の男性版ウエスタンスタイルの衣装ポーズ画像１２dM(4)R，ポーズＮｏ．２０「ばんざい」の男性版ウエスタンスタイルの衣装ポーズ画像１２dM(20)，ポーズＮｏ．４「歩く（横）」の女性版ウエスタンスタイルの衣装ポーズ画像１２dW(4)が衣装２「ウエスタン」ポーズ画像メモリ１２ｄから読み出される。すると、図６（Ｄ）に示すように、撮影画像１２i2上の合成（まね）対象である各被写体画像（人物画像）Ｈ１，Ｈ２，Ｈ３それぞれの位置に、前記衣装２「ウエスタン」ポーズ画像メモリ（男性版／女性版）１２ｄから読み出されたポーズＮｏ．４「歩く（横）反転」，Ｎｏ．２０「ばんざい」，Ｎｏ．４「歩く（横）」のウエスタンスタイルの各ポーズ画像１２dM(4)R，１２dM(20)，１２dW(4)が撮影元画像１２i1の顔部分のみ残し置き換え（着せ替え）られて合成される。

これにより、位置情報登録メモリ１２ｋに登録されたウエスタン村で撮影した場合には、撮影画像１２i2における各被写体（人物画像）Ｈ１，Ｈ２，Ｈ３のポーズの真似をした「ウエスタン」スタイルの衣装ポーズ画像１２dM(4)R，１２dM(20)，１２dW(4)が当該各被写体（人物画像）Ｈ１，Ｈ２，Ｈ３と顔部分のみ残して置き換え合成され、元の被写体画像Ｈ１，Ｈ２，Ｈ３のコスチュームをウエスタンの衣装に着せ替えて表示取得できるようになる。

なお、この場合も、各被写体人物像Ｈ１，Ｈ２，Ｈ３に対応する衣装２「ウエスタン」ポーズ画像（１２ｄ）についての男性版／女性版の区別は、前記衣装１「時代劇」の場合と同様にして行われる。以下、その他の場合についても同様にして行われる。

図７は前記画像出力装置１０の撮影画像の合成（まね）対象人物像に対する撮影季節（年月日時刻）に応じた衣装ポーズ画像の置き換え（着せ替え）合成状態を示す図である。

図７（Ａ）に示すように、入力部１６におけるシャッタの半押し操作に伴い、画像入力部１７から撮影画像１２i3が取り込まれて表示部１９に表示されると、この撮影表示中の撮影画像１２i3の中から、図７（Ｂ）に示すように、合成（まね）対象としての被写体画像（人物画像）Ｈ１が抽出される。そして、現在年月日メモリ１２ｌにより更新記憶される現在の年月が夏の８月であると判断されると、図７（Ｃ）に示すように、被写体画像（人物画像）Ｈ１のポーズに類似（真似）のポーズＮｏ．１「はいチーズ（アップ）」の女性版の夏のポーズ画像１２fW(1)が衣装１３「夏」ポーズ画像メモリ１２ｆから読み出される。すると、図７（Ｄ）に示すように、撮影画像１２i3上の合成（まね）対象である被写体画像（人物画像）Ｈ１の位置に、前記衣装１３「夏」ポーズ画像メモリ（女性版）１２ｆから読み出されたポーズＮｏ．１「はいチーズ（アップ）」の夏水着スタイルのポーズ画像１２fW(1)が撮影元画像１２i3の顔部分のみ残し置き換え（着せ替え）られて合成される。

これにより、夏季の８月に撮影した場合には、撮影画像１２i3における被写体（人物画像）Ｈ１のポーズの真似をした「夏水着」スタイルの衣装ポーズ画像１２fW(1)が当該被写体（人物画像）Ｈ１と顔部分のみ残して置き換え合成され、元の被写体画像Ｈ１のコスチュームを夏衣装に着せ替えて表示取得できるようになる。

すなわち、各撮影画像１２inについて、合成（まね）対象の被写体人物像Ｈｎが抽出されると、撮影場所（位置）や撮影季節に応じた種類の衣装で被写体画像Ｈｎのポーズの真似をした衣装ポーズ画像が、当該被写体画像Ｈｎとその顔部分のみ残して置き換え合成されるようになり、撮影の被写体となる人物がその撮影場所や撮影時期に応じた衣装を着ていなくても、その場所や季節に応じたコスチュームに着替えた被写体画像を撮影取得できるようになる。

次に、前記構成による画像出力装置１０による詳細な画像処理動作について説明する。

ここでは、画像出力装置１０をデジタルカメラとして実施した場合について説明する。

図８は前記画像出力装置であるデジタルカメラ１０とそのクレードル１５ｘの外観構成を示す図である。

デジタルカメラ１０の入力部１６としては、メニュー画面を表示させるための「MENU」キー１６ａ、撮影モード(REC)と再生モード(PLAY)とを切り替えるための切り替えキー１６ｂ、撮影画像の取り込みおよび記録を指示するためのシャッタキー１６ｃ、表示画面(１９)上でのデータ選択やカーソル移動及び選択データ決定などの操作を行うための上下左右に指１本で操作可能な選択／決定キー１６ｄが備えられる。

また、デジタルカメラ１０は、当該カメラ１０の充電台やユーザＰＣ(personal computer)との通信インターフェイスとなるクレードル１５ｘに対して容易に着脱可能である。このクレードル１５ｘへのデジタルカメラ１０の装着状態において、「PHOTO」ボタン１５ａが押された場合には、撮影画像メモリ１２ｉに保存されている各撮影画像１２inやその合成画像１２inmの表示部１９に対する読み出し表示(フォトスタンド機能)が行われる。

なお、「ＵＳＢ」ボタン１５ｂが押された場合には、撮影画像メモリ１２ｉに保存されている各撮影画像１２inやその合成画像１２inmのユーザＰＣへの転送出力が行われる。

なお、シャッタキー１６ｃは、半押し／全押しの２段階で撮影画像の取り込みを指示するキーであり、半押し状態では、画像入力部１７から一定サンプリング間隔で入力された撮影画像１２inはＡＥ(auto exposure)，ＡＦ(auto focus)など調整されて画像処理ワークエリア１２ｍに繰り返し書き込まれて表示部１９に表示され、全押し状態にして撮影画像メモリ１２ｉへの登録が行われる。

図９は前記画像出力装置１０の画像合成処理を示すフローチャートである。

画像の撮影を行うに際して、入力部１６のシャッタキー１６ｃを半押し操作すると、画像入力部１７からの撮影画像１２inの入力が開始され、画像処理ワークエリア１２ｍに書き込まれて表示部１９にリアルタイム表示される（ステップＳ１）。

そして、位置情報検出部１８ｘにより現在の撮影位置（場所）が検知され（ステップＳ２）、位置情報登録メモリ１２ｋに登録されている特定の場所の位置情報と一致するか否か、つまり、現在の撮影場所（位置）が例えば時代劇村やウエスタン村などの特定の場所であるか否か判断される（ステップＳ３）。

ここで、現在の撮影場所（位置）が位置情報登録メモリ１２ｋに登録されている特定の場所の何れかと一致したと判断された場合には、当該現在の位置情報に対応した衣装画像の種類、つまり撮影場所が例えば時代劇村である場合には、衣装１「時代劇」ポーズ画像（１２ｃ）が合成すべき衣装画像の種類として設定され、また撮影場所が例えばウエスタン村である場合には、衣装２「ウエスタン」ポーズ画像（１２ｄ）が合成すべき衣装画像の種類として設定される（ステップＳ３→Ｓ４）。

そして、図１０における合成（まね）対象画像の抽出処理に移行される（ステップＳＡ）。

一方、現在の撮影場所（位置）が位置情報登録メモリ１２ｋに登録されている特定の場所の何れとも一致しないと判断された場合には、現在年月日メモリ１２ｌにおいて更新記憶される現在の年月日時刻情報から当月が何月か検知される（ステップＳ３→Ｓ５）。

すると、現在の月に対応した衣装画像の種類、つまり当月が例えば真夏の８月である場合には、衣装１３「夏（６月〜９月）」ポーズ画像（１２ｆ）が合成すべき衣装画像の種類として設定され、また当月が例えば春の５月である場合には、衣装１４「春秋（４，５，１０，１１月）」ポーズ画像（１２ｄ）が合成すべき衣装画像の種類として設定される（ステップＳ６）。

そして、図１０における合成（まね）対象画像の抽出処理に移行される（ステップＳＡ）。

図１０は前記画像出力装置１０の画像合成処理に伴い合成（まね）対象の人物画像を抽出する対象画像抽出処理を示すフローチャートであり、同図（Ａ）はその対象画像抽出処理（方式１）を示すフローチャート、同図（Ｂ）はその対象画像抽出処理（方式２）を示すフローチャートである。

図１０（Ａ）における対象画像抽出処理（方式１）では、前記画像入力部１７を介して所定のタイミングで順次入力される一連の撮影画像１２inm…が撮影画像メモリ１２iに対し記憶される（ステップＡ１１）。

すると、この撮影画像メモリ１２ｉに記憶された一連の撮影画像１２inm…のそれぞれから被写体の動きに伴う画像の変化部分が当該各被写体のブロック毎に抽出され（ステップＡ１２）、これにより抽出された各被写体画像Ｈnがそのブロック毎に画像処理ワークエリア１２ｍに保存される（ステップＡ１３）。

図１０（Ｂ）における対象画像抽出処理（方式２）では、前記画像入力部１７を介して入力される撮影画像１２inmの各部分毎に距離センサ１８による距離測定が行われ（ステップＡ２１）、背景画像と被写体画像との距離差に基づき近距離側として判別される各被写体画像Ｈnがそのブロック毎に抽出される（ステップＡ２２）。

これにより抽出された各被写体画像Ｈnがそのブロック毎に画像処理ワークエリア１２ｍに保存される（ステップＡ２３）。

こうして、撮影画像１２inmから当該撮影画像１２inmに含まれる各被写体画像Ｈnがそのブロック毎に抽出されて画像処理ワークエリア１２ｍに保存されると（ステップＳＡ）、例えば図５（Ａ）または図６（Ａ）または図７（Ａ）で示すように、抽出された各被写体人物画像Ｈnのそれぞれに囲みマークＭが付加された撮影画像１２inが表示部１９に表示されると共に、撮影画像１２in上での各被写体人物画像Ｈnの位置情報が合成（まね）対象画像位置メモリ１２ｊに記憶される。

前記撮影画像１２inの中から合成（まね）対象の被写体人物画像Ｈnが抽出設定されると、図１１における対応衣装画像取得処理に移行される（ステップＳＢ）。

図１１は前記画像出力装置１０の画像合成処理に伴う対応衣装画像取得処理を示すフローチャートであり、同図（Ａ）はその対応衣装画像取得処理（方式１）を示すフローチャート、同図（Ｂ）はその対応衣装画像取得処理（方式２）を示すフローチャートである。

図１１（Ａ）における対応衣装画像取得処理（方式１）では、まず、前記撮影画像１２inから抽出されて合成（まね）対象画像として設定された被写体人物画像Ｈnと撮影位置（場所）または撮影月（年月日時刻）に応じて設定された種類の衣装の各ポーズ画像との類似度が評価され（ステップＢ１Ｃ）、最も類似度の高いポーズの衣装ポーズ画像が現在の撮影画像１２inが表示されている表示部１９に対し例えばウインドウ画面にして表示される（ステップＢ１２）。

ここで、入力部１６に対するユーザ操作に応じて前記表示部１９に表示された合成（まね）対象画像に最も類似度の高いポーズの衣装ポーズ画像が選択されると、この選択されたポーズＮｏ．の衣装画像が合成（まね）対象人物画像Ｈnに対応するポーズの衣装画像として登録される（ステップＢ１３→Ｂ１４）。

一方、前記表示部１９に合成（まね）対象人物画像Ｈnに最も類似度の高いポーズの衣装ポーズ画像が表示された状態で、入力部１６に対するユーザ操作に応じて「次表示」が指示されると、当該「次表示」の操作毎に次に類似度の高いポーズの衣装ポーズ画像が順番に表示される（ステップＢ１３→Ｂ１５）。

そして、所望の類似度のポーズの衣装ポーズ画像が選択表示され、入力部１６に対するユーザ操作に応じて当該表示された衣装ポーズ画像が選択されると、この選択されたポーズＮｏ．の衣装画像が合成（まね）対象人物画像Ｈnに対応するポーズの衣装画像として登録される（ステップＢ１３→Ｂ１４）。

このように、対応衣装画像取得処理（方式１）では、撮影画像１２inから抽出設定された合成（まね）対象画像としての被写体人物画像Ｈnに対し、撮影位置（場所）または撮影月（年月日時刻）に応じて設定された種類の衣装の各ポーズ画像との類似度が直接評価され、これに基づき被写体人物画像Ｈnのポーズを真似て置き換え（着せ替え）られる衣装ポーズ画像が決定される。

図１１（Ｂ）における対応衣装画像取得処理（方式２）では、まず、前記撮影画像１２inから抽出されて合成（まね）対象画像として設定された被写体人物画像Ｈnとモデルポーズ画像メモリ１２ｂに記憶されている各ポーズのモデル画像との類似度が評価され（ステップＢ２Ｃ）、最も類似度の高いポーズのモデル画像のポーズＮｏ．に対応する、撮影場所または撮影月に応じた設定種類の衣装画像が現在の撮影画像１２inが表示されている表示部１９に対し例えばウインドウ画面にして表示される（ステップＢ２２）。

ここで、入力部１６に対するユーザ操作に応じて前記表示部１９に表示された真似対象人物画像Ｈnに最も類似度の高いモデルポーズに対応する衣装ポーズ画像が選択されると、この選択されたポーズＮｏ．の衣装ポーズ画像が合成（まね）対象人物画像Ｈnに対応するポーズの衣装画像として登録される（ステップＢ２３→Ｂ２４）。

一方、前記表示部１９に真似対象人物画像Ｈnに最も類似度の高いポーズのモデル画像のポーズＮｏ．に対応する、撮影場所または撮影月に応じた設定種類の衣装画像が表示された状態で、入力部１６に対するユーザ操作に応じて「次表示」が指示されると、当該「次表示」の操作毎に次に類似度の高いモデル画像のポーズＮｏ．に対応する設定種類の衣装画像が順番に表示される（ステップＢ２３→Ｂ２５）。

そして、所望の類似度のモデルポーズに対応する設定種類の衣装画像が選択表示され、入力部１６に対するユーザ操作に応じて当該表示された衣装ポーズ画像が選択されると、この選択されたポーズＮｏ．の衣装ポーズ画像が合成（まね）対象人物画像Ｈnに対応するポーズの衣装画像として登録される（ステップＢ２３→Ｂ２４）。

このように、対応衣装画像取得処理（方式２）では、撮影画像１２inから抽出設定された真似対象画像としての被写体人物画像Ｈnに対し、人物の基本モデルである各ポーズ毎のモデル画像との類似度が評価され、これに基づき被写体人物画像Ｈnのポーズを真似て置き換え（着せ替え）られる衣装ポーズ画像が決定される。

この場合、真似対象画像としての被写体人物画像Ｈnに対し、撮影場所または撮影月に応じた設定種類の衣装の各ポーズ画像との類似度を直接評価して置き換え（着せ替え）の衣装画像を決定するようにした対応衣装画像取得処理（方式１）に比較して、各ポーズ毎のモデル画像との類似度を評価し選択されたモデルポーズＮｏ．から置き換え（着せ替え）の衣装画像を決定するようにした対応衣装画像取得処理（方式２）の方が、類似度の評価対象に装飾のないシンプルな人物モデルを用いることから被写体人物画像Ｈnとの高い類似度が得られやすく、より類似性（真似度）の高いポーズの衣装画像を取得できる利点がある。

図１２は前記画像出力装置１０の画像合成処理に伴う対応衣装画像取得処理（方式１）（方式２）での真似対象人物画像との類似度評価処理を示すフローチャートである。

対応衣装画像取得処理（方式１）での類似度評価処理の場合は設定種類の衣装の各ポーズ画像との類似度を評価し、対応衣装画像取得処理（方式２）での類似度評価処理の場合は各ポーズ毎のモデル画像との類似度を評価する。

図１３は前記画像出力装置１０の対応衣装画像取得処理（方式１）での類似度評価処理に伴う設定種類の衣装ポーズ画像との類似度評価例を示す図である。

図１４は前記画像出力装置１０の対応衣装画像取得処理（方式２）での類似度評価処理に伴うモデル画像との類似度評価例を示す図である。

まず、類似度評価処理（方式１）の場合、例えば図１３（Ａ）に示すように、設定種類の衣装（例えば衣装１３「夏（６月〜９月）」１２ｆ）における先頭のポーズＮｏ．の衣装画像１２fW(1)が読み出され（ステップＣ１）、同図（Ｘ）で示す真似対象人物画像Ｈ１との縦・横のサイズが合わされる（ステップＣ２）。

すると、前記真似対象画像Ｈ１と縦横サイズの合わされた夏衣装ポーズ画像１２fW(1)との重ね合わせ評価が行われ、その評価値（％）が算出されて当該夏衣装ポーズ画像１２fW(1)との類似度として記憶される（ステップＣ３）。

ここで、今回の類似度評価対象のポーズＮｏ．の衣装ポーズ画像１２fW(1)が左右非対称の画像であるか否か判断され（ステップＣ４）、当該ポーズの衣装画像が左右非対称の画像ではないと判断された場合には（ステップＣ４「Ｎｏ」）、順次、次のポーズＮｏ．の夏衣装画像１２fW(2)…との間でサイズ合わせ処理と重ね合わせ評価値の算出処理とによる類似度の算出，記憶処理が繰り返される（ステップＣ８→Ｃ９→Ｃ２〜Ｃ４）。

一方、例えば図１３（Ｂ）に示すように、今回の類似度評価対象のポーズＮｏ．の夏衣装画像が左右非対称の撮影者画像（例えば「さよなら」１２fW(11)）であると判断された場合には、例えば図１３（Ｃ）に示すように、当該ポーズの衣装画像（１２fW(11)）が左右反転され（ステップＣ４→Ｃ５）、この反転された衣装画像（１２fW(11)R）について真似対象画像との縦・横のサイズが合わされる（ステップＣ６）。

すると、前記真似対象画像と縦横サイズの合わされた反転衣装画像との重ね合わせ評価が行われ、その評価値（％）が算出されて当該反転夏衣装ポーズ画像との類似度として記憶される（ステップＣ７）。

この後、設定種類の衣装における次のポーズＮｏ．の衣装画像（例えば１２fW(n)）がある場合には（ステップＣ８）、当該次のポーズＮｏ．の衣装画像（１２fW(n)）が順次読み出され（ステップＣ９）、前記同様に真似対象人物画像Ｈｎと設定種類の各ポーズ毎の衣装画像（１２fW(n)）との類似度評価処理が繰り返される（ステップＣ２〜Ｃ７）。

これにより、例えば図１３で示したように、合成（まね）対象の被写体人物画像Ｈ１に対して「夏」の衣装画像１２fW(n)…との類似度評価を行った場合には、ポーズＮｏ．１に対応する夏衣装画像１２fW(1)が最も類似度の高い衣装ポーズ画像として評価される。

次に、類似度評価処理（方式２）の場合、例えば図１４（Ａ）に示すように、先頭のポーズＮｏ．のモデル画像１２b(1A)が読み出され（ステップＣ１）、同図（Ｘ）で示す真似対象人物画像Ｈ１との縦・横のサイズが合わされる（ステップＣ２）。

すると、前記真似対象人物画像Ｈ１と縦横サイズの合わされたモデル画像１２b(1A)との重ね合わせ評価が行われ、その評価値（％）が算出されて当該ポーズのモデル画像１２b(1A)との類似度として記憶される（ステップＣ３）。

ここで、今回の類似度評価対象のポーズＮｏ．のモデル画像が左右非対称の画像であるか否か判断され（ステップＣ４）、例えば図１４（Ａ）で示すように、当該ポーズのモデル画像１２ｂ(1A)が左右非対称の画像ではないと判断された場合には（ステップＣ４「Ｎｏ」）、次のポーズＮｏ．のモデル画像が読み出され（ステップＣ８→Ｃ９）、前記同様に真似対象人物画像Ｈ１と次のポーズのモデル画像との類似度評価処理が繰り返される（ステップＣ２〜Ｃ４）。

一方、例えば図１４（Ｂ）で示すように、今回の類似度評価対象のポーズＮｏ．1Bのモデル画像１２ｂ(1B)が左右非対称のモデル画像であると判断された場合には、当該ポーズ1Bのモデル画像１２ｂ(1B)が左右反転され（ステップＣ４→Ｃ５）、図１４（Ｃ）で示すように、この反転されたモデル画像１２ｂ(1B)Rについて真似対象人物画像Ｈ１との縦・横のサイズが合わされる（ステップＣ６）。

すると、前記真似対象人物画像Ｈ１と縦横サイズの合わされた反転モデル画像１２ｂ(1B)Rとの重ね合わせ評価が行われ、その評価値（％）が算出されて当該ポーズの反転モデル画像１２ｂ(1B)Rとの類似度として記憶される（ステップＣ７）。

この後、次のポーズＮｏ．のモデル画像１２b(n)がある場合には（ステップＣ８）、当該次のポーズＮｏ．のモデル画像１２b(n)が順次読み出され（ステップＣ９）、前記同様に真似対象人物画像Ｈｎと各ポーズ毎のモデル画像１２b(n)との類似度評価処理が繰り返される（ステップＣ２〜Ｃ７）。

これにより、例えば図１４で示したように、合成（まね）対象の被写体人物画像Ｈ１に対してモデル画像１２b(n)との類似度評価を行った場合には、ポーズＮｏ．1Aに対応するモデル画像１２ｂ(1A)が最も類似度の高いポーズのモデル画像として評価される。

このように、前記図１１〜図１４を参照して説明した対応衣装画像取得処理（ステップＳＢ）によって、撮影画像１２inから抽出された真似対象画像としての被写体人物画像Ｈnを真似たポーズの設定種類の衣装画像が決定されると、例えば図５で示したように、時代劇村での撮影において、前記対応衣装画像取得処理（図１１参照）により取得された、撮影画像１２i1上の真似対象画像である被写体人物Ｈ１，Ｈ２，Ｈ３の各ポーズ「しゃがむ」の真似をした設定種類の衣装である「時代劇」の各衣装ポーズ画像１２cM(19)，１２cW(19)，１２cM(19)が、それぞれ当該合成（まね）対象の被写体人物画像Ｈ１，Ｈ２，Ｈ３とその顔部分のみ残して置き換え（着せ替え）られて合成表示される（ステップＳ７，Ｓ８）。

この場合、撮影画像１２i1に対して、前記合成（まね）対象の被写体人物画像Ｈ１，Ｈ２，Ｈ３にそれぞれ類似のポーズの各時代劇衣装画像１２cM(19)，１２cW(19)，１２cM(19)を、その撮影時に距離センサ１８により検出された撮影距離が遠い順に各被写体画像Ｈ１，Ｈ２，Ｈ３の位置（合成（まね）対象画像位置１２j1）に重ねて合成する。

すなわち、各衣装画像の顔部分には画像がないことから、撮影画像１２i1における各被写体人物像Ｈ１，Ｈ２，Ｈ３の顔部分は残されて前記各時代劇衣装画像１２cM(19)，１２cW(19)，１２cM(19)が重ねて置き換えられるので、時代劇村での撮影においては、元の撮影画像１２i1に対し、各被写体人物像Ｈ１，Ｈ２，Ｈ３の衣装が時代劇スタイルに着せ替えられてなる合成画像１２i11が作成表示される。

そして、図５（Ｄ）で示したように、被写体画像Ｈ１，Ｈ２，Ｈ３のポーズを真似た各時代劇衣装画像１２cM(19)，１２cW(19)，１２cM(19)が、当該被写体画像Ｈ１，Ｈ２，Ｈ３とその顔部分だけ残して置き換えられてなる合成画像データ１２i11は、シャッタキー１６ｃの全押し操作が検知されることで、撮影画像メモリ１２ｉに登録される（ステップＳ９）。

また、例えば図６で示したように、ウエスタン村での撮影では、前記対応衣装画像取得処理（ステップＳＢ）により取得された、撮影画像１２i2上の真似対象画像である被写体人物Ｈ１，Ｈ２，Ｈ３の各ポーズ「歩く（横）反転」「ばんざい」「歩く（横）」の真似をした設定種類の衣装である「ウエスタン」の各衣装ポーズ画像１２dM(4)R，１２dM(20)，１２dW(4)がそれぞれ当該合成（まね）対象の被写体人物画像Ｈ１，Ｈ２，Ｈ３とその顔部分のみ残して置き換え（着せ替え）られて合成表示される（ステップＳ７，Ｓ８）。

この場合、撮影画像１２i2に対して、前記合成（まね）対象の被写体人物画像Ｈ１，Ｈ２，Ｈ３にそれぞれ類似のポーズの各ウエスタン衣装画像１２dM(4)R，１２dM(20)，１２dW(4)を、その撮影時に距離センサ１８により検出された撮影距離が遠い順に各被写体画像Ｈ１，Ｈ２，Ｈ３の位置（合成（まね）対象画像位置１２j2）に重ねて合成する。

すなわちこの場合も、各衣装画像の顔部分には画像がないことから、撮影画像１２i2における各被写体人物像Ｈ１，Ｈ２，Ｈ３の顔部分は残されて前記各ウエスタン衣装画像１２dM(4)R，１２dM(20)，１２dW(4)が重ねて置き換えられるので、ウエスタン村での撮影においては、元の撮影画像１２i2に対し、各被写体人物像Ｈ１，Ｈ２，Ｈ３の衣装がウエスタンスタイルに着せ替えられてなる合成画像１２i21が作成表示される。

そして、図６（Ｄ）で示したように、被写体画像Ｈ１，Ｈ２，Ｈ３のポーズを真似た各ウエスタン衣装画像１２dM(4)R，１２dM(20)，１２dW(4)が、当該被写体画像Ｈ１，Ｈ２，Ｈ３とその顔部分だけ残して置き換えられてなる合成画像データ１２i21は、シャッタキー１６ｃの全押し操作が検知されることで、撮影画像メモリ１２ｉに登録される（ステップＳ９）。

一方、例えば図７で示したように、撮影場所の位置情報が特定の位置情報と一致しない場合の８月の撮影では、前記対応衣装画像取得処理（ステップＳＢ）により取得された、撮影画像１２i3上の真似対象画像である被写体人物Ｈ１のポーズ「はいチーズ（アップ）」の真似をした設定種類の衣装である「夏」の衣装ポーズ画像１２fW(1)が当該合成（まね）対象の被写体人物画像Ｈ１とその顔部分のみ残して置き換え（着せ替え）られて合成表示される（ステップＳ７，Ｓ８）。

この場合、撮影画像１２i3に対して、前記合成（まね）対象の被写体人物画像Ｈ１に類似のポーズの夏衣装画像１２fW(1)を、被写体画像Ｈ１の位置（合成（まね）対象画像位置１２j3）に重ねて合成する。

すなわちこの場合も、衣装画像の顔部分には画像がないことから、撮影画像１２i3における被写体人物像Ｈ１の顔部分は残されて前記夏衣装画像１２fW(1)が重ねて置き換えられるので、夏の８月の撮影においては、元の撮影画像１２i3に対し、被写体人物像Ｈ１の衣装が水着スタイルに着せ替えられてなる合成画像１２i31が作成表示される。

そして、図７（Ｄ）で示したように、被写体画像Ｈ１のポーズを真似た夏衣装画像１２fW(1)が、当該被写体画像Ｈ１とその顔部分だけ残して置き換えられてなる合成画像データ１２i31は、シャッタキー１６ｃの全押し操作が検知されることで、撮影画像メモリ１２ｉに登録される（ステップＳ９）。

なお、撮影画像メモリ１２ｉに登録された撮影（合成）画像は、必要に応じて画像出力部２０から出力され、メモリカード２０Ａによる記録、またはＶＴＲ（録画装置）２０Ｂによる記録、または画像印刷機２０Ｃによる印刷が行われる。

これにより、位置情報登録メモリ１２ｋに登録された特定の場所での撮影に際しては、撮影画像１２in上の被写体人物画像Ｈnは、当該撮影場所の雰囲気に応じた衣装画像に着せ替えられて撮影表示されるようになり、また、特定の場所以外でも、現在の撮影月が検知され、撮影画像１２in上の被写体人物画像Ｈnは、当該撮影月の季節に応じた衣装画像に着せ替えられて撮影表示されるようになる。

したがって、前記構成の画像出力装置１０による画像合成処理機能によれば、写真撮影を行うのに伴い、撮影画像１２inについて合成（まね）対象の被写体人物画像Ｈｎが抽出されると、現在の撮影場所（位置）が特定の場所であるか否か判断され、特定の場所であると判断された場合には、その場所の雰囲気に応じた種類の衣装で前記合成（まね）対象人物画像Ｈｎに対応するポーズの顔抜き衣装画像が取得されると共に、当該合成（まね）対象人物画像Ｈｎを前記取得された撮影場所に応じた顔抜き衣装画像に置き換え合成した合成画像１２in1が作成されて表示されるので、写真撮影を行う場所の雰囲気に合わせて被写体人物の衣装を異ならせた合成画像１２in1を、当該被写体人物画像Ｈｎのポーズを真似たポーズの顔抜き衣装画像の合成によって違和感なく非常に面白味のある合成画像１２in1として撮影表示できるようになる。

また、前記構成の画像出力装置１０による画像合成処理機能によれば、写真撮影を行うのに伴い、撮影画像１２inについて合成（まね）対象の被写体人物画像Ｈｎが抽出されると、現在の撮影時間（季節／年／月／日／時）が検知され、例えばその季節の雰囲気に合わせた種類の衣装で前記合成（まね）対象人物画像Ｈｎに対応するポーズの顔抜き衣装画像が取得されると共に、当該合成（まね）対象人物画像Ｈｎを前記取得された撮影季節に応じた顔抜き衣装画像に置き換え合成した合成画像１２inmが作成されて表示されるので、写真撮影を行う季節の雰囲気に合わせて被写体人物の衣装を異ならせた合成画像１２inmを、当該被写体人物画像Ｈｎのポーズを真似たポーズの顔抜き衣装画像によって違和感なく非常に面白味のある合成画像１２inmとして撮影表示できるようになる。

また、前記構成の画像出力装置１０による画像合成処理に伴う対象画像抽出機能（方式１）によれば、画像入力部１７を介して所定のタイミングで順次入力される一連の撮影画像１２in…が画像処理ワークエリアに記憶され、この一連の撮影画像１２in…のそれぞれから被写体の動きに伴う画像の変化部分が当該各被写体人物像のブロックＭ毎に抽出されるので、この撮影画像１２inを含む一連の取り込み画像１２in…に基づき抽出された各被写体人物画像Ｈｎ…の画像部分を、当該撮影画像１２inに対応付けた合成（まね）対象画像Ｈｎの位置情報として容易に合成（まね）対象画像位置メモリ１２ｊに記憶できるようになる。

また、前記構成の画像出力装置１０による画像合成処理に伴う対象画像抽出機能（方式２）によれば、画像入力部１７を介して入力される撮影画像１２inの各部分毎に距離センサ１８による距離測定が行われて画像処理ワークエリアに記憶され、背景画像と被写体画像との距離差に基づき近距離側として判別される各被写体人物画像Ｈn…がそのブロックＭ毎に抽出されるので、撮影時点の１枚の取り込み画像に基づき抽出された各被写体人物画像Ｈｎ…の画像部分を、当該撮影画像１２inに対応付けた合成（まね）対象画像Ｈｎの位置情報として容易に合成（まね）対象画像位置メモリ１２ｊに記憶できるようになる。

また、前記構成の画像出力装置１０による画像合成処理に伴う対応衣装画像取得機能（方式１）によれば、撮影画像１２inから抽出された真似対象画像としての被写体人物画像Ｈnに対し、撮影場所や撮影時期に応じて設定された種類の衣装の各ポーズ毎の顔抜き衣装画像との類似度が直接評価され、これに基づき被写体人物画像Ｈnのポーズを真似たポーズの設定種類の衣装画像が決定されるので、被写体人物画像Ｈｎのポーズをまねてその元の撮影衣装部分の画像と置き換え（着せ替え）合成するための衣装画像を容易に取得できるようになる。

また、前記構成の画像出力装置１０による画像合成処理に伴う対応衣装画像取得機能（方式２）によれば、撮影画像１２inから抽出された真似対象画像としての被写体人物画像Ｈnに対し、人物の基本モデルである各ポーズ毎のモデル画像との類似度が評価され、これに基づき被写体人物画像Ｈnを真似たポーズで撮影場所や撮影時期に応じた設定種類の衣装画像が決定されるので、被写体人物画像Ｈｎのポーズをまねてその元の撮影衣装部分の画像と置き換え（着せ替え）合成するための衣装画像を容易に取得できるだけでなく、類似度の評価対象に標準的人物モデルを用いることから被写体人物画像Ｈnとの高い類似度が得られやすく、より類似性（真似度）の高いポーズの衣装画像を取得できるようになる。

なお、前記実施形態における画像合成機能では、撮影画像１２inから抽出された被写体人物画像Ｈｎに対応するポーズの設定種類の顔抜き衣装画像を選択的に取得して、この取得された顔抜き衣装画像を撮影画像１２inの被写体人物画像Ｈｎと置き換え合成する構成としたが、実写や実写に近いコンピュータグラフィックスによる様々な種類の衣装画像を各ポーズ毎に予め記憶させておき、この実写などによる各ポーズの衣装画像を場所や季節に応じた衣装画像の種類として設定し、撮影画像１２inから抽出された被写体人物画像Ｈｎのポーズに対応する衣装画像として置き換え合成する構成としてもよい。

また、前記実施形態では、撮影画像１２inが静止画である場合について説明したが、画像入力部１７を介して例えばデジタルビデオムービー１７Ｂにより撮影入力される動画像に基づいて、当該動画像内の背景画像に対して時系列的に変化する被写体画像Ｈｎ…を順次抽出し、この抽出された被写体人物画像Ｈｎに対応するポーズの設定種類の衣装画像を取得して、前記撮影動画像内でその被写体人物画像Ｈnと置き換え合成する構成としてもよい。

なお、前記実施形態の画像出力装置１０では、デジタルカメラ付き携帯電話やデジタルカメラのその本体において、撮影画像１２inにおける被写体人物画像Ｈnを真似たポーズの撮影場所や撮影時期に応じた種類の顔抜き衣装画像を取得して、当該被写体人物画像Ｈnの顔部分のみ残した衣装画像の置き換え（着せ替え）合成処理を行う構成としたが、次の第２実施形態において説明するように、インターネットなどの通信ネットワークＮ上にあるＷｅｂサーバ３０において、各アクセスユーザからの写真撮影に伴う撮影画像を受信し、この受信撮影画像について、前記同様に、合成（まね）対象となる被写体人物画像Ｈnの抽出処理、この被写体人物画像Ｈnを真似たポーズで撮影場所や撮影時期に応じた種類の顔抜き衣装画像の取得処理、および前記受信撮影画像の被写体人物画像Ｈnに対する顔抜き衣装画像の置き換え合成処理を行い、この合成画像をアクセス元のユーザ端末へ配信する構成としてもよい。

(第２実施形態)
図１５は本発明の第２実施形態に係る画像配信サーバ３０の電子回路の構成を示すブロック図である。

この画像配信サーバ３０は、各種の記録媒体に記録されたプログラム、又は、伝送されたプログラムを読み込んで、その読み込んだプログラムによって動作が制御されるコンピュータによって構成され、その電子回路には、ＣＰＵ(central processing unit)３１が備えられる。

ＣＰＵ３１は、メモリ３２内に予め記憶されたサーバ制御プログラム、あるいはＣＤ−ＲＯＭなどの外部記録媒体３３から記録媒体読取部３４を介して前記メモリ３２に読み込まれたサーバ制御プログラム、あるいはインターネットＮ上の他のＷｅｂサーバ（この場合はプログラムサーバ）から電送制御部３５を介して前記メモリ３２に読み込まれたサーバ制御プログラムに応じて、回路各部の動作を制御するもので、前記メモリ３２に記憶されたサーバ制御プログラムは、電送制御部３５を介して接続されるインターネットＮ上の各通信端末(デジタルカメラ付き携帯電話１０Ａ、通信機能付きデジタルカメラ１０Ｂ、その他ＰＣ(personal computer)端末)などや他のＷｅｂサーバとの通信信号に応じて起動される。

前記ＣＰＵ３１には、前記メモリ３２、記録媒体読取部３４、電送制御部３５が接続される他に、ＬＣＤからなる表示部３６などが接続される。

そして、メモリ３２には、当該画像配信サーバ３０の全体の動作を司るシステムプログラムや、電送制御部３５を介してインターネットＮ上の各通信端末(デジタルカメラ付き携帯電話１０Ａ、通信機能付きデジタルカメラ１０Ｂ、その他ＰＣ(personal computer)端末など）、他のＷｅｂサーバとデータ通信するための通信プログラムが記憶される他に、前記インターネットＮ上の各通信端末（１０Ａ，１０など）とのアクセスに基づき、それぞれそのユーザ端末毎の撮影画像ファイル３２ｇ１，３２ｇ２，…を生成管理し、撮影画像データを保存・配信したり、当該撮影画像についての合成（まね）対象画像位置，撮影位置情報を記憶したり、撮影画像に対する合成画像の作成処理およびその出力配信処理などを行うための画像出力処理プログラム３２ａなどが記憶される。

従って、この画像配信サーバ３０のメモリ３２にも、前記画像出力装置１０のメモリ１２と略同様に、モデルポーズ画像メモリ３２ｂ、衣装１「時代劇」ポーズ画像メモリ３２ｃ、衣装２「ウエスタン」ポーズ画像メモリ３２ｄ、衣装３「中世ヨーロッパ」ポーズ画像メモリ３２ｅ…や図示しない衣装１３「夏（６月〜９月）」ポーズ画像メモリ、衣装１４「春秋（４，５，１０，１１月）」ポーズ画像メモリ、衣装１５「冬（１２月〜３月）」ポーズ画像メモリなどが用意され、さらにそのワークエリアには、現在年月日メモリ３２ｆの他、当該画像配信サーバ３０によって各ユーザ端末毎の撮影画像データおよび撮影画像合成用の各設定情報が管理される撮影画像ファイル３２ｇ１，３２ｇ２，…が用意される。

各ユーザ端末毎の撮影画像ファイル（１）３２ｇ１，（２）３２ｇ２，…には、そのそれぞれのファイル（１）（２）…毎に、ユーザ名：ファイル名：ユーザ認証データ(指紋画像やパスワードなど)３２g1a，３２g2a，…に対応付けされた撮影画像メモリ３２g1b，３２g2b，…、合成（まね）対象画像位置メモリ３２g1c，３２g2c，…、撮影位置情報メモリ３２g1d，３２g2d，…などが用意され、撮影画像メモリ３２g1b，３２g2b，…および合成（まね）対象画像位置メモリ３２g1c，３２g2c，…には、ともに前記第１実施形態の画像出力装置１０における各メモリと同様の情報が記憶管理され、撮影位置情報メモリ３２g1d，３２g2d，…には、ユーザ端末から受信された各撮影画像３２g1bn，３２g2bn，…についての撮影場所を示す位置情報３２g1dn，３２g2dn，…が共に受信されて記憶管理される。

このような構成の画像配信サーバ３０をインターネットなどの通信ネットワークＮ上に開設し、各ユーザ端末としてのデジタルカメラ付き携帯電話１０Ａや通信機能付きデジタルカメラ１０Ｂなどとの通信を行い、各ユーザ端末における撮影画像と共にその撮影場所の位置情報を受信し、当該画像配信サーバ３０において前記第１実施形態の画像出力装置１０と同様に管理する。これにより画像配信サーバ３０は、各ユーザ端末からの撮影位置情報を伴う撮影画像の受信およびこれに基づく合成画像の作成とその配信要求に応じて、当該受信撮影画像について合成（まね）対象の被写体人物画像Ｈnを抽出すると共に、その撮影場所または撮影時期に応じた種類の衣装画像で前記被写体人物画像Ｈnを真似たポーズの顔抜き衣装画像を取得でき、前記第１実施形態の画像出力装置１０と同様に被写体人物画像Ｈnを顔抜き衣装画像に置き換えた合成画像を作成することができる。そして、その合成画像を配信要求元の各ユーザ端末へ配信することができる。

この場合、各撮影画像ファイル３２ｇｎにおける受信撮影画像とその撮影位置情報に基づいた合成画像の作成処理とその配信処理は、その何れも各対応するユーザ端末の認証データ３２gnaが入力一致判断された場合にのみ実行される。

したがって、前記構成の画像配信サーバ３０において各ユーザ端末との間でアクセスしながら実施される画像合成機能や合成画像の配信機能によれば、各ユーザ端末から撮影画像３２gnbおよびその撮影位置情報３２gndを受信すると共に、合成画像の作成およびその配信要求を受信すると、この合成画像の作成およびその配信要求に応答して、当該撮影画像３２gnbの撮影位置情報３２gndが特定の場所の位置情報と一致するか否か判断され、特定の撮影場所である場合には当該撮影場所に応じた種類の衣装が設定され、また特定の撮影場所でない場合でも撮影時期に応じた種類の衣装が設定される。そして、撮影画像３２gnbから合成（まね）対象の被写体人物画像Ｈnが抽出されると共に、この被写体人物画像Ｈnを真似たポーズの前記設定種類の顔抜き衣装画像が取得され、前記撮影画像３２gnbの被写体人物画像Ｈnを前記取得された顔抜き衣装画像に置き換え合成した合成画像が作成されて配信されるので、各ユーザ端末にて撮影した撮影画像３２gnbに対し、その撮影場所や撮影時期に応じた種類の衣装画像を、被写体人物画像Ｈｎを真似たポーズの衣装画像として違和感なく置き換え合成して配信できるようになる。

なお、前記各実施形態では、デジタルカメラなどよる撮影画像を元画像として種々の合成画像を作成して出力する場合について説明したが、元画像は撮影画像に限らず、画像メモリや光ディスクなどの各種の記録媒体に既に記録されている画像を対象としてもよい。ここで、当該元画像からその撮影情報がないために前記対象画像抽出処理（方式１）（方式２）での各被写体人物画像の抽出が行えない場合には、元画像に輪郭強調処理を施して肌色部分を広く含む輪郭領域を抽出したり、人体頭部を形作る円形部分を含む輪郭領域を抽出したりすることによって、各被写体人物画像の抽出を行う構成とすればよい。

なお、前記各実施形態において記載した画像出力装置１０（画像配信サーバ３０）による各処理の手法、すなわち、図９のフローチャートに示す画像合成処理、図１０のフローチャートに示す当該画像合成処理に伴う対象画像抽出処理、図１１のフローチャートに示す画像合成処理に伴う対応衣装画像取得処理、図１２のフローチャートに示す当該対応衣装画像取得処理に伴う真似対象人物画像との類似度評価処理等の各手法は、何れもコンピュータに実行させることができるプログラムとして、メモリカード（ＲＯＭカード、ＲＡＭカード等）、磁気ディスク（フロッピディスク、ハードディスク等）、光ディスク（ＣＤ−ＲＯＭ、ＤＶＤ等）、半導体メモリ等の外部記録媒体１３（３３）に格納して配布することができる。そして、通信ネットワーク（インターネット）Ｎとの通信機能を備えた種々のコンピュータ端末は、この外部記録媒体１３（３３）に記憶されたプログラムを記録媒体読取部１４（３４）によってメモリ１２（３２）に読み込み、この読み込んだプログラムによって動作が制御されることにより、前記実施形態において説明した画像合成機能を実現し、前述した手法による同様の処理を実行することができる。

また、前記各手法を実現するためのプログラムのデータは、プログラムコードの形態として通信ネットワーク（インターネット）Ｎ上を伝送させることができ、この通信ネットワーク（インターネット）Ｎに接続されたコンピュータ端末から前記のプログラムデータを取り込み、前述した画像合成機能を実現することもできる。

なお、本願発明は、前記各実施形態に限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で種々に変形することが可能である。さらに、前記各実施形態には種々の段階の発明が含まれており、開示される複数の構成要件における適宜な組み合わせにより種々の発明が抽出され得る。例えば、各実施形態に示される全構成要件から幾つかの構成要件が削除されたり、幾つかの構成要件が組み合わされても、発明が解決しようとする課題の欄で述べた課題が解決でき、発明の効果の欄で述べられている効果が得られる場合には、この構成要件が削除されたり組み合わされた構成が発明として抽出され得るものである。

本発明の第１実施形態に係る画像出力装置１０の電子回路の構成を示すブロック図。 前記画像出力装置１０の衣装１「時代劇」ポーズ画像メモリ１２ｃ：衣装２「ウエスタン」ポーズ画像メモリ１２ｄ…衣装１３「夏（６月〜９月）」ポーズ画像メモリ１２ｆにそれぞれ記憶された各種のポーズに対応する各男性版の衣装画像１２cM，１２dM，１２fMを示す図。 前記画像出力装置１０の衣装１「時代劇」ポーズ画像メモリ１２ｃ：衣装２「ウエスタン」ポーズ画像メモリ１２ｄ…衣装１３「夏（６月〜９月）」ポーズ画像メモリ１２ｆにそれぞれ記憶された各種のポーズに対応する各女性版の衣装画像１２cW，１２dW，１２fWを示す図。 前記画像出力装置１０のモデルポーズ画像メモリ１２ｂに記憶されたモデルポーズに対応するモデル画像を示す図。 前記画像出力装置１０の撮影画像の合成（まね）対象人物像に対する撮影場所（時代劇村）に応じた衣装ポーズ画像の置き換え（着せ替え）合成状態を示す図。 前記画像出力装置１０の撮影画像の合成（まね）対象人物像に対する撮影場所（ウエスタン村）に応じた衣装ポーズ画像の置き換え（着せ替え）合成状態を示す図。 前記画像出力装置１０の撮影画像の合成（まね）対象人物像に対する撮影季節（年月日時刻）に応じた衣装ポーズ画像の置き換え（着せ替え）合成状態を示す図。 前記画像出力装置であるデジタルカメラ１０とそのクレードル１５ｘの外観構成を示す図。 前記画像出力装置１０の画像合成処理を示すフローチャート。 前記画像出力装置１０の画像合成処理に伴い合成（まね）対象の人物画像を抽出する対象画像抽出処理を示すフローチャートであり、同図（Ａ）はその対象画像抽出処理（方式１）を示すフローチャート、同図（Ｂ）はその対象画像抽出処理（方式２）を示すフローチャート。 前記画像出力装置１０の画像合成処理に伴う対応衣装画像取得処理を示すフローチャートであり、同図（Ａ）はその対応衣装画像取得処理（方式１）を示すフローチャート、同図（Ｂ）はその対応衣装画像取得処理（方式２）を示すフローチャート。 前記画像出力装置１０の画像合成処理に伴う対応衣装画像取得処理（方式１）（方式２）での真似対象人物画像との類似度評価処理を示すフローチャート。 前記画像出力装置１０の対応衣装画像取得処理（方式１）での類似度評価処理に伴う設定種類の衣装ポーズ画像との類似度評価例を示す図。 前記画像出力装置１０の対応衣装画像取得処理（方式２）での類似度評価処理に伴うモデル画像との類似度評価例を示す図。 本発明の第２実施形態に係る画像配信サーバ３０の電子回路の構成を示すブロック図。

符号の説明

１０ …画像出力装置
１０Ａ…デジタルカメラ付き携帯電話
１０Ｂ…通信機能付きデジタルカメラ
３０ …画像配信サーバ
１１、３１…ＣＰＵ
１２、３２…メモリ
１２ａ、３２ａ…画像出力処理プログラム
１２ｂ、３２ｂ…モデルポーズ画像メモリ
１２ｃ、３２ｃ…衣装１「時代劇」ポーズ画像メモリ
１２ｄ、３２ｄ…衣装２「ウエスタン」ポーズ画像メモリ
１２ｅ、３２ｅ…衣装３「中世ヨーロッパ」ポーズ画像メモリ
１２ｆ…衣装１３「夏（６月〜９月）」ポーズ画像メモリ
１２ｇ…衣装１４「春秋（４，５，１０，１１月）」ポーズ画像メモリ
１２ｈ…衣装１５「冬（１２月〜３月）」ポーズ画像メモリ
３２ｇｎ…撮影画像ファイル
３２gna…ユーザ名：ファイル名：ユーザ認証データ
１２ｉ、３２gnb…撮影画像メモリ
１２ｊ、３２gnc…合成（まね）対象画像位置メモリ
１２ｋ…位置情報登録メモリ
３２gnd…撮影位置情報メモリ
１２ｌ、３２ｆ…現在年月日メモリ
１２ｍ…画像処理ワークエリア
１３、３３…外部記録媒体
１４、３４…記録媒体読取部
１５、３５…電送制御部
１６ …入力部
１７ …画像入力部
１７Ａ…デジタルカメラ
１７Ｂ…デジタルビデオムービー
１８ …距離センサ
１８ｘ…位置情報検出部
１９、３６…表示部
２０ …画像出力部
２０Ａ…メモリカード
２０Ｂ…ＶＴＲ（録画装置）
２０Ｃ…画像印刷機
２１ …Ｗｅｂサーバ
Ｎ …通信ネットワーク（インターネット）

Claims (15)

1. 撮影画像を取得する撮影画像取得手段と、
   この撮影画像取得手段により取得された撮影画像から合成対象の人物画像を抽出する対象画像抽出手段と、
   前記撮影画像を撮影した位置情報を取得する位置情報取得手段と、
   位置情報に応じた種類の衣装で複数のポーズからなる一連の衣装画像を記憶するポーズ別衣装画像記憶手段と、
   前記位置情報取得手段により取得された撮影画像の撮影位置情報に対応し、かつ、前記対象画像抽出手段により抽出された合成対象の人物画像に応じたポーズの衣装画像を、前記ポーズ別衣装画像記憶手段により記憶された一連の衣装画像の中から取得する対応画像取得手段と、
   この対応画像取得手段により取得された衣装画像を、前記対象画像抽出手段により抽出された撮影画像の中の合成対象の人物画像に対し、当該人物画像の顔部分を残して合成する画像合成手段と、
   この画像合成手段により前記合成対象の人物画像に対応したポーズの衣装画像が合成された合成画像を出力する画像出力手段と、
   を備えたことを特徴とする画像出力装置。
2. 撮影画像を取得する撮影画像取得手段と、
   この撮影画像取得手段により取得された撮影画像から合成対象の人物画像を抽出する対象画像抽出手段と、
   前記撮影画像を撮影した時間情報を取得する時間情報取得手段と、
   時間情報に応じた種類の衣装で複数のポーズからなる一連の衣装画像を記憶するポーズ別衣装画像記憶手段と、
   前記時間情報取得手段により取得された撮影画像の撮影時間情報に対応し、かつ、前記対象画像抽出手段により抽出された合成対象の人物画像に応じたポーズの衣装画像を、前記ポーズ別衣装画像記憶手段により記憶された一連の衣装画像の中から取得する対応画像取得手段と、
   この対応画像取得手段により取得された衣装画像を、前記対象画像抽出手段により抽出された撮影画像の中の合成対象の人物画像に対し、当該人物画像の顔部分を残して合成する画像合成手段と、
   この画像合成手段により前記合成対象の人物画像に対応したポーズの衣装画像が合成された合成画像を出力する画像出力手段と、
   を備えたことを特徴とする画像出力装置。
3. 前記対象画像抽出手段は、前記撮影画像取得手段により取得された一連の複数の撮影画像の中から変化部分を合成対象の人物画像として抽出することを特徴とする請求項１または請求項２に記載の画像出力装置。
4. 前記対象画像抽出手段は、前記撮影画像取得手段により記憶された撮影画像の各画像部分間の距離情報に応じて合成対象の人物画像を抽出することを特徴とする請求項１または請求項２に記載の画像出力装置。
5. 前記対応画像取得手段は、
   前記対象画像抽出手段により抽出された撮影画像における合成対象の人物画像と前記ポーズ別衣装画像記憶手段により記憶された各ポーズごとの衣装画像との類似度を評価する類似度評価手段を有し、
   この類似度評価手段により評価された合成対象の人物画像と各衣装画像との類似度に応じて当該合成対象の人物画像に対応したポーズの衣装画像を取得することを特徴とする請求項１ないし請求項４の何れか１項に記載の画像出力装置。
6. 前記対応画像取得手段は、
   前記ポーズ別衣装画像記憶手段により記憶された一連の衣装画像の各ポーズに対応付けた複数のポーズのモデル画像を記憶するモデル画像記憶手段と、
   前記対象画像抽出手段により抽出された撮影画像における合成対象の人物画像と前記モデル画像記憶手段により記憶された各ポーズのモデル画像との類似度を評価する類似度評価手段とを有し、
   この類似度評価手段により評価された合成対象の人物画像と各モデル画像との類似度に応じて当該モデル画像のポーズに対応付けられて前記ポーズ別衣装画像記憶手段により記憶された衣装画像を取得することを特徴とする請求項１ないし請求項４の何れか１項に記載の画像出力装置。
7. 撮影手段を備え、
   前記撮影画像取得手段は、前記撮影手段により撮影された撮影画像を取得する、
   ことを特徴とする請求項１〜請求項６の何れか１項に記載の画像出力装置。
8. 撮影画像を取得する撮影画像取得ステップと、
   この撮影画像取得ステップにて取得された撮影画像から合成対象の人物画像を抽出する対象画像抽出ステップと、
   前記撮影画像を撮影した位置情報を取得する位置情報取得ステップと、
   位置情報に応じた種類の衣装で複数のポーズからなる一連の衣装画像をメモリに記憶するポーズ別衣装画像記憶ステップと、
   前記位置情報取得ステップにて取得された撮影画像の撮影位置情報に対応し、かつ、前記対象画像抽出ステップにて抽出された合成対象の人物画像に応じたポーズの衣装画像を、前記ポーズ別衣装画像記憶ステップにてメモリ記憶された一連の衣装画像の中から取得する対応画像取得ステップと、
   この対応画像取得ステップにて取得された衣装画像を、前記対象画像抽出ステップにて抽出された撮影画像の中の合成対象の人物画像に対し、当該人物画像の顔部分を残して合成する画像合成ステップと、
   この画像合成ステップにて前記合成対象の人物画像に対応したポーズの衣装画像が合成された合成画像を出力する画像出力ステップと、
   からなることを特徴とする画像出力方法。
9. 撮影画像を取得する撮影画像取得ステップと、
   この撮影画像取得ステップにて取得された撮影画像から合成対象の人物画像を抽出する対象画像抽出ステップと、
   前記撮影画像を撮影した時間情報を取得する時間情報取得ステップと、
   時間情報に応じた種類の衣装で複数のポーズからなる一連の衣装画像をメモリに記憶するポーズ別衣装画像記憶ステップと、
   前記時間情報取得ステップにて取得された撮影画像の撮影時間情報に対応し、かつ、前記対象画像抽出ステップにて抽出された合成対象の人物画像に応じたポーズの衣装画像を、前記ポーズ別衣装画像記憶ステップにてメモリに記憶された一連の衣装画像の中から取得する対応画像取得ステップと、
   この対応画像取得ステップにて取得された衣装画像を、前記対象画像抽出ステップにて抽出された撮影画像の中の合成対象の人物画像に対し、当該人物画像の顔部分を残して合成する画像合成ステップと、
   この画像合成ステップにて前記合成対象の人物画像に対応したポーズの衣装画像が合成された合成画像を出力する画像出力ステップと、
   からなることを特徴とする画像出力方法。
10. コンピュータを制御して画像の出力処理を行うための画像出力処理プログラムであって、
    前記コンピュータを、
    撮影画像を取得する撮影画像取得手段、
    この撮影画像取得手段により取得された撮影画像から合成対象の人物画像を抽出する対象画像抽出手段、
    前記撮影画像を撮影した位置情報を取得する位置情報取得手段、
    位置情報に応じた種類の衣装で複数のポーズからなる一連の衣装画像をメモリに記憶するポーズ別衣装画像記憶手段、
    前記位置情報取得手段により取得された撮影画像の撮影位置情報に対応し、かつ、前記対象画像抽出手段により抽出された合成対象の人物画像に応じたポーズの衣装画像を、前記ポーズ別衣装画像記憶手段によりメモリに記憶された一連の衣装画像の中から取得する対応画像取得手段、
    この対応画像取得手段により取得された衣装画像を、前記対象画像抽出手段により抽出された撮影画像の中の合成対象の人物画像に対し、当該人物画像の顔部分を残して合成する画像合成手段、
    この画像合成手段により前記合成対象の人物画像に対応したポーズの衣装画像が合成された合成画像を出力する画像出力手段、
    として機能させるようにしたコンピュータ読み込み可能な画像出力処理プログラム。
11. コンピュータを制御して画像の出力処理を行うための画像出力処理プログラムであって、
    前記コンピュータを、
    撮影画像を取得する撮影画像取得手段、
    この撮影画像取得手段により取得された撮影画像から合成対象の人物画像を抽出する対象画像抽出手段、
    前記撮影画像を撮影した時間情報を取得する時間情報取得手段、
    時間情報に応じた種類の衣装で複数のポーズからなる一連の衣装画像をメモリに記憶するポーズ別衣装画像記憶手段、
    前記時間情報取得手段により取得された撮影画像の撮影時間情報に対応し、かつ、前記対象画像抽出手段により抽出された合成対象の人物画像に応じたポーズの衣装画像を、前記ポーズ別衣装画像記憶手段によりメモリに記憶された一連の衣装画像の中から取得する対応画像取得手段、
    この対応画像取得手段により取得された衣装画像を、前記対象画像抽出手段により抽出された撮影画像の中の合成対象の人物画像に対し、当該人物画像の顔部分を残して合成する画像合成手段、
    この画像合成手段により前記合成対象の人物画像に対応したポーズの衣装画像が合成された合成画像を出力する画像出力手段、
    として機能させるようにしたコンピュータ読み込み可能な画像出力処理プログラム。
12. 端末から撮影画像を受信する撮影画像受信手段と、
    この撮影画像受信手段により受信された撮影画像から合成対象の人物画像を抽出する対象画像抽出手段と、
    前記端末から前記撮影画像を撮影した位置情報を受信する位置情報受信手段と、
    位置情報に応じた種類の衣装で複数のポーズからなる一連の衣装画像を記憶するポーズ別衣装画像記憶手段と、
    前記位置情報受信手段により受信された撮影画像の撮影位置情報に対応し、かつ、前記対象画像抽出手段により抽出された合成対象の人物画像に応じたポーズの衣装画像を、前記ポーズ別衣装画像記憶手段により記憶された一連の衣装画像の中から取得する対応画像取得手段と、
    この対応画像取得手段により取得された衣装画像を、前記対象画像抽出手段により抽出された撮影画像の中の合成対象の人物画像に対し、当該人物画像の顔部分を残して合成する画像合成手段と、
    この画像合成手段により前記合成対象の人物画像に対応したポーズの衣装画像が合成された合成画像を前記端末へ送信する合成画像送信手段と、
    を備えたことを特徴とする画像配信サーバ。
13. 端末から撮影画像を受信する撮影画像受信手段と、
    この撮影画像受信手段により受信された撮影画像から合成対象の人物画像を抽出する対象画像抽出手段と、
    前記端末から前記撮影画像を撮影した時間情報を受信する時間情報受信手段と、
    時間情報に応じた種類の衣装で複数のポーズからなる一連の衣装画像を記憶するポーズ別衣装画像記憶手段と、
    前記時間情報受信手段により受信された撮影画像の撮影時間情報に対応し、かつ、前記対象画像抽出手段により抽出された合成対象の人物画像に応じたポーズの衣装画像を、前記ポーズ別衣装画像記憶手段により記憶された一連の衣装画像の中から取得する対応画像取得手段と、
    この対応画像取得手段により取得された衣装画像を、前記対象画像抽出手段により抽出された撮影画像の中の合成対象の人物画像に対し、当該人物画像の顔部分を残して合成する画像合成手段と、
    この画像合成手段により前記合成対象の人物画像に対応したポーズの衣装画像が合成された合成画像を前記端末へ送信する合成画像送信手段と、
    を備えたことを特徴とする画像配信サーバ。
14. コンピュータを制御して画像の配信処理を行うための画像配信処理プログラムであって、
    前記コンピュータを、
    端末から撮影画像を受信する撮影画像受信手段、
    この撮影画像受信手段により受信された撮影画像から合成対象の人物画像を抽出する対象画像抽出手段、
    前記端末から前記撮影画像を撮影した位置情報を受信する位置情報受信手段、
    位置情報に応じた種類の衣装で複数のポーズからなる一連の衣装画像をメモリに記憶するポーズ別衣装画像記憶手段、
    前記位置情報受信手段により受信された撮影画像の撮影位置情報に対応し、かつ、前記対象画像抽出手段により抽出された合成対象の人物画像に応じたポーズの衣装画像を、前記ポーズ別衣装画像記憶手段によりメモリに記憶された一連の衣装画像の中から取得する対応画像取得手段、
    この対応画像取得手段により取得された衣装画像を、前記対象画像抽出手段により抽出された撮影画像の中の合成対象の人物画像に対し、当該人物画像の顔部分を残して合成する画像合成手段、
    この画像合成手段により前記合成対象の人物画像に対応したポーズの衣装画像が合成された合成画像を前記端末へ送信する合成画像送信手段、
    として機能させるようにしたコンピュータ読み込み可能な画像配信処理プログラム。
15. コンピュータを制御して画像の配信処理を行うための画像配信処理プログラムであって、
    前記コンピュータを、
    端末から撮影画像を受信する撮影画像受信手段、
    この撮影画像受信手段により受信された撮影画像から合成対象の人物画像を抽出する対象画像抽出手段、
    前記端末から前記撮影画像を撮影した時間情報を受信する時間情報受信手段、
    時間情報に応じた種類の衣装で複数のポーズからなる一連の衣装画像をメモリに記憶するポーズ別衣装画像記憶手段、
    前記時間情報受信手段により受信された撮影画像の撮影時間情報に対応し、かつ、前記対象画像抽出手段により抽出された合成対象の人物画像に応じたポーズの衣装画像を、前記ポーズ別衣装画像記憶手段によりメモリに記憶された一連の衣装画像の中から取得する対応画像取得手段、
    この対応画像取得手段により取得された衣装画像を、前記対象画像抽出手段により抽出された撮影画像の中の合成対象の人物画像に対し、当該人物画像の顔部分を残して合成する画像合成手段、
    この画像合成手段により前記合成対象の人物画像に対応したポーズの衣装画像が合成された合成画像を前記端末へ送信する合成画像送信手段、
    として機能させるようにしたコンピュータ読み込み可能な画像配信処理プログラム。

Images