JP2005038118A - 画像出力装置、画像出力方法、画像出力処理プログラム、および画像配信サーバ、画像配信処理プログラム - Google Patents

画像出力装置、画像出力方法、画像出力処理プログラム、および画像配信サーバ、画像配信処理プログラム Download PDF

Info

Publication number
JP2005038118A
JP2005038118A JP2003199072A JP2003199072A JP2005038118A JP 2005038118 A JP2005038118 A JP 2005038118A JP 2003199072 A JP2003199072 A JP 2003199072A JP 2003199072 A JP2003199072 A JP 2003199072A JP 2005038118 A JP2005038118 A JP 2005038118A
Authority
JP
Japan
Prior art keywords
image
captured
target
composite
captured image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2003199072A
Other languages
English (en)
Other versions
JP4254391B2 (ja
Inventor
Takashi Koshiro
孝 湖城
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Casio Computer Co Ltd
Original Assignee
Casio Computer Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Casio Computer Co Ltd filed Critical Casio Computer Co Ltd
Priority to JP2003199072A priority Critical patent/JP4254391B2/ja
Publication of JP2005038118A publication Critical patent/JP2005038118A/ja
Application granted granted Critical
Publication of JP4254391B2 publication Critical patent/JP4254391B2/ja
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Landscapes

  • Image Processing (AREA)
  • Studio Circuits (AREA)
  • Television Signal Processing For Recording (AREA)
  • Studio Devices (AREA)
  • Image Analysis (AREA)
  • Processing Or Creating Images (AREA)

Abstract

【課題】デジタルカメラなどでの撮影画像中の隠したい画像に対して単に固定的な画像を合成するのではなく、当該隠したい画像をその表現に対応した画像に置き換え合成して出力し、ユーザ本人に対してのみ元の撮影画像を出力する。
【解決手段】任意ファイル名及びユーザ認証データ12fnaに対応付けて元の撮影画像を秘密画像ファイル12fnbに保存すると共に、元の撮影画像における秘密対象の被写体画像をそのまねのキャラクタ画像に置き換えて合成した合成画像を作成して公開画像ファイル12fncに記憶させる。画像表示操作に伴いファイル名が指定されると、指定ファイル名の撮影画像ファイル(n)12fn内の公開画像ファイル12fncから秘密対象の被写体画像をまねのキャラクタ画像に置き換え合成した合成画像が読み出されて表示され、正しい認証データ12fnaが入力されると秘密画像ファイル12fnに保存された元の撮影画像が読み出され表示される。
【選択図】 図1

Description

【0001】
【発明の属する技術分野】
本発明は、デジタルカメラやカメラ付携帯端末などにおける撮影画像に応じた画像を合成して出力するための画像出力装置、画像出力方法、画像出力処理プログラム、および画像配信サーバ、画像配信処理プログラムに関する。
【0002】
【従来の技術】
従来、各種のスチルカメラやビデオカメラにおいて、撮影した画像に対し他の画像を合成して表示あるいは印刷して出力するものがある。
【0003】
例えば撮影フレームの固定した位置に予め用意された花や人気キャラクタなどのアニメ画像を合成して出力するものや、同予め用意されたアニメ画像を撮影フレーム内の希望の位置に合成して出力するものなどが実用されている。
【0004】
また、デジタルカメラにより撮影された画像をパーソナルコンピュータの表示画面上に表示させて他の画像と合成して編集することもできるが、この場合に他の画像は例えば他の画像ファイルから選択的に切り出したり、インターネット上の任意のホームページ画面からダウンロードしたりするなどして取得され、撮影画像上の希望位置に合成される。
【0005】
また、デジタルカメラにより撮影された画像の任意の領域(例えば顔の部分)を切り出し、この切り出し画像を予め用意されたアニメ画像(例えばアニメキャラクタの顔部分)に合成させて新たな別の画像を作成するものや、任意の画像の指定した領域に対して、これに関連付けたアニメ画像を合成するものも考えられている。(例えば、特許文献1参照。)
【0006】
【特許文献1】
特開2001−230972号公報
【0007】
【発明が解決しようとする課題】
しかしながら、このような従来の画像処理システムでは、撮影画像に対して、予め用意された画像をそのまま固定あるいは希望の位置に合成して出力したり、あるいは任意の切り出し画像に対して予め用意された画像を合成して出力したりするだけのものであるため、撮影画像以外の合成画像が常に固定的で変化が無く、またインターネットから多様な画像をダウンロードして利用するにしても、撮影画像とは関係のない単なる飾りでしかないため、面白味に欠け飽きが来やすい問題がある。
【0008】
一方で近年、小型のデジタルカメラやデジタルカメラ付きの携帯電話が大幅に普及したことにより、各ユーザが撮影画像を常に持ち歩き、当該撮影画像が第三者に対して見られる状況も増えている。
【0009】
しかしながら、撮影画像中に第三者には見られたくない例えば恋人などの人物が写っている場合、前記予め用意されたアニメ画像などを見られたくない人物の位置に重ねて合成して見せることも考えられるが、このアニメ画像は当該見られたくない人物の画像とは無関係で何らその人物像を表現するものではないため、撮影画像本来のイメージが損なわれる問題がある。
【0010】
しかもこのような場合、ユーザ自身がその撮影画像を見るときにだけ、容易にオリジナルの撮影画像を見ることができ、第三者が見るときには必然的に合成した撮影画像を表示できるようにすることが望ましい。
【0011】
本発明は、前記のような問題に鑑みてなされたもので、撮影画像中の隠したい画像に対して単に固定的な画像を合成するのではなく、当該隠したい画像(例えば人物像)をその表現に対応した画像に置き換え合成して出力し、ユーザ本人に対してのみ元の撮影画像を出力することが可能になる画像出力装置、画像出力方法、画像出力処理プログラム、および画像配信サーバ、画像配信処理プログラムを提供することを目的とする。
【0012】
【課題を解決するための手段】
本発明の請求項1に係る画像出力装置では、撮影画像取得手段により撮影画像が取得されると、この撮影画像取得手段により取得された撮影画像は撮影画像記憶手段により記憶される。そして、対象画像抽出手段によって前記撮影画像取得手段により取得された撮影画像の中から対象画像が抽出されると、対応画像取得手段によって前記対象画像抽出手段により抽出された対象画像に応じた対応画像が取得され、画像合成手段によって前記対象画像抽出手段により抽出された対象画像が前記対応画像取得手段により取得された対応画像に置き換えられて前記撮影画像取得手段により取得された撮影画像に合成され、この合成画像が合成画像記憶手段によって記憶される。すると、合成画像出力手段によって外部からの画像出力要求に応答して、前記合成画像記憶手段により記憶された合成画像が出力され、また、撮影画像出力手段によって外部からの画像出力要求に伴う認証情報の入力に応答して、前記撮影画像記憶手段により記憶された撮影画像が出力される。
【0013】
これによれば、撮影画像の中の例えば秘密の被写体画像としての対象画像をこれに応じたまねキャラクタ画像などの対応画像に置き換えて合成した合成画像を作成し、通常の画像出力要求時には当該合成画像を出力でき、撮影者本人などの認証情報が入力された場合にのみ元の撮影画像を出力できることになる。
【0014】
本発明の請求項2に係る画像出力装置では、撮影画像取得手段により撮影画像が取得されると、この撮影画像取得手段により取得された撮影画像は撮影画像記憶手段により記憶される。そして、対象画像抽出手段によって前記撮影画像取得手段により取得された撮影画像の中から対象画像が抽出され、対応画像取得手段によって前記抽出された対象画像に応じた対応画像が取得されると、画像合成手段によって前記抽出された対象画像は前記対応画像取得手段により取得された対応画像に置き換えられて前記撮影画像取得手段により取得された撮影画像に合成され、この画像合成は合成画像記憶手段によって記憶される。すると、画像出力手段によって、外部からの画像出力要求に伴い正規の認証情報が入力された場合には前記撮影画像記憶手段により記憶された撮影画像が出力され、外部からの画像出力要求に伴い正規の認証情報が入力されない場合には前記合成画像記憶手段により記憶された合成画像が出力される。
【0015】
これによれば、撮影画像の中の例えば秘密の被写体画像としての対象画像をこれに応じたまねキャラクタ画像などの対応画像に置き換えて合成した合成画像を作成し、撮影者本人などの正規の認証情報が入力された場合には元の撮影画像を出力でき、正規の認証情報が入力されない場合にはその合成画像を出力できることになる。
【0016】
本発明の請求項3に係る画像出力装置では、撮影画像取得手段により撮影画像が取得されると、この撮影画像取得手段により取得された撮影画像は撮影画像記憶手段により記憶される。そして、対象画像抽出手段によって前記撮影画像取得手段により取得された撮影画像の中から対象画像が抽出されると、対象画像部記憶手段によって前記抽出された撮影画像の中の対象画像部分が記憶される。外部からの画像出力要求に伴い正規の認証情報が入力された場合には撮影画像出力手段によって前記撮影画像記憶手段により記憶された撮影画像が出力される。外部からの画像出力要求に伴い正規の認証情報が入力されない場合には対応画像取得手段によって前記対象画像部記憶手段により記憶された撮影画像の中の対象画像部分に基づき当該対象画像に応じた対応画像が取得されると共に、画像合成手段によって前記撮影画像記憶手段により記憶された撮影画像の中の対象画像が前記対応画像取得手段により取得された対応画像に置き換えられて合成され、この合成画像が合成画像出力手段によって出力される。
【0017】
これによれば、撮影者本人などの正規の認証情報が入力された場合には撮影した元の撮影画像を出力でき、正規の認証情報が入力されない場合には撮影画像の中の例えば秘密の被写体画像としての対象画像をこれに応じたまねキャラクタ画像などの対応画像に置き換えて合成した合成画像を作成し、その合成画像を出力できることになる。
【0018】
本発明の請求項4に係る画像出力装置は、前記請求項1ないし請求項3の何れか1項に係る画像出力装置にあって、前記対象画像抽出手段では、前記撮影画像取得手段により取得された一連の複数の撮影画像の中から変化部分が対象画像として抽出される。
【0019】
これによれば、撮影画像を含む一連の取り込み画像に基づきその変化部分が例えば秘密にすべき被写体画像である対象画像として容易に抽出できることになる。
【0020】
本発明の請求項5に係る画像出力装置は、前記請求項1ないし請求項3の何れか1項に係る画像出力装置にあって、前記対象画像抽出手段では、前記撮影画像取得手段により取得される撮影画像の各部分までの距離を測定する距離測定手段を有し、この距離測定手段により測定された撮影画像の各部分までの距離に応じて対象画像が抽出される。
【0021】
これによれば、撮影された1枚の取り込み画像の各部の撮影距離に基づき例えば秘密にすべき被写体画像である対象画像として容易に抽出できることになる。
【0022】
本発明の請求項6に係る画像出力装置は、前記請求項1ないし請求項5の何れか1項に係る画像出力装置にあって、前記対応画像取得手段では、複数の対応画像を記憶する対応画像記憶手段と、前記対象画像抽出手段により抽出された対象画像と前記対応画像記憶手段により記憶された各対応画像との類似度を評価する類似度評価手段とを有し、この類似度評価手段により評価された対象画像と各対応画像との類似度に応じて当該対象画像に応じた対応画像が取得される。
【0023】
これによれば、抽出された対象画像である例えば秘密対象の被写体画像にまねて置き換え合成すべき対応画像を容易に取得できることになる。
【0024】
本発明の請求項7に係る画像出力装置は、前記請求項1ないし請求項5の何れか1項に係る画像出力装置にあって、前記対応画像取得手段では、複数のモデル画像と複数の対応画像とを対応付けて記憶する対応画像記憶手段と、前記対象画像抽出手段により抽出された対象画像と前記対応画像記憶手段により記憶された各モデル画像との類似度を評価する類似度評価手段とを有し、この類似度評価手段により評価された対象画像と各モデル画像との類似度に応じて当該対象画像に応じたモデル画像に対応付けられて前記対応画像記憶手段により記憶された対応画像が取得される。
【0025】
これによれば、抽出された対象画像である例えば秘密対象の被写体画像にまねて置き換え合成すべき対応画像を容易に取得できるだけでなく、類似度の評価対象に標準的モデルを用いることから対象画像との高い類似(まね)度が得られやすく、より表現の近い置き換え対応画像を取得できることになる。
【0026】
本発明の請求項8に係る画像出力装置は、前記請求項1ないし請求項7の何れか1項に係る画像出力装置にあって、前記撮影画像取得手段では、デジタルカメラなどの撮影手段を有し、この撮影手段により撮影された撮影画像に基づいて、当該撮影画像が撮影画像記憶手段により記憶されたり、この撮影画像の抽出対象画像がこれに応じた対応画像に置き換え合成されて合成画像記憶手段により記憶される。
【0027】
【発明の実施の形態】
以下、図面を参照して本発明の実施の形態について説明する。
【0028】
(第1実施形態)
図1は本発明の第1実施形態に係る画像出力装置10の電子回路の構成を示すブロック図である。
【0029】
この画像出力装置10は、デジタルカメラ、デジタルカメラ付き携帯電話、デジタルカメラ付きPDA(personal digital assistants)などの携帯機器として構成されるもので、各種の記録媒体に記録されたプログラム、又は、伝送されたプログラムを読み込んで、その読み込んだプログラムによって動作が制御されるコンピュータによって構成され、その電子回路には、CPU(central processing unit)11が備えられる。
【0030】
CPU11は、メモリ12内に予め記憶された装置制御プログラム、あるいはCD−ROMなどの外部記録媒体13から記録媒体読取部14を介して前記メモリ12に読み込まれた装置制御プログラム、あるいはインターネットN上のWebサーバ21(この場合はプログラムサーバ)から電送制御部15を介して前記メモリ12に読み込まれた装置制御プログラムに応じて、回路各部の動作を制御するもので、前記メモリ12に記憶された装置制御プログラムは、キーやタッチパネルからなる入力部16からのユーザ操作に応じた入力信号、あるいは画像入力部17を介して入力される画像信号、あるいは認証情報入力部17xを介して入力される個人認証情報(指紋画像,パスワードなど)、あるいは電送制御部15を介して接続されるインターネットN上の各Webサーバ21…との通信信号に応じて起動される。
【0031】
前記CPU11には、前記メモリ12、記録媒体読取部14、電送制御部15、入力部16、画像入力部17、認証情報入力部17xが接続される他に、距離センサ18、LCDからなる表示部19、画像出力部20などが接続される。
【0032】
画像入力部17は、撮影画像データを入力するもので、この撮影画像データは、デジタルカメラ17A、デジタルビデオムービー17B、VTR(画像再生装置)17Cから選択的に取得される。
【0033】
距離センサ18は、前記画像入力部17において入力される撮影画像の被写体までの距離を検出する。
【0034】
画像出力部20は、前記画像入力部17から入力された撮影画像に基づき本装置により処理された画像データを出力するもので、この出力画像データは、メモリカード20A、VTR(録画装置)20B、画像印刷機20Cに選択的に出力され、当該画像の記憶,録画,印刷が行われる。
【0035】
メモリ12には、当該画像出力装置10の全体の動作を司るシステムプログラムや電送制御部15を介してインターネットN上の各Webサーバ21…とデータ通信するための通信プログラムが記憶される他に、画像入力部17や画像出力部20を介して本画像出力装置10で撮影画像内の指定の対象画像(例えば人物像)に応じた対応画像(例えばまね人物像)への置き換え合成出力処理などを行うための画像出力処理プログラム12aなどが記憶される。
【0036】
また、このメモリ12には、モデルポーズ画像メモリ12b、キャラ1「女性(1)」ポーズ画像メモリ12c、キャラ2「女性(2)」ポーズ画像メモリ12d、キャラ3「男性(1)」ポーズ画像メモリ12eなどが用意され、さらにそのワークエリアには、撮影画像ファイル(1)12f1,(2)12f2,…などが用意される。
【0037】
各撮影画像ファイル(1)12f1,(2)12f2,…には、そのそれぞれのファイル(1)(2)…毎に、ファイル名及びユーザ認証データ(指紋画像やパスワードなど)12f1a,12f2a,…に対応付けされた秘密画像ファイル12f1b,12f2b,…と公開画像ファイル12f1c,12f2c,…とが記憶される。
【0038】
秘密画像ファイル12f1b,12f2b,…には、各撮影画像ファイル(1)12f1,(2)12f2,…毎の撮影画像データがそのまま元の撮影画像1,2,…として記憶され、公開画像ファイル12f1c,12f2c,…には、同一の撮影画像ファイル(1)12f1,(2)12f2,…内で対応する秘密画像ファイル12f1b,12f2b,…に記憶された撮影画像1,2,…それぞれの指定の対象画像(例えば人物像)をそのポーズのまねをするキャラクタの画像(図2参照)に置き換えた合成画像1,2,…が記憶される。
【0039】
つまり、撮影画像内の指定の対象画像がそのまねのキャラクタ画像に置き換えられてなる合成画像1,2,…が公開画像ファイル12f1c,12f2c,…とされ、各合成画像1,2,…の元の撮影画像1,2,…が秘密画像ファイル12f1b,12f2b,…とされ、ユーザ認証データ12f1a,12f2a,…に対応付けられて記憶保存される。
【0040】
図2は前記画像出力装置10のキャラ1「女性(1)」ポーズ画像メモリ12c:キャラ2「女性(2)」ポーズ画像メモリ12d:キャラ3「男性(1)」ポーズ画像メモリ12eにそれぞれ記憶された各種のポーズに対応する各キャラクタ画像を示す図である。
【0041】
このキャラ1「女性(1)」,2「女性(2)」,3「男性(1)」の各ポーズ画像メモリ12c,12d,12eに記憶された各キャラクタそれぞれの各種のポーズ画像は、画像入力部17から入力された撮影画像上の被写体画像(対象画像)のポーズに応じた真似画像として使用されるもので、異なるポーズ毎にそのポーズNo.が対応付けられて記憶される。
【0042】
図3は前記画像出力装置10のモデルポーズ画像メモリ12bに記憶されたモデルポーズに対応するモデル画像を示す図である。
【0043】
このモデルポーズ画像メモリ12bに記憶された各種ポーズのモデル画像は、画像入力部17から入力された撮影画像上の被写体画像(対象画像)のポーズに応じた類似のモデル画像を取得するために使用されるもので、異なるポーズ毎にそのポーズNo.が対応付けられて記憶され、さらに各ポーズNo.毎に3種のバリエーションA,B,Cのモデル画像が記憶される。
【0044】
そして、前記キャラ1「女性(1)」ポーズ画像メモリ12c,キャラ2「女性(2)」ポーズ画像メモリ12d,キャラ3「男性(1)」ポーズ画像メモリ12eにそれぞれ記憶された各キャラクタ画像には、前記モデルポーズ画像メモリ12bに記憶された全てのポーズNo.(No.1A,1B,1C、2A,2B,2C、〜、nA,nB,nC)に対応する同じポーズのキャラクタ画像が用意されて記憶される。
【0045】
また、このメモリ12には、画像処理ワークエリア(図示せず)が用意され、この画像処理ワークエリアには、前記画像出力処理プログラム12aに従い処理される画像データがその画像処理に応じて一時記憶される。
【0046】
このように構成された画像出力装置10について、その合成画像作成動作の概要を説明する。
【0047】
図4は前記画像出力装置10による公開/秘密画像設定モード指定時のキャラクタ画像「女性(1)」による対象画像の置き換え合成状態を示す図である。
【0048】
図4(A)に示すような例えば4人の被写体H1〜H4が撮影された撮影画像12f1bから、図4(B)に示すように置き換えの対象となる指定の被写体画像(対象画像)H1が指定されて抽出され、置き換えのキャラクタ画像として「女性(1)」が指定されると、図4(C)に示すように指定の被写体画像(対象画像)H1のポーズに類似のポーズNo.3−1「歩く(前)」の「女性(1)」のキャラクタ画像がキャラ1「女性(1)」ポーズ画像メモリ12cから読み出される。
【0049】
一方、撮影画像12f1bから前記指定された被写体画像(対象画像)H1を含めた4つの被写体画像H2,H3,H4を切り出した撮影背景画像(図示せず)が生成される。
【0050】
すると、図4(D)に示すように、前記キャラ1「女性(1)」ポーズ画像メモリ12cから読み出された指定の被写体画像(対象画像)H1に類似の「女性(1)」のキャラクタ画像12c(3−1)と、前記撮影画像12f1bから切り出された残り3つの被写体画像H2,H3,H4が、前記撮影背景画像(図示せず)に対しその撮影距離が遠い順に各被写体位置に対応して合成される。
【0051】
これにより、撮影画像12f1bにおいて例えば秘密にしたい(隠したい)女友達(恋人)など、指定の被写体(対象画像)H1のポーズの真似をした「女性(1)」のキャラクタ画像12c(3−1)が当該指定の被写体(対象画像)H1と置き換えられて合成され、公開画像ファイル12f1cに保存される。
【0052】
これにより、撮影画像ファイル(1)12f1の秘密画像ファイル12f1bには、図4(A)で示した元の撮影画像が保存され、公開画像ファイル12f1cには、図4(D)で示した合成画像が保存されて管理される。
【0053】
そして、この画像出力装置10での画像表示処理に際しては、正しいユーザ認証データ12f1aが入力された場合にのみ、秘密画像ファイル12f1bに保存された元の撮影画像が読み出されて表示され、それ以外は公開画像ファイル12f1cに保存された合成画像が読み出されて表示される。
【0054】
次に、前記構成による画像出力装置10による詳細な画像処理動作について説明する。
【0055】
ここでは、画像出力装置10をデジタルカメラ付き携帯電話10Aあるいはデジタルカメラ10Bとして実施した場合について説明する。
【0056】
図5は前記画像出力装置であるデジタルカメラ付き携帯電話10Aの外観構成を示す図であり、同図(A)はその全体斜視図、同図(B)はその部分拡大図である。
【0057】
デジタルカメラ付き携帯電話10Aでは、各種のキーが配列された入力部16の下端部にユーザ認証データ12fnaとしての指紋画像を入力するための認証情報入力部17xが設けられる。
【0058】
図6は前記画像出力装置であるデジタルカメラ10Bの外観構成を示す図であり、同図(A)はその前面図、同図(B)はその背面図である。
【0059】
デジタルカメラ10Bの入力部16としては、メニュー画面を表示させるための「MENU」キー16a、撮影モード(REC)と再生モード(PLAY)とを切り替えるための
切り替えキー16b、撮影画像の取り込みを指示するためのシャッタキー16c、表示画面(19)上でのデータ選択やカーソル移動及び選択データ決定などの操作を行うための上下左右に指1本で操作可能な選択/決定キー16dが備えられる。
【0060】
そして、選択/決定キー16dの頭部には、ユーザ認証データ12fnaとしての指紋画像を入力するための認証情報入力部17xが設けられる。
【0061】
図7は前記画像出力装置10の公開/秘密画像設定処理に伴い撮影画像ファイル12f1にユーザ認証データ12f1aを対応付けて保存管理される秘密画像ファイル12f1bと公開画像ファイル12f1cを示す図であり、同図(SC1)〜(SC3)は秘密画像ファイル12f1bに保存管理された元の撮影画像12f1b−1〜12f1b−3を示す図、同図(PU1)〜(PU3)は公開画像ファイル12f1cに保存管理された合成画像12f1c−1〜12f1c−3を示す図である。
【0062】
図8は前記画像出力装置10による公開/秘密画像設定処理を示すフローチャートである。
【0063】
この画像出力装置10であるデジタルカメラ付き携帯電話10A(図5参照)あるいはデジタルカメラ10B(図6参照)において任意の画像撮影を行う際に、入力部16での操作に応じて新規作成モードが指定され、ファイル名が入力されると、当該ファイル名(12f1a)がメモリ12内の撮影画像ファイル(1)12f1にセットされ(ステップP1)、図9における合成画像作成処理に移行される(ステップPS)。
【0064】
図9は前記画像出力装置10の公開/秘密画像設定処理に伴う合成画像作成処理を示すフローチャートである。
【0065】
まず、入力部16の操作により、撮影画像上の指定の被写体画像と置き換え合成すべきキャラクタの種類(「女性(1)」「女性(2)」「男性(1)」など)が予め指定される(ステップS1)。
【0066】
そして、デジタルカメラ17Aまたはデジタルビデオムービー17BまたはVTR(画像再生装置)17Cによる撮影画像の入力が開始され(ステップS2)、この撮影画像に対して前記指定のキャラクタ画像を合成するためのスタート操作が為されると(ステップS3)、当該撮影画像が撮影画像ファイル(1)12f1内の秘密画像ファイル12f1bに保存され(ステップS4)、図10における対象画像の抽出処理に移行される(ステップSA)。
【0067】
図10は前記画像出力装置10の合成画像作成処理に伴う対象画像抽出処理を示すフローチャートであり、同図(A)はその対象画像抽出処理(方式1)を示すフローチャート、同図(B)はその対象画像抽出処理(方式2)を示すフローチャートである。
【0068】
図10(A)における対象画像抽出処理(方式1)では、前記画像入力部17を介して所定のタイミングで順次入力される一連の撮影画像がメモリ12内の画像処理ワークエリアに対し記憶される(ステップA11)。
【0069】
すると、この画像処理ワークエリアに記憶された一連の撮影画像のそれぞれから被写体の動きに伴う画像の変化部分が当該各被写体のブロック毎に抽出され(ステップA12)、これにより抽出された各被写体画像Hnがそのブロック毎に同画像処理ワークエリアに保存される(ステップA13)。
【0070】
図10(B)における対象画像抽出処理(方式2)では、前記画像入力部17を介して入力される撮影画像の各部分毎に距離センサ18による距離測定が行われ(ステップA21)、背景画像と被写体画像との距離差に基づき近距離側として判別される各被写体画像Hnがそのブロック毎に抽出される(ステップA22)。
【0071】
これにより抽出された各被写体画像Hnがそのブロック毎にメモリ12内の画像処理ワークエリアに保存される(ステップA23)。
【0072】
こうして、秘密画像ファイル12f1bに保存された撮影画像から当該撮影画像に含まれる各被写体画像Hnがそのブロック毎に抽出されて画像処理ワークエリアに保存されると(ステップSA)、例えば図4(A)で示すように、抽出された各被写体画像Hnのそれぞれに囲みマークMが付加された撮影画像12f1bが表示部19に表示される(ステップS5)。
【0073】
すると、表示部19に表示された撮影画像12f1bにおいて、被写体画像Hnが複数ブロック存在するか否か判断される(ステップS6)。
【0074】
撮影画像12f1bにおいて被写体画像Hnが複数ブロック存在しないと判断された場合には、当該撮影画像12f1bから抽出された1つの被写体画像Hnが真似対象画像として設定される(ステップS6→S7a)。
【0075】
また、撮影画像12f1bにおいて被写体画像Hnが複数ブロック存在すると判断された場合には、入力部16によるユーザ操作に応じて複数ブロック存在する被写体画像Hn…の中から、例えば第三者には秘密にしたい(隠したい)真似対象画像が指定される(ステップS6→S7b)。
【0076】
こうして、前記撮影画像12f1bの中から被写体画像Hnが抽出され、さらに真似対象となる被写体画像Hnが設定されると、図11における対応アニメ画像取得処理に移行される(ステップSB)。
【0077】
図11は前記画像出力装置10の合成画像作成処理に伴う対応アニメ画像取得処理を示すフローチャートであり、同図(A)はその対応アニメ画像取得処理(方式1)を示すフローチャート、同図(B)はその対応アニメ画像取得処理(方式2)を示すフローチャートである。
【0078】
図11(A)における対応アニメ画像取得処理(方式1)では、まず、前記撮影画像12f1bから抽出されて真似対象画像として設定された被写体画像Hnと前記指定されたキャラクタの各ポーズのキャラクタ画像との類似度が評価され(ステップB1C)、最も類似度の高いポーズのキャラクタ画像が表示部19に表示される(ステップB12)。
【0079】
ここで、入力部16に対するユーザ操作に応じて前記表示部19に表示された真似対象画像に最も類似度の高いポーズのキャラクタ画像が選択されると、この選択されたポーズNo.の指定のキャラクタ画像が真似対象画像に対応するアニメ画像として登録される(ステップB13→B14)。
【0080】
一方、前記表示部19に真似対象画像に最も類似度の高いポーズのキャラクタ画像が表示された状態で、入力部16に対するユーザ操作に応じて「次表示」が指示されると、当該「次表示」の操作毎に次に類似度の高いポーズのキャラクタ画像が順番に表示される(ステップB13→B15)。
【0081】
そして、所望の類似度のポーズのキャラクタ画像が選択表示され、入力部16に対するユーザ操作に応じて当該表示されたキャラクタ画像が選択されると、この選択されたポーズNo.の指定のキャラクタ画像が真似対象画像に対応するアニメ画像として登録される(ステップB13→B14)。
【0082】
このように、対応アニメ画像取得処理(方式1)では、撮影画像12f1bから抽出設定された真似対象画像としての被写体画像Hnに対し、指定されたキャラクタの各ポーズ毎のキャラクタ画像との類似度が直接評価され、これに基づき被写体画像Hnを真似たポーズのキャラクタとして置き換えられる指定のキャラクタ画像が決定される。
【0083】
図11(B)における対応アニメ画像取得処理(方式2)では、まず、前記撮影画像12f1bから抽出されて真似対象画像として設定された被写体画像Hnとモデルポーズ画像メモリ12bに記憶されている各ポーズのモデル画像との類似度が評価され(ステップB2C)、最も類似度の高いポーズのモデル画像のポーズNo.に対応する指定のキャラクタ画像が表示部19に表示される(ステップB22)。
【0084】
ここで、入力部16に対するユーザ操作に応じて前記表示部19に表示された真似対象画像に最も類似度の高いモデルポーズに対応するキャラクタ画像が選択されると、この選択されたポーズNo.の指定のキャラクタ画像が真似対象画像に対応するアニメ画像として登録される(ステップB23→B24)。
【0085】
一方、前記表示部19に真似対象画像に最も類似度の高いポーズのモデル画像のポーズNo.に対応するキャラクタ画像が表示された状態で、入力部16に対するユーザ操作に応じて「次表示」が指示されると、当該「次表示」の操作毎に次に類似度の高いモデル画像のポーズNo.に対応する指定のキャラクタ画像が順番に表示される(ステップB23→B25)。
【0086】
そして、所望の類似度のモデルポーズに対応するキャラクタ画像が選択表示され、入力部16に対するユーザ操作に応じて当該表示されたキャラクタ画像が選択されると、この選択されたポーズNo.の指定のキャラクタ画像が真似対象画像に対応するアニメ画像として登録される(ステップB23→B24)。
【0087】
このように、対応アニメ画像取得処理(方式2)では、撮影画像12f1bから抽出設定された真似対象画像としての被写体画像Hnに対し、人物の基本モデルである各ポーズ毎のモデル画像との類似度が評価され、これに基づき被写体画像Hnを真似たポーズのキャラクタとして置き換えられる指定のキャラクタ画像が決定される。
【0088】
この場合、真似対象画像としての被写体画像Hnに対し、指定されたキャラクタの各ポーズ毎のキャラクタ画像との類似度を直接評価して置き換えのキャラクタ画像を決定するようにした対応アニメ画像取得処理(方式1)に比較して、各ポーズ毎のモデル画像との類似度を評価し選択されたモデルポーズNo.から置き換えのキャラクタ画像を決定するようにした対応アニメ画像取得処理(方式2)の方が、類似度の評価対象に標準的人物モデルを用いることから被写体画像Hnとの高い類似度が得られやすく、より類似性(真似度)の高いキャラクタ画像を取得できる利点がある。
【0089】
図12は前記画像出力装置10の合成画像作成処理に伴う対応アニメ画像取得処理(方式1)(方式2)での真似対象画像との類似度評価処理を示すフローチャートである。
【0090】
対応アニメ画像取得処理(方式1)での類似度評価処理の場合は指定されたキャラクタの各ポーズ毎のキャラクタ画像との類似度を評価し、対応アニメ画像取得処理(方式2)での類似度評価処理の場合は各ポーズ毎のモデル画像との類似度を評価する。
【0091】
図13は前記画像出力装置10の対応アニメ画像取得処理(方式1)での類似度評価処理に伴う指定のキャラクタ画像との類似度評価例を示す図である。
【0092】
図14は前記画像出力装置10の対応アニメ画像取得処理(方式2)での類似度評価処理に伴うモデル画像との類似度評価例を示す図である。
【0093】
類似度評価処理(方式1)の場合、例えば図13(A)に示すように、指定のキャラクタ(女性(1))における先頭のポーズNo.のキャラクタ画像(例えば12c(3)−1)が読み出され(ステップC1)、同図(X)で示す真似対象画像H1との縦・横のサイズが合わされる(ステップC2)。
【0094】
すると、前記真似対象画像H1と縦横サイズの合わされたキャラクタ画像との重ね合わせ評価が行われ、その評価値(%)が算出されて当該ポーズのキャラクタ画像との類似度として記憶される(ステップC3)。
【0095】
ここで、今回の類似度評価対象のポーズNo.のキャラクタ画像が左右非対称の画像であるか否か判断され(ステップC4)、当該ポーズのキャラクタ画像が左右非対称の画像ではないと判断された場合には(ステップC4「No」)、例えば図13(B)に示すように、順次、次のポーズNo.の指定のキャラクタ画像との間でサイズ合わせ処理と重ね合わせ評価値の算出処理とによる類似度の算出,記憶処理が繰り返される(ステップC8→C9→C2〜C4)。
【0096】
一方、図13(B)に示すように、今回の類似度評価対象のポーズNo.のキャラクタ画像が左右非対称のキャラクタ画像(例えば12c(11))であると判断された場合には、当該ポーズのキャラクタ画像が左右反転され(ステップC4→C5)、この反転されたキャラクタ画像12c(11)Rについて真似対象画像H1との縦・横のサイズが合わされる(ステップC6)。
【0097】
すると、前記真似対象画像H1と縦横サイズの合わされた反転キャラクタ画像12c(11)Rとの重ね合わせ評価が行われ、その評価値(%)が算出されて当該ポーズの反転キャラクタ画像との類似度として記憶される(ステップC7)。
【0098】
この後、指定のキャラクタにおける次のポーズNo.のキャラクタ画像がある場合には(ステップC8)、当該次のポーズNo.のキャラクタ画像が順次読み出され(ステップC9)、前記同様に真似対象画像Hnと各ポーズ毎の指定のキャラクタ画像との類似度評価処理が繰り返される(ステップC2〜C7)。
【0099】
これにより、例えば図13で示したように、被写体画像(対象画像)H1に対して「女性(1)」のキャラクタ画像との類似度評価を行った場合には、ポーズNo.(3)−1に対応する「女性(1)」のキャラクタ画像12c(3)−1が最も類似度の高いキャラクタ画像として評価される。
【0100】
次に、類似度評価処理(方式2)の場合、例えば図14(A)に示すように、先頭のポーズNo.のモデル画像(例えば12b(3B))が読み出され(ステップC1)、同図(X)で示す真似対象画像H1との縦・横のサイズが合わされる(ステップC2)。
【0101】
すると、前記真似対象画像H1と縦横サイズの合わされたモデル画像との重ね合わせ評価が行われ、その評価値(%)が算出されて当該ポーズのモデル画像との類似度として記憶される(ステップC3)。
【0102】
ここで、今回の類似度評価対象のポーズNo.のモデル画像が左右非対称の画像であるか否か判断され(ステップC4)、例えば図14(A)で示すように、当該ポーズのモデル画像12b(3B)が左右非対称の画像ではないと判断された場合には(ステップC4「No」)、次のポーズNo.のモデル画像が読み出され(ステップC8→C9)、前記同様に真似対象画像H1と次のポーズのモデル画像との類似度評価処理が繰り返される(ステップC2〜C4)。
【0103】
一方、例えば図14(B)で示すように、今回の類似度評価対象のポーズNo.1Bのモデル画像12b(1B)が左右非対称のモデル画像であると判断された場合には、当該ポーズ1Bのモデル画像が左右反転され(ステップC4→C5)、図14(C)で示すように、この反転されたモデル画像12b(1B)Rについて真似対象画像H1との縦・横のサイズが合わされる(ステップC6)。
【0104】
すると、前記真似対象画像H1と縦横サイズの合わされた反転モデル画像12b(1B)Rとの重ね合わせ評価が行われ、その評価値(%)が算出されて当該ポーズの反転モデル画像12b(1B)Rとの類似度として記憶される(ステップC7)。
【0105】
この後、次のポーズNo.のモデル画像がある場合には(ステップC8)、当該次のポーズNo.のモデル画像が順次読み出され(ステップC9)、前記同様に真似対象画像と各ポーズ毎のモデル画像との類似度評価処理が繰り返される(ステップC2〜C7)。
【0106】
これにより、例えば図14で示したように、被写体画像(対象画像)H1に対してモデル画像との類似度評価を行った場合には、ポーズNo.3Bに対応するモデル画像12b(3B)が最も類似度の高いポーズのモデル画像として評価される。
【0107】
このように、前記図11〜図14を参照して説明した対応アニメ画像取得処理(ステップSB)によって、撮影画像12f1bから抽出設定された真似対象画像としての被写体画像Hnを真似たポーズの指定のキャラクタ画像が決定されると、例えば図4で示したように、前記対応アニメ画像取得処理(図11参照)により取得された、撮影画像12f1bにおいて指定された真似対象画像である被写体H1のポーズの真似をした「女性(1)」のキャラクタ画像12c(3−1)が当該指定の被写体(対象画像)H1と置き換えられて合成される(ステップS8)。
【0108】
この場合、撮影画像12f1bから前記指定された被写体画像(対象画像)H1を含めた4つの被写体画像H2,H3,H4を切り出した撮影背景画像(図示せず)が生成される。そして、前記指定の被写体画像(対象画像)H1に類似の「女性(1)」のキャラクタ画像12c(3−1)と、前記撮影画像12f1bから切り出された残り3つの被写体画像H2,H3,H4とは、前記撮影背景画像(図示せず)に対しその撮影時に距離センサ18により検出された撮影距離が遠い順に各被写体位置に対応して合成される。
【0109】
なお、前記被写体画像H1,H2,H3,H4を切り出した背景画像の生成をせずに、撮影画像12f1bに対して、前記指定の被写体画像(対象画像)H1に類似の「女性(1)」のキャラクタ画像12c(3−1)と、残り3つの被写体画像H2,H3,H4とを、その撮影時に距離センサ18により検出された撮影距離が遠い順に各被写体位置に重ねて合成してもよい。
【0110】
すると、図14(D)で示したように、被写体画像H1の歩くポーズを真似た「女性(1)」のキャラクタ画像12c(3−1)が当該被写体画像H1と置き換えられて合成されてなる画像データが、前記予め指定されたファイル名(12f1a)に対応するところの撮影画像ファイル(1)内の公開画像ファイル12f1cに記憶保存される(ステップS9)。
【0111】
すなわち、図7(SC1)に示すように、撮影画像12f1b−1が取り込まれて撮影画像ファイル12f1における秘密画像ファイル12f1bに保存され、公開したくない置き換え対象の被写体画像H1として女性の後姿の被写体画像が指定された場合には、図7(PU1)に示すように、当該指定の被写体画像H1に類似の「女性(1)」のキャラクタ画像12c(3−3)が置き換えられて合成された合成画像12f1c−1が作成され、同一ファイル名の撮影画像ファイル12f1における公開画像ファイル12f1cに記憶保存される。
【0112】
また、図7(SC2)に示すように、撮影画像12f1b−2が取り込まれて撮影画像ファイル12f1における秘密画像ファイル12f1bに保存され、公開したくない置き換え対象の被写体画像H1として女性の皿を持つ姿の被写体画像が指定された場合には、図7(PU2)に示すように、当該指定の被写体画像H1に類似の「女性(1)」のキャラクタ画像12c(17)が置き換えられて合成された合成画像12f1c−2が作成され、同一ファイル名の撮影画像ファイル12f1における公開画像ファイル12f1cに記憶保存される。
【0113】
さらに、図7(SC3)に示すように、撮影画像12f1b−3が取り込まれて撮影画像ファイル12f1における秘密画像ファイル12f1bに保存され、公開したくない置き換え対象の被写体画像H1として前向きで歩く女性の被写体画像が指定された場合には、図7(PU3)に示すように、当該指定の被写体画像H1に類似の「女性(1)」のキャラクタ画像12c(3−1)が置き換えられて合成された合成画像12f1c−3が作成され、同一ファイル名の撮影画像ファイル12f1における公開画像ファイル12f1cに記憶保存される。
【0114】
そして、該当ファイル名の撮影画像ファイル12f1に撮影保存すべき一連の画像の撮影が終了すると(ステップP2)、前記秘密画像ファイル12f1bの読み出しキーとなる個人認証データ12f1a(指紋、パスワードなど)が認証情報入力部17xから入力されて同一ファイル名の撮影画像ファイル12f1に登録設定される(ステップP3)。
【0115】
このようにして、撮影した元の撮影画像12f1b−1,−2,−3,…が撮影画像ファイル(1)12f1における秘密画像ファイル12f1bに保存され、当該各撮影画像12f1b−1,−2,−3,…内で第三者に見られたくない被写体画像H1をそのポーズを真似した任意の種類のキャラクタ画像12c(n)に置き換えてなる合成画像12f1c−1,−2,−3,…が同一撮影画像ファイル(1)12f1における公開画像ファイル12f1cに対応保存されると共に、その個人認証データ12f1aも対応付けられて設定された状態で、これらの画像ファイルを表示部19の表示画面に表示させて見るには、図15における画像表示処理が起動される。
【0116】
図15は前記画像出力装置10の画像表示処理を示すフローチャートであり、同図(A)はその画像表示処理(方式1)を示すフローチャート、同図(B)はその画像表示処理(方式2)を示すフローチャートである。
【0117】
画像表示処理(方式1)の場合には、入力部16での入力操作により表示させるべき画像ファイルのファイル名が指定されると(ステップD11)、認証情報入力部17xからユーザ認証情報が入力されたか否か判断される(ステップD12)。
【0118】
ここで、ユーザ認証情報の入力がないと判断された場合には、前記指定のファイル名に対応するところの撮影画像ファイル12fnにおける公開画像ファイル12f1c内の合成画像が読み出され、例えば図7(PU1)〜(PU3)で示したように、第三者に見られたくない(公開したくない)被写体画像H1がそのポーズをまねたキャラクタ画像に置き換え合成されてなる画像12f1c−1,−2,−3,…として表示出力される(ステップD13)。
【0119】
一方、前記ステップD12において、ユーザ認証情報の入力がされたと判断されると共に、当該入力されたユーザ認証情報が前記指定のファイル名に対応するところの撮影画像ファイル12fnに登録された認証データ12f1aと一致する正しい認証情報であると判断された場合には(ステップD14)、該当の撮影画像ファイル12fnにおける秘密画像ファイル12f1b内の撮影画像が読み出され、例えば図7(SC1)〜(SC3)で示したように、何ら置き換え合成していない元の撮影画像12f1b−1,−2,−3,…として表示出力される(ステップD15)。
【0120】
一方、前記ステップD14において、入力されたユーザ認証情報が前記指定のファイル名に対応するところの撮影画像ファイル12fnに登録された認証データ12f1aと一致せず不正な認証情報であると判断された場合には、前記認証情報が入力されない場合(ステップD12)と同様に、該当の撮影画像ファイル12fnにおける公開画像ファイル12f1c内の合成画像が読み出され、図7(PU1)〜(PU3)で示したように、第三者に見られたくない(公開したくない)被写体画像H1がそのポーズをまねたキャラクタ画像に置き換え合成されてなる画像12f1c−1,−2,−3,…として表示出力される(ステップD13)。
【0121】
この画像表示処理(方式1)によれば、ファイル名の指定と共に正しいユーザ認識情報が入力された場合には、指定ファイル名の撮影画像ファイル12fnにおける秘密画像ファイル12fnbから合成処理していない元の撮影画像12fnb−1,−2,−3,…が読み出されて表示されるようになり、またユーザ認識情報が入力されない場合や不正な認識情報が入力された場合には、指定ファイル名の撮影画像ファイル12fnにおける公開画像ファイル12fncから、見られたくない被写体画像H1をまねのキャラクタ画像で置き換え合成処理した画像12fnc−1,−2,−3,…が読み出されて表示されるようになり、自分の恋人など、第三者には秘密の撮影画像が保存されている場合でも、安心して第三者の操作に任せて画像の表示を行わせることができる。
【0122】
画像表示処理(方式2)の場合には、入力部16での入力操作により表示させるべき画像ファイルのファイル名が指定されると(ステップD21)、当該指定のファイル名に対応するところの撮影画像ファイル12fnにおける公開画像ファイル12f1c内の合成画像が読み出され、例えば図7(PU1)〜(PU3)で示したように、第三者に見られたくない(公開したくない)被写体画像H1がそのポーズをまねたキャラクタ画像に置き換え合成されてなる画像12f1c−1,−2,−3,…として表示出力される(ステップD22)。
【0123】
すると、この公開画像ファイル12f1cによる合成画像12f1c−1,−2,−3,…の表示出力状態にあって、認証情報入力部17xからユーザ認証情報が入力されたか否か判断される(ステップD23)。
【0124】
ここで、ユーザ認証情報の入力がないと判断された場合には、前記公開画像ファイル12f1cによる合成画像12f1c−1,−2,−3,…の表示出力状態がそのまま維持される(ステップD23(No))。
【0125】
一方、前記ステップD23において、ユーザ認証情報の入力がされたと判断されると共に、当該入力されたユーザ認証情報が前記指定のファイル名に対応するところの撮影画像ファイル12fnに登録された認証データ12f1aと一致する正しい認証情報であると判断された場合には(ステップD24)、該当の撮影画像ファイル12fnにおける秘密画像ファイル12f1b内の撮影画像が読み出され、例えば図7(SC1)〜(SC3)で示したように、何ら置き換え合成していない元の撮影画像12f1b−1,−2,−3,…として表示出力される(ステップD25)。
【0126】
この画像表示処理(方式2)によれば、ファイル名の指定に応じて、まず当該指定ファイル名の撮影画像ファイル12fnにおける公開画像ファイル12fncから、見られたくない被写体画像H1をまねのキャラクタ画像で置き換え合成処理した画像12fnc−1,−2,−3,…が読み出されて表示され、この後、正しいユーザ認識情報が入力された場合は、同一撮影画像ファイル12fnにおける秘密画像ファイル12fnbから合成処理していない元の撮影画像12fnb−1,−2,−3,…が読み出されて表示されるので、デジタルカメラ付き携帯電話10Aやデジタルカメラ10Bとしての本画像出力装置10を第三者の操作に任せて画像の表示を行わせたとしても、自分の恋人などが写っている第三者には秘密の撮影画像については当該秘密の被写体像がまねのキャラクタ画像に置き換えられた合成画像12fnc−1,−2,−3,…として表示され、正しい認証情報を知っているユーザ本人だけがその元の撮影画像12fnb−1,−2,−3,…を表示させて見ることができる。
【0127】
なお、本実施形態では、秘密画像ファイル12fnbに撮影保存される元の撮影画像12fnb−1,−2,−3,…について、秘密にしたい被写体画像H1を指定することで、当該指定の被写体画像H1をそのまねのキャラクタ画像に置き換えて合成した合成画像12fnc−1,−2,−3,…を作成して公開画像ファイル12fncに記憶させておき、正しいユーザ認証情報12fnaが入力されない状態では、この公開画像ファイル12fncに記憶させた合成画像12fnc−1,−2,−3,…を表示させることで、第3者には秘密の被写体画像H1を見せずにその撮影画像の雰囲気が分かるような表示を行う構成としたが、公開画像ファイル12fncには秘密画像ファイル12fnbに保存される元の撮影画像12fnb−1,−2,−3,…のそれぞれに対応付けた秘密対象の被写体画像H1の位置とこれを置き換えるべきまねのキャラクタ画像の種類だけを記憶させておき、この公開画像ファイル12fncの出力に際して前記元の撮影画像12fnb−1,−2,−3,…に対する被写体画像H1の置き換え合成処理をその都度行い表示出力する構成としてもよい。
【0128】
したがって、前記構成の画像出力装置10による公開/秘密画像設定表示機能によれば、任意のファイル名及びユーザ認証データ12fnaに対応付けて、画像入力部17を介して撮影された元の撮影画像12fnb−1,−2,…を秘密画像ファイル12fnbとして保存すると共に、元の撮影画像12fnb−1,−2,…における秘密対象の被写体画像Hnをそのまねのキャラクタ画像に置き換えて合成した合成画像12fnc−1,−2,…を作成して公開画像ファイル12fncに記憶させる。そして、画像の表示操作(方式2)に伴いファイル名が指定されると、指定のファイル名に対応する撮影画像ファイル(n)12fn内の公開画像ファイル12fncから秘密対象の被写体画像Hnをそのまねのキャラクタ画像に置き換えて合成した合成画像12fnc−1,−2,…が読み出されて表示され、正しいユーザ認証データ12fnaが入力されることで、前記秘密画像ファイル12fnに保存された元の撮影画像12fnb−1,−2,…が読み出されて表示されるので、第三者の操作によって元の撮影画像12fnb−1,−2,…がそのまま表示されるのを防止することができ、しかも合成画像12fnc−1,−2,…であっても、秘密対象の被写体画像Hnはそのまねのキャラクタ画像に置き換えられて合成されているので、撮影の構図やその雰囲気については十分第3者にも表現することができる。
【0129】
一方、画像の表示操作(方式1)に伴いファイル名が指定されると共に、正しいユーザ認証データ12fnaが入力された場合には、指定のファイル名に対応する撮影画像ファイル(n)12fn内の元の撮影画像12fnb−1,−2,…が読み出されて表示され、正しいユーザ認証データ12fnaが入力されなかった場合には、同一撮影画像ファイル(n)12fn内の公開画像ファイル12fncから秘密対象の被写体画像Hnをそのまねのキャラクタ画像に置き換えて合成した合成画像12fnc−1,−2,…が読み出されて表示されるので、ユーザ本人によってのみ元の撮影画像1212fnb−1,−2,…をそのまま表示させて見ることができ、第三者であっても保存画像の表示操作を安心して行わせることができる。
【0130】
また、前記構成の画像出力装置10による合成画像作成処理に伴う対象画像抽出機能(方式1)によれば、画像入力部17を介して所定のタイミングで順次入力される一連の撮影画像が画像処理ワークエリアに記憶され、この一連の撮影画像のそれぞれから被写体の動きに伴う画像の変化部分が当該各被写体のブロック毎に抽出されるので、撮影画像を含む一連の取り込み画像に基づき抽出された各被写体画像Hn…の中から置き換え合成すべき秘密対象の被写体画像Hnを容易に指定できるようになる。
【0131】
また、前記構成の画像出力装置10による合成画像作成処理に伴う対象画像抽出機能(方式2)によれば、画像入力部17を介して入力される撮影画像の各部分毎に距離センサ18による距離測定が行われ、背景画像と被写体画像との距離差に基づき近距離側として判別される各被写体画像Hn…がそのブロック毎に抽出されるので、撮影時点の1枚の取り込み画像に基づき抽出された各被写体画像Hn…の中から置き換え合成すべき秘密対象の被写体画像Hnを容易に指定できるようになる。
【0132】
また、前記構成の画像出力装置10による合成画像作成処理に伴う対応アニメ画像取得機能(方式1)によれば、撮影画像12fnbから抽出設定された真似対象画像としての被写体画像Hnに対し、指定されたキャラクタの各ポーズ毎のキャラクタ画像との類似度が直接評価され、これに基づき被写体画像Hnを真似たポーズのキャラクタとして置き換えられる指定のキャラクタ画像が決定されるので、秘密対象の被写体画像Hnにまねた置き換え合成のためのキャラクタ画像を容易に取得できるようになる。
【0133】
また、前記構成の画像出力装置10による合成画像作成処理に伴う対応アニメ画像取得機能(方式2)によれば、撮影画像12fnbから抽出設定された真似対象画像としての被写体画像Hnに対し、人物の基本モデルである各ポーズ毎のモデル画像との類似度が評価され、これに基づき被写体画像Hnを真似たポーズのキャラクタとして置き換えられる指定のキャラクタ画像が決定されるので、秘密対象の被写体画像Hnにまねた置き換え合成のためのキャラクタ画像を容易に取得できるだけでなく、類似度の評価対象に標準的人物モデルを用いることから被写体画像Hnとの高い類似度が得られやすく、より類似性(真似度)の高いキャラクタ画像を取得できるようになる。
【0134】
なお、前記実施形態における合成画像作成機能では、撮影画像から抽出された被写体画像Hnに対応するポーズのキャラクタ画像を選択的に取得して、この取得されたキャラクタのアニメ画像を置き換え合成する構成としたが、実写や実写に近いコンピュータグラフィックスによる様々な表情の顔画像や人物画像を予め記憶させておき、この実写などによる顔画像や人物画像を撮影画像から抽出された被写体画像Hnに対応する真似画像として置き換え合成する構成としてもよい。
【0135】
また、前記実施形態では、撮影画像が静止画である場合について説明したが、画像入力部17を介して例えばデジタルビデオムービー17Bにより撮影入力される動画像に基づいて、当該動画像内の背景画像に対して時系列的に変化する被写体画像Hn…を順次抽出し、この順次抽出された被写体画像Hn…の中で指定した秘密対象の被写体画像Hnに対応するポーズのキャラクタ画像を選択的に取得して、前記撮影動画像内の指定の被写体画像Hnと置き換え合成する構成としてもよい。
【0136】
なお、前記実施形態の画像出力装置10では、デジタルカメラ付き携帯電話10Aやデジタルカメラ10Bのその本体において、撮影した元の撮影画像12fnb−1,−2,…を秘密画像ファイル12fnbに保存すると共に、当該元の撮影画像12fnb−1,−2,…それぞれにおける秘密対象の被写体画像Hnをそのまねのキャラクタ画像に置き換えて合成した合成画像12fnc−1,−2,…を作成して公開画像ファイル12fncに記憶させる。そして、この撮影装置10A,10B本体での画像表示操作に伴い、正規のユーザ認証データ12fnaが入力された場合には前記秘密画像ファイル12fnbに保存された元の撮影画像12fnb−1,−2,…を表示出力し、正規のユーザ認証データ12fnaが入力されない場合には前記公開画像ファイル12fncに保存された合成画像12fnc−1,−2,…を表示出力する構成としたが、次の第2実施形態において説明するように、インターネットなどの通信ネットワークN上にあるWebサーバ30において前記同様の撮影画像ファイルの保存機能を持たせ、このWebサーバ30に対する各通信端末からのアクセスに伴い、正規のユーザ認証データが入力されたか否かによって、前記同様に元の撮影画像か又はその合成画像を選択出力する構成としてもよい。
【0137】
(第2実施形態)
図16は本発明の第2実施形態に係る画像配信サーバ30の構成を示すブロック図である。
【0138】
この画像配信サーバ30は、各種の記録媒体に記録されたプログラム、又は、伝送されたプログラムを読み込んで、その読み込んだプログラムによって動作が制御されるコンピュータによって構成され、その電子回路には、CPU(central processing unit)31が備えられる。
【0139】
CPU31は、メモリ32内に予め記憶されたサーバ制御プログラム、あるいはCD−ROMなどの外部記録媒体33から記録媒体読取部34を介して前記メモリ32に読み込まれたサーバ制御プログラム、あるいはインターネットN上の他のWebサーバ(この場合はプログラムサーバ)から電送制御部35を介して前記メモリ32に読み込まれたサーバ制御プログラムに応じて、回路各部の動作を制御するもので、前記メモリ32に記憶されたサーバ制御プログラムは、電送制御部35を介して接続されるインターネットN上の各通信端末(デジタルカメラ付き携帯電話10A、通信機能付きデジタルカメラ10B、その他PC(personal computer)端末)などや他のWebサーバとの通信信号に応じて起動される。
【0140】
前記CPU31には、前記メモリ32、記録媒体読取部34、電送制御部35が接続される他に、LCDからなる表示部36などが接続される。
【0141】
そして、メモリ32には、当該画像配信サーバ30の全体の動作を司るシステムプログラムや電送制御部35を介してインターネットN上の各通信端末(デジタルカメラ付き携帯電話10A、通信機能付きデジタルカメラ10B、その他PC(personal computer)端末)などや他のWebサーバとデータ通信するための通信プログラムが記憶される他に、前記インターネットN上の各通信端末(10A,10Bなど)とのアクセスに基づき、それぞれそのユーザ端末毎の撮影画像ファイル32f1,32f2,…を生成管理し、撮影画像データを保存・配信したり、当該撮影画像内の指定の対象画像(例えば人物像)に応じた対応画像(例えばまね人物像)への置き換え合成保存・配信処理などを行うための画像出力処理プログラム32aなどが記憶される。
【0142】
従って、この画像配信サーバ30のメモリ32にも、前記画像出力装置10のメモリ12と同様に、モデルポーズ画像メモリ32b、キャラ1「女性(1)」ポーズ画像メモリ32c、キャラ2「女性(2)」ポーズ画像メモリ32d、キャラ3「男性(1)」ポーズ画像メモリ32eなどが用意され、さらにそのワークエリアには、当該画像配信サーバ30によって撮影画像データが管理される各ユーザ端末毎の撮影画像ファイル32f1,32f2,…などが用意される。
【0143】
各ユーザ端末毎の撮影画像ファイル(1)32f1,(2)32f2,…には、そのそれぞれのファイル(1)(2)…毎に、ユーザ名:ファイル名:ユーザ認証データ(指紋画像やパスワードなど)32f1a,32f2a,…に対応付けされた秘密画像ファイル32f1b,32f2b,…と公開画像ファイル32f1c,32f2c,…とが記憶される。
【0144】
秘密画像ファイル32f1b,32f2b,…には、各対応するアクセス元のユーザ端末(10Aや10Bなど)から受信された撮影画像データがそのまま元の撮影画像1,2,…として記憶保存され、公開画像ファイル32f1c,32f2c,…には、前記秘密画像ファイル32f1b,32f2b,…に記憶された撮影画像1,2,…それぞれの指定の対象画像(例えば人物像)をそのポーズのまねをするキャラクタの画像(図2参照)に置き換えた合成画像1,2,…が記憶される。
【0145】
この秘密画像ファイル32f1b,32f2b,…に記憶される元の撮影画像データ32fnb−1,−2,…と公開画像ファイル32f1c,32f2c,…に記憶される合成画像データ32fnc−1,−2,…との関係については、前記第1実施形態にて説明した画像出力装置10と同様であるためその説明を省略する。
【0146】
このような構成の画像配信サーバ30をインターネットなどの通信ネットワークN上に開設し、各ユーザ端末としてのデジタルカメラ付き携帯電話10Aや通信機能付きデジタルカメラ10Bなどとの通信を行い、各ユーザ端末における撮影画像を当該画像配信サーバ30において前記第1実施形態の画像出力装置10と同様に管理することで、各ユーザ端末32fna毎に元の撮影画像32fnbに対応付けて合成画像32fncを生成保存することができ、またこれらの保存画像を各ユーザ端末からの要求に応じて配信することができる。
【0147】
この場合、各撮影画像ファイル32fnに保存された秘密画像ファイル32fnb内の元の撮影画像32fnb−1,−2,…は、その何れも各対応するユーザ端末の認証データ32fnaが入力一致判断された場合にのみ読み出されて配信される。
【0148】
したがって、前記構成の画像配信サーバ30において各ユーザ端末との間でアクセスしながら実施される公開/秘密画像設定機能やこれに伴う合成画像作成機能、そして画像配信機能によれば、ユーザ端末とのアクセスに伴い受信されたユーザ名:ファイル名:ユーザ認証データ32fnaに対応付けて、撮影受信された元の撮影画像32fnb−1,−2,…を秘密画像ファイル32fnbとして保存すると共に、元の撮影画像32fnb−1,−2,…における秘密対象の被写体画像Hnをそのまねのキャラクタ画像に置き換えて合成した合成画像32fnc−1,−2,…を作成して公開画像ファイル32fncに記憶させる。この後、ユーザ端末とのアクセスに伴いファイル名が指定されると、該当ユーザのファイル名32fnaに対応する撮影画像ファイル(n)32fn内の公開画像ファイル32fncから秘密対象の被写体画像Hnをそのまねのキャラクタ画像に置き換えて合成した合成画像32fnc−1,−2,…が読み出されて配信され、正しいユーザ認証データ32fnaが入力されることで、前記秘密画像ファイル32fnに保存された元の撮影画像32fnb−1,−2,…が読み出されて配信されるので、第三者端末からのアクセス操作によって元の撮影画像32fnb−1,−2,…がそのまま配信出力されるのを防止することができ、しかも合成画像32fnc−1,−2,…であっても、秘密対象の被写体画像Hnはそのまねのキャラクタ画像に置き換えられて合成されているので、撮影の構図やその雰囲気については配信先の第3者にも十分表現することができる。
【0149】
なお、前記各実施形態において記載した画像出力装置10や画像配信装置30による各処理の手法、すなわち、図8のフローチャートに示す公開/秘密画像設定処理、図9のフローチャートに示す当該公開/秘密画像設定処理に伴う合成画像作成処理、図10のフローチャートに示す当該合成画像作成処理に伴う対象画像抽出処理、図11のフローチャートに示す当該合成画像作成処理に伴う対応アニメ画像取得処理、図12のフローチャートに示す当該対応アニメ画像取得処理に伴う真似対象画像との類似度評価処理、図15のフローチャートに示す画像表示処理等の各手法は、何れもコンピュータに実行させることができるプログラムとして、メモリカード(ROMカード、RAMカード等)、磁気ディスク(フロッピディスク、ハードディスク等)、光ディスク(CD−ROM、DVD等)、半導体メモリ等の外部記録媒体13(33)に格納して配布することができる。そして、通信ネットワーク(インターネット)Nとの通信機能を備えた種々のコンピュータ端末は、この外部記録媒体13(33)に記憶されたプログラムを記録媒体読取部14(34)によってメモリ12(32)に読み込み、この読み込んだプログラムによって動作が制御されることにより、前記各実施形態において説明した公開/秘密画像設定・表示(配信)機能を実現し、前述した手法による同様の処理を実行することができる。
【0150】
また、前記各手法を実現するためのプログラムのデータは、プログラムコードの形態として通信ネットワーク(インターネット)N上を伝送させることができ、この通信ネットワーク(インターネット)Nに接続されたコンピュータ端末から前記のプログラムデータを取り込み、前述した画像処理機能を実現することもできる。
【0151】
なお、本願発明は、前記各実施形態に限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で種々に変形することが可能である。さらに、前記各実施形態には種々の段階の発明が含まれており、開示される複数の構成要件における適宜な組み合わせにより種々の発明が抽出され得る。例えば、各実施形態に示される全構成要件から幾つかの構成要件が削除されたり、幾つかの構成要件が組み合わされても、発明が解決しようとする課題の欄で述べた課題が解決でき、発明の効果の欄で述べられている効果が得られる場合には、この構成要件が削除されたり組み合わされた構成が発明として抽出され得るものである。
【0152】
【発明の効果】
以上のように、本発明の請求項1に係る画像出力装置によれば、撮影画像取得手段により撮影画像が取得されると、この撮影画像取得手段により取得された撮影画像は撮影画像記憶手段により記憶される。そして、対象画像抽出手段によって前記撮影画像取得手段により取得された撮影画像の中から対象画像が抽出されると、対応画像取得手段によって前記対象画像抽出手段により抽出された対象画像に応じた対応画像が取得され、画像合成手段によって前記対象画像抽出手段により抽出された対象画像が前記対応画像取得手段により取得された対応画像に置き換えられて前記撮影画像取得手段により取得された撮影画像に合成され、この合成画像が合成画像記憶手段によって記憶される。すると、合成画像出力手段によって外部からの画像出力要求に応答して、前記合成画像記憶手段により記憶された合成画像が出力され、また、撮影画像出力手段によって外部からの画像出力要求に伴う認証情報の入力に応答して、前記撮影画像記憶手段により記憶された撮影画像が出力されるので、撮影画像の中の例えば秘密の被写体画像としての対象画像をこれに応じたまねキャラクタ画像などの対応画像に置き換えて合成した合成画像を作成し、通常の画像出力要求時には当該合成画像を出力でき、撮影者本人などの認証情報が入力された場合にのみ元の撮影画像を出力できるようになる。
【0153】
また、本発明の請求項2に係る画像出力装置によれば、撮影画像取得手段により撮影画像が取得されると、この撮影画像取得手段により取得された撮影画像は撮影画像記憶手段により記憶される。そして、対象画像抽出手段によって前記撮影画像取得手段により取得された撮影画像の中から対象画像が抽出され、対応画像取得手段によって前記抽出された対象画像に応じた対応画像が取得されると、画像合成手段によって前記抽出された対象画像は前記対応画像取得手段により取得された対応画像に置き換えられて前記撮影画像取得手段により取得された撮影画像に合成され、この画像合成は合成画像記憶手段によって記憶される。すると、画像出力手段によって、外部からの画像出力要求に伴い正規の認証情報が入力された場合には前記撮影画像記憶手段により記憶された撮影画像が出力され、外部からの画像出力要求に伴い正規の認証情報が入力されない場合には前記合成画像記憶手段により記憶された合成画像が出力されるので、撮影画像の中の例えば秘密の被写体画像としての対象画像をこれに応じたまねキャラクタ画像などの対応画像に置き換えて合成した合成画像を作成し、撮影者本人などの正規の認証情報が入力された場合には元の撮影画像を出力でき、正規の認証情報が入力されない場合にはその合成画像を出力できるようになる。
【0154】
また、本発明の請求項3に係る画像出力装置によれば、撮影画像取得手段により撮影画像が取得されると、この撮影画像取得手段により取得された撮影画像は撮影画像記憶手段により記憶される。そして、対象画像抽出手段によって前記撮影画像取得手段により取得された撮影画像の中から対象画像が抽出されると、対象画像部記憶手段によって前記抽出された撮影画像の中の対象画像部分が記憶される。外部からの画像出力要求に伴い正規の認証情報が入力された場合には撮影画像出力手段によって前記撮影画像記憶手段により記憶された撮影画像が出力される。外部からの画像出力要求に伴い正規の認証情報が入力されない場合には対応画像取得手段によって前記対象画像部記憶手段により記憶された撮影画像の中の対象画像部分に基づき当該対象画像に応じた対応画像が取得されると共に、画像合成手段によって前記撮影画像記憶手段により記憶された撮影画像の中の対象画像が前記対応画像取得手段により取得された対応画像に置き換えられて合成され、この合成画像が合成画像出力手段によって出力されるので、撮影者本人などの正規の認証情報が入力された場合には撮影した元の撮影画像を出力でき、正規の認証情報が入力されない場合には撮影画像の中の例えば秘密の被写体画像としての対象画像をこれに応じたまねキャラクタ画像などの対応画像に置き換えて合成した合成画像を作成し、その合成画像を出力できるようになる。
【0155】
また、本発明の請求項4に係る画像出力装置によれば、前記請求項1ないし請求項3の何れか1項に係る画像出力装置にあって、前記対象画像抽出手段では、前記撮影画像取得手段により取得された一連の複数の撮影画像の中から変化部分が対象画像として抽出されるので、撮影画像を含む一連の取り込み画像に基づきその変化部分が例えば秘密にすべき被写体画像である対象画像として容易に抽出できるようになる。
【0156】
また、本発明の請求項5に係る画像出力装置によれば、前記請求項1ないし請求項3の何れか1項に係る画像出力装置にあって、前記対象画像抽出手段では、前記撮影画像取得手段により取得される撮影画像の各部分までの距離を測定する距離測定手段を有し、この距離測定手段により測定された撮影画像の各部分までの距離に応じて対象画像が抽出されるので、撮影された1枚の取り込み画像の各部の撮影距離に基づき例えば秘密にすべき被写体画像である対象画像として容易に抽出できるようになる。
【0157】
また、本発明の請求項6に係る画像出力装置によれば、前記請求項1ないし請求項5の何れか1項に係る画像出力装置にあって、前記対応画像取得手段では、複数の対応画像を記憶する対応画像記憶手段と、前記対象画像抽出手段により抽出された対象画像と前記対応画像記憶手段により記憶された各対応画像との類似度を評価する類似度評価手段とを有し、この類似度評価手段により評価された対象画像と各対応画像との類似度に応じて当該対象画像に応じた対応画像が取得されるので、抽出された対象画像である例えば秘密対象の被写体画像にまねて置き換え合成すべき対応画像を容易に取得できるようになる。
【0158】
また、本発明の請求項7に係る画像出力装置によれば、前記請求項1ないし請求項5の何れか1項に係る画像出力装置にあって、前記対応画像取得手段では、複数のモデル画像と複数の対応画像とを対応付けて記憶する対応画像記憶手段と、前記対象画像抽出手段により抽出された対象画像と前記対応画像記憶手段により記憶された各モデル画像との類似度を評価する類似度評価手段とを有し、この類似度評価手段により評価された対象画像と各モデル画像との類似度に応じて当該対象画像に応じたモデル画像に対応付けられて前記対応画像記憶手段により記憶された対応画像が取得されるので、抽出された対象画像である例えば秘密対象の被写体画像にまねて置き換え合成すべき対応画像を容易に取得できるだけでなく、類似度の評価対象に標準的モデルを用いることから対象画像との高い類似(まね)度が得られやすく、より表現の近い置き換え対応画像を取得できるようになる。
【0159】
また、本発明の請求項8に係る画像出力装置によれば、前記請求項1ないし請求項7の何れか1項に係る画像出力装置にあって、前記撮影画像取得手段では、デジタルカメラなどの撮影手段を有し、この撮影手段により撮影された撮影画像に基づいて、当該撮影画像を撮影画像記憶手段により記憶したり、この撮影画像の抽出対象画像をこれに応じた対応画像に置き換え合成して合成画像記憶手段により記憶できるようになる。
【0160】
よって、撮影画像中の隠したい画像に対して単に固定的な画像を合成するのではなく、当該隠したい画像(例えば人物像)をその表現に対応した画像に置き換え合成して出力し、ユーザ本人に対してのみ元の撮影画像を出力することが可能になる。
【図面の簡単な説明】
【図1】本発明の第1実施形態に係る画像出力装置10の電子回路の構成を示すブロック図。
【図2】前記画像出力装置10のキャラ1「女性(1)」ポーズ画像メモリ12c:キャラ2「女性(2)」ポーズ画像メモリ12d:キャラ3「男性(1)」ポーズ画像メモリ12eにそれぞれ記憶された各種のポーズに対応する各キャラクタ画像を示す図。
【図3】前記画像出力装置10のモデルポーズ画像メモリ12bに記憶されたモデルポーズに対応するモデル画像を示す図。
【図4】前記画像出力装置10による公開/秘密画像設定モード指定時のキャラクタ画像「女性(1)」による対象画像の置き換え合成状態を示す図。
【図5】前記画像出力装置であるデジタルカメラ付き携帯電話10Aの外観構成を示す図であり、同図(A)はその全体斜視図、同図(B)はその部分拡大図。
【図6】前記画像出力装置であるデジタルカメラ10Bの外観構成を示す図であり、同図(A)はその前面図、同図(B)はその背面図。
【図7】前記画像出力装置10の公開/秘密画像設定処理に伴い撮影画像ファイル12f1にユーザ認証データ12f1aを対応付けて保存管理される秘密画像ファイル12f1bと公開画像ファイル12f1cを示す図であり、同図(SC1)〜(SC3)は秘密画像ファイル12f1bに保存管理された元の撮影画像12f1b−1〜12f1b−3を示す図、同図(PU1)〜(PU3)は公開画像ファイル12f1cに保存管理された合成画像12f1c−1〜12f1c−3を示す図。
【図8】前記画像出力装置10による公開/秘密画像設定処理を示すフローチャート。
【図9】前記画像出力装置10の公開/秘密画像設定処理に伴う合成画像作成処理を示すフローチャート。
【図10】前記画像出力装置10の合成画像作成処理に伴う対象画像抽出処理を示すフローチャートであり、同図(A)はその対象画像抽出処理(方式1)を示すフローチャート、同図(B)はその対象画像抽出処理(方式2)を示すフローチャート。
【図11】前記画像出力装置10の合成画像作成処理に伴う対応アニメ画像取得処理を示すフローチャートであり、同図(A)はその対応アニメ画像取得処理(方式1)を示すフローチャート、同図(B)はその対応アニメ画像取得処理(方式2)を示すフローチャート。
【図12】前記画像出力装置10の合成画像作成処理に伴う対応アニメ画像取得処理(方式1)(方式2)での真似対象画像との類似度評価処理を示すフローチャート。
【図13】前記画像出力装置10の対応アニメ画像取得処理(方式1)での類似度評価処理に伴う指定のキャラクタ画像との類似度評価例を示す図。
【図14】前記画像出力装置10の対応アニメ画像取得処理(方式2)での類似度評価処理に伴うモデル画像との類似度評価例を示す図。
【図15】前記画像出力装置10の画像表示処理を示すフローチャートであり、同図(A)はその画像表示処理(方式1)を示すフローチャート、同図(B)はその画像表示処理(方式2)を示すフローチャート。
【図16】本発明の第2実施形態に係る画像配信サーバ30の構成を示すブロック図。
【符号の説明】
10 …画像出力装置
10A…デジタルカメラ付き携帯電話
10B…通信機能付きデジタルカメラ
30 …画像配信サーバ
11、31…CPU
12、32…メモリ
12a、32a…画像出力処理プログラム
12b、32b…モデルポーズ画像メモリ
12c、32c…キャラ1「女性(1)」ポーズ画像メモリ
12d、32d…キャラ2「女性(2)」ポーズ画像メモリ
12e、32e…キャラ3「男性(1)」ポーズ画像メモリ
12fn、32fn…撮影画像ファイル
12fna…ファイル名:ユーザ認証データ
32fna…ユーザ名:ファイル名:ユーザ認証データ
12fnb、32fnb…秘密画像ファイル(元の撮影画像)
12fnc、32fnc…公開画像ファイル(合成画像)
13、33…外部記録媒体
14、34…記録媒体読取部
15、35…電送制御部
16 …入力部
17 …画像入力部
17A…デジタルカメラ
17B…デジタルビデオムービー
17C…VTR(画像再生装置)
17x…認証情報入力部
18 …距離センサ
19、36…表示部
20 …画像出力部
20A…メモリカード
20B…VTR(録画装置)
20C…画像印刷機
21 …Webサーバ
N …通信ネットワーク(インターネット)

Claims (16)

  1. 撮影画像を取得する撮影画像取得手段と、
    この撮影画像取得手段により取得された撮影画像を記憶する撮影画像記憶手段と、
    前記撮影画像取得手段により取得された撮影画像の中から対象画像を抽出する対象画像抽出手段と、
    この対象画像抽出手段により抽出された対象画像に応じた対応画像を取得する対応画像取得手段と、
    前記対象画像抽出手段により抽出された対象画像を前記対応画像取得手段により取得された対応画像に置き換えて前記撮影画像取得手段により取得された撮影画像に合成する画像合成手段と、
    この画像合成手段により前記対象画像が前記対応画像に置き換えられて合成された合成画像を記憶する合成画像記憶手段と、
    外部からの画像出力要求に応答して、前記合成画像記憶手段により記憶された合成画像を出力する合成画像出力手段と、
    外部からの画像出力要求に伴う認証情報の入力に応答して、前記撮影画像記憶手段により記憶された撮影画像を出力する撮影画像出力手段と、
    を備えたことを特徴とする画像出力装置。
  2. 撮影画像を取得する撮影画像取得手段と、
    この撮影画像取得手段により取得された撮影画像を記憶する撮影画像記憶手段と、
    前記撮影画像取得手段により取得された撮影画像の中から対象画像を抽出する対象画像抽出手段と、
    この対象画像抽出手段により抽出された対象画像に応じた対応画像を取得する対応画像取得手段と、
    前記対象画像抽出手段により抽出された対象画像を前記対応画像取得手段により取得された対応画像に置き換えて前記撮影画像取得手段により取得された撮影画像に合成する画像合成手段と、
    この画像合成手段により前記対象画像が前記対応画像に置き換えられて合成された合成画像を記憶する合成画像記憶手段と、
    外部からの画像出力要求に伴い正規の認証情報が入力された場合には前記撮影画像記憶手段により記憶された撮影画像を出力し、外部からの画像出力要求に伴い正規の認証情報が入力されない場合には前記合成画像記憶手段により記憶された合成画像を出力する画像出力手段と、
    を備えたことを特徴とする画像出力装置。
  3. 撮影画像を取得する撮影画像取得手段と、
    この撮影画像取得手段により取得された撮影画像を記憶する撮影画像記憶手段と、
    前記撮影画像取得手段により取得された撮影画像の中から対象画像を抽出する対象画像抽出手段と、
    この対象画像抽出手段により抽出された撮影画像の中の対象画像部分を記憶する対象画像部記憶手段と、
    外部からの画像出力要求に伴い正規の認証情報が入力された場合には前記撮影画像記憶手段により記憶された撮影画像を出力する撮影画像出力手段と、
    外部からの画像出力要求に伴い正規の認証情報が入力されない場合には前記対象画像部記憶手段により記憶された撮影画像の中の対象画像部分に基づき当該対象画像に応じた対応画像を取得する対応画像取得手段と、
    前記撮影画像記憶手段により記憶された撮影画像の中の対象画像を前記対応画像取得手段により取得された対応画像に置き換えて合成する画像合成手段と、
    この画像合成記憶手段により合成された合成画像を出力する合成画像出力手段と、
    を備えたことを特徴とする画像出力装置。
  4. 前記対象画像抽出手段は、前記撮影画像取得手段により取得された一連の複数の撮影画像の中から変化部分を対象画像として抽出することを特徴とする請求項1ないし請求項3の何れか1項に記載の画像出力装置。
  5. 前記対象画像抽出手段は、
    前記撮影画像取得手段により取得される撮影画像の各部分までの距離を測定する距離測定手段を有し、
    この距離測定手段により測定された撮影画像の各部分までの距離に応じて対象画像を抽出することを特徴とする請求項1ないし請求項3の何れか1項に記載の画像出力装置。
  6. 前記対応画像取得手段は、
    複数の対応画像を記憶する対応画像記憶手段と、
    前記対象画像抽出手段により抽出された対象画像と前記対応画像記憶手段により記憶された各対応画像との類似度を評価する類似度評価手段とを有し、
    この類似度評価手段により評価された対象画像と各対応画像との類似度に応じて当該対象画像に応じた対応画像を取得することを特徴とする請求項1ないし請求項5の何れか1項に記載の画像出力装置。
  7. 前記対応画像取得手段は、
    複数のモデル画像と複数の対応画像とを対応付けて記憶する対応画像記憶手段と、
    前記対象画像抽出手段により抽出された対象画像と前記対応画像記憶手段により記憶された各モデル画像との類似度を評価する類似度評価手段とを有し、
    この類似度評価手段により評価された対象画像と各モデル画像との類似度に応じて当該対象画像に応じたモデル画像に対応付けられて前記対応画像記憶手段により記憶された対応画像を取得することを特徴とする請求項1ないし請求項5の何れか1項に記載の画像出力装置。
  8. 前記撮影画像取得手段は、撮影手段を有し、この撮影手段により撮影された撮影画像を取得することを特徴とする請求項1ないし請求項7の何れか1項に記載の画像出力装置。
  9. 撮影画像を取得する撮影画像取得ステップと、
    この撮影画像取得ステップにて取得された撮影画像を記憶する撮影画像記憶ステップと、
    前記撮影画像取得ステップにて取得された撮影画像の中から対象画像を抽出する対象画像抽出ステップと、
    この対象画像抽出ステップにて抽出された対象画像に応じた対応画像を取得する対応画像取得ステップと、
    前記対象画像抽出ステップにて抽出された対象画像を前記対応画像取得ステップにて取得された対応画像に置き換えて前記撮影画像取得ステップにて取得された撮影画像に合成する画像合成ステップと、
    この画像合成ステップにて前記対象画像が前記対応画像に置き換えられて合成された合成画像を記憶する合成画像記憶ステップと、
    外部からの画像出力要求に応答して、前記合成画像記憶ステップにて記憶された合成画像を出力する合成画像出力ステップと、
    外部からの画像出力要求に伴う認証情報の入力に応答して、前記撮影画像記憶ステップにて記憶された撮影画像を出力する撮影画像出力ステップと、
    からなることを特徴とする画像出力方法。
  10. 撮影画像を取得する撮影画像取得ステップと、
    この撮影画像取得ステップにて取得された撮影画像を記憶する撮影画像記憶ステップと、
    前記撮影画像取得ステップにて取得された撮影画像の中から対象画像を抽出する対象画像抽出ステップと、
    この対象画像抽出ステップにて抽出された対象画像に応じた対応画像を取得する対応画像取得ステップと、
    前記対象画像抽出ステップにて抽出された対象画像を前記対応画像取得ステップにて取得された対応画像に置き換えて前記撮影画像取得ステップにて取得された撮影画像に合成する画像合成ステップと、
    この画像合成ステップにて前記対象画像が前記対応画像に置き換えられて合成された合成画像を記憶する合成画像記憶ステップと、
    外部からの画像出力要求に伴い正規の認証情報が入力された場合には前記撮影画像記憶ステップにて記憶された撮影画像を出力し、外部からの画像出力要求に伴い正規の認証情報が入力されない場合には前記合成画像記憶ステップにて記憶された合成画像を出力する画像出力ステップと、
    からなることを特徴とする画像出力方法。
  11. コンピュータを制御して画像の出力処理を行うための画像出力処理プログラムであって、
    前記コンピュータを、
    撮影画像を取得する撮影画像取得手段、
    この撮影画像取得手段により取得された撮影画像を記憶する撮影画像記憶手段、
    前記撮影画像取得手段により取得された撮影画像の中から対象画像を抽出する対象画像抽出手段、
    この対象画像抽出手段により抽出された対象画像に応じた対応画像を取得する対応画像取得手段、
    前記対象画像抽出手段により抽出された対象画像を前記対応画像取得手段により取得された対応画像に置き換えて前記撮影画像取得手段により取得された撮影画像に合成する画像合成手段、
    この画像合成手段により前記対象画像が前記対応画像に置き換えられて合成された合成画像を記憶する合成画像記憶手段、
    外部からの画像出力要求に応答して、前記合成画像記憶手段により記憶された合成画像を出力する合成画像出力手段、
    外部からの画像出力要求に伴う認証情報の入力に応答して、前記撮影画像記憶手段により記憶された撮影画像を出力する撮影画像出力手段、
    として機能させるようにしたコンピュータ読み込み可能な画像出力処理プログラム。
  12. コンピュータを制御して画像の出力処理を行うための画像出力処理プログラムであって、
    前記コンピュータを、
    撮影画像を取得する撮影画像取得手段、
    この撮影画像取得手段により取得された撮影画像を記憶する撮影画像記憶手段、
    前記撮影画像取得手段により取得された撮影画像の中から対象画像を抽出する対象画像抽出手段、
    この対象画像抽出手段により抽出された対象画像に応じた対応画像を取得する対応画像取得手段、
    前記対象画像抽出手段により抽出された対象画像を前記対応画像取得手段により取得された対応画像に置き換えて前記撮影画像取得手段により取得された撮影画像に合成する画像合成手段、
    この画像合成手段により前記対象画像が前記対応画像に置き換えられて合成された合成画像を記憶する合成画像記憶手段、
    外部からの画像出力要求に伴い正規の認証情報が入力された場合には前記撮影画像記憶手段により記憶された撮影画像を出力し、外部からの画像出力要求に伴い正規の認証情報が入力されない場合には前記合成画像記憶手段により記憶された合成画像を出力する画像出力手段、
    として機能させるようにしたコンピュータ読み込み可能な画像出力処理プログラム。
  13. 端末から撮影画像と、当該撮影画像についての抽出対象部分とを受信する撮影画像受信手段と、
    この撮影画像受信手段により受信された撮影画像を記憶する撮影画像記憶手段と、
    前記撮影画像受信手段により受信された撮影画像についての抽出対象部分に応じた対応画像を取得する対応画像取得手段と、
    前記撮影画像受信手段により受信された撮影画像の中の抽出対象部分を前記対応画像取得手段により取得された対応画像に置き換えて合成する画像合成手段と、
    この画像合成手段により前記対象画像が前記対応画像に置き換えられて合成された合成画像を記憶する合成画像記憶手段と、
    端末からの画像配信要求の受信に応答して、前記合成画像記憶手段により記憶された合成画像を当該端末へ送信する合成画像送信手段と、
    端末からの画像配信要求に伴う認証情報の受信に応答して、前記撮影画像記憶手段により記憶された撮影画像を当該端末へ送信する撮影画像送信手段と、
    を備えたことを特徴とする画像配信サーバ。
  14. 端末から撮影画像と、当該撮影画像についての抽出対象部分とを受信する撮影画像受信手段と、
    この撮影画像受信手段により受信された撮影画像を記憶する撮影画像記憶手段と、
    前記撮影画像受信手段により受信された撮影画像についての抽出対象部分に応じた対応画像を取得する対応画像取得手段と、
    前記撮影画像受信手段により受信された撮影画像の中の抽出対象部分を前記対応画像取得手段により取得された対応画像に置き換えて合成する画像合成手段と、
    この画像合成手段により前記対象画像が前記対応画像に置き換えられて合成された合成画像を記憶する合成画像記憶手段と、
    端末からの画像配信要求に伴う正規の認証情報が受信された場合には前記撮影画像記憶手段により記憶された撮影画像を当該端末へ送信し、端末からの画像配信要求に伴う正規の認証情報が受信されない場合には前記合成画像記憶手段により記憶された合成画像を当該端末へ送信する画像送信手段と、
    を備えたことを特徴とする画像配信サーバ。
  15. コンピュータを制御して画像の配信処理を行うための画像配信処理プログラムであって、
    前記コンピュータを、
    端末から撮影画像と、当該撮影画像についての抽出対象部分とを受信する撮影画像受信手段、
    この撮影画像受信手段により受信された撮影画像を記憶する撮影画像記憶手段、
    前記撮影画像受信手段により受信された撮影画像についての抽出対象部分に応じた対応画像を取得する対応画像取得手段、
    前記撮影画像受信手段により受信された撮影画像の中の抽出対象部分を前記対応画像取得手段により取得された対応画像に置き換えて合成する画像合成手段、
    この画像合成手段により前記対象画像が前記対応画像に置き換えられて合成された合成画像を記憶する合成画像記憶手段、
    端末からの画像配信要求の受信に応答して、前記合成画像記憶手段により記憶された合成画像を当該端末へ送信する合成画像送信手段、
    端末からの画像配信要求に伴う認証情報の受信に応答して、前記撮影画像記憶手段により記憶された撮影画像を当該端末へ送信する撮影画像送信手段、
    として機能させるようにしたコンピュータ読み込み可能な画像配信処理プログラム。
  16. コンピュータを制御して画像の配信処理を行うための画像配信処理プログラムであって、
    前記コンピュータを、
    端末から撮影画像と、当該撮影画像についての抽出対象部分とを受信する撮影画像受信手段、
    この撮影画像受信手段により受信された撮影画像を記憶する撮影画像記憶手段、
    前記撮影画像受信手段により受信された撮影画像についての抽出対象部分に応じた対応画像を取得する対応画像取得手段、
    前記撮影画像受信手段により受信された撮影画像の中の抽出対象部分を前記対応画像取得手段により取得された対応画像に置き換えて合成する画像合成手段、
    この画像合成手段により前記対象画像が前記対応画像に置き換えられて合成された合成画像を記憶する合成画像記憶手段、
    端末からの画像配信要求に伴う正規の認証情報が受信された場合には前記撮影画像記憶手段により記憶された撮影画像を当該端末へ送信し、端末からの画像配信要求に伴う正規の認証情報が受信されない場合には前記合成画像記憶手段により記憶された合成画像を当該端末へ送信する画像送信手段、
    として機能させるようにしたコンピュータ読み込み可能な画像配信処理プログラム。
JP2003199072A 2003-07-18 2003-07-18 画像出力装置、画像出力処理プログラム、および画像配信サーバ Expired - Fee Related JP4254391B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2003199072A JP4254391B2 (ja) 2003-07-18 2003-07-18 画像出力装置、画像出力処理プログラム、および画像配信サーバ

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2003199072A JP4254391B2 (ja) 2003-07-18 2003-07-18 画像出力装置、画像出力処理プログラム、および画像配信サーバ

Publications (2)

Publication Number Publication Date
JP2005038118A true JP2005038118A (ja) 2005-02-10
JP4254391B2 JP4254391B2 (ja) 2009-04-15

Family

ID=34208640

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2003199072A Expired - Fee Related JP4254391B2 (ja) 2003-07-18 2003-07-18 画像出力装置、画像出力処理プログラム、および画像配信サーバ

Country Status (1)

Country Link
JP (1) JP4254391B2 (ja)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009267662A (ja) * 2008-04-24 2009-11-12 Casio Comput Co Ltd 画像生成装置、及びプログラム
JP2012014233A (ja) * 2010-06-29 2012-01-19 Yahoo Japan Corp 本人認証支援装置及び方法
JP2014038328A (ja) * 2011-06-24 2014-02-27 Furyu Kk 情報管理システム、情報処理装置および方法、並びにプログラム
WO2015001807A1 (ja) * 2013-07-05 2015-01-08 パナソニックIpマネジメント株式会社 投影システム
WO2015072047A1 (ja) * 2013-11-14 2015-05-21 パナソニックIpマネジメント株式会社 投影システム
CN111475779A (zh) * 2020-05-19 2020-07-31 上海闻泰电子科技有限公司 图像处理方法、装置、设备及存储介质

Cited By (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009267662A (ja) * 2008-04-24 2009-11-12 Casio Comput Co Ltd 画像生成装置、及びプログラム
JP2012014233A (ja) * 2010-06-29 2012-01-19 Yahoo Japan Corp 本人認証支援装置及び方法
JP2014038328A (ja) * 2011-06-24 2014-02-27 Furyu Kk 情報管理システム、情報処理装置および方法、並びにプログラム
WO2015001807A1 (ja) * 2013-07-05 2015-01-08 パナソニックIpマネジメント株式会社 投影システム
WO2015001806A1 (ja) * 2013-07-05 2015-01-08 パナソニック株式会社 投影システム
US9235108B2 (en) 2013-07-05 2016-01-12 Panasonic Intellectual Property Management Co., Ltd. Projection system
US9354493B2 (en) 2013-07-05 2016-05-31 Panasonic Intellectual Property Management Co., Ltd. Projection system
JP5958875B2 (ja) * 2013-07-05 2016-08-02 パナソニックIpマネジメント株式会社 投影システム
JPWO2015001807A1 (ja) * 2013-07-05 2017-02-23 パナソニックIpマネジメント株式会社 投影システム
WO2015072047A1 (ja) * 2013-11-14 2015-05-21 パナソニックIpマネジメント株式会社 投影システム
CN111475779A (zh) * 2020-05-19 2020-07-31 上海闻泰电子科技有限公司 图像处理方法、装置、设备及存储介质
CN111475779B (zh) * 2020-05-19 2023-11-03 昆明闻讯实业有限公司 图像处理方法、装置、设备及存储介质

Also Published As

Publication number Publication date
JP4254391B2 (ja) 2009-04-15

Similar Documents

Publication Publication Date Title
JP4423929B2 (ja) 画像出力装置、画像出力方法、画像出力処理プログラム、および画像配信サーバ、画像配信処理プログラム
JP2010183317A (ja) 撮像装置、画像合成表示装置、画像合成表示方法、およびプログラム
JP2003346170A (ja) 画像配信サーバ、画像配信プログラム、及び画像配信方法
JP2005049939A (ja) 画像出力装置、画像出力方法、画像出力処理プログラム、および画像配信サーバ、画像配信処理プログラム
JP5012373B2 (ja) 合成画像出力装置および合成画像出力処理プログラム
JP2009088729A (ja) 合成画像出力装置および合成画像出力処理プログラム
JP6460625B2 (ja) ゲームシステム
JP5252068B2 (ja) 合成画像出力装置および合成画像出力処理プログラム
JP2006227838A (ja) 画像処理装置及び画像処理プログラム
US8189864B2 (en) Composite image generating apparatus, composite image generating method, and storage medium
JP4254391B2 (ja) 画像出力装置、画像出力処理プログラム、および画像配信サーバ
JP4935647B2 (ja) 合成画像出力装置および合成画像出力処理プログラム
JP6247505B2 (ja) ゲームシステム
JP4161769B2 (ja) 画像出力装置、画像出力方法、画像出力処理プログラム、および画像配信サーバ、画像配信処理プログラム
JP2003204497A (ja) 写真シール自動販売方法とその装置とそのシステム、及び写真シール紙ユニット
JP4989362B2 (ja) 撮像装置、及び、そのスルー画像の表示方法、並びに、撮影画像の記録方法
JP4151543B2 (ja) 画像出力装置、画像出力方法、および画像出力処理プログラム
JP3901015B2 (ja) 画像出力装置、画像出力処理プログラム、および画像出力方法
JP2013255714A (ja) ジグソーパズル画像の処理方法、及び処理装置
JP2006318385A (ja) 画像生成システム、プログラムおよび情報記憶媒体
JP4168800B2 (ja) 画像配信装置
JP2012032728A (ja) 画像表示装置および画像表示方法
JP2004355567A (ja) 画像出力装置、画像出力方法、画像出力処理プログラム、および画像配信サーバ、画像配信処理プログラム
JP6461289B2 (ja) ゲームシステム
JP4962218B2 (ja) 合成画像出力装置および合成画像出力処理プログラム

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20060628

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20081007

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20081119

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20090106

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20090119

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120206

Year of fee payment: 3

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120206

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130206

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130206

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140206

Year of fee payment: 5

LAPS Cancellation because of no payment of annual fees