JP5184123B2 - 画像処理装置、画像データ通信システム及び画像処理プログラム - Google Patents

Description

本発明は、被写体を撮影した画像についての画像処理装置、画像データ通信システム及び画像処理プログラムに関する。

従来、ゲームコーナー等において、利用者を撮影し、モニタに表示した撮影画像にいたずら書きを加え、印刷して出力する撮影装置（いわゆるプリントシール機）があった（例えば特許文献１）。また、一部の撮影装置においては、その撮影画像を携帯電話機に送信して、携帯電話機のモニタに撮影画像を出力することが行われている。
しかし、これらの撮影装置は、撮影方法や撮影画像の出力が単純であるため、目新しさがなくなってきている。
特開２００５−３２６４３５号公報

本発明の課題は、被写体を新しい撮影方法で撮影した画像に関して、面白さを向上した撮影画像を得るための画像処理装置、画像データ通信システム及び画像処理プログラムを提供することである。

本発明は、以下のような解決手段により、課題を解決する。なお、理解を容易にするために、本発明の実施例に対応する符号を付して説明するが、これに限定されるものではなく、符号を付して説明した構成は、適宜改良してもよく、また少なくとも一部を他の構成物に代替してもよい。

請求項１の発明は、筐体（１０）内に位置する被写体（Ｕ）を、前記筐体内の所定の位置である撮影中心（Ｃ）を中心とした円周上の異なる位置から撮影する撮影部（１１，１１−１〜１１−２４等）により撮影された画像から、前記被写体の画像を抽出する処理を行う画像処理部（４０ａ）と、前記画像処理部により抽出された複数の前記被写体の画像を、各々関連付けて記憶する画像記憶部（３５ａ）と、前記被写体の画像の背景に表示するための、所定位置からの全周の風景の画像を含む付随画像を記憶する付随画像記憶部（３５ｂ）と、前記被写体の画像と前記付随画像とを関連付けて記憶する付随画像処理部（２４０ｄ）と、前記付随画像処理部によって関連付けて記憶された前記被写体の画像と、その画像を撮影した前記撮影部の前記円周上の位置に基づいて決定した前記付随画像の一部分とを、前記画像記憶部に記憶された複数の前記被写体の画像が関連付けられている順番に出力するように制御する制御部（２４０）と、を備え、前記画像処理部は、複数の前記被写体の画像を、前記筐体内の内壁面に予め配置された指標の位置情報に基づき各画像の中で前記被写体が一定の位置に配置されるように、各画像に含まれる前記指標を揃えるように調整すること、を特徴とする画像処理装置（２３０）である。

請求項２の発明は、筐体（１０）内に位置する被写体（Ｕ）を、前記筐体内の所定の位置である撮影中心（Ｃ）を中心とした円周上の異なる位置から撮影する撮影部（１１，１１−１〜１１−２４等）により撮影された画像から、前記被写体の画像を抽出する処理を行う画像処理部（４０ａ）と、前記画像処理部により抽出された複数の前記被写体の画像を、各々関連付けて記憶する画像記憶部（３５ａ）と、前記被写体の画像の背景に表示するための、所定位置からの全周の風景の画像を含む付随画像を記憶する付随画像記憶部（３５ｂ）と、前記被写体の画像と、その画像を撮影した前記撮影部の前記円周上の位置に基づいて決定した前記付随画像の一部分と、を合成して新たに作成した合成画像を記憶する合成画像記憶部（３５ｃ）と、前記合成画像記憶部によって記憶された前記合成画像を、前記画像記憶部に記憶された複数の前記被写体の画像が関連付けられている順番に出力するように制御する制御部（４０）と、を備え、前記画像処理部は、複数の前記被写体の画像を、前記筐体内の内壁面に予め配置された指標の位置情報に基づき各画像の中で前記被写体が一定の位置に配置されるように、各画像に含まれる前記指標を揃えるように調整すること、を特徴とする画像処理装置（３０）である。
請求項３の発明は、請求項１又は請求項２に記載の画像処理装置（３０，２３０）において、前記付随画像は、前記被写体の画像を中心とした円周上に表示するための所定の文字列の画像を含むことを特徴とする画像処理装置である。
請求項４の発明は、請求項１から請求項３までのいずれかに記載の画像処理装置（３０，２３０）において、前記撮影部（１１，１１−１〜１１−２４等）は、前記被写体（Ｕ）を所定時間内に複数のタイミングで撮影し、前記画像記憶部（３５ａ）は、前記撮影部により撮影された前記被写体の画像を、前記タイミングに関連付けて記憶することを特徴とする画像処理装置である。
請求項５の発明は、請求項４に記載の画像処理装置（３０，２３０）において、前記撮影部（１１，１１−１〜１１−２４等）は、等時間間隔のタイミングで撮影することを特徴とする画像処理装置である。
請求項６の発明は、請求項１から請求項５までのいずれかに記載の画像処理装置（３０，２３０）において、前記撮影部（１１，１１−１〜１１−２４等）は、前記円周上の所定間隔を隔てた複数の撮影位置に配置された又は移動される撮影機（１１，１１−１〜１１−２４）を有し、前記画像記憶部（３５ａ）は、前記被写体（Ｕ）の画像を、前記撮影機の位置に関連付けて記憶することを特徴とする画像処理装置である。
請求項７の発明は、請求項１から請求項６までのいずれかに記載の画像処理装置（３０，２３０）において、前記画像記憶部（３５ａ）に記憶された前記被写体（Ｕ）の画像のうち、互いに関連付けられた２つの画像を抽出する画像抽出部（４０ｂ）と、前記画像抽出部により抽出された前記２つの画像の中間の画像である中間画像を新たに生成する中間画像生成部（４０ｃ）と、を備えることを特徴とする画像処理装置である。
請求項８の発明は、請求項１から請求項７までのいずれかに記載の画像処理装置（３０，２３０）において、前記画像処理部（４０ａ）は、前記被写体（Ｕ）の背景と同一色の画像領域を削除することにより、前記被写体の画像を抽出することを特徴とする画像処理装置である。
請求項９の発明は、請求項１から請求項８までのいずれかに記載の画像処理装置（３０，２３０）において、前記画像処理部（４０ａ）は、前記撮影部（１１，１１−１〜１１−２４等）により撮影された前記被写体（Ｕ）を含む画像及び前記被写体を含まない画像を比較して共通した画像領域を削除することにより、前記被写体の画像を抽出することを特徴とする画像処理装置である。
請求項１０の発明は、請求項９に記載の画像処理装置（３０，２３０）において、前記画像処理部は（４０ａ）、前記撮影部（１１，１１−１〜１１−２４等）により撮影された前記被写体（Ｕ）を含む画像及び前記被写体を含まない画像の背景と同一色の画像領域を削除した後に、前記画像領域を削除後の両画像を比較して共通した画像領域を削除することにより、前記被写体の画像を抽出することを特徴とする画像処理装置である。

請求項１１の発明は、請求項１から請求項１０までのいずれかに記載の画像処理装置（３０，２３０）と、前記画像処理装置と通信網を介して接続された情報通信端末（４８）と、を備える画像データ通信システム（１００，２００）であって、前記画像処理装置は、前記被写体（Ｕ）の画像を含む画像データを前記情報通信端末に送信する送信部（３１）を有することを特徴とする画像データ通信システムである。

請求項１２の発明は、コンピュータを、筐体（１０）内に位置する被写体（Ｕ）を、前記筐体内の所定の位置である撮影中心（Ｃ）を中心とした円周上の異なる位置から所定時間内に複数のタイミングで撮影する撮影手段（１１，１１−１〜１１−２４等）により撮影された画像から、前記被写体の画像を抽出する処理を行う画像処理手段（４０ａ）と、前記画像処理手段により抽出された複数の前記被写体の画像を、前記タイミングに関連付けて記憶する画像記憶手段（３５ａ）と、前記被写体の画像の背景に表示するための、所定位置からの全周の風景の画像を含む付随画像を記憶する付随画像記憶手段と、前記被写体の画像と前記付随画像とを関連付けて記憶する付随画像処理手段と、前記付随画像処理手段により関連付けて記憶された前記被写体の画像と、その画像を撮影した前記撮影手段の前記円周上の位置に基づいて決定した前記付随画像の一部分とを、前記画像記憶手段に記憶された複数の前記被写体の画像が関連付けられている順番に出力するように制御する手段と、して機能させ、前記画像処理手段を、複数の前記被写体の画像を、前記筐体内の内壁面に予め配置された指標の位置情報に基づき各画像の中で前記被写体が一定の位置に配置されるように、各画像に含まれる前記指標を揃えるように調整するように機能させること、を特徴とする画像処理プログラムである。
請求項１３の発明は、コンピュータを、筐体内に位置する被写体を、前記筐体内の所定の位置である撮影中心を中心とした円周上の異なる位置から所定時間内に複数のタイミングで撮影する撮影手段により撮影された画像から、前記被写体の画像を抽出する処理を行う画像処理手段と、前記画像処理手段により抽出された複数の前記被写体の画像を、前記タイミングに関連付けて記憶する画像記憶手段と、前記被写体の画像の背景に表示するための、所定位置からの全周の風景の画像を含む付随画像を記憶する付随画像記憶手段と、前記被写体の画像と、その画像を撮影した前記撮影手段の前記円周上の位置に基づいて決定した前記付随画像の一部分と、を合成して新たに作成した合成画像を記憶する合成画像記憶手段と、前記合成画像記憶手段に記憶された前記合成画像を、前記画像記憶手段に記憶された複数の前記被写体の画像が関連付けられている順番に出力するように制御する手段と、して機能させ、前記画像処理手段を、複数の前記被写体の画像を、前記筐体内の内壁面に予め配置された指標の位置情報に基づき各画像の中で前記被写体が一定の位置に配置されるように、各画像に含まれる前記指標を揃えるように調整するように機能させること、を特徴とする画像処理プログラムである。
なお、符号を付して説明した構成は、適宜改良してもよく、また、少なくとも一部を他の構成物に代替してもよい。

本発明によれば、以下の効果を奏することができる。
（１）本発明は、被写体を、撮影中心を中心とした円周上の異なる位置から撮影し、撮影画像から被写体の画像を抽出する。よって、様々な角度から撮影した被写体の画像を取得することができる。

（２）本発明は、被写体の背景と同一色の画像領域を削除することにより、被写体の画像を抽出する。よって、被写体の背景を同一色として被写体を撮影することで、被写体の画像を抽出することができる。

（３）本発明は、被写体を含む画像と被写体を含まない画像とを比較することにより共通した画像領域を削除して、被写体の画像を抽出する。よって、予め被写体を含まない状態で撮影した後に、被写体を撮影することで、被写体の画像を抽出することができる。

（４）本発明は、被写体を含む画像と被写体を含まない画像とにおいて背景と同一色の画像領域を削除した後に、両画像を比較することで共通した画像領域を削除して、被写体の画像を抽出する。よって、背景色の余分な情報を削除した後に比較する処理を行うので、処理を容易にして、システム負荷を軽減し、処理時間を短縮することができる。

（５）本発明は、複数の被写体の画像を各々関連付けて記憶する。関連付けは、例えば、被写体を所定時間内に複数のタイミングで撮影したタイミングであるので、被写体の動きに合わせて撮影した被写体の画像を時系列に関連付けることができる。また、そのタイミングが等間隔であることで、被写体に動きがある場合には、コマ送りのような動きのある連写された被写体の画像を時系列に関連付けることができる。

（６）本発明は、撮影機が、撮影中心を中心とした円周上の複数の撮影位置に配置又は移動が可能なので、撮影中心に位置する被写体を、複数の角度から撮影することができる。また、撮影された画像から被写体を抽出した被写体の画像を、撮影機の位置に関連付けて記憶するので、被写体の画像を、例えば、被写体を断続的に所定角度ずつ回転させるような順番で関連付けることができる。

（７）本発明は、互いに関連付けられた２つの被写体の画像を抽出して、２つの被写体の画像から中間の画像を新たに生成するので、２つの被写体の画像の中間で撮影したかのような中間画像を取得することができる。例えば、撮影タイミングの間隔が長かったり、撮影機の配置位置の間隔が離れていたりする場合でも、中間画像により補うことができる。よって、撮影された画像を用いて生成した新たな中間画像を得ることができる。

（８）本発明は、被写体の画像と共に表示する付随画像を記憶するので、被写体の画像と共に付随画像を表示することができる。ここで、付随画像とは、被写体の画像の背景に表示する背景画像や、被写体の周囲に表示する任意の文字等の落書き画像をいう。また、被写体の画像と付随画像とを関連付ける関連付けデータを記憶するので、被写体の画像と付随画像とを別々に有し、例えば、表示する際に関連付けることができる。

（９）本発明は、被写体の画像と付随画像とを合成して新たに合成画像を作成して記憶するので、被写体の画像と付随画像とを別々に記憶するよりも記憶容量が少なくて済む。また、予め合成画像を作成するため、表示する際の処理の軽減を図ることができる。

（１０）本発明は、複数の被写体の画像を、各画像の中で被写体が一定の位置に配置されるように調整するので、複数の画像を順番に表示させる場合でも、被写体の位置がずれることなく表示できる。

（１１）本発明は、撮影中心を中心とした円周上の異なる位置から撮影した撮影画像から抽出した被写体の画像を、情報通信端末に送信可能なので、被写体である利用者は、被写体の画像を、情報通信端末の表示装置に出力したり、情報通信端末で編集したりできる。

本発明は、被写体を新しい撮影方法で撮影した画像に関して、面白さを向上した撮影画像を得るための画像処理装置、画像データ通信システム及び画像処理プログラムを提供するという目的を、画像処理装置が、筐体内に位置する被写体を、筐体内の所定の位置である撮影中心を中心とした円周上の異なる位置から撮影する撮影部により撮影された画像から、被写体の画像を抽出する処理を行う画像処理部を備えることによって実現した。

（第１実施形態）
以下、本発明を実施するための最良の形態について図を参照しながら説明する。なお、これはあくまでも一例であって、本発明の技術的範囲はこれに限られるものではない。
以下、図面等を参照して、本発明の第１実施形態について説明する。
最初に、第１実施形態の撮影システム１の構成の概略を説明する。
図１は、第１実施形態の撮影システム１の斜視図である。
図２は、第１実施形態の撮影室１０内のカメラ配置を説明する図であり、図２（ａ）は、上面図、図２（ｂ）は、斜視図である。

撮影システム１は、撮影室１０（筐体）、落書き装置２０及び後述する画像処理装置（図３）を備えている。撮影室１０は、外壁が円筒状又は多角形の筒状に形成され、撮影室１０の水平面（図中ＸＹ平面）における直径が２ｍ程度、鉛直方向（図中矢印Ｚ方向）の高さが２ｍ程度の大型の装置である。

図１、図２に示すように、撮影室１０の内部には、２４台のカメラ１１（撮影機）と、プレビューモニタ１２と、内壁１３とが設置されている。以下、カメラ１１については、必要に応じて枝番号（１１−１〜１１−２４）を付して説明する。
カメラ１１は、ＣＣＤ（Ｃｈａｒｇｅ Ｃｏｕｐｌｅｄ Ｄｅｖｉｃｅ）等の撮像素子を備えたデジタルカメラである。図２に示すように、カメラ１１は、撮影室１０の中心（軸）Ｃ（撮影中心）を中心とした水平面（ＸＹ平面）内の同一円周上の位置（撮影位置）に配置されている。カメラ１１−１〜１１−２４は、等間隔つまり中心Ｃを中心に１５度間隔に、円環状のフレーム１１ａの上に設置されている。２４台のカメラ１１−１〜１１−２４は、光軸が中心Ｃを向くように配置されており、撮影室１０の中心Ｃに位置する利用者Ｕ（被写体）を、同時に又は所定の時間差毎（所定時間内の複数タイミング）に、複数の撮影角度から撮影を行うことができる。
以上の構成により、カメラ１１−１〜１１−２４は、例えば、直立している利用者Ｕを周囲から同時に撮影することができるので、各撮影位置からの利用者Ｕを撮影した撮影画像データを同時に取得することができる。

プレビューモニタ１２は、撮影時に２４台のカメラ１１−１〜１１−２４の撮影画像を利用者Ｕが確認するためのＬＣＤ（液晶表示装置）等の表示装置である。プレビューモニタ１２は、利用者Ｕが撮影中に視認できるように、表示画面が中心Ｃを向くように、撮影室１０内に設置されている（図１参照）。
内壁１３は、カメラ１１よりも内側に設けられ、利用者Ｕを全周囲うような円筒状に形成されている。内壁１３には、撮影用の２４つの撮影穴１３ａが各カメラ１１−１〜１１−２４に対応して設けられている（図２（ａ）参照）。また、内壁１３は、その内壁面１３ｂつまり利用者Ｕ側の壁面が、緑色又は青色の単一色に彩色されている。この彩色は、制御部４０（後述する）が撮影画像データから利用者Ｕの背景を削除して、利用者Ｕの画像データを抽出するクロマキー処理を容易にするためである。なお、クロマキー処理については後述する。

カメラ１１によって撮影された撮影画像データは、画像処理装置３０を介して落書き装置２０に送信される。
落書き装置２０は、撮影室１０に隣接して配置されている。落書き装置２０は、利用者Ｕが操作することにより、画像処理装置３０から受信した利用者Ｕの画像データを編集して、背景画像の入れ替え、画像への文字等の書き込み、編集後データの出力方法の設定等を行うことができる。この編集作業で用いる背景画像や、書き込まれた文字等の落書き画像は、利用者Ｕの画像に付随して表示する画像であるため、これらをまとめて付随画像ともいう。また、利用者Ｕの画像データに付随画像を合わせたデータを、編集後データという。落書き装置２０は、後述するように落書き用モニタ２１及び落書きペン２２が設けられている。
また、編集後データの出力についても、落書き装置２０で選択することができる。例えば、携帯電話機４８（図３参照）への送信、複数角度からの画像のシール付きのシートへの印刷等のなかから選択する。また、携帯電話機４８への送信方法の場合には、合成画像とするか、個々の画像とするか等の画像形式や、電子メールでの送信とするか、赤外線等の無線による通信での送信とするか等の送信形式を選択することができる。

図３は、第１実施形態の通信システム１００のブロック図である。
通信システム１００は、撮影システム１と、撮影システム１にインターネット等の通信網４９及び基地局４７により接続されている、例えば、利用者Ｕが所有する携帯電話機４８とから構成される。よって、撮影システム１と携帯電話機４８（情報通信端末）との間で、無線によりデータの送受信を行うことができる。具体的には、撮影システム１から携帯電話機４８に編集後データの送信をすることができる。

撮影システム１は、撮影室１０に設けられたカメラ１１及びプレビューモニタ１２と、落書き装置２０に設けられた落書き用モニタ２１及び落書きペン２２（図１参照）と、画像処理装置３０に設けられた通信回路３１、記憶部３５及び制御部４０とを備える。なお、画像処理装置３０は、例えば、落書き装置２０の内部に収容してもよいし、別途設置された専用ケース（図示せず）内に収容してもよい。

プレビューモニタ１２は、制御部４０から出力された撮影画像データを表示する。利用者Ｕは、プレビューモニタ１２を視認することにより、写り具合やポーズを確認して、再撮影するか否かの判断を容易に行うことができる。プレビューモニタ１２には、回転表示（後述する）等をすることができる。

また、撮影システム１は、カメラ１１、プレビューモニタ１２を音声により制御するマイク（図示せず）を備える。利用者Ｕは、プレビューモニタ１２を視認しながら音声による指示のみで撮影を進行することができる。つまり、利用者Ｕは、操作ボタン等を操作する必要がなく、中心Ｃに位置した状態のまま撮影を進行することができる。なお、操作ボタン等による操作であってももちろんよい。

カメラ１１は、ＵＳＢ（ユニバーサル シリアル バス）ケーブル等により画像処理装置３０の制御部４０に電気的に接続されており、撮影画像データを制御部４０に出力する。
落書き用モニタ２１は、例えば、電磁誘導方式によるペンタブレットにＬＣＤを重ね合わせた液晶タブレットである。落書き用モニタ２１には、撮影画像が表示され、利用者Ｕは、落書き用モニタ２１に落書きペン２２の先端を接触させることにより、撮影画像に文字、図形等を追加することができる。また、落書き用モニタ２１には、液晶タブレットの他、抵抗皮膜方式、静電容量方式等のタッチパネル等も利用することができる。なお、追加できるものは、背景画像やお絵かき文字等の、利用者Ｕの画像を引き立たせたり、利用者Ｕに面白味を与えたりするものである。

画像処理装置３０に有する制御部４０は、撮影システム１を統括的に制御するための制御部である。例えば、ＣＰＵ（中央処理装置）等から構成される。制御部４０は、記憶部３５に記憶された各種プログラムを適宜読み出して実行することにより、上述したハードウェアと協働し、本発明に係る各種機能を実現している。
記憶部３５は、撮影システム１に必要な情報を記憶するためのハードディスク等の記憶装置である。
制御部４０は、画像処理部４０ａ、画像抽出部４０ｂ、及び中間画像生成部４０ｃを備える。また、記憶部３５は、画像記憶部３５ａ、付随画像記憶部３５ｂ、及び合成画像記憶部３５ｃを備える。なお、各機能の詳細については、後述するフローチャートで適宜説明する。

また、通信回路３１は、通信網４９等を介して、携帯電話機４８と撮影システム１との間で、編集後データに関する情報の送受信をするための電気回路である。
利用者Ｕの所有する携帯電話機４８は、モニタ４８ａを備えた音声端末である。携帯電話機４８は、ＪＡＶＡ（登録商標）等で作成された再生プログラムや、ＦＬＡＳＨ（登録商標）ＰＬＡＹＥＲ等の再生ソフトが組み込まれている。携帯電話機４８は、これらの再生プログラム等を活用して、基地局４７及び通信網４９を介して撮影システム１から受信した編集後データを、モニタ４８ａに出力することができる。

次に、制御部４０の行う一連の処理を説明する。
図４は、第１実施形態の制御部４０のフローチャートを示す。
まず、ステップＳ１において、制御部４０は、利用者Ｕからの例えばマイク（図示せず）への音声入力による指示が受け付けられることにより、カメラ１１に、同時に利用者Ｕを撮影させる制御を行う。
次に、制御部４０は、利用者Ｕによるこの撮影画像でよいとの判断の音声入力を受け付けたことにより（ステップＳ２：Ｙ）、撮影画像データを受け付ける（ステップＳ３）。なお、利用者Ｕによるこの撮影画像では不満であるとの判断の音声入力を受け付けた場合には（ステップＳ２：Ｎ）、カメラ１１により撮りなおしを行うため、ステップＳ１に戻る。
ステップＳ３により撮影画像データを受け付けた制御部４０（画像処理部４０ａ）は、ステップＳ４で、キャリブレーション処理を行う。

次に、図５に基づき、キャリブレーション処理を説明する。
図５は、第１実施形態のキャリブレーションの例を示す図である。
複数台のカメラ１１（例えば、図２に示すカメラ１１−１〜１１−２４）により撮影された撮影画像は、カメラ１１の向きが一定ではないことに起因して上下左右にズレを有する。そのため、キャリブレーション処理により、複数の画像のズレを取り除く補正を行うことで、利用者Ｕの画像の位置を揃える。利用者Ｕの画像の位置を揃えることで、利用者Ｕの画像を順次表示させると、利用者Ｕを断続的に所定角度ずつ回転する、いわゆるぱらぱら画像のように、面白い態様で表現することができる。このような表示方法を、以下「回転表示」という。

図５（ａ）は、利用者Ｕを撮影した際に背面となる内壁面１３ｂの、鉛直方向（図１矢印Ｚ方向）の所定の高さの位置に、内壁面１３ｂを一周する目印線５１を予め付けておくことにより、利用者Ｕの画像の位置を揃える手法を示す。なお、ここでは、説明を分かりやすくするため、正面、右側面、背面、及び左側面の４つの画像で説明する。利用者Ｕの中心と各カメラ１１の光軸とが一致しているカメラ１１で同じ高さで撮影される各画像を、連続してパノラマ風に表現すると、図５（ａ）上段のように、目印線５１が横一線に延びた状態となる。これを、利用者Ｕの中心に対して光軸がずれた個々のカメラ１１で撮影すると、図５（ａ）中段に示すように、上下にズレが生じてしまう。そこで、図５（ａ）下段のように、カメラ１１により撮影された撮影画像の下方付近に写る目印線５１がまっすぐ合うように揃える処理を行う。実際に使用する撮影画像は、（Ａ）の範囲内の撮影画像とすることで、上下のズレを防止することができる。なお、このような画像の修正は、予め利用者Ｕがいない状態の撮影画像から目印線５１の位置データを取得し、この位置データに利用者Ｕの撮影画像の目印線５１に合わせるように行う。

図５（ｂ）は、利用者Ｕを撮影した際に背面となる内壁面１３ｂの鉛直方向（図１矢印Ｚ方向）の所定の高さの位置に、数字等の目印柄５３を予め付けておくことにより、利用者Ｕの画像の位置を揃える手法を示す。パノラマ風に画像を表現すると、図５（ｂ）上段のように、目印柄５３が、利用者Ｕにより隠れることがない位置に表示されている。これを、個々のカメラ１１で撮影すると、図５（ｂ）中段に示すように、上下及び左右にズレが生じてしまう。そこで、図５（ｂ）下段のように、カメラ１１により撮影された撮影画像の下方付近に写る目印柄５３がぴったり重なるように揃える処理を行う。実際に使用する撮影画像は、（Ａ）の範囲内の撮影画像とすることで、上下のズレだけでなく、左右のズレをも防止することができる。

図５（ｃ）は、図５（ａ）で説明した目印線５１を、内壁１３の鉛直方向（図１矢印Ｚ方向）の所定の高さの位置に、カメラ１１のための撮影穴１３ａが等間隔で点在しているため、これを利用するものである。パノラマ風に画像を表現すると、図５（ｃ）上段のように、複数の撮影穴１３ａが横一線に延びた状態となる。これを、個々のカメラ１１で撮影すると、図５（ｃ）中段に示すように、上下にズレが生じてしまう。また、個々のカメラ１１が曲がって設置されてしまっている場合もある。そこで、図５（ｃ）下段のように、カメラ１１により撮影された撮影画像の利用者Ｕの顔の付近に写る撮影穴１３ａがまっすぐ横一線に合うように揃える処理を行う。実際に使用する撮影画像は、（Ａ）の範囲内の撮影画像とすることで、全体のズレを防止した画像を得ることができる。

図４に戻って、次に、ステップＳ５において、制御部４０（画像処理部４０ａ）は、撮影画像データから利用者Ｕの画像データを抽出する処理を行う。
具体的には、制御部４０（画像処理部４０ａ）は、後述する落書き処理のために、撮影画像データから撮影時の背景を削除した上で、利用者Ｕの画像データを記憶部３５（画像記憶部３５ａ）に記憶する。背景は、単一色に彩色された部分を削除するクロマキー処理により、大部分が削除される。例えば、背景を青や緑の単一色にして、利用者Ｕを撮影する。そして、撮影された撮影画像データから背景の青や緑と同一の色を抜く処理を行う。その際、単純に背景色の青や緑の色情報を抜くだけでなく、背景色と被写体の輪郭の色変化を計算してから置き換えるソフトクロマキーと呼ばれる手法も使われている。ソフトクロマキーによる合成処理の詳細については、後述で説明する。

ここで、図６を用いて、利用者Ｕの画像を抽出する方法について説明する。
図６は、第１実施形態の利用者Ｕの画像を抽出する例を示す図であり、図６（ａ）は、上述のクロマキー処理による利用者Ｕの画像が抽出される場合を示す。
クロマキー処理による画像抽出は、まず、利用者Ｕの写った画像（Ａ）を取得する。取得した画像（Ａ）には、利用者Ｕが、青色の単一色の内壁面１３ｂを背景として中央近傍に写っている。また、複数の撮影穴１３ａが、画像（Ａ）の中央に横一列に写っている。
この画像（Ａ）の各画素について、

の値Ｄを計算する。Ｒは赤色、Ｇは緑色、Ｂは青色の要素の値を示し、各々０（黒）〜２５５（白）の値で表される。このＤの値の大小で背景を抜き出す。この例では、内壁面１３ｂは青色の単一色であるため、Ｄの値が負となり、このＤの値が小さいほど、青色に近いことを意味する。画像（Ａ）から利用者Ｕを抜き出すには、上述の計算から、Ｄが所定の値より大きい画素を抜き出すことにより行うことができる。
上述の処理により、青色の内壁面１３ｂが消去された画像（Ｂ）を得ることができる。画像（Ｂ）は、利用者Ｕ及び複数の撮影穴１３ａが写ったものである。

このクロマキー処理では、撮影画像から内壁面１３ｂを消去することができても、撮影穴１３ａが残ったままである。そこで、さらに差分処理を用いることで、背景に写りこんでいる撮影穴１３ａが削除される。差分処理とは、利用者Ｕがいない状態で撮影画像データを取得し、この取得した撮影画像データと、利用者Ｕの画像データとを比較して共通するデータを抽出し、抽出した共通したデータを、利用者Ｕの画像データから削除する処理をいう。撮影穴１３ａの画像は、利用者Ｕの有無に関わらず撮影画像データに共通して含まれるので、利用者Ｕを撮影した撮影画像データからこの共通したデータを削除することにより、利用者Ｕを撮影した撮影画像から撮影穴１３ａの画像を削除することができる。

図６（ｂ）は、上述の差分処理による利用者Ｕの画像が抽出される場合を示す。
差分処理による画像抽出は、まず、利用者Ｕが写っていない画像（Ｃ）を取得する。取得した画像（Ｃ）には、青色の単一色の内壁面１３ｂが写っており、さらに複数の撮影穴１３ａが、画像（Ｃ）の中央に横一列に写っている。
次に、利用者Ｕを撮影して、利用者Ｕの写った画像（Ｄ）を取得する。取得した画像（Ｄ）には、利用者Ｕが、青色の単一色の内壁面１３ｂを背景として中央近傍に写っており、複数の撮影穴１３ａが、中央横一列に写っている。
この画像（Ｃ）と画像（Ｄ）とを各画素で比較して、差分をとる。そして、差分値が、予め設定された閾値を超える部分について、撮影対象である利用者Ｕが存在する部位であると判断し、その部位を抜き取る。
上述の処理により、背景が消去された画像（Ｅ）を得ることができる。画像（Ｅ）は、撮影画像から利用者Ｕのみを抽出した利用者Ｕの画像である。

図６に基づき説明した利用者Ｕを抽出する処理は、クロマキー処理と差分処理との両方の処理により行ったものである。クロマキー処理と差分処理とのどちらか一方の処理のみを行うより、精度の高い画像を作成することができる。制御部４０は、クロマキー処理によって背景の大部分を削除した後に、差分処理により撮影穴１３ａ等を削除することにより、背景処理を容易にして処理時間を短縮することができる。なお、利用者Ｕの画像を抽出できるものであれば、他の方法であってもよい。

そして、上述の方法により撮影画像データから抽出した利用者Ｕの画像データを、制御部４０は、カメラ１１の配置位置の順番で関連付けて、記憶部３５（画像記憶部３５ａ）に記憶する。具体的には、カメラ１１−１で撮影した画像データと、カメラ１１−２で撮影した画像データとを関連付ける。同様にカメラ１１−２で撮影した画像データと、カメラ１１−３で撮影した画像データとを関連付ける。カメラ１１−２４で撮影した画像データは、カメラ１１−１で撮影した画像データと関連付ける。このように各画像データについて、両隣のカメラ１１の画像データと関連付けて記憶する。例えば、ファイル名をＵ００１〜Ｕ０２４等の連番にする。

図４に戻って、次に、ステップＳ６では、制御部４０（画像抽出部４０ｂ、中間画像生成部４０ｃ）は、利用者Ｕの画像データから、中間画像を生成する処理を行う。ここで、図７に基づき、中間画像を生成する処理を説明する。図７は、第１実施形態の利用者Ｕの画像から中間画像を生成する処理により作成された中間画像の例を示す図である。ここで、中間画像生成とは、カメラ１１の数に制限がある等の条件のため、カメラ１１で撮影されていない画像を、補完の目的で新たに生成するものをいう。

まず、制御部４０（画像抽出部４０ｂ）は、隣り合うカメラ１１で撮影し、関連付けられた２つの画像データを抽出する。例えば、カメラ１１−１とカメラ１１−２４で撮影された２枚の利用者Ｕの画像「ｕ００１０１．ｊｐｇ」と「ｕ００１２４．ｊｐｇ」とを用意する。
そして、２枚の利用者Ｕの画像の中で、同じ部分を示す箇所に対応する対応点を定め、対応点の動きを補完する中間画像「ｕ００１０１ａ．ｊｐｇ」を作成する。補完する際に、生成する中間画像は、２つの対応点の中間点とすることで作成できる。

このような中間画像を生成してある物体から別の物体へと自然に変形していくように、中間の画像をコンピュータによって補完して作成する手法をモーフィング（ｍｏｒｐｈｉｎｇ）という。中間画像を用いて、画像データを等間隔の時間で順番に回転表示させることで、中間画像を用いずに同様の処理を行う場合よりも、より滑らかに回転した画像を表示することができる。
この中間画像は、処理対象とした２枚の画像と関連付けて、記憶部３５（画像記憶部３５ａ）に記憶する。

なお、ここでは、２枚の二次元の画像から各々の画像に対応する中間点により中間の画像を生成するものを説明したが、２枚の二次元の画像から三次元の画像データを作成して、中間の画像を生成してもよい。

図４に戻って、次に、ステップＳ７において、制御部４０は、後述する落書き処理により付加された付随画像データを受け付ける。
次に、ステップＳ８において、制御部４０（画像処理部４０ａ）は、利用者Ｕの画像データと付随画像データとを合成して、新たに合成画像データを作成する合成処理を行う。合成処理は、背景画像等の利用者Ｕの画像の背面に表示されるようにする画像と、利用者Ｕの画像の前面に表示されるようにする画像と、利用者Ｕの画像とを順番に重ね合わせて、合成画像データを作成する。そして、作成した合成画像データを、記憶部３５（合成画像記憶部３５ｃ）に記憶する。合成画像データは、利用者Ｕの撮影画像から様々な編集を行うことにより作成された編集後データである。

次に、利用者Ｕからの指示情報を受け付けることにより、ステップＳ９では、制御部４０は、利用者Ｕの携帯電話機４８に、合成画像データを送信する。その後、本処理を終了する。
この一連の流れにより、カメラ１１により撮影された被写体である利用者Ｕの画像を、落書き情報が付加された状態に加工することができる。また、その作成された編集後データを携帯電話機４８に送信することにより、携帯電話機４８は、利用者Ｕを回転表示させることができる。

次に、落書き処理について説明する。
図８は、第１実施形態の落書き装置２０の落書き用モニタ２１と落書きペン２２とを示す図である。
図９は、第１実施形態の利用者Ｕの画像及び背景画像に落書き画像を追加して出力した例を示す図である。

図８（ａ）に示すように、利用者Ｕは、落書き装置２０を操作して、予め用意されている背景画像データから好みの背景を選択することができる。また、図８（ｂ）に示すように、文字、記号等から所望のものを選択したり、任意の文字を入力し落書きの内容を決定したりすることができる。
利用者Ｕは、まず、目次画面（図示せず）から「背景画像の選択」の項目（図示せず）を選択する。背景画像を選択した場合には、落書き用モニタ２１に背景画像選択エリア２１ｈが表示される。そして、落書き用モニタ２１に表示された複数の背景画像から、好みの背景画像を選択する（図８（ａ））。選択は、背景画像選択エリア２１ｈの所定の背景画像の表示を、落書きペン２２でタッチして選択すればよい。背景画像が選択され、決定されると、制御部４０は、利用者Ｕの画像データ及び背景画像を合成して、落書き用モニタ２１の撮影データ出力エリア２１ｃに表示する（図８（ｂ））。

次に、利用者Ｕが落書きを行い、落書きの内容を決定する。文字等は、落書きアイテム選択エリア２１ａの表示を落書きペン２２で選択すればよい。制御部４０は、決定した落書きの内容を、落書き用モニタ２１の落書きエリア２１ｂに表示する。

また、図９に示すように、制御部４０は、加工した落書きの画像データと、利用者Ｕの画像データ及び背景画像とを合成して、プレビューエリア２１ｄに表示する。
これにより、制御部４０は、落書きと利用者Ｕとが一緒に回転しているように表示することができる。利用者Ｕは、プレビューエリア２１ｄの画像を確認して、落書きの書き込み等の作業を終了する場合には、決定ボタン（図示せず）を操作する。あるいは、落書きの書き込み等のために利用者Ｕに与えられている時間（例えば数分間程度）が経過すると、制御部４０が自動的に作業を終了する。

決定ボタンの操作に応じて信号が制御部４０に出力され、制御部４０は、落書きの内容を確定して、落書きの画像と、利用者Ｕの画像及び背景画像とを合成して新たに合成画像データを作成する。作成された合成画像データは、合成画像記憶部３５ｃに記憶される。そして、制御部４０は、例えば、通信回路３１を駆動して合成画像データである編集後データを、携帯電話機４８へと送信する。このように合成画像データを作成することにより、データ容量を小さくでき、携帯電話機４８への送信時間が短くて済むという効果を有する。

このようなデータの受け渡しは、例えば、撮影システム１上に撮影情報等を記録した専用のＷＥＢページを作成しておき、携帯電話機４８からＷＥＢページにアクセスがあった場合に、撮影情報等を携帯電話機４８にダウンロードするようにすればよい。この場合、撮影終了後に、利用者Ｕが携帯電話機４８のアドレスを撮影システム１に登録できるようにして、このＷＥＢページのアドレスの情報を添付して電子メールで携帯電話機４８に送信すれば利用者ＵによるＷＥＢページへのアクセスを容易にすることができる。
携帯電話機４８は、上述で説明したように再生ソフト等が組み込まれているので、上述の落書き装置２０のプレビューエリア２１ｄと同様に、受信データを回転表示等の方法で出力することができる。

次に、画像処理装置３０の記憶部３５に記憶される各種の画像データについて説明する。
図１０は、第１実施形態の記憶部３５に記憶される各種テーブルの例を示す図である。
図１０（ａ）は、被写体画像テーブルを示す。この被写体画像テーブルは、画像記憶部３５ａに記憶される。上述の利用者Ｕを抽出する処理により、制御部４０は、得られた利用者Ｕの画像データを記憶する。また、上述の中間画像を生成した場合には、当該中間画像データも記憶される。図１０（ａ）の最上段の例では、利用者Ｕを撮影した画像名が「ｕ００１」である場合の画像データを示す。被写体画像テーブルには、カメラ１１−１〜１１−２４で撮影した２４つの画像データ（例えば、「ｕ００１０１．ｊｐｇ」）の他に、中間画像生成処理により作成された画像データ（例えば、「ｕ００１０２ａ．ｊｐｇ」）が関連付けて記憶されている。

また、図１０（ｂ）は、背景画像テーブルを示す。この背景画像テーブルは、付随画像記憶部３５ｂに、予め撮影システム１で準備した様々な背景画像データが記憶されている。背景画像データは、左側を０度、右側を３６０度とするパノラマ画像風のものである。そして、背景画像データごとに、例えば１から連番を付して背景画像テーブルに記憶する。例えば、背景名が「１」の背景画像は、ある湾岸都市の画像であり、「４」は、お花畑の画像である。
また、図１０（ｃ）は、合成画像テーブルを示す。図１０（ａ）の被写体画像テーブルに記憶された画像データと、図１０（ｂ）の背景画像テーブルに記憶された背景画像データと、上述の落書き装置２０にて追加した文字の画像データとを合成した合成画像データが記憶されている。図１０（ｃ）に示す合成名が「Ｇ００１」の合成画像データは、図１０（ａ）の被写体画像テーブルの「ｕ００１」の画像データと、図１０（ｂ）の背景画像データとを合成した合成画像データである。

次に、上述の図１０（ｃ）で説明した合成画像データの合成処理のうち、利用者Ｕの画像と、背景画像とを合成する処理について説明する。単純に、背景画像の上に、クロマキー処理で抜き出した利用者Ｕの画像を配置することで、合成することが可能である。しかし、そのようにするだけでは、利用者Ｕの画像と背景画像との境界がきれいに処理できない。つまり、利用者Ｕの画像と、背景画像との境界部分について、一定部分の幅を確保して、元の背景色である青色の縁取りを防ぐものである。この方法は、境界部分の明るさに近いＧ（緑）の色を用いて青色を消すことができる。

具体的な処理を、図１１に基づき説明する。図１１は、第１実施形態の合成処理のフローチャートである。まず、ステップＳ２１において、制御部４０は、ソフトキーを生成する。ソフトキーの生成手法は、以下のとおりである。まず、境界部分の領域を求めるための閾値の上限と下限とを決めておく。与えられた閾値の上限及び下限をそれぞれＴＨＨ、ＴＨＬとし、数式１の値Ｄを用いて、

を、画像の各要素で計算する。そして、ソフトキー（ＳｏｆｔＫｅｙ）を、

とする。次に、ステップＳ２２では、制御部４０は、前景の各ｐｉｘｅｌよりＲＧＢ値を抽出し、各々Ｒｆ，Ｇｆ，Ｂｆとする。前景は、利用者Ｕの画像である。同様に、ステップＳ２３では、制御部４０は、背景の各ｐｉｘｅｌよりＲＧＢ値を抽出し、各々Ｒｂ，Ｇｂ，Ｂｂとする。次に、ステップＳ２４において、制御部４０は、合成画像である各ｐｉｘｅｌの出力ＲＧＢ値をＲｏ，Ｇｏ，Ｂｏとする。次に、ステップＳ２５では、制御部４０は、ソフトキーが２５５又は０であるか否かを判断する。ソフトキーが２５５又は０の場合（ステップＳ２５：Ｙ）には、制御部４０は、処理をステップＳ２６に移す。他方、ソフトキーが２５５又は０でない場合（ステップＳ２５：Ｎ）には、制御部４０は、処理をステップＳ２７に移す。

ステップＳ２６では、制御部４０は、Ｒｏ，Ｇｏ，Ｂｏを

により算出する。その後、制御部４０は、本処理を終了する。
他方、ステップＳ２７では、制御部４０は、Ｒｏ，Ｇｏ，Ｂｏを

により算出する。その後、制御部４０は、本処理を終了する。
上述の処理で求められた合成を用いることにより、より自然な合成画像を生成することができる。

なお、本処理では、背景色が青色である場合を例に説明したが、背景色が緑色であっても同様の考え方で合成画像を生成することができる。その場合、ソフトキー算出のためのＤを、

とし、ステップＳ２７の式のＧｆからＢｆに変更することが必要である。

（第２実施形態）
次に、本発明を適用した第２実施形態について説明する。
第２実施形態は、合成画像を作成する代わりに、利用者Ｕの画像と付随画像とを関連付けるデータを有するものである。また、カメラの位置を合わせる処理を行うことで、キャリブレーションを行うものである。
なお、以下の説明及び図面において、前述した第１実施形態と同様の機能を果たす部分には、同一の符号又は末尾に同一の符号を付して、重複する説明を適宜省略する。

図１２は、第２実施形態の通信システム２００のブロック図である。
通信システム２００は、撮影システム２０１と、撮影システム２０１にインターネット等の通信網４９及び基地局４７により接続されている、例えば、利用者Ｕが所有する携帯電話機４８とから構成される。
撮影システム２０１は、撮影室１０に設けられたカメラ１１及びプレビューモニタ１２と、落書き装置２０に設けられた落書き用モニタ２１及び落書きペン２２と、画像処理装置２３０に設けられた通信回路３１、記憶部２３５及び制御部２４０とを備えている。

画像処理装置２３０に有する制御部２４０は、撮影システム２０１を統括的に制御するための制御部である。例えば、ＣＰＵ（中央処理装置）等から構成される。制御部２４０は、記憶部２３５に記憶された各種プログラムを適宜読み出して実行することにより、上述したハードウェアと協働し、本発明に係る各種機能を実現している。
制御部２４０は、画像処理部４０ａ、画像抽出部４０ｂ、中間画像生成部４０ｃ、及び付随画像処理部２４０ｄを備える。また、記憶部２３５は、画像記憶部３５ａ、付随画像記憶部３５ｂ、及び関連付けテーブル２３５ｄを備える。
付随画像処理部２４０ｄは、利用者Ｕの画像データと、上述の図８で得られた付随画像のデータとを関連付けて記憶部２３５の関連付けテーブル２３５ｄに記憶させる。これにより、関連付けテーブル２３５ｄには、利用者Ｕの画像データに対応した、落書きの画像データ及び背景画像データの付随画像データの関連付けが生成及び記憶される。すなわち、第１実施形態では、既に合成されたデータを出力するものであった（図９参照）が、本実施形態では、関連付けのデータに基づいて各画像データを合成して出力する。

ここで、キャリブレーション処理として、カメラの初期化及びカメラの位置あわせをする、位置トラッキングの処理について説明する。
図１３は、第２実施形態の位置あわせ処理のフローチャートである。
まず、ステップＳ１１において、制御部２４０は、２値化を行う。２値化とは、例えばカラーの画像を白黒の画像に置き換える処理をいう。２値化をすることで、画像の情報量を最小限にとどめられ、処理時間の短縮や記憶部２３５の容量の節約につながる。
次に、ステップＳ１２において、制御部２４０は、ノイズ除去を行う。不要な情報を画像から除去することで、後述の処理をしやすくする効果がある。
次に、ステップＳ１３において、制御部２４０は、特徴図形を抽出する。位置をあわせるための指標とするものを、特徴図形として抽出する。
次に、ステップＳ１４では、制御部２４０は、基礎図形による符号化を行う。符号化は、画像の情報量を圧縮するのに有効な手段である。
最後に、ステップＳ１５では、制御部２４０は、保存されている符号化情報との照合を行う。ここで、保存されている符号化情報とは、予め利用者Ｕがいない状態で撮影した画像について行われた、上述のステップＳ１１からステップＳ１４までの処理によって出力され、保存されていた情報をいう。本処理により、カメラ１１の位置あわせを行うことができる。

次に、関連付けテーブルについて説明する。図１２は、第２実施形態の記憶部２３５に記憶される関連付けテーブル２３５ｄの例を示す図である。
この関連付けテーブル２３５ｄは、被写体画像テーブル（図１０（ａ）参照）に記憶された１の被写体である利用者Ｕの画像データに基づいて、落書き装置２０により選択された背景画像や落書きの画像等の付随画像のデータを関連付けるものである。例えば、図１４の最上段のデータは、被写体画像が「ｕ００１」の画像に、付随情報として、背景画像の「１」（図１０（ｂ）参照）と、落書き画像の「Ｒ００１」と「Ｒ００３」とが関連付けられていることを示す。落書き画像は、一連一体として表示させるものを１つのデータとして複数関連付けることが可能である。
関連付けられた利用者Ｕの画像データ及び付随画像のデータは、例えば、通信網４９を経由して送信された携帯電話機４８のモニタ４８ａで表示させることができる。また、落書き装置２０のモニタで表示させることができる。

このように、利用者Ｕの画像データと付随画像のデータとを、関連付けのデータにより関連づけることにより、利用者Ｕが利用者Ｕの画像データをパーソナルコンピュータ等に取り込んで、様々に加工したりすることができる。従って、利便性のよいデータの状態として有することができるので、利用者Ｕの画像を他の使用方法や編集方法に用いることができる。
また、全てのデータを単独で有さずに、例えば、利用者Ｕの画像データと背景画像データとを１つのデータに合成し、落書きの画像データと関連付けてもよい。

以上、本発明の実施形態について説明したが、本発明は上述した実施形態に限定されるものではない。また、実施形態に記載した効果は、本発明から生じる最も好適な効果を列挙したに過ぎず、本発明による効果は、実施形態に記載したものに限定されない。なお、上述した実施形態及び後述する変形形態は、適宜組み合わせて用いることもできるが、詳細な説明は省略する。

（変形形態）
以上、説明した実施形態に限定されることなく、種々の変形や変更が可能であって、それらも本発明の範囲内である。
（１）本実施形態では、クロマキー処理や差分処理により利用者の画像を抽出したが、これらの手法に限られない。例えば、撮影角度の異なる複数の画像から特定の部分に対するずれ具合を利用して、いわゆる「三角測量」の原理を利用した背景から前景を抜き出す処理も本発明の技術的範囲内である。例えば、撮影角度が１５度だけ異なる２つの画像は、対象物のある部分にスポットを当てると画素上で別の位置に写しだされる。利用者Ｕが画像の中央に写るようにすると、背面の穴のずれが大きくなる。このずれの大きさの大きい部分を背景として認識することで、背景から前景を抜き出すことができる。

（２）本実施形態では、付随画像を作成する順序として、背景画像を選択後、落書きを行う記載となっているが、この順序はどちらが先でもよい。落書きを行った後に背景画像を選択してももちろんよい。

（３）本実施形態では、主に静止画の画像による画像処理について説明したが、動画の画像であってもよい。動画の画像を取り込んで、クロマキー処理等を行うことで、利用者の画像を抽出できる。

第１実施形態の撮影システムの斜視図である。 第１実施形態の撮影室内のカメラ配置を説明する図である。 第１実施形態の通信システムのブロック図である。 第１実施形態の制御部のフローチャートである。 第１実施形態のキャリブレーションの例を示す図である。 第１実施形態の利用者の画像を抽出する例を示す図である。 第１実施形態の利用者の画像から生成された中間画像の例を示す図である。 第１実施形態の落書き装置の落書き用モニタと落書きペンとを示す図である。 第１実施形態の利用者の画像及び背景画像に落書き画像を追加して出力した例を示す図である。 第１実施形態の記憶部に記憶される各種テーブルの例を示す図である。 第１実施形態の合成処理のフローチャートである。 第２実施形態の通信システムのブロック図である。 第２実施形態の位置あわせ処理のフローチャートである。 第２実施形態の記憶部に記憶される関連付けテーブルの例を示す図である。

符号の説明

１，２ 撮影システム
１０ 撮影室
１１ カメラ
１２ プレビューモニタ
１３ 内壁
１３ａ 撮影穴
１３ｂ 内壁面
２０ 落書き装置
２１ 落書き用モニタ
２２ 落書き用ペン
３０ 画像処理装置
３５，２３５ 記憶部
３５ａ 画像記憶部
３５ｂ 付随画像記憶部
３５ｃ 合成画像記憶部
４０ａ 画像処理部
４０ｂ 画像抽出部
４０ｃ 中間画像生成部
４０，２４０ 制御部
４８ 携帯電話機
２４０ｄ 付随画像処理部

Claims (13)

1. 筐体内に位置する被写体を、前記筐体内の所定の位置である撮影中心を中心とした円周上の異なる位置から撮影する撮影部により撮影された画像から、前記被写体の画像を抽出する処理を行う画像処理部と、
   前記画像処理部により抽出された複数の前記被写体の画像を、各々関連付けて記憶する画像記憶部と、
   前記被写体の画像の背景に表示するための、所定位置からの全周の風景の画像を含む付随画像を記憶する付随画像記憶部と、
   前記被写体の画像と前記付随画像とを関連付けて記憶する付随画像処理部と、
   前記付随画像処理部によって関連付けて記憶された前記被写体の画像と、その画像を撮影した前記撮影部の前記円周上の位置に基づいて決定した前記付随画像の一部分とを、前記画像記憶部に記憶された複数の前記被写体の画像が関連付けられている順番に出力するように制御する制御部と、
   を備え、
   前記画像処理部は、複数の前記被写体の画像を、前記筐体内の内壁面に予め配置された指標の位置情報に基づき各画像の中で前記被写体が一定の位置に配置されるように、各画像に含まれる前記指標を揃えるように調整すること、
   を特徴とする画像処理装置。
2. 筐体内に位置する被写体を、前記筐体内の所定の位置である撮影中心を中心とした円周上の異なる位置から撮影する撮影部により撮影された画像から、前記被写体の画像を抽出する処理を行う画像処理部と、
   前記画像処理部により抽出された複数の前記被写体の画像を、各々関連付けて記憶する画像記憶部と、
   前記被写体の画像の背景に表示するための、所定位置からの全周の風景の画像を含む付随画像を記憶する付随画像記憶部と、
   前記被写体の画像と、その画像を撮影した前記撮影部の前記円周上の位置に基づいて決定した前記付随画像の一部分と、を合成して新たに作成した合成画像を記憶する合成画像記憶部と、
   前記合成画像記憶部によって記憶された前記合成画像を、前記画像記憶部に記憶された複数の前記被写体の画像が関連付けられている順番に出力するように制御する制御部と、
   を備え、
   前記画像処理部は、複数の前記被写体の画像を、前記筐体内の内壁面に予め配置された指標の位置情報に基づき各画像の中で前記被写体が一定の位置に配置されるように、各画像に含まれる前記指標を揃えるように調整すること、
   を特徴とする画像処理装置。
3. 請求項１又は請求項２に記載の画像処理装置において、
   前記付随画像は、前記被写体の画像を中心とした円周上に表示するための所定の文字列の画像を含むことを特徴とする画像処理装置。
4. 請求項１から請求項３までのいずれかに記載の画像処理装置において、
   前記撮影部は、前記被写体を所定時間内に複数のタイミングで撮影し、
   前記画像記憶部は、前記撮影部により撮影された前記被写体の画像を、前記タイミングに関連付けて記憶することを特徴とする画像処理装置。
5. 請求項４に記載の画像処理装置において、
   前記撮影部は、等時間間隔のタイミングで撮影することを特徴とする画像処理装置。
6. 請求項１から請求項５までのいずれかに記載の画像処理装置において、
   前記撮影部は、前記円周上の所定間隔を隔てた複数の撮影位置に配置された又は移動される撮影機を有し、
   前記画像記憶部は、前記被写体の画像を、前記撮影機の位置に関連付けて記憶すること
   を特徴とする画像処理装置。
7. 請求項１から請求項６までのいずれかに記載の画像処理装置において、
   前記画像記憶部に記憶された前記被写体の画像のうち、互いに関連付けられた２つの画像を抽出する画像抽出部と、
   前記画像抽出部により抽出された前記２つの画像の中間の画像である中間画像を新たに生成する中間画像生成部と、
   を備えることを特徴とする画像処理装置。
8. 請求項１から請求項７までのいずれかに記載の画像処理装置において、
   前記画像処理部は、前記被写体の背景と同一色の画像領域を削除することにより、前記被写体の画像を抽出することを特徴とする画像処理装置。
9. 請求項１から請求項８までのいずれかに記載の画像処理装置において、
   前記画像処理部は、前記撮影部により撮影された前記被写体を含む画像及び前記被写体を含まない画像を比較して共通した画像領域を削除することにより、前記被写体の画像を抽出することを特徴とする画像処理装置。
10. 請求項９に記載の画像処理装置において、
    前記画像処理部は、前記撮影部により撮影された前記被写体を含む画像及び前記被写体を含まない画像の背景と同一色の画像領域を削除した後に、前記画像領域を削除後の両画像を比較して共通した画像領域を削除することにより、前記被写体の画像を抽出することを特徴とする画像処理装置。
11. 請求項１から請求項１０までのいずれかに記載の画像処理装置と、前記画像処理装置と通信網を介して接続された情報通信端末と、を備える画像データ通信システムであって、
    前記画像処理装置は、前記被写体の画像を含む画像データを前記情報通信端末に送信する送信部を有することを特徴とする画像データ通信システム。
12. コンピュータを、
    筐体内に位置する被写体を、前記筐体内の所定の位置である撮影中心を中心とした円周上の異なる位置から所定時間内に複数のタイミングで撮影する撮影手段により撮影された画像から、前記被写体の画像を抽出する処理を行う画像処理手段と、
    前記画像処理手段により抽出された複数の前記被写体の画像を、前記タイミングに関連付けて記憶する画像記憶手段と、
    前記被写体の画像の背景に表示するための、所定位置からの全周の風景の画像を含む付随画像を記憶する付随画像記憶手段と、
    前記被写体の画像と前記付随画像とを関連付けて記憶する付随画像処理手段と、
    前記付随画像処理手段により関連付けて記憶された前記被写体の画像と、その画像を撮影した前記撮影手段の前記円周上の位置に基づいて決定した前記付随画像の一部分とを、前記画像記憶手段に記憶された複数の前記被写体の画像が関連付けられている順番に出力するように制御する手段と、
    して機能させ、
    前記画像処理手段を、複数の前記被写体の画像を、前記筐体内の内壁面に予め配置された指標の位置情報に基づき各画像の中で前記被写体が一定の位置に配置されるように、各画像に含まれる前記指標を揃えるように調整するように機能させること、
    を特徴とする画像処理プログラム。
13. コンピュータを、
    筐体内に位置する被写体を、前記筐体内の所定の位置である撮影中心を中心とした円周上の異なる位置から所定時間内に複数のタイミングで撮影する撮影手段により撮影された画像から、前記被写体の画像を抽出する処理を行う画像処理手段と、
    前記画像処理手段により抽出された複数の前記被写体の画像を、前記タイミングに関連付けて記憶する画像記憶手段と、
    前記被写体の画像の背景に表示するための、所定位置からの全周の風景の画像を含む付随画像を記憶する付随画像記憶手段と、
    前記被写体の画像と、その画像を撮影した前記撮影手段の前記円周上の位置に基づいて決定した前記付随画像の一部分と、を合成して新たに作成した合成画像を記憶する合成画像記憶手段と、
    前記合成画像記憶手段に記憶された前記合成画像を、前記画像記憶手段に記憶された複数の前記被写体の画像が関連付けられている順番に出力するように制御する手段と、
    して機能させ、
    前記画像処理手段を、複数の前記被写体の画像を、前記筐体内の内壁面に予め配置された指標の位置情報に基づき各画像の中で前記被写体が一定の位置に配置されるように、各画像に含まれる前記指標を揃えるように調整するように機能させること、
    を特徴とする画像処理プログラム。

Images