JP2007241687A - 撮像装置及び画像編集装置 - Google Patents

Abstract

【課題】撮像画像の中にフレーム画像や他の画像を挿入して合成画像を得る場合であっても、フレーム画像や他の画像が撮像画像中の任意の奥行き位置に配置できるようにして極めておもしろみのある合成画像が得られるようにする。
【解決手段】撮像した静止画像及び合成するフレーム画像が選択されると、ステップＳ１３では静止画像を複数の領域に分割し、この分割した領域の中から、フレーム画像の前景となる画像選択して（ステップＳ１４）フレーム画像を合成する（ステップＳ１５）ので、フレーム画像を任意の奥行き位置に配置した合成画像が得られる。
【選択図】 図６

Description

この発明は、画像を合成して合成画像を得る撮像装置及び画像編集装置に関する。

従来、予め用意されたフレーム画像或いは背景画像に撮像した人物画像を合成してプリントする画像プリント装置が街角、店舗或いはゲームセンターなどに設置されている。この種の画像プリント装置では、奥行きのある背景画像の任意の位置に撮像した人物画像が配置されるように合成することも考えられている。即ち、背景画像の前景部分と後景部分との間に人物画像がその一部が前景部分によって隠れるように合成するもので、例えば、１枚の背景画像を、前景画像、中間画像、後景画像といった奥行き毎の複数の背景画像に分けておき、人物画像を撮像すると、人物画像がそれぞれ異なった奥行きの位置に配置される様に、人物画像と複数の背景画像とを合成して複数の合成画像を作成すると共に、この複数の合成画像を表示装置に表示させ、表示された複数の合成画像のうち所望する合成画像をプリントアウトすることが知られている（特許文献１参照）。

また、複数の背景画像に写っているそれぞれの像までの距離と、撮像された人物画像の人物までの距離とを比較して、それぞれの距離関係が一致するように合成画像を作成することも知られている（特許文献２参照）。
特開２０００−２６１７２２号公報 特開平０５−２４４６３０号公報

しかして、上述した従来技術は、いずれも予め用意された背景画像に撮像された人物画像のような他の画像を挿入して合成画像を得るものであり、それ故、予め奥行き毎の背景画像を用意することができ、その中に撮像画像を挿入して合成画像を得ることが出来る。しかしながら、逆に、撮像された画像の中に他の画像を挿入する場合にあっては、撮像された画像に写っている各像の奥行き関係が判断できないので、奥行き毎の画像を用意することが出来ず、任意の奥行き位置に他の画像をその一部が隠れるように挿入配置して合成画像を得るということが出来なかった。

それ故、従来の合成写真では、撮像した画像に他の画像を挿入する場合には、他の画像を撮像画像中にそのまま配置して、即ち、挿入される他の画像が最も前方の画像となるように合成するものであり、合成画像としては極めて面白味に欠けるものであった。
この発明の課題は、撮像画像の中にフレーム画像等の他の画像を挿入して合成画像を得る場合であっても、他の画像が撮像画像中の任意の奥行き位置に配置できるようにして極めておもしろみのある合成画像が得られるようにした撮像装置及び画像編集装置を提供することにある。

請求項１記載の発明による撮像装置は、被写体を撮像して静止画像を得る撮像手段と、この撮像手段によって得られた静止画像を複数の部分画像に分割する画像分割手段と、この画像分割手段によって分割された複数の部分画像のうち少なくとも一つの部分画像を選択する画像選択手段と、前記静止画像とは異なる他の画像を前記画像選択手段によって選択された部分画像が前景或いは後景となり且つ選択されなかった部分画像が後景或いは前景となるように合成する画像合成手段とを備えたことを特徴とする。

また、請求項５記載の発明による画像編集装置は、被写体を撮像して得られた静止画像を複数の部分画像に分割する画像分割手段と、この画像分割手段によって分割された複数の部分画像のうち少なくとも一つの部分画像を選択する画像選択手段と、この画像選択手段によって選択された部分画像が前景或いは後景となり且つ選択されなかった部分画像が後景或いは前景となるように前記静止画像とは異なる他の画像を合成する合成手段とを備えたことを特徴とする。

本発明によれば、被写体を撮像して得た静止画像の様に画像データからは各部分画像の奥行きの位置関係を判断できない画像であっても、任意の位置に所望する他の画像を挿入することが出来、極めておもしろみのある合成画像が得られる撮像装置及び画像編集装置を提供できる。

以下、図面を参照して本発明の一実施例を説明する。この実施例は、撮像装置或いは画像編集装置として、小型で携帯可能なデジタルスチルカメラ装置（以下、カメラと略称する。）に適用した場合を例示したもので、図１は、本発明によるカメラの基本的な構成要素を示したブロック図である。

制御部１は、図示していないＣＰＵ、ＲＯＭ（リード・オンリ・メモリ）等から構成され、カメラ全体の動作を制御するための各種プログラムや各種データを内部に備えている。この制御部１には、バスライン２を介して時計回路部３、記憶部４、通信制御部５、表示部６、撮像部７、入力部（操作釦）８及び記録媒体９を駆動する記録媒体駆動部１０が接続されている。

時計回路部３は、所定周期の基準信号を計時して現在時刻情報である、年、月、日及び時分秒情報を得る回路部である。

記憶部４は、カメラの内部に固定的に設けられ、通常状態では取り出すことができない内部メモリである。この記憶部４は、読み出し及び書き込みが可能な揮発性のメモリであるＲＡＭ（ランダム・アクセス・メモリ）、或いは不揮発性のメモリである、例えばフラッシュメモリ等から構成されている。

図２は、この記憶部４の詳細な構成図を示すもので、モード値記録領域４Ａには、カメラの基本動作モードを示すモード値Ｍが記録される。モード値Ｍは、その値が「０」（以下、Ｍ＝０の様に示す。）の時、後述するシャッタ釦８Ａの操作によって外部被写体を撮影して静止画像を前記記録媒体９に記録させる撮影モードであり、Ｍ＝１の時は、詳細を後述する画像合成モードである。

また、Ｍ＝２の時は、記録媒体９に記録された画像を前記表示部６に再生表示させる再生モード、Ｍ＝３の時は、記録された画像を選択的に消去する消去モードである。

更に、モード値ＭがＭ＝４の時は記録媒体９に記録された画像を外部の電子機器、例えば他のデジタルカメラや印刷装置などに転送する転送モードである。

記憶部４の合成データ記憶領域４Ｂは、詳細を後述する画像合成の時に用いられる種々のデータを記憶するものであり、ワークエリア４Ｃは、撮影した画像情報の一時記録や画像合成の時の後述する部分画像の一時記憶、或いは各種処理に使用される記録領域である。

図３は、上記合成データ記憶領域４Ｂの詳細な構成を示したもので、即ち、後述する画像合成においては、１枚の静止画像を複数の領域に分割して複数の部分画像を得ると共に、分割された複数の部分画像の間に他の画像を挿入して１枚の合成画像を得るようになっており、上記合成データ記憶領域４Ｂのデータ領域番号記憶領域４Ｂ１には、分割された複数の部分画像の通し番号である領域番号が記憶される。

選択Ｆ（フラッグ）記憶領域４Ｂ２は、上記通し番号が付された部分画像それぞれに対応して設けられ、その部分画像を、挿入される他の画像の前景として表示させる際にフラグ（値「１」）が記憶される。

画像Ｐ（ポインタ）記憶領域４Ｂ３は、通し番号が付された部分画像それぞれに対応して設けられ、その部分画像がワークエリア４Ｃに記憶された際のワークエリア４Ｃの記憶アドレスデータ（ポインタ）が記憶され、位置座標記憶領域４Ｂ４には、その部分画像がもとの１枚の静止画像の、どの位置の画像であるかを示す位置座標データが記憶される。

尚、静止画像に挿入される他の画像としては、予め制御部１のＲＯＭに枠画像、模様画像、吹き出し画像などの固定的な図形画像やアイコン画像等（これらを総称して以下、フレーム画像と称呼する）が複数記憶されており、後述する如く、これら複数のフレーム画像の中から選択されたフレーム画像が挿入されるものである。

図１に戻り、通信制御部５は、外部の電子機器、例えば他のカメラや印刷装置、パーソナルコンピュータ等と接続され、静止画情報の送受信を制御するものである。なお、外部の電子機器との接続は、ケーブルなどによる有線で行ってもよく、或いは赤外線や無線などのワイヤレス接続で行っても良い。

表示部６は、例えばカラー液晶表示装置などから構成され、撮影時、画像合成時又は再生時の画像や各種設定情報、各種動作のガイダンス情報などが表示されるものである。

撮像部７は、外部の被写体像を撮影するもので、図４は、この撮像部７の詳細な構成を示したものである。光学系（撮影レンズ）１１を介して入射される光束の開口量は絞り機構１２によって調整され、被写体像がＣＣＤ等の撮像素子１３上に結像される。合焦のために撮影レンズ１１は光学系駆動部１４によって光軸に沿って移動されると共に、適切な露出となるように絞り機構１２の開口量も光学系駆動部１４によって制御される。

計測部１５は、図示しない測距センサや受光センサ及びホワイトバランス制御のための色センサなどを備えており、この計測部１５で検出された検出値はバスライン２を介して制御部１に送られる。制御部１は、予め設定されている撮影条件に基づき、送られてきた検出値から撮影レンズ１１の移動量や絞り機構１２の開口量を演算し、演算結果に基づいた駆動信号が光学系駆動部１４に送られることによって、光学系駆動部１４が撮影レンズ１１の移動や絞り機構１２の開口量を調整する。

撮像素子１３に被写体像が結像されることにより撮像素子１３には入射光量に応じた電荷が蓄積され、蓄積された電荷は読み出し駆動回路１６から与えられる駆動パルス信号によって順次読み出されてアナログ処理回路１７に送られる。アナログ処理回路１７では、色分離やゲイン調整、ホワイトバランスなどの各種処理が行われ、処理された信号はＡ／Ｄ変換回路１８を介してデジタルの画像情報としてバッファレジスタからなるバッファ回路１９に記録される。バッファ回路１９に記録された１枚分の画像情報は、バスライン２を介して図２で示した記憶部４のワークエリア４Ｃに一時記録された後、バスライン２を介して信号処理回路２０に送られ輝度信号及び色差信号に変換されるとともに、圧縮伸長回路２１によってＪＰＥＧ規格に準じて圧縮された後、ファイル化されて図１に示した記録媒体９に記録される。

図１に戻り、入力部８は、撮像用のシャッタ釦８Ａと、図２のモード値記録領域４Ａに記録されているモード値Ｍを操作毎に順次切り替えるモード切替釦８Ｂと、各種処理を行った際にその処理を終了させる確定釦８Ｃと、各種処理を途中で中止させるための中止釦８Ｄと、撮影条件の設定や撮影し且つ記録した静止画像の再生や消去、外部との通信及び編集などを行うための複数の制御用操作釦８Ｅ、・・・を備えている。また、各種の選択を行うために上下左右方向の押圧操作でそれぞれの方向への移動スイッチ入力がなされ且つ中央部の押圧操作で選択内容を決定するスイッチ入力がなされる十字釦８Ｇも備えられている。

記録媒体駆動部１０は、記録媒体９が着脱可能となっており、記録媒体９に対して画像情報を含む各種情報を記録したり、既に記録されている情報を読み出して再生したりする為の駆動回路である。記録媒体９は撮像部７で撮像され且つファイル化された画像情報、或いは合成画像を多数記録できる不揮発性の大容量メモリからなる記録領域を有しており、例えば半導体回路を用いたＩＣカード等が用いられる。なお、ＩＣカードではなく、磁気ディスク、光ディスク、光磁気ディスク等の各種ディスクを記録媒体９として用いても良く、記録媒体駆動部１０もこれら使用される記録媒体９に応じた駆動回路となっていれば良い。

次に、上記の如く構成されたカメラの動作について説明する。図５は、電源投入後のジェネラルフローチャートを示している。電源が投入され各部に動作電圧が供給されると、まずステップＳ１では、各部の初期設定が行われ、例えば、記憶部４のモード値記録領域４ＡはＭ＝０の記録モードに設定される。

初期設定が終わると、次はステップＳ２及びＳ３のモード判別処理に進む。即ち、ステップＳ２では、モード値記録領域４ＡのＭの値がＭ＝０の撮影モードであるか否かが判断され、Ｍ＝０の時はステップＳ４に進む。ステップＳ２でＭ＝０ではないと判別された際にはステップＳ３に進んで、Ｍ＝１の画像合成モードか否かが判別される。

上記ステップＳ４では、入力部８のシャッタ釦８Ａが操作されたか否かが判別され、シャッタ釦８Ａが操作された際にはステップＳ５に進み、撮像レンズ１１及び絞り機構１２を介して撮像素子１３に取り込まれた外部の被写体像をアナログ処理回路１７に送って処理し、Ａ／Ｄ変換回路１８を介してバッファ回路１９に記憶させる。このステップＳ５の処理により、バッファ回路１９にはシャッタ釦８Ａが操作された際の１枚の静止画像が記憶される。

次にステップＳ６では、バッファ回路１９に記憶された静止画情報が、バスライン２を介して図２で示した記憶部４のワークエリア４Ｃに一時記憶された後、バスライン２を介して信号処理回路２０に送られ輝度信号及び色差信号に変換されるとともに、圧縮伸長回路２１によってＪＰＥＧ規格に準じて圧縮され、更に、時計回路部３で得られている現在時刻情報をファイル名としてファイル化されて図１に示した記録媒体９に記録される。

上記ステップＳ４において、シャッタ釦８Ａの操作がなされていない場合にはステップＳ７に進み、入力部８のモード切替釦８Ｂが操作されたか否かが判断され、操作された場合にはステップＳ８に進んでモード値記憶領域４Ａの値をＭ＝１に設定し、モード切替を行って動作モードを画像合成モードに移行させる。

ステップＳ７においてモード切替釦８Ｂの操作が行われなかった場合及びステップＳ６の処理が完了した場合には、ステップＳ２に戻りシャッタ釦８Ａの操作の検出を再度行うが、ステップＳ８で動作モードが画像合成モードに移行した場合にはステップＳ２からステップＳ３に進み、ここで画像合成モードであることが検出されるとステップＳ９に進み、画像合成処理がなされる。

図６は、上記ステップＳ９の画像合成処理の詳細なフローチャートである。ステップＳ１１は、撮像部７によって撮像され記録媒体９に記録された複数の静止画像の中から、画像合成に用いる静止画像を選択する処理である。この処理においては、十字釦８Ｇの上下押圧操作によって記録媒体９に記憶されている複数の静止画像を順次表示部６に表示させ、所望の静止画像が記憶された時点で、十字釦８Ｇの中央部を押圧操作して所望の静止画像をワークエリア４Ｃに記憶させることによって画像合成に用いる静止画像を選択することが出来る。

或いは、記録媒体９に記録された複数の静止画像のサムネイル画像（縮小画像）を複数同時に表示部６に一括表示させ、十字釦８Ｇの操作によって所望の静止画像を選択することも可能である。

図１０（ａ）は、ステップＳ１１によって選択された静止画像の例を示しており、例えば、窓５１乃至５４があるビル５５の前の道路５６上に、６人の人物被写体像５７乃至６２が写っている画像であり、画像には更に、看板、車、植物或いは置物といった非人物（物体）被写体６３乃至６５も写っている。

図６のステップＳ１２は、複数のフレーム画像の中から所望のフレーム画像を選択する処理である。上述した如く、制御部１のＲＯＭには、複数のフレーム画像が記憶されており、これらの複数のフレーム画像を、上記静止画像の選択の場合と同様に、十字釦８Ｇの上下押圧操作によって順次表示部に表示させて選択するか、或いは、フレーム画像を一括表示させてその中から選択することによって、選択されたフレーム画像がワークエリア４Ｃに記憶される。

図１０（ｂ）はステップＳ１２によって選択されたフレーム画像の一例を示すものであり、中央に円画像７０、この円画像７０を囲む様に８個の三角形画像７１乃至７８が配置されているフレーム画像が選択されたものとする。

しかして、以下の説明では、上記図１０（ａ）の静止画像の人物被写体像と背後のビル画像との間に、図１０（ｂ）のフレーム画像が挿入された合成画像を作成する例について述べる。

しかして、図６のステップＳ１３は、ステップＳ１１で選択された静止画像を複数領域の部分画像に分割する領域分割処理であり、図７はその詳細なフローチャートを示している。この領域分割処理においては、写し込まれている被写体像の輪郭を検出し、被写体像の輪郭によって領域を分割するものであり、まずステップＳ２１では、輪郭のコントラスト検出のため閾値を予め定められた初期閾値に設定する。

このステップＳ２１で設定される初期閾値は、輪郭線がかなり濃いコントラストの輪郭線のみを検出する様な大きな閾値であり、次のステップＳ２２では、設定された閾値を超えた輪郭線のみが検出される様に輪郭線の抽出を行うと共に、輪郭線で分割された領域の部分画像をワークエリア４Ｃにそれぞれ別個に記憶する。

図１１（ａ）は、上記ステップＳ２２で検出された輪郭線を強調した画像表示状態を示しており、例えば、窓画像５４と物体画像６３との境の輪郭は検出されず、また、物体画像６４及び人物被写体像５７乃至６０の境の輪郭が検出されず、更に人物被写体像６１及び６２と物体画像６５との境の輪郭線が検出されず、それぞれ一つの輪郭の中に含まれる様に表示されている。

次のステップＳ２４では、輪郭線検出のための閾値の変更を行うための釦操作がなされたか否かを判断する。即ち、必要とする輪郭線が図１１（ａ）に示した輪郭線ではなく、更に詳細な輪郭線を必要とする場合、或いは逆に、もっと大まかな輪郭線でよい場合には十字釦８Ｇを操作する。

例えば、十字釦８Ｇの上方向の押圧操作がなされた際には、これがステップＳ２４で検出され、ステップＳ２５で輪郭線検出の閾値が更に小さい値に設定され、ステップＳ２２及びＳ２３で、新たな輪郭線検出に基づく輪郭線の検出と強調表示がなされる。

図１２（ａ）は、新たな輪郭線検出による表示状態を示しており、図１１（ａ）と比較して、人物被写体像５９、６０及び６２の輪郭が完全に抽出されて強調表示された状態を示している。尚、更に細かな輪郭表示を行う場合には、再度十字釦８Ｇの上方向の押圧操作を行うと、これがステップＳ２４で検出され、ステップＳ２５で輪郭線検出の閾値が更に小さい値に設定され、ステップＳ２２及びＳ２３で、新たな輪郭線検出に基づく輪郭線の検出と強調表示がなされる。

このように、十字釦８Ｇの上方向の押圧操作では、その操作毎に順次図１０（ａ）の元の静止画像に近づいていく様な細かな輪郭線抽出が行われ、逆に、十字釦８Ｇの下方向の押圧操作がなされると、ステップＳ２５では、それまで設定されていた閾値の値を更に大きく設定するのでコントラストが低い輪郭線は抽出されず、大まかな輪郭線強調表示がなされるものである。

しかして、所望の輪郭線強調表示がなされている際に、十字釦８Ｇの中央押圧操作がなされると、ステップＳ２４からステップＳ２６に進み、確定釦８Ｃが操作されたか否かが検出される。

確定釦８Ｃの操作が検出されると、次のステップＳ２７では、輪郭線によって分割された領域の各部分画像をワークエリアに記憶させると共に、合成データ記憶領域４Ｂに必要なデータを設定する処理を行う。

即ち、図１１（ａ）に示した輪郭表示で確定釦８Ｃが操作された場合には、合成データ記憶領域４Ｂの領域番号記憶領域４Ｂ１には、輪郭線で分割された各部分画像の領域番号である、Ａ１、Ａ２、Ａ３、・・・が記憶されると共に、画像ポインタ記憶領域４Ｂ３には、それぞれの分割画像Ａ１、Ａ２、Ａ３、・・・が記憶されているワークエリア４Ｃのアドレスがそれぞれ記憶され、位置座標記憶領域４Ｂ４には、それぞれの分割画像Ａ１、Ａ２、Ａ３、・・・が図１１（ａ）で示す全体画像のうち、どの位置に配置されるべきかを示す位置座標が記憶される。尚、この位置座標は、例えば、部分画像を矩形で囲み、その矩形の最も右上端の座標と最も左下端の座標とからなる。

上記ステップＳ２６で確定操作が一定時間の間検出されなかった場合には、ステップＳ２８に進み、詳細は記載してないが、中止釦８Ｄが操作されたか否か、或いはモード切替釦８Ｂが操作されたか否かの判断などがなされ、中止釦８Ｄの操作の場合は図６のステップＳ１１に戻り、モード切替釦８Ｂの操作の場合はモードをＭ＝２の再生モードに切替え、更に一定時間いずれの操作も行われなかった場合には、電源オフなどの処理を実行する。

上述のごとくして、図６のステップＳ１３の処理を終えると、次のステップＳ１４では、分割した領域の部分画像を、挿入するフレーム画像の前方に表示するか（前景として表示するか）或いは後方に表示するか（後景として表示するか）の選択処理を行う。

図８は、ステップＳ１４の選択処理の詳細を示したもので、ステップＳ３１では、分割した領域番号の部分画像を順次選択指定する処理である。即ち、十字釦８Ｇの上方向の押圧操作がなされる毎に、領域番号記憶領域４Ｂ１に記憶された領域番号Ａ１、Ａ２、Ａ３、・・・が順次一つずつ選択されていくもので、選択された領域の部分画像は、他の画像と色彩或いは輝度などが異ならせて表示される。

そして、次のステップＳ３２では、十字釦８Ｇの中央部分の押圧操作がなされたか否かを検出するもので、挿入されるフレーム画像の前に表示させたい領域番号（部分画像）が選択されている際に、十字釦８Ｇの中央部分の押圧操作が検出されるとステップＳ３３に進み、選択フラッグ記憶領域４Ｂ２の領域番号に対応する領域に「１」が記憶される。

そして、上記ステップＳ３１乃至Ｓ３３の処理を複数回行うことによって、挿入されるフレーム画像の前に表示させたい複数の領域番号（部分画像）が選択設定できる。ステップＳ３２での選択処理を行わずに確定釦８Ｃの操作なされると、ステップＳ３４でこれが検出され、ステップＳ１４での選択処理からステップＳ１５のフレーム画像との合成処理に進む。尚、図８のステップＳ３５の中止処理は、図６のステップＳ２８と同様の処理であるので、その説明は省略する。

図９はステップＳ１５のフレーム画像との合成処理の詳細なフローチャートである。ステップＳ４１では、図７で選択された画像、即ち、輪郭強調された、例えば図１１（ａ）の画像と、ステップＳ１２で選択されたフレーム画像、即ち図１０（ｂ）の画像とが表示部６に並列表示される。

次のステップＳ４２では、十字釦８Ｇの上下左右への押圧操作が検出され、この検出結果に基づいて、次のステップＳ４３では、フレーム画像が上下左右のいずれかの方向へ、十字釦８Ｇの押圧された方向によって移動表示される。そして、静止画像とフレーム画像とが重なる位置に来た場合には、静止画像とフレーム画像とのどちらを優先して表示するかを、重なった部分画像に対応する合成データ記憶領域４Ｂの選択フラッグ記憶領域４Ｂ２に「１」が記憶されているか否かに基づいて行う。

例えば、図１１（ａ）においては、領域番号Ａ６とＡ７との部分画像をフレーム画像の前景として選択し、他の領域番号の部分画像をフレーム画像の後景として選択するために、図８のステップＳ３３では、領域番号Ａ６とＡ７に対してのみ、対応する選択フラッグ記憶領域４Ｂ２に「１」を設定したものとする。

すると、図9のステップＳ４３においては、フレーム画像が領域番号Ａ６或いはＡ７の部分画像と重なるまでは、フレーム画像が優先して表示され、フレーム画像が移動して領域番号Ａ６或いはＡ７の部分画像と重なると、領域番号Ａ６或いはＡ７の画像が優先して表示され、フレーム画像は、図１１（ｂ）に示す様に、一部が領域番号Ａ６或いはＡ７の部分画像の後ろに隠れている様に見える状態で表示されるものである。

このような状態で、十字釦の中央部分の押圧が検出されるとステップＳ１５からステップＳ１６に進み、ステップＳ１６では、静止画像部分の輪郭強調表示を中止してもとの画像表示に戻り、これによって、図１１（ｃ）に示す様に、図１０（ａ）で示した静止画像の中に、フレーム画像が挿入された合成画像が表示される。また、確定釦８Ｃの操作によって、図１１（ｃ）に示した合成画像がファイル化され、記録媒体９に記憶される。

しかして、記憶媒体９に記憶された合成画像は、モード切替釦の操作によってモード値記憶領域４ＡのＭがＭ＝２の再生モードに設定されることにより、図１のステップＳ２、Ｓ３からＳ１０のモードに応じた処理に進んで、このステップＳ１０の処理において記憶媒体９に記憶された合成画像を表示部６に表示させることが出来るものである。

尚、上述した例は、図７のステップＳ２７乃至Ｓ２５における輪郭検出の結果が図１１（ａ）の時、フレーム画像と合成した例である。即ち、図１１（ａ）においては、人物被写体５７乃至６２は、領域Ａ６及びＡ７にいずれかに収まっており、従って領域Ａ６及びＡ７を前景画像として選択することによって、全ての人物被写体５７乃至６２がフレーム画像の前景として合成されたものである。

これに対して、例えば、人物被写体５９、６０及び６２のみを前景として表示させたい。また、物体被写体６５は前景として表示させたくないといった場合には、図７のステップＳ２７乃至Ｓ２５における輪郭検出を、人物被写体５９、６０、６２の輪郭が検出されるまで閾値を変更して行わせればよい。

このようにして、図１２（ａ）に示す様に、人物被写体５９、６０、６２の輪郭が検出された状態で、人物被写体５９、６０、６２にそれぞれ対応する領域番号Ａ１０、Ａ１１、Ａ１２に対して対応する選択フラッグ領域４Ｂ２に「１」を設定しておけば、ステップＳ１５のフレーム画像との合成処理では、図１２（ｂ）に示す様に人物被写体５９、６０、６２のみを前景画像とする合成画像が作成され、図１２（ｃ）に示す合成画像が記録媒体９に記録できるものである。

また、上述した例では、複数の領域に分割された部分画像からなる静止画像と、他の画像であるフレーム画像とをそのまま画像合成する例を示したが、静止画像における部分画像を移動させてから合成画像を作成することも可能である。

この場合は、図６のステップＳ１３とＳ１４の間に、部分画像の移動処理を挿入すればよいものである。即ち、この部分画像の移動処理では、部分画像を十字釦８Ｇの上下左右の押圧操作によって順次選択してゆき、所望の移動すべき部分画像が選択された状態で確定釦８Ｃを操作して移動すべき部分画像を決定し、その後十字釦８Ｇの上下左右の押圧操作によって移動させればよいものである。

図１３は、上記部分画像の移動とフレーム画像との合成を説明したもので、図１３（ａ）は輪郭線によって分割された静止画像であり、領域番号Ａ６及びＡ７が前景画像として選択されているものとする。この状態で、領域番号Ａ６の画像を十字釦８Ｇの操作によって図１３（ｂ）に示す様にＡ６−１の位置まで移動させる。

この時、合成データ記憶領域の領域番号Ａ６に対応する位置座標記憶領域４Ｂ４には、領域番号Ａ６がＡ６―１に移動することに伴い、Ａ６−１の位置に対応する位置座標を更新記憶させる。

次に、楕円形のフレーム画像８０を合成処理させることによって、図１３（ｃ）に示す様に、フレーム画像の前方に領域番号Ａ６−１及びＡ７の画像が表示された合成画像となり、最終的に図１３（ｄ）に示す様な、領域番号Ａ６が領域番号Ａ６−１に移動させた画像が記録媒体９に記録されるものである。

このように、上記実施例では、撮像によって得られた画像を複数の部分画像に分割し、挿入するフレーム画像に対して各部分画像を前景表示させるか後景表示させるかを設定して他の画像と合成させる様にしたので、挿入されるフレーム画像によって奥行きのある画像が得られることとなり、また、挿入されるフレーム画像によりこれより前景の画像が強調された画像となり、極めておもしろみのある画像が得られる。

尚、上記実施例では、静止画像を複数の領域に分割させる際に被写体の輪郭で行わせる用意したが、表示部６の上面に透明タッチパネルを配置し、表示された静止画像上をタッチ入力で分割させてもよい。

また、上記実施例では、静止画像に一つのフレーム画像を挿入した合成画像を得られる様にしたが、挿入されるフレーム画像は一つに限らず複数挿入することが可能であり、またその位置も、挿入される画像毎に奥行きの位置を変えて挿入することが出来る。

更に、上記実施例では、挿入される画像をフレーム画像と称呼したが、上述した如く、フレーム（枠）以外の画像も含めて、説明の便宜上フレーム画像と称呼したものであって、挿入される画像はフレーム（枠）画像には限定されず、例えば撮像部７で撮影された他の画像、或いはその一部の画像であってもよい。

また、上記実施例では、撮像部７を備えたカメラについて述べたが、必ずしも撮像手段を備えている必要はなく、他のカメラで撮像した静止画像を受信して処理する画像処理装置であってもよい。

更に、本発明はパーソナルコンピュータ、携帯電話、ＰＤＡ、ノートパソコン等一般的な電子機器に適用できる。

本発明を適用したカメラの基本構成を示すブロック図。 図１の記憶部４の詳細な構成図。 図２の合成データ記憶領域４Ｂの詳細な構成図。 図１の撮像部７の詳細な構成図。 図１のカメラの動作を示すフローチャート。 図５のステップＳ９の画像合成処理の詳細なフローチャート。 図６のステップＳ１３の詳細なフローチャート。 同じく図６のステップＳ１４の詳細なフローチャート。 同じく図６のステップＳ１５の詳細なフローチャート。 選択された静止画像とフレーム画像とを示す図。 分割された静止画像とフレーム画像との合成画像を示す図。 同じく分割された静止画像とフレーム画像との合成画像の他の例を示す図。 同じく分割された静止画像とフレーム画像との他の合成画像を示す図。

符号の説明

１ 制御部
３ 時計回路部
４ 記憶部
５ 通信制御部
６ 表示部
８Ａ シャッタ釦
８Ｂ モード切替釦
８Ｃ 確定釦
８Ｄ 中止釦
８Ｇ 十字釦
９ 記録媒体
１３ 撮像素子
１９ バッファ回路

Claims (8)

1. 被写体を撮像して静止画像を得る撮像手段と、この撮像手段によって得られた静止画像を複数の部分画像に分割する画像分割手段と、この画像分割手段によって分割された複数の部分画像のうち少なくとも一つの部分画像を選択する画像選択手段と、前記静止画像とは異なる他の画像を前記画像選択手段によって選択された部分画像が前景或いは後景となり且つ選択されなかった部分画像が後景或いは前景となるように合成する画像合成手段とを備えたことを特徴とする撮像装置。
2. 前記画像分割手段は、前記静止画像の中の部分画像の輪郭を検出して複数の画像に分割する輪郭検出手段を備えることを特徴とする請求項１に記載の撮像装置。
3. 前記輪郭検出手段は、複数の異なった閾値でそれぞれ輪郭検出を行う為の輪郭閾値変更手段を備えていることを特徴とする請求項２に記載の撮像装置。
4. 更に、複数のフレーム画像を記憶するフレーム画像記憶手段と、このフレーム画像記憶手段に記憶された複数のフレーム画像の中から前記静止画像とは異なる他の画像を選択するフレーム画像選択手段とを備えることを特徴とする請求項１乃至３のいずれかに記載の撮像装置。
5. 被写体を撮像して得られた静止画像を複数の部分画像に分割する画像分割手段と、この画像分割手段によって分割された複数の部分画像のうち少なくとも一つの部分画像を選択する画像選択手段と、この画像選択手段によって選択された部分画像が前景或いは後景となり且つ選択されなかった部分画像が後景或いは前景となるように前記静止画像とは異なる他の画像を合成する合成手段とを備えたことを特徴とする画像編集装置。
6. 前記画像分割手段は、前記静止画像の中の部分画像の輪郭を検出して複数の画像に分割する輪郭検出手段を備えることを特徴とする請求項５に記載の画像編集装置。
7. 前記輪郭検出手段は、複数の異なった閾値でそれぞれ輪郭検出を行う為の輪郭閾値変更手段を備えていることを特徴とする請求項６に記載の画像編集装置。
8. 更に、複数のフレーム画像を記憶するフレーム画像記憶手段と、このフレーム画像記憶手段に記憶された複数のフレーム画像の中から前記静止画像とは異なる他の画像を選択するフレーム画像選択手段とを備えることを特徴とする請求項５乃至７のいずれかに記載の画像編集装置。

Images