JP4330049B2 - 電子カメラ装置、情報配置方法及びコンピュータ読み取り可能な記録媒体 - Google Patents

Description

【０００１】
【発明の属する技術分野】
本発明は画像処理技術に関し、特に、画像と共に表示する撮像情報等の重畳表示情報の配置技術に関する。
【０００２】
【従来の技術】
従来、銀塩カメラでは撮像時に日付や撮影時間をフィルム上の潜像の下方に映し込み、現像された画像の下方に再現するものがある。
【０００３】
また、デジタルカメラ等の電子カメラ装置で画像表示装置を備え、再生画像を画面上に表示する際に、日付や撮影時間等の文字データを表示可能なものがある。このような電子カメラ装置では撮像時に画像をフラッシュメモリ等の記録媒体に保存記録する際に日付や撮影時間等の文字データを画像とは別に記録媒体に記録し、再生時に画像と文字を液晶ディスプレイ等の表示画面に表示するが、この場合、文字データは画面上の固定位置に表示されていた。
【０００４】
【発明が解決しようとする課題】
上記従来の電子カメラ装置では、撮像日時等の文字データは画像上の固定位置に映し込まれるため、画像の構図によっては映し込まれる文字データ自体が邪魔になるといった問題点があった。
また、映し込まれる文字データは表示色が固定されているので文字データの背景の色によっては文字データが表示されても見にくい場合があるといった問題点があった。
【０００５】
本発明は前記問題点を解決するためになされたものであり、画像と共に表示する日付等の撮像関連情報を見やすい状態で表示し得る電子カメラ装置の提供を目的とする。
【００１０】
【課題を解決するための手段】
請求項１に記載の発明は、被写体を撮像し撮像画像を記録する電子カメラ装置において、被写体撮像時における日付等の撮像関連情報を取得する情報取得手段と、前記被写体撮像時の撮像画像を分析することにより、メインの被写体部分を判別すると共に、このメイン被写体部分以外の領域のうちで、前記撮像関連情報を配置づけるのに最適な位置を判断して決定する位置決定手段と、前記情報取得手段で取得した撮像関連情報と前記位置決定手段で決定された配置位置を示す配置位置情報とを含む撮像情報を、前記撮像画像と対応づけて記録すると共に、当該撮像画像を記録する記録手段と、を備え、前記記録された撮像画像を再生する際は、当該撮像画像に対応づけて記録された前記撮像情報を取り出し、その撮像情報に含まれる撮像関連情報を当該撮像情報に含まれる配置位置情報に基づいて前記撮像画像上に合成して再生表示するようにした、ことを特徴とする。
【００１１】
また、請求項２に記載の発明は、被写体を撮像し、撮像画像を記録し、被写体撮像時における日付等の撮像関連情報を取得し、前記被写体撮像時の撮像画像を分析することにより、メインの被写体部分を判別すると共に、このメイン被写体部分以外の領域のうちで、前記撮像関連情報を配置づけるのに最適な位置を判断して決定し、前記取得した撮像関連情報と前記決定された配置位置を示す配置位置情報とを含む撮像情報を、前記撮像画像と対応づけて記録すると共に、当該撮像画像を記録する、ことを特徴とする。
更に、請求項３に記載の発明は、被写体を撮像し撮像画像を記録するコンピュータに、被写体撮像時における日付等の撮像関連情報を取得する手段と、前記被写体撮像時の撮像画像を分析することにより、メインの被写体部分を判別すると共に、このメイン被写体部分以外の領域のうちで、前記撮像関連情報を配置づけるのに最適な位置を判断して決定する手段と、前記取得した撮像関連情報と前記決定された配置位置を示す配置位置情報とを含む撮像情報を、前記撮像画像と対応づけて記録すると共に、当該撮像画像を記録する手段と、を機能させることを特徴とするプログラムを記録した記録媒体である。
【００２３】
【発明の実施の形態】
［回路構成例］
図１は、本発明の撮像情報配置方法を適用可能なデジタルカメラの回路構成例を示すブロック図であり、デジタルカメラ１００は、光学系１１、信号変換部１２、信号処理部１３、ＤＲＡＭ１４、制御部２０、操作部３０、表示部４０及び保存記録部５０を備えている。なお、光学系１１、信号変換部１２及び信号処理部１３は撮像部１０を構成している。また、図示のように保存記録部５０の記録媒体（メモリカード５１）に保存記録された画像や撮像情報等をパーソナルコンピュータ（以下、パソコン）等の外部画像処理装置に出力するデータ出力部６０を設けるようにしてもよい。
【００２４】
図１（ａ）で、光学系１１は、撮像レンズ、自動絞り機構及び合焦機構等（図示せず）を含み、撮像レンズを介して集光された被写体像の光束を後段の撮像素子（ＣＣＤ）上に結像させる。
【００２５】
また、信号変換部１２は、ＣＣＤ及び信号変換回路等を含み、前段の光学系１１を介してＣＣＤに結像した画像を電気信号に変換し、デジタルデータに変換して一定の周期で出力する。
【００２６】
また、信号処理部１３は、撮像時には信号変換部１２からの出力を処理して、デジタルの輝度、色差マルチプレクス信号（Ｙ，Ｃｂ，Ｃｒデータ）等の信号成分を得て、Ｙ，Ｃｂ，Ｃｒデータ（以下、画像データ）をＤＲＡＭ１４に転送し、一時的に記憶する。また、スルー画像表示するために、取り込んだ画像データを間引いて表示部４０に送る。また、シャッター操作がされるとその時点の画像データを表示部４０に送って静止画表示させる。信号処理部１３は、また、画像の保存記録の際にＤＲＡＭ１４に書き込まれている画像データを読み出してＪＰＥＧ圧縮処理を施し、再生時に記録用メモリ（メモリカード）５１に保存記録されていた画像データに伸張処理を施して画像データを再生する。
【００２７】
ＤＲＡＭ１４は作業用メモリとして用いられ、図２に示すように撮像画像や再生画像を一時的に記憶する画像バッファ領域１４１やＪＰＥＧ圧縮／伸張時の作業用領域１４２等が確保されている。
【００２８】
制御部２０は図１（ｂ）に示すように、ＣＰＵ２１、ＲＡＭ２２及びプログラム格納用ＲＯＭ２３とタイマ等の周辺回路を有したマイクロプロセッサ構成を有しており、ＣＰＵ２１は、上述の各回路及び図示しない電源切換えスイッチ等にバスラインを介して接続し、プログラム格納用ＲＯＭ２３に格納されている制御プログラムによりデジタルカメラ１００全体の制御を行なうと共に、操作部３０からの状態信号に対応してプログラム格納用ＲＯＭ２３に格納されている各モード処理用のプログラムや本発明に基づく撮影情報配置用プログラムを取り出して、デジタルカメラ１００の各機能の実行制御、例えば、撮像や記録画像の再生機能の実行等を行なう他、撮像時や再生時に撮像画像内又は再生画像内での撮影情報の配置処理等の実行制御を行なう。
【００２９】
操作部３０は、処理モード切替えスイッチ、機能選択用ボタン、カーソル移動キー３５、シャッターボタン３６等のキーやスイッチを構成部分としており、これらのキー或いはスイッチが操作されると状態信号が制御部２０に送出される。
【００３０】
表示部４０は、ビデオエンコーダ、ＶＲＡＭ及び液晶画面（ＬＣＤ）等から構成されており、制御部２０の表示制御により、撮像時のスルー画像、静止画像、及び再生時の再生画像、処理選択時の選択用メニュー（或いはアイコン）や操作指示用のメッセージ等の表示等のほか、スルー画像、静止画像、及び再生画像と共に撮像情報の表示を行なう。
【００３１】
保存記録部５０は、メモリカード５１を着脱自在に構成され、撮像時には装着れたメモリカード５１に撮像画像及び撮像情報等を保存記録する。また、画像再生時にはメモリカード５１に保存記録された画像及び撮像情報を取り出す。なお、保存記録部５０をフラッシュメモリ等の保存記録媒体を内蔵した構成としてもよい。
【００３２】
［撮像情報配置プロセス］
図３は本発明に基づく撮像情報配置のプロセスを示すプロセスチャートであり、図３（ａ），（ｂ）は撮像画像の保存記録時に画像に映し込む撮像情報とその位置及び表示色（以下、配置データ）を保存記録する例である。また、図３（ｃ）は撮像画像にその撮像情報をその配置データに基づいて配置して合成（映し込み）し、保存記録する例、図３（ｄ）はプロセス６の詳細フローチャートである。
【００３３】
また、図４は、撮像情報とその配置データ等を格納する撮像情報記録ファイルの説明図であり、図４（ａ）は撮像情報記録ファイル領域を設けたメモリカードの例、図４（ｂ）は撮像情報記録リストの一実施例を示す図である。
【００３４】
（イ−１） 撮像情報とその配置データを撮像情報リストに記録する例（１）
（同色部分の検出を行なう例）
プロセスＰ１：（撮像動作）
図３（ａ）で、デシタルカメラ１００が起動されると、合焦動作後、撮像部１０を介して被写体像がＤＲＡＭ１４の画像バッファ１４１に取り込まれ、表示部４０に送られてスルー画像表示される。画像の取り込み及びスルー画像表示動作はシャッターボタン３６が押されるまで繰り返され、ユーザがシャッターボタン３６を押すと撮像指示信号が制御部２０に送られ、Ｐ２に移行する。
【００３５】
プロセスＰ２：（撮像情報の取得）
制御部２０は撮像動作時（シャッターボタン３６の押し下げ時）の撮像情報を取得してＲＡＭ２２に一時記憶する（ＤＲＡＭ１４に一時記憶するようにしてもよい）。
なお、撮像情報の例として本実施例では説明上撮影日時のみとしているが、これに限定されず、図４（ａ）に示すように撮影日時、撮像モードの種類（通常撮影、近接撮影、パノラマ撮影等の別）、ストロボ使用の有無、被写体までの距離、焦点距離、シャッタースピード等とすることもできる。また、この他に、経度、緯度、撮影場所や画角、温度、湿度、高度等の撮像時の環境条件等を撮像情報とすることができ、撮像画像に映し込む撮影条件の数及び組み合わせは設計時にデジタルカメラの種類に応じて固定的に設定してもよく、設計時に標準設定し、使用時にユーザが適宜設定するようにしてもよい。
【００３６】
また、撮像情報は、撮影日時についてはシャッター押し下げ時のタイマー値を基によく知られたカレンダープログラムにより算出した値として取得でき、撮像モードの種類、ストロボ使用の有無等はユーザによる処理選択時に設定される値を基に取得することができる。また、被写体までの距離、焦点距離、シャッタースピード、画角、環境条件等についても撮像時に検出或いは生成された値や判定結果を表わすコード等として取得することができる。
【００３７】
プロセスＰ３：（サーチ範囲の決定）
撮像情報の表示位置決定を行なう際には略同色部分のサーチ効率を挙げることと、表示する撮像情報を被写体にかからないようにバランスよく配置することが要請される。このような条件を満たすためには略同色部分を判別するための同色部分判別対象領域（以下、サーチ範囲）を決定しておくことが望ましい。
【００３８】
制御部２０は下記▲１▼又は▲２▼のいずれかの方法を実現するプログラムに基づいて図５（ｂ）に示すようなサーチ範囲２１９を決定する（詳細は各実施例の説明参照）。
▲１▼ 画像内の被写体（注目被写体）を自動的に判別し、被写体外の画像領域をサーチ範囲とする方法、
この場合、被写体を判別する方法として被写体の輪郭を検出する方法（実施例１−１）と、フォーカスがあっているか否かに基づいて被写体を判別する方法（実施例１−２）、を挙げることができる。
▲２▼ 画像の周辺部分を同色部分判定領域とする方法（実施例１−３）
また、初期設定時に画像内の複数の点を指定してそれらの点を結ぶ線外の領域をサーチ範囲とするようにしてもよい。
【００３９】
プロセスＰ４：（同色部分の判別）
制御部２０は前記プロセスＰ３で決定されたサーチ範囲を調べ、略同色部分を特定する。例えば、デジタルカメラ１００のＤＲＡＭ１４（又は、パソコン等の外部画像処理装置のメモリ）に記憶された画像のうち、サーチ範囲（図５（ｂ）、図７（ｃ）、図９（ｄ）、図１０の斜線部分））の色分布を調べて、図１１に示すようにＲ，Ｇ，Ｂ比率の差ｒ，ｇ，ｂが閾値δ以内か否かを判定し、閾値δ以内の場合（図１１（ａ））にはその部分を略同色部分と判別する（図１１（ｂ）は、略同色部分でない部分の分布）。このようにして略同色部分と判別した部分のうち所定面積以上の部分２６２，２６３、…（図１１（ｃ）を略同色部分と判別して抽出する。
【００４０】
なお、後述（実施例２）するように、所定の大きさの枠の移動前、移動後の枠内の色を比較することにより略同同色部分を判別するようにしてもよい。
【００４１】
プロセスＰ５：（撮像情報の表示位置の決定）
制御部２０は上記プロセスＰ４で特定された略同色部分内で撮像情報を表示する表示位置を決定し、その座標を取得する。
【００４２】
プロセスＰ６：（撮像情報の表示色の決定）
制御部２０は上記プロセスＰ４でサーチされた略同色部分の表示色が撮像情報を表わす文字、図形等の標準表示色（デフォルト色）と同じか否かを判定し（Ｐ６−１（図３（ｂ））、同じ場合には撮像情報の表示色（例えば、文字色）を異なる色（見やすい表示色、例えば、反対色や白抜き）にする（Ｐ６−２（図３（ｄ））。なお、このプロセスは図３（ｂ）に示すように上記プロセスＰ４で得る略同色部分を撮像情報の標準表示色以外の色とした場合（実施例３）には省略する。
【００４３】
プロセスＰ７：（撮像情報の表示サイズ決定）
制御部２０は上記プロセスＰ４で得た略同色部分の大きさに応じて撮像情報の表示サイズ（文字の大きさや図形の大きさ）を決定する。なお、このプロセスは上記プロセスＰ４で同色部分の判定にサーチ枠を移動する方法を用いた場合（図１２）には省略する。
【００４４】
プロセスＰ８：（撮像情報の配置データ記録）
制御部２０はメモリカード５１に設けられた撮像情報記録ファイル７０（図４）に上記プロセス〜Ｐ７で得た撮像情報、撮像情報の表示位置、表示色及び表示サイズを記録する。
【００４５】
図４（ｂ）の例では、撮像情報記録ファイル７０の画像番号欄７１には記録した画像の画像番号が格納され、表示色欄７２にはその画像の撮像情報の表示色（色コード）が格納され、サイズ欄７３にはその画像の撮像情報の表示サイズ（例えば、標準表示サイズを「１」とした場合の比率等）が格納され、表示位置１欄には撮像情報（データ１）の表示枠の座標（表示枠の四隅の座標でもよいが、特定の一隅の座標でよい）が格納され、データ１欄にはその画像の撮影日時データが格納され、…、表示位置６欄には撮像情報（データ６）の表示ゾーンの座標が格納される。
【００４６】
プロセスＰ９：（画像記録処理）
制御部２０はシャッターボタン３６の押し下げ時にＤＲＡＭ１４に取り込まれた画像にＪＰＥＧ圧縮処理を施し、メモリカード５１に保存記録する。
【００４７】
上記プロセスにより、記録した撮像画像の再生時に撮像情報記録リスト７０から撮像情報（データ）を取り出して、格納された表示色コード、表示サイズ比率で調整して表示位置に配置し、再生画像と合成し、表示（映し込み表示）することができる。このようにして映し込み表示された再生画像は被写体の邪魔にならないように配置され且つ見やすい表示色で表示される。
【００４８】
また、撮像情報記録ファイルに複数の撮像情報及びその配置情報を登録できるので、ユーザが再生モードの開始時に映し込みたい撮像情報を選択設定するように構成することもできる。
【００４９】
また、撮像情報及びその配置データと画像を記録したメモリカード５１をパソコン等の外部画像処理装置に装着するか、データ出力部６０を介してデジタルカメラ１００から外部画像処理装置にメモリカード５１に記録された撮像情報及びその配置情報等と画像を送信することにより、外部画像処理装置側でも撮像情報を画像の邪魔にならないように、且つ見やすく表示することができる。
【００５０】
（イ−２） 撮像情報とその配置データを撮像情報リストに記録する例（２）
（撮像情報の表示色とは異なる部分の検出を行なう例）
図３（ａ）の例ではプロセスＰ４でサーチ範囲中の同色部分の検出を行ない、Ｐ５で表示位置の決定を行なったが、図３（ｂ）に示すように下記プロセスＰ４’，Ｐ５’にサーチ範囲の中の撮像情報の標準表示色以外の部分を検出し、表示位置を決定するようにしてもよい。この場合、プロセスＰ６の撮像情報の表示色決定処理は不要となる（実施例３参照）。
【００５１】
プロセスＰ４’：（同色部分の判別）
図３（ｂ）で、制御部２０は上記プロセスＰ３で決定されたサーチ範囲をプロセスＰ４と同様の方法で調べて、略同色部分と判別する。
【００５２】
プロセスＰ５’：（撮像情報の表示位置の決定）
制御部２０は上記プロセスＰ４’で特定された部分内で撮像情報を表示する表示位置を決定し、その座標を取得して図３（ａ）のプロセスＰ７に移行する。
【００５３】
（ロ） 撮像情報とその位置、表示色等をＨＴＭＬファイルで記述する例
上述した図３（ａ），（ｂ）の例ではプロセスＰ８で、撮像情報及びその配置データ等をメモリカード５１の撮像情報記録ファイル（図４）に格納したが、これに代えて撮像情報及びその配置情報等をメモリカード５１に設けたＨＴＭＬ形式の画像一覧用ファイルで記述するようにしてもよい。
【００５４】
（ハ） 撮像画像の記録時に撮像情報を合成して保存記録する例
上述した図３（ａ）の例のプロセスＰ８では、撮像情報及びその配置データ等を撮像情報記録ファイル又はＨＴＭＬファイルに格納するようにしたが（（イ−１），（ロ））、図３（ｃ）に示すようにプロセスＰ８’で撮像情報を撮像画像に合成するようにしてもよい。すなわち、図３（ａ），（ｂ）のプロセスＰ７の後に、
プロセスＰ６’：（画像と撮像情報の合成）
制御部２０はプロセスＰ２で得た撮像情報をプロセスＰ７で得た表示サイズに変換し、プロセスＰ５で得た表示位置にプロセスＰ６で得た表示色でＤＲＡＭ１４に記録されている画像（シャッター押し下げ時にＤＲＡＭ１４に取り込まれた画像）に合成する。
【００５５】
プロセスＰ９’：（合成画像と保存記録）
制御部２０はプロセスＰ６’で撮像情報が合成されたＤＲＡＭ１４上の画像にＪＰＥＧ圧縮処理を施し、メモリカード５１に保存記録する。
【００５６】
上記プロセスにより、記録画像の再生時に撮像情報３００が画像の邪魔にならないように、且つ見やすく表示される（図８（ｃ），（ｄ））。
【００５７】
なお、図３（ｂ）に示すプロセスにおいても、上記プロセスＰ６’で「制御部２０はプロセスＰ２で得た撮像情報をプロセスＰ７で得た表示サイズに変換し、プロセスＰ５で得た表示位置に配置してＤＲＡＭ１４に記録されている画像に合成する。」ことにより、同様の結果を得ることができる。
【００５８】
なお、上記プロセスチャートではプロセスＰ１で撮像を行う場合を例としたが、デジタルカメラやパソコン等の画像処理装置で記録画像を再生してその撮像情報等の重畳表示情報を再生画像に重畳表示する場合にも、同様のプロセスを用いて重畳表示情報を再生画像に合成して表示できる（すなわち、プロセスＰ１を記録画像の再生処理とし、プロセスＰ２で記録画像と共に保存記録メモリに記録された撮像情報か、新たにキー入力された撮像情報を取得するようにし、以下、プロセスＰ３のサーチ範囲の決定からプロセスＰ７の文字サイズの決定処理を図３の場合と同様にして行い、プロセスＰ５で決定された画像位置に配置して合成、表示するようにすることができる。これにより、従来の記録画像についても撮像情報が記録されていれば再生画像に撮像情報を画像の邪魔にならないように且つ見やすく表示できる。
また、メモリカード５１（或いは画像保存メモリ）に撮像情報記録ファイル或いはＨＴＭＬファイルを作成し、図３のプロセスＰ８で撮像情報及び撮像情報の配置データを記録するようにしてもよい。
【００５９】
＜実施例１＞
図５はサーチ範囲び配置された撮像情報の説明図であり、図５（ａ）に示す画像で被写体２１０と点２１１，２１２，２１３，２１４で囲まれる閉鎖空間２１５（図５（ｂ））を考えたとき、閉鎖空間２１５以外の画像部分２１９をサーチ範囲として同色部分の判別を行う。閉鎖空間２１５は被写体の輪郭でもよく、合焦部分でもよく、あるいはサーチ範囲外として設定された部分でもよい。
【００６０】
また、図５（ｃ）の例はサーチ範囲２１９内で略同色部分と判定された部分にその面積に比例したサイズの撮像情報３００（図示の例では撮像日時）を表示した例である。
【００６１】
[同色部分判別対象領域（サーチ範囲）の決定方法]
（１） 画像内の被写体像（注目被写体像）を自動的に判別し、被写体像以外の画像領域をサーチ範囲とする方法
[実施例１−１] 被写体像の輪郭を検出して輪郭外をサーチ範囲とする方法
図６はサーチ領域の自動検出方法の一実施例を示すフローチャートであり、図７はその説明図である。
ステップＳ１：（コントラストの平滑処理）
制御部２０は、デジタルカメラ１００のＤＲＡＭ１４（又は、パソコン等の外部画像処理装置のメモリ）に記憶された画像のコントラスト（輝度）の分布２２０（図７（ａ））を平滑処理し、図７（ｂ）に示すような分布を得る。
【００６２】
ステップＳ２：（輪郭部の抽出）
制御部２０は、平滑処理後のコントラストの分布のうちの平坦部分２２５，２２５’から中央に向かう立ち上がり部分２２１（或いは立ち下がり部分２２１’）を輪郭データとして抽出する。
【００６３】
ステップＳ３：（輪郭の特定）
制御部２０は、上記ステップＳ２で抽出した輪郭データを処理して図７（ｃ）に示すように被写体の輪郭２２２を特定し、輪郭２２２の外部をサーチ領域２２９とする。
【００６４】
[実施例１−２] フォーカスがあっているか否かに基づいてサーチ範囲を決定する方法
図８はサーチ領域の自動検出方法の一実施例を示すフローチャートであり、図９はその説明図である。
ステップＴ１：（水平方向のコントラストの抽出）
制御部２０は、デジタルカメラ１００のＤＲＡＭ１４（又は、パソコン等の外部画像処理装置のメモリ）に記憶された画像２３１（図９（ａ））の水平方向（Ｘ）方向のコントラスト（輝度）分布を平滑処理し、図９（ｂ）に示すような分布２３５を得る。
【００６５】
ステップＴ２：（垂直方向のコントラストの抽出）
制御部２０は、同様にして画像２３１（図９（ａ））の垂直方向（Ｙ）方向のコントラスト分布を平滑処理し、図９（ｃ）に示すような分布２３６を得る。
【００６６】
ステップＴ３：（合成）
制御部２０は、上記ステップＴ１で得た水平方向の輝度分布２３５のうちのシャープな範囲２３５’〜２３５”と上記ステップＴ２で得た垂直方向の輝度分布２３６のうちのシャープな部分２３６’〜２３６”を合成する。
【００６７】
ステップＴ４：（合焦範囲の検出）
制御部２０は上記ステップＴ３の結果から合焦範囲２３２を検出し、合焦範囲以外の画像領域をサーチ領域とする。
（３） 画像の周辺部分を同色部分判定領域とする方法
[実施例１−３]
図１０はサーチ領域の設定方法の説明図である。
【００６８】
この方法では、図１０（ａ）に示すように画像のフレーム枠２５１，２５２，２５３，２５４からの距離Ｒ１，Ｒ２，Ｒ３，Ｒ４の範囲内をサーチ範囲２５９として予め設定する。これにより、サーチ範囲が簡単に決定でき、後述するように同色部分のサーチがより簡単になる。
【００６９】
通常、画像の周辺部は、空、大地、海、湖、山、草、といった被写体とは異なる部分となる場合が多いので、画像の周辺部分をサーチするだけでもほとんどの場合、撮像情報の表示位置を得ることができる。なお、撮像情報を配置するだけの大きさの略同色部分がない場合でも、後述するように略同色部分の大きさに比例するように撮像情報の表示サイズを決めることにより撮像情報を配置できるので実用上問題は生じない。
【００７０】
ステップＷ２：（サーチ枠によるサーチ範囲のサーチ）
制御部２０は、予め用意されている複数サイズのサーチ枠２７０−１，２７０−２，２７０−３、…（図１３（ａ））のうち、最大サイズのサーチ枠から順に、図１３（ｂ）に示すようにサーチ範囲として決定された画像部分を所定の方向に、所定のピッチで移動させ、移動後の位置でそのサーチ枠が占める枠内の画像部分の色分布を抽出する。サーチ範囲のサーチを終了した場合（すなわち、同色部分が見つからなかった場合）にはＷ５に遷移する。
【００７１】
ステップＷ１：（現在のサーチ枠内の画像部分の色の保持）
制御部２０はサーチ枠が占める現在位置の枠内の画像部分の色分布を抽出し、その画像部分の座標と共にＲＡＭ２２に保持する。
【００７２】
ステップＷ２：（サーチ枠によるサーチ範囲のサーチ）
制御部２０は、予め用意されている複数サイズのサーチ枠２７０−１，２７０−２，２７０−３、…（図１７（ａ））のうち、最大サイズのサーチ枠から順に、図１７（ｂ）に示すようにサーチ範囲として決定された画像部分を所定の方向に、所定のピッチで移動させ、移動後の位置でそのサーチ枠が占める枠内の画像部分の色分布を抽出する。サーチ範囲のサーチを終了した場合（すなわち、同色部分が見つからなかった場合）にはＷ５に遷移する。
【００７３】
また、サーチ枠のサーチ順序は右回り又は左回り、或いは右（左）から左（右）又は、上（下）から下（上）に平行に順次サーチするようにしてもよいが、被写体とのバランス上、撮像情報の最適な表示位置は経験上定まっている（例えば、右下隅）ので、撮像情報を表示するのに最適な位置（座標）を優先順位の順に予めテーブル（例えば、優先表示位置テーブル）に登録しておき、優先表示に従って登録された順にサーチするようにしてもよい。なお、実施例では移動ピッチは縦方向に移動させる場合にはサーチ枠の縦方向の長さの１／５、横方向に移動させる場合はサーチ枠の横方向の１／１０としたがこれに限定されない。
【００７４】
ステップＷ３：（移動前／移動後のサーチ枠内の色の比較）
制御部２０はＲＡＭ２２に保持している色分布（移動前の画像部分の色分布）と上記ステップＷ２で抽出した色分布とを比較し、移動前／移動後の色分布の差がゼロか或いは所定の閾値内にあるときそのサーチ枠の占める画像部分（移動前の画像部分か移動後の画像部分または中間部分のいずれかでよいが、実施例では移動前の部分とした）を同色部分と判別してステップＷ４に遷移する。この場合、サーチ枠のサイズを画像情報表示枠のサイズと同じにし、最大サーチ枠から順にサーチを行なうので、実際の略同色部分がサーチ枠の占める領域のサイズより大きくても、撮像情報の表示上は不都合は生じない。また、移動前／移動後の色分布の差が所定の閾値以上の場合には同色でないとみなしてステップＷ１に戻る。
【００７５】
ステップＷ４：（配置位置の座標取得）
制御部２０は上記ステップＷ３で略同色部分と判定された部分の座標値（すなわち、上記ステップＷ１で保持した移動前のサーチ枠で占められた画像部分の座標値）を撮像情報の配置位置（表示位置）として取得し、Ｐ６に遷移する。
【００７６】
ステップＷ５：（表示位置＝固定位置）
上記ステップＷ２でサーチ範囲のサーチを終了した場合は、予め設定された固定位置を配置位置としてその座標を撮像情報の配置位置としてその座標値をＲＡＭ２２に一時記憶する。
【００７７】
ステップＷ６：（表示色＝固定色）
また、制御部２０は撮像情報の表示色を固定色（例えば、標準表示色）とし、その色コードをＲＡＭ２２に一時記憶してＰ８に遷移する。
【００７８】
この方法によれば、画像の所定の隅（通常は、図１３（ｂ）に示すように、撮像情報を表示する際にもっとも表示バランスのよい右下隅部分２７１）からフレームに沿って特定方向（左回り或いは右回り、又は、右下隅２７１→右上隅２７２、右下隅２７１→左下隅２７４、右上隅２７２→左上隅２７３、左上隅２７３→左下隅２７４）といったように最大のフレーム枠２７０−１をまず移動させながら前後の色を判別する動作を繰り返し、同色部分が見つからない場合には次の大きさのサーチ枠２７０−２を用いて同様な判別動作を行ない、最初に見つかった同色部分を撮像情報の配置位置としてその座標値を取得することができる。
【００７９】
このようにサーチ枠を用いて同色部分の判別を行なうと、同色部分の判定が簡単となる。また、画像部分に優先順位をつけてサーチし、最初に見つかった同色部分を撮像情報の配置位置として決定できるので被写体とのバランスのよい撮像情報の配置を実現することができる。
【００８０】
なお、上記実施例では移動前のサーチ枠内の色と移動後のサーチ枠内の色を比較したが、単純にサーチ枠内が略同色か否かを順次判断するようにしてもよい。
【００８１】
＜実施例３＞
[撮像情報の表示色と異なる色の部分の判別及び表示位置の決定]
上記各同色部分の判別方法では同色部分を判別したが、サーチ領域から撮像情報の表示色と異なる色部分を検出するようにしてもよい。この場合、図３のプロセスＰ６及びの撮像情報の表示色決定処理は不要となる。
【００８２】
図１４は、撮像情報の標準表示色と異なる画像部分の自動判別方法及び表示位置の自動決定方法の一実施例を示すフローチャートであり、図１５はその説明図である。
【００８３】
ステップＸ１：（コントラストの平滑処理）
制御部２０は、デジタルカメラ１００のＤＲＡＭ１４（又は、パソコン等の外部画像処理装置のメモリ）に記憶された画像のうち、サーチ範囲として決定された画像部分のコントラスト（輝度）の分布を平滑処理する。
【００８４】
ステップＸ２：（コントラストの平坦な部分の抽出）
制御部２０は、上記ステップＸ１で得た分布のうち、コントラストの差が閾値以内の部分をコントラストが平坦な部分として取り出す。なお、所定面積以上の平坦部分がない場合にはＸ７に遷移する。
【００８５】
ステップＸ３：（色分布の比較）
制御部２０は、前記ステップＸ２で抽出されたコントラストが平坦な部分の色分布（図１５（ａ），（ｂ））を調べ、所定の面積内のＲ，Ｇ，Ｂ比率の差ｒ，ｇ，ｂが閾値δ以内か否かを判定し、閾値γ以上の場合（図１５（ｂ））にはその部分を異なる色の部分と判定してＸ４に遷移する。そうでない場合（図１５（ａ））にはＸ２に戻って次のコントラストが平坦な部分を抽出する。
【００８６】
ステップＸ４：（異なる色部分のうちの略同色部分の抽出）
制御部２０は、上記ステップＸ３で異なる色部分と判定された画像部分のうちの略同色部分を抽出する。
【００８７】
ステップＸ５：（配置位置の選択）
制御部２０は、上記ステップＸ４で抽出した略同色部分のうち最大面積の部分を選択して取り出す。なお、上記ステップＸ４で異なる色の画像色部分が抽出されなかった場合にはＸ７に遷移する。
【００８８】
ステップＸ６：（配置位置の座標取得）
制御部２０は、上記ステップＸ５で得た最大面積部分に内接する矩形枠を求め、そのうちの最大の枠の座標値を求め、撮像情報の配置位置としてその座標値をＲＡＭ２２に一時記憶してＰ７に移行する。
【００８９】
ステップＸ７：（配置位置＝固定位置）
上記ステップＸ２で所定面積以上の異なる色の画像部分がない場合、或いは上記ステップＸ４で抽出された異なる色の画像部分がない場合には、予め設定された固定位置を配置位置としてその座標を撮像情報の配置位置としてその座標値をＲＡＭ２２に一時記憶する。
【００９０】
ステップＸ８：（表示色＝固定色）
また、制御部２０は撮像情報の表示色を固定色（例えば、標準表示色）とし、その色コードをＲＡＭ２２に一時記憶する。
【００９１】
ステップＸ９：（表示サイズ＝固定サイズ）
また、制御部２０は撮像情報の表示サイズを固定サイズ（標準表示サイズ）とし、そのサイズ（コード）をＲＡＭ２２に一時記憶する。
【００９２】
なお、実施例２の場合と同様にサーチ枠を用いて撮像情報の標準表示色と異なる略同色部分をサーチするようにしてもよい。
【００９３】
＜実施例４＞
[表示サイズの決定方法]
図３のプロセスＰ５で決定した画像情報の表示位置のサイズが撮像情報を表わす文字や図形の標準表示サイズより小さい場合や撮像情報の標準サイズより大きい場合には、文字や図形の表示サイズを表示位置のサイズと合うように表示サイズを縮小又は拡大して配置する必要がある。
【００９４】
図１６は表示色および表示サイズの自動決定方法の一実施例を示すフローチャートであり、図３（ａ）のプロセスＰ６及びＰ７でのデジタルカメラ１００の動作例を示すフローチャートである。
【００９５】
ステップＹ１：（背景と撮像情報の表示色の比較、判定）
制御部２０は、図３（ａ）のプロセスＰ４の同色部分の判別処理で得た略同色部分の色と撮像情報の標準表示色を比較して同一色の場合にはＹ２に遷移し、そうでない場合にはＹ３に遷移する。なお、略同色部分の色と撮像情報の標準表示色の同一色か否かの判定は、例えば、略同色部分の色分布と撮像情報の標準色の色分布の差を求めそれが所定値内であれば同一とするようにして判定することができる。
【００９６】
ステップＹ３：（略同色部分の面積の比較）
制御部２０は前記略同色部分の面積を所定値（Ａ＞Ｂ＞Ｃ＞Ｄ）と比較し、略同色部分の面積＞Ａの場合にはＹ４に遷移し、Ａ≦略同色部分の面積＜Ｃの場合にはＹ５に遷移し、Ｃ≦略同色部分の面積＜Ｄの場合にはＹ６に遷移し、略同色部分の面積≦の場合にはＹ７に遷移する。
【００９７】
Ｙ４：（サイズの拡大）
制御部２０はプロセスＰ５で決定された表示位置に撮像情報を構成する文字や図形データを略同色部分の面積に応じて拡大して写し込めるように、拡大後のサイズ（標準サイズに対する比率）を求め、ＲＡＭ２２に一時記憶してＰ８に遷移する。なお、拡大サイズは、例えば、面積Ｃを標準として面積Ｃと略同色部分の比率を求めそれを拡大比率とするようにしてもよい。
【００９８】
Ｙ５：（標準表示サイズの設定）
制御部２０はプロセスＰ５で決定された表示位置に撮像情報を構成する文字や図形データを標準表示サイズで写し込めるように、標準表示サイズ（比率＝１）をＲＡＭ２２に一時記憶してＰ８に遷移する。
【００９９】
Ｙ６：（サイズの縮小）
制御部２０はプロセスＰ５で決定された表示位置に撮像情報を構成する文字や図形データを略同色部分の面積に応じて縮小して写し込めるように、拡大後のサイズ（標準サイズに対する比率）を求め、ＲＡＭ２２に一時記憶してＰ８に遷移する。なお、縮小サイズは、例えば、面積Ｃを標準として面積Ｃと略同色部分の比率を求めそれを縮小比率とするようにしてもよい。
【０１００】
Ｙ７：（固定表示サイズの設定）
制御部２０はプロセスＰ５で決定された表示位置に撮像情報を構成する文字や図形データを固定表示サイズで写し込めるように、固定表示サイズ（標準表示サイズに対する比率）をＲＡＭ２２に一時記憶してＰ８に遷移する。なお、固定表示サイズ＝標準表示サイズとしてもよい。
【０１０１】
また、サーチ枠を移動して略同色部分をサーチする例（実施例２）では標準サイズのサーチ枠と撮像情報の標準表示枠の大きさを同一とし、他のサーチ枠との大きさは標準サーチ枠とのサイズの比率で決めるようにしておくことにより、サーチ枠と略同色部分が見つかった場合（又はサーチ枠と色の異なる部分が見つかった場合）のサーチ枠の大きさから、撮像情報の拡大（縮小）倍率がわかる。従って、これを撮像情報記録ファイル（或いはＨＴＭＬファイル）に記録することができ、表示サイズの決定を簡単に行なうことができる。
【０１０２】
また、本発明による重畳情報の配置は動画表示、動画再生、スルー画像表示後に行うようにしてもよい。この場合、刻々と変化する動画の変化に応じて撮像情報等の重畳情報の配置位置、サイズ、色等を順次変更していくようにしてもよい。
【０１０３】
また、撮像情報は、ユーザが入力するメモ、タイトル等の文字情報、キャラクタ情報を含む。また、撮像情報に限定されず、例えば、撮像画像に関係のない（撮像画像に対応づけられていない）、ヘルプ情報、操作情報、アイコン等の状態情報でもよく、要は、表示画像上に重畳表示できる情報であればよい。
【０１０４】
また、実施例では被写体の輪郭を抽出して輪郭外部をサーチ範囲としたり、画像内の合焦状態をみてフォーカスがあっていない部分をサーチ範囲としてこのサーチ範囲の中の略同一部分を抽出し、撮像情報を配置するようにしたが、単純に、被写体の輪郭を抽出し、この輪郭外部、あるいは画像内の合焦状態をみてフォーカスがあっていない部分、つまり、被写体ではない部分に撮像情報を被写体にかさならない大きさになるようにサイズ変更制御して配置するようにしてもよい。 以上発明のいくつかの実施例について説明したが本発明は上記実施例に限定されるものではなく、種々の変形実施が可能であることはいうまでもない。
【０１１２】
【発明の効果】
本発明によれば、画像の撮像時に取得した日付等の画像関連情報を、当該撮影画像中のメインの被写体と重ならないように合成配置する際の位置を決定する位置情報と共に当該撮像情報と対応づけて記録するようにしたので、その撮影画像を再生表示する際は、必要に応じて前記画像関連情報をその画像内のメイン被写体にかからない最適な位置に合成して再生表示することができる。
【図面の簡単な説明】
【図１】本発明の撮像情報配置方法を適用可能なデジタルカメラの回路構成例を示すブロック図である。
【図２】ＤＲＡＭのレイアウト例を示す図である。
【図３】本発明に基づく撮像情報配置のプロセスを示すプロセスチャートである。
【図４】撮像情報とその配置データ等を格納する撮像情報記録ファイルの説明図である。
【図５】サーチ範囲及び配置された撮像情報の説明図である。
【図６】サーチ領域の自動検出方法の一実施例を示すフローチャートである。
【図７】サーチ領域の自動検出方法の説明図である。
【図８】サーチ領域の自動検出方法の一実施例を示すフローチャートである。
【図９】サーチ領域の自動検出方法の説明図である。
【図１０】サーチ領域の設定方法の一実施例を示すフローチャートである。
【図１１】同色部分の自動判別方法及び表示位置の自動決定方法の説明図である。
【図１２】同色部分の自動判別方法及び表示位置の自動決定方法の一実施例を示すフローチャートである。
【図１３】同色部分の自動判別方法及び表示位置の自動決定方法の説明図である。
【図１４】撮像情報の標準表示色と異なる画像部分の自動判別方法及び表示位置の自動決定方法の一実施例を示すフローチャートである。
【図１５】撮像情報の標準表示色と異なる画像部分の自動判別方法の説明図である。
【図１６】表示色及び表示サイズの自動決定方法の一実施例を示すフローチャートである。
【符号の説明】
４０ 表示装置
７５−１，…，７５−６ 日時１，…，シャッタースピード１（撮像情報）
１００ デジタルカメラ（電子カメラ装置）
２１０ 被写体
２２２ 被写体の輪郭
２２５，２２５’ 略同色部分
３００ 撮像情報

Claims (3)

1. 被写体を撮像し、撮像画像を記録する電子カメラ装置において、
   被写体撮像時における日付等の撮像関連情報を取得する情報取得手段と、
   前記被写体撮像時の撮像画像を分析することにより、メインの被写体部分を判別すると共に、このメイン被写体部分以外の領域のうちで、前記撮像関連情報を配置づけるのに最適な位置を判断して決定する位置決定手段と、
   前記情報取得手段で取得した撮像関連情報と前記位置決定手段で決定された配置位置を示す配置位置情報とを含む撮像情報を、前記撮像画像と対応づけて記録すると共に、当該撮像画像を記録する記録手段と、
   を備え、
   前記記録された撮像画像を再生する際は、当該撮像画像に対応づけて記録された前記撮像情報を取り出し、その撮像情報に含まれる撮像関連情報を当該撮像情報に含まれる配置位置情報に基づいて前記撮像画像上に合成して再生表示するようにした、ことを特徴とする電子カメラ装置。
2. 被写体を撮像し、撮像画像を記録し、被写体撮像時における日付等の撮像関連情報を取得し、前記被写体撮像時の撮像画像を分析することにより、メインの被写体部分を判別すると共に、このメイン被写体部分以外の領域のうちで、前記撮像関連情報を配置づけるのに最適な位置を判断して決定し、前記取得した撮像関連情報と前記決定された配置位置を示す配置位置情報とを含む撮像情報を、前記撮像画像と対応づけて記録すると共に、当該撮像画像を記録する、ことを特徴とする情報配置方法。
3. 被写体を撮像し、撮像画像を記録するコンピュータに、
   被写体撮像時における日付等の撮像関連情報を取得する手段と、
   前記被写体撮像時の撮像画像を分析することにより、メインの被写体部分を判別すると共に、このメイン被写体部分以外の領域のうちで、前記撮像関連情報を配置づけるのに最適な位置を判断して決定する手段と、
   前記取得した撮像関連情報と前記決定された配置位置を示す配置位置情報とを含む撮像情報を、前記撮像画像と対応づけて記録すると共に、当該撮像画像を記録する手段と、
   を機能させるプログラムを記録したコンピュータ読み取り可能な記録媒体。

Images