JP2014042109A - 画像処理装置、制御方法、プログラム及び記憶媒体 - Google Patents

Abstract

【課題】撮影情報の表示品位を高く保ちつつ、データを記憶する記憶手段の記憶容量の低減と、装置本体の制御回路の処理負荷の軽減が可能な画像処理装置を提供する。
【解決手段】撮像手段と第１表示部１２２〜第３表示部１２４を備えるビデオカメラにおいて、画像撮影時の撮影情報を重畳させる画像出力先として第２表示部１２３又は第３表示部１２４の一方を選択し、撮影画像を第１表示部１２２〜第３表示部１２４のそれぞれの解像度に応じた解像度にリサイズして第１表示部１２２〜第３表示部１２４へ出力し、第１表示部１２２と選択された表示部のそれぞれに出力される画像に撮影情報を表した情報表示イメージを第１表示部１２２と選択された表示部のそれぞれの解像度に応じた解像度で個別に重畳し、選択されなかった表示部には撮影画像のみが出力される構成とする。
【選択図】図２

Description

本発明は、画像処理装置及びその制御方法に関し、特に、画像処理装置が備える表示装置に、画像と共に各種情報を表示する際の表示制御技術に関する。

近年、ビデオカメラによる動画撮影時の画像の解像度は、スタンダードデフィニジョン（ＳＤ）サイズからハイデフィニジョン（ＨＤ）サイズへ、さらに４Ｋサイズやスーパーハイビジョン（ＳＨＶ）サイズへと拡大を続けている。なお、４Ｋサイズとは、概ね水平画素数４０００×垂直画素数２０００の画面解像度を持つ動画フォーマットであり、例えば、ＤＣＩ（Ｄｉｇｉｔａｌ Ｃｉｎｅｍａ Ｉｎｉｔｉａｔｉｖｅｓ）によって定義された４０９６×２１６０／２４ｐの解像度が挙げられる。このような動向に合わせて、一般向けテレビにおいてもＨＤテレビだけでなく４Ｋテレビが登場しており、撮影から視聴までの環境が整いつつある。

一方、実際の撮影において撮影者が撮影中の画像の画角や輝度を確認するために、撮像装置の本体には、撮影中の画像を映し出すパネルモニタやビューファインダ等の表示装置が設けられている。また、撮影中の画像の画質等の詳細を確認することができるように、撮影中の画像を比較的大きな外部モニタに出力するための映像出力端子を備えた撮像装置も知られている。いずれの構成でも、画像出力先であるパネルモニタ、ビューファインダ、外部モニタのそれぞれに対して撮影中の画像を表示させる際に、必要に応じて撮影中の各種状態を把握するための情報（以下「撮像情報」という）を重畳表示させる必要がある。

このとき、パネルモニタ、ビューファインダ及び外部モニタはそれぞれに解像度が異なることが多いため、画像出力先に応じて画像をリサイズする必要がある。このようなリサイズを行う際に間引きや補間を行うと、特に諧調が細やかでない撮影画像では、撮影情報を表示する文字等で使用される輝度や色差がはっきりしている直線等に擦れやブレが生じ、或いは、表示が消える等の品位低下が生じる可能性が大きくなる。

この問題を回避するため、予め画像出力先の各解像度に合わせて画像出力先毎に撮影情報の重畳用データを作成しておき、画像出力先に表示される撮影中の画像に、対応する重畳用データで撮影情報を重畳表示する方法が取られることが多い。

これに対して、画像出力先の解像度に応じて品位を保持しつつ撮影情報を画像に重畳表示する方法として、１つのフォントデータから複数の解像度に適応したフォント情報を生成する方法が提案されている（特許文献１参照）。この手法によれば、１つのフォントデータから、小画面用にリサイズを行うときには撮影情報の擦れ等が生じないように線の太いフォントデータを、大画面用にリサイズを行うときには最適なデザインのフォントデータをそれぞれ生成することができる。

特開２００７−２４３９２３号公報

しかし、画像出力先の解像度に合わせて画像出力先毎に撮影情報の重畳用データを作成しておく方法では、画像出力先が増えると作成するデータ量が増えるために、重畳用データを保持するために高記憶容量のＲＯＭ又はＲＡＭが必要になるという問題がある。また、装置本体の制御回路が、重畳用データを画像に重畳するために行う表示信号生成処理の負荷が増大するという問題が生じる。

これに対して、特許文献１に記載された技術では、重畳用データである表示用フォントを記憶するＲＯＭ又はＲＡＭ等の容量を低減することは可能である。

しかしながら、上記特許文献１に記載された方法で作成される表示用フォントは、解像度に完全に適合した表示用フォントではない。そのため、結果的にリサイズが行われたときに表示される撮影情報の品位は、解像度に一致させて重畳用データを作成しておく方法よりも低下する。また、画像出力先毎に撮影情報を表示するためのデータの生成は必要であり、１つのフォントデータから各解像度用のフォントデータを生成する処理と合わせて、装置本体の制御回路の処理負荷が大きくなってしまう。

本発明は、撮影情報の表示品位を高く保ちつつ、データを記憶する記憶手段の記憶容量の低減と、装置本体の制御回路の処理負荷の軽減が可能な画像処理装置を提供することを目的とする。

本発明に係る画像処理装置は、画像を撮像する撮像手段と、本体表示部を含む３以上の画像出力先へ、前記撮像手段により撮像された画像を前記３以上の画像出力先のそれぞれの解像度に応じた解像度にリサイズして同時に出力する出力手段と、前記撮像手段による画像撮影時の撮影情報を、前記３以上の画像出力先のそれぞれの解像度に応じた解像度で、前記３以上の画像出力先のそれぞれに出力される画像に個別に重畳する重畳手段と、前記３以上の画像出力先のうち前記本体表示部を除く複数の画像出力先の中から、前記撮影情報を重畳させる画像出力先を選択させる選択手段と、前記本体表示部に出力される画像及び前記選択手段により選択された画像出力先に出力される画像には前記重畳手段により前記撮影情報を重畳して前記出力手段で出力し、前記選択手段により選択されなかった画像出力先に出力する画像には前記撮影情報を重畳せずに前記出力手段で出力するように制御を行う制御手段と、を備えることを特徴とする。

本発明によれば、撮影情報の表示品位を高く保ちつつ、データを記憶する記憶手段の記憶容量の低減や、装置本体の制御回路の処理負荷の軽減が可能になる。

本発明の実施形態に係る撮像装置の一例であるビデオカメラの構成を示すブロック図である。 図１のビデオカメラを構成するビデオ制御部が備える第１実施形態に係る画像出力処理部の構成を示すブロック図である。 図１のビデオカメラを構成する入力操作部により呼び出された出力設定メニュー画面の表示例である。 図２の画像出力処理部による情報表示イメージの重畳表示処理のフローチャートである。 図４のステップＳ４０４〜４０５により第２表示部と第３表示部に表示される画面の例、及び、第２表示部と第３表示部の両方に情報表示イメージを表示させた場合の第３表示部の表示例である。 図１のビデオカメラを構成するビデオ制御部が備える第２実施形態に係る画像出力処理部の構成を示すブロック図である。 図６の画像出力処理部による情報表示イメージの重畳表示処理のフローチャートである。

以下、本発明の実施形態について、添付図面を参照して詳細に説明する。ここでは、本発明に係る画像処理装置として、撮像装置の一例であるデジタルビデオカメラ（以下「ビデオカメラ」という）を取り上げることとする。

＜第１実施形態＞
［ビデオカメラの構成］
図１は、本発明の実施形態に係るビデオカメラの構成を示すブロック図である。なお、図１のブロック図は、第１実施形態と後述する第２実施形態とで共通する。

ビデオカメラは、撮像手段であるレンズ部１０１と、撮像素子１０２と、撮像素子駆動部１０３とを備える。レンズ部１０１は、被写体像を撮像素子１０２の撮像面上に結像する光学系を構成し、ズーム機能、焦点調節機能及び絞り調節機能を備える。撮像素子１０２は、多数の光電変換素子が２次元的に配列された構成を有し、レンズ部１０１によって結像された被写体の光学像を画素単位の映像信号に変換する。また、撮像素子１０２は、光電変換素子による電荷蓄積時間を調整することによる電子シャッター機能を備える。撮像素子１０２は、例えば、ＣＭＯＳ（Ｃｏｍｐｌｅｍｅｎｔａｒｙ Ｍｅｔａｌ Ｏｘｉｄｅ Ｓｅｍｉｃｏｎｄｕｃｔｏｒ）イメージセンサや、ＣＣＤ（Ｃｈａｒｇｅｄ Ｃｏｕｐｌｅｄ Ｄｅｖｉｃｅ）イメージセンサである。撮像素子駆動部１０３は、カメラ信号処理部１０６の制御するタイミングに従って撮像素子１０２を駆動制御する。

また、ビデオカメラは、ＣＯＳ／ＡＧＣ部１０４と、Ａ／Ｄ（Ａｎａｌｏｇ ｔｏ Ｄｉｇｉｔａｌ）変換部１０５と、カメラ信号処理部１０６とを備える。ＣＤＳ／ＡＧＣ部１０４は、撮像素子１０２からのアナログ映像信号を相関二重サンプリング（ＣＤＳ）してノイズを削減し、後述するシステム制御部１１１の制御に従って、信号レベルのゲイン制御（ＡＧＣ）を行う。Ａ／Ｄ変換器１０５は、ＣＤＳ／ＡＧＣ部１０４からのアナログ映像信号をデジタル映像信号に変換し、カメラ信号処理部１０６に供給する。カメラ信号処理部１０６は、供給されたデジタル映像信号に基づいてＡＦ評価値やＡＥ評価値等を求め、その際に、撮像した画像を信号処理する際のフレームメモリ等として後述する第１記憶部１０７を使用する。

ビデオカメラは、第１記憶部１０７と、第２記憶部１１２と、第３記憶部１１６と、第４記憶部１１９とを備える。ここでは便宜上、第１記憶部１０７はカメラ信号処理に、第２記憶部１１２はビデオ制御に、第３記憶部１１６はシステム制御に、第４記憶部１１９はＣＯＤＥＣにそれぞれ用いられるように、個別に設けられている。但し、これに限定されることなく、これらの４つの記憶部の機能を物理的に１つの記憶装置で実現してもよい。第１記憶部１０７、第２記憶部１１２、第３記憶部１１６及び第４記憶部１１９はそれぞれ、典型的には読み書き可能な半導体メモリによって構成されるが、少なくとも１つが他の記憶装置（ハードディスク等）で構成されてもよい。

ビデオカメラは、レンズ駆動部１０８と、システム制御部１１１と、入力操作部１１３と、計時部１１４とを備える。レンズ駆動部１０８は、システム制御部１１１の制御に従い、レンズ部１０１が有する不図示のモータやアクチュエータ等を駆動し、ズーム倍率やフォーカス調整、露出調整を行う。レンズ駆動部１０８の制御は、システム制御部１１１により、カメラ信号処理部１０６での信号処理結果に基づいて行われる。例えば、ＡＦ制御時には、カメラ信号処理部１０６が求めたＡＦ評価値に基づいてシステム制御部１１１がレンズ駆動部１０８を制御し、レンズ部１０１が備える不図示のフォーカス調整用レンズを駆動制御することで、レンズ部１０１を被写体に合焦させる。

一方、手動でレンズ部１０１の焦点調節を行うマニュアルフォーカスモードが設定されている場合、システム制御部１１１は、撮影者による焦点調節操作を検出する。具体的には、システム制御部１１１は、入力操作部１１３に含まれる、焦点距離の調整用スイッチやレバー、レンズ部１０１の鏡筒外周に設けられたフォーカスリングの操作を検出する。そして、システム制御部１１１は、検出した操作に応じた焦点の移動方向と移動量に基づいてレンズ駆動部１０８を制御し、レンズ部１０１の焦点距離を変更させる。なお、撮影者が操作するスイッチやレバー等によって機械的にレンズ部１０１の焦点距離が変更可能な構成となっている場合には、システム制御部１１１やレンズ駆動部１０８が介在する必要はない。

システム制御部１１１は、例えば、ＣＰＵであり、第３記憶部１１６のＲＯＭに格納されたプログラムを第３記憶部１１６のＲＡＭのワークエリアに展開し、実行することにより、後述する各種の情報表示処理を含む、ビデオカメラの全体的動作を制御する。なお、第３記憶部１１６は、ＲＯＭやＲＡＭを含み、システム制御部１１１が実行するプログラムや各種設定、初期値等を記憶し、システム制御部１１１のワークエリアとして用いられる。

入力操作部１１３は、撮影者がビデオカメラに指示を与えるためのユーザインタフェースであり、キーやボタン、タッチパネル等の入力デバイスを備える。入力操作部１１３は、メニュー操作等により各種の設定を行うときの選択ボタンや決定ボタンを含む。また、静止画撮影用のシャッタボタン、ＭＦリング、ズームスイッチ、絞り調整ダイヤル等も入力操作部１１３に含まれる。計時部１１４は、リアルタイムクロック（ＲＴＣ）とバックアップ電池を備え、システム制御部１１１からの要求に応じて、日時情報を返信する。

ビデオカメラは、ビデオ制御部１１５と、コーデック部１１７と、記録／再生部１２０と、第１表示部１２２と、第２表示部１２３と、第３表示部１２４とを備える。ビデオ制御部１１５は、第１表示部１２２及び第２表示部１２３及び第３表示部１２４に対する色相や彩度、明度の調整と、各種情報の重畳表示を含む表示制御を行い、更に、記録／再生部１２０の制御等を行う。第１表示部１２２、第２表示部１２３及び第３表示部１２４を含む各映像出力系に対する映像信号の解像度変換等もビデオ制御部１１５が行う。また、ビデオ制御部１１５は、撮影情報やユーザ設定メニュー等のＯＳＤ（Ｏｎ Ｓｃｒｅｅｎ Ｄｉｓｐｌａｙ）表示制御を行う。ビデオ制御部１１５は、ビデオベースバンド信号に関する信号処理を行う際のフレームメモリ、ワークメモリ等として、第２記憶部１１２を使用する。なお、第２記憶部１１２は、ビデオ制御部１１５が第１表示部１２２、第２表示部１２３及び第３表示部１２４のそれぞれに表示する映像に重畳するための各表示部の解像度に合わせた重畳用データ生成を行う際のフレームメモリ等としても使用される。

コーデック部１１７は、動画像等の符号化／復号化処理を行う。符号化／復号化の形式としては、例えば、ＭＰＥＧ（Ｍｏｖｉｎｇ Ｐｉｃｔｕｒｅ Ｅｘｐｅｒｔｓ Ｇｒｏｕｐ）−２方式が用いられる。但し、これに限定されず、他の形式や、静止画向けのＪＰＥＧ２０００やＰＮＧ形式等であってもよい。コーデック部１１７は、ビデオ制御部１１５に接続されており、ビデオ制御部１１５からの命令に応じて映像信号の符号化／復号化を実行する。コーデック部１１７が映像信号の符号化／復号化を実行する際には、フレームメモリ等として、第４記憶部１１９を使用する。

記録／再生部１２０は、ビデオ制御部１１５とコーデック部１１７により符号化処理されて記録フォーマットとして処理された記録データを記録媒体の一例であるメモリカード１２１に対して記録し、また、メモリカード１２１から記録データを読み出す。なお、メモリカード１２１は、ビデオカメラの本体に設けられた不図示のカードスロットに対して着脱自在である。

第１表示部１２２、第２表示部１２３及び第３表示部１２４はそれぞれ、表示装置として同様の情報を表示する。ここでは、第１表示部１２２は、本体表示部としてビデオカメラの本体の側面等に開閉可能に設けられる数インチサイズのＬＣＤ等のパネルモニタである。第２表示部１２３は、第１表示部１２２よりも小型の表示装置であり、覗き込み型のファインダ内に設けられているＥＶＦであるとする。第３表示部１２４は、第１表示部１２２よりも大型の外部モニタへの出力を行うためのインタフェース（Ｉ／Ｆ）であり、例えば、ＨＤＭＩやＳＤＩ等の出力端子である。なお、第１表示部１２２、第２表示部１２３及び第３表示部１２４はそれぞれ、撮像素子１０２からの入力映像や拡大映像を表示することができるようになっており、所謂、ビューファインダとして機能する。

［ビデオ制御部１１５の構成］
図２は、ビデオ制御部１１５が備える、第１実施形態に係る画像出力処理部２００の構成を示すブロック図である。ビデオ制御部１１５が備える画像出力処理部２００は、カメラ信号処理部１０６から供給されたカメラ信号に対して、第１表示部１２２と第２表示部１２３の各解像度（出力）に合わせたリサイズ処理を施す第１リサイズ部２０４と第２リサイズ部２０５を有する。なお、第１リサイズ部２０４と第２リサイズ部２０５のそれぞれでリサイズ処理されたカメラ信号は、同時に第１表示部１２２と第２表示部１２３に出力される。

第１リサイズ部２０４でのリサイズ処理に合わせて、システム制御部１１１は、第１表示部１２２の各解像度に合わせた情報表示イメージ２０１を第２記憶部１１２のメモリ領域に書き込む。なお、情報表示イメージ２０１は、画像撮影時の撮影状態や撮影条件を把握するための撮影情報をイメージ化したものであり、後述する情報表示イメージ２０２，２０３も情報表示イメージ２０１に準ずる。

第２表示部１２３に情報表示を行う場合、第２リサイズ部２０５でのリサイズ処理に合わせて、システム制御部１１１は、第２表示部１２３の各解像度に合わせた情報表示イメージ２０２を第２記憶部１１２のメモリ領域に書き込む。第３表示部１２４に情報表示を行う場合、第３表示部１２４の解像度に合わせた情報表示イメージ２０３が第２記憶部１１２のメモリ領域に書き込まれる。

なお、情報表示イメージ２０１〜２０３は、第１表示部１２２〜第３表示部１２４の各解像度に対して整数分の１の比率で生成されている。そのため、情報表示イメージ２０１〜２０３は、第１表示部１２２〜第３表示部１２４の各表示画面上の各表示ドットに対して補間を行うことなく重畳表示することが可能となっている。これにより、ブレや擦れの無い高品位な表示を行うことができる。

画像出力処理部２００は、第１リサイズ部２０４においてリサイズされたカメラ信号上に情報表示イメージ２０１を重畳した画像データを、出力ＩＦ２０６を介して第１表示部１２２へ出力する。同様に、第２リサイズ部２０５においてリサイズされたカメラ信号上に情報表示イメージ２０２を重畳した画像データが、出力ＩＦ２０７を介して第２表示部１２３へ出力される。一方、第３表示部１２４は外部モニタに対する出力であるため、画像出力処理部２００は、カメラ信号上に情報表示イメージ２０３を重畳した画像データを、出力ＩＦ２０８を介して第３表示部１２４へ出力する。

［出力設定メニュー画面］
図３は、入力操作部１１３によりシステム制御部１１１が第３記憶部１１６から呼び出した出力設定メニュー画面の表示例である。ここでは、３つの画像出力先（第１表示部１２２〜第３表示部１２４）のうち、本体表示部である第１表示部１２２を除く第２表示部１２３と第３表示部１２４のいずれか一方を、情報表示イメージを重畳した画像出力先として選択可能となっている。選択されなかった画像出力先には、カメラ信号のみが出力されることとする。第１表示部１２２には、常に、情報表示イメージ２０１が重畳されたカメラ信号が表示される。なお、本実施形態では、画像出力先を第１表示部１２２〜第３表示部１２４の３つとしているが、４以上の画像出力先がある場合には、第１表示部１２２を除く３以上の画像出力先のうちの１つは選択できないようにする。よって、残る２以上の画像出力先が情報表示イメージを重畳した画像出力先として選択可能となる。

図３の出力設定メニュー画面は、情報表示イメージを重畳する画像出力先としてＥＶＦと外部出力のいずれかをユーザが選択するときの画面であり、ここでは、ＥＶＦが選択された状態を示している。ＥＶＦは第２表示部１２３に相当し、外部出力は第３表示部１２４に相当する。出力設定メニュー画面における設定表示４０１は、情報表示イメージの一種であり、カメラ信号の画像４０２に重畳して表示される。設定表示４０１は、第１表示部１２２と、図３の画面上で選択されている画像出力先の両方に重畳表示される。

ユーザが初めて図３の出力設定メニュー画面を開いたときには、デフォルト設定としてＥＶＦ（第２表示部１２３）が選択されている状態となっているものとする。このように、撮影時に接続されているか否かが不明である外部モニタではなく、使用頻度が高く、確実に表示されるＥＶＦで情報表示を行う設定とすることは、ビデオカメラの操作性を高めることに貢献する。

ユーザは、図３の出力設定メニュー画面に対して、入力操作部１１３に備わる十字キー等を操作してカーソル３０３を移動させて情報表示イメージの画像出力先を選択することができる。そして、ユーザは、入力操作部１１３に備わる決定ボタンを押下することで、画像出力先を決定することができる。このような操作により、ＥＶＦに代えて、外部モニタへの情報表示イメージの重畳を実施することができる。

出力設定メニュー画面には、本体表示部（第１表示部１２２）への情報表示は常時ＯＮとなっている旨のガイドが表示されており、本体表示部での情報表示は固定であることが明確となっている。本実施形態では、本体表示部は最も使用頻度が高く、カメラ操作上も情報表示が必須であるため、ユーザが情報表示を行わない表示部として選択することができないようになっている。

出力設定メニュー画面で設定された画像出力先は、第３記憶部１１６に設定値として記録される。また、出力設定メニュー画面で設定された画像出力先が、それまでの画像出力先と異なる場合には、設定が変更された旨（例えば、設定変更フラグを立てる）が第３記憶部１１６のワークメモリに記録される。

［画像出力処理部２００による情報表示イメージの重畳表示処理］
図４は、画像出力処理部２００による情報表示イメージの重畳表示処理のフローチャートである。また、図５は、図４のステップＳ４０４〜４０５により第１表示部１２２〜第３表示部１２４に表示される画面の例と、第２表示部１２３と第３表示部１２４の両方に情報表示イメージを表示させた場合の第３表示部１２４の表示例である。

図４の処理は、ビデオカメラが撮影モードで動作しており、撮像素子１０２が撮像した画像（スルー画像、カメラ信号画像）を、逐次、第１表示部１２２と所定の表示部に表示している際に、一定周期で行う処理である。この処理は、システム制御部１１１が第３記憶部１１６のＲＯＭに格納されたプログラムを、ワークメモリに展開して実行して、画像出力処理部２００の動作を制御することにより実現される。

先ず、ステップＳ４０１では、システム制御部１１１は、第３記憶部１１６を参照して、前回の出力設定メニュー画面の表示で情報表示イメージの画像出力先が変更されたか否か（例えば、設定変更フラグが記録されているか否か）を判定する。システム制御部１１１は、設定が変更されている場合（Ｓ４０１でＹＥＳ）、処理をステップＳ４０２に進め、設定が変更されていない場合（Ｓ４０１でＮＯ）、処理をステップＳ４０３へ進める。

ステップＳ４０２では、システム制御部１１１は、第２表示部１２３用の情報表示イメージ２０２と、第３表示部１２４用の情報表示イメージ２０３をリセットして、画像出力先の切替え前のノイズ等の混入を防止する。システム制御部１１１は、その後、処理をステップＳ４０３へ進める。

ステップＳ４０３では、システム制御部１１１は、第３記憶部１１６を参照し、第１表示部１２２以外の現在の画像出力先の設定（図３の出力設定メニュー画面で設定された画像出力先）が第２表示部１２３であるか否かを判定する。システム制御部１１１は、第２表示部１２３が設定されている場合（Ｓ４０３でＹＥＳ）、処理をステップＳ４０４へ進め、第２表示部１２３が設定されていない（第３表示部１２４が設定されている）場合（Ｓ４０３でＮＯ）、処理をステップＳ４０５へ進める。

ステップＳ４０４では、システム制御部１１１は、第２表示部１２３用の情報表示イメージ２０２の描画処理を行う。これによって、第２表示部１２３には、図５（ｂ）に示すように、図２を参照して説明した情報表示イメージ２０２に対応する情報表示イメージ５０２がカメラ信号５０１に重畳された表示が行われる。一方、第３表示部１２４には図５（ａ）に示すように情報表示イメージの重畳されていない、カメラ信号５０１によるスルー画像だけが表示される。

ステップＳ４０５では、システム制御部１１１は、第３表示部１２４用の情報表示イメージ２０３の描画処理を行う。これによって、第３表示部１２４には、図５（ｂ）に示すような、図２を参照して説明した情報表示イメージ２０３に対応する情報表示イメージ５０２がカメラ信号５０１に重畳された表示が行われる。一方、第２表示部には、図５（ａ）に示すように情報表示イメージの重畳されていない、カメラ信号５０１によるスルー画像だけが表示される。

システム制御部１１１は、ステップＳ４０４，Ｓ４０５の処理の終了後に処理をステップＳ４０６へ進め、ステップＳ４０６では、第１表示部１２２への情報表示イメージ２０１の重畳表示を行い、その後、処理を終了させる。第１表示部１２２には、図５（ｂ）に示すように、情報表示イメージ５０２がカメラ信号５０１に重畳された表示が行われる。

なお、第２表示部１２３の解像度よりも第３表示部１２４の解像度の方が大きい場合（例えば、第２表示部１２３はＷＶＧＡ（８５４×４８０）、第３表示部１２４はＦＨＤ（１９２０×１０８０）である場合、以下の処理を行ってもよい。即ち、図３の出力設定メニュー画面に、画像出力先の選択肢として「ＥＶＦ・外部モニタの両方」、つまり、第２表示部１２３と第３表示部１２４の両方を選択することができるようにする選択肢を追加する。そして、この「ＥＶＦ・外部モニタの両方」が設定された場合、図４の処理では、解像度の低い第２表示部１２３に対する情報表示イメージの重畳処理を実施する。そして、第２表示部１２３に対して生成した情報表示イメージをリサイズすることなくそのまま第３表示部１２４に出力して、カメラ信号に重畳する。

図５（ｃ）には、第２表示部１２３と第３表示部１２４の両方（ＥＶＦ・外部モニタの両方）」に情報表示イメージを表示させた場合の、第３表示部１２４での表示例が示されている。図５（ｃ）には、撮影画像であるカメラ信号５０１に対して、図５（ｂ）と同じ解像度の情報表示イメージ５０３が重畳表示されている。

図５（ｂ），（ｃ）を比較すると、情報表示イメージ５０２の方が情報表示イメージ５０３より大きく見える。しかし、これは、第２表示部１２３よりも第３表示部１２４の方が大きい解像度であるにも関わらず、図５（ｂ），（ｃ）の画面全体を同じ大きさで図示しているからに過ぎない。解像度は第２表示部１２３よりも第３表示部１２４の方が大きいため、情報表示イメージ７０２と情報表示イメージ７０３は同じサイズである。

図５（ｃ）の表示例では、第２表示部１２３へ重畳表示する情報表示イメージがそのまま第３表示部１２４に表示されるため、画面左上に表示が集まり、かつ、画面全体に対して小さい表示となっている。しかし、外部モニタは、一般的に、一定以上の広い表示面積を持つ場合が多く、よって、画面全体に対する情報表示イメージの表示サイズが小さくても、十分に視認が可能である。

第２表示部１２３へ重畳表示する情報表示イメージをそのまま第３表示部１２４に表示させる場合、情報表示イメージのリサイズ処理を必要としないため、情報表示イメージの生成処理が１回で済む。よって、システム制御部１１１の処理負荷を軽減することができる。また、画面構成として、フレーミングにおいて重要となる中央部分を避けて、同じ頂点（表示基準点（原点））を挟む２辺（ここでは、左辺と上辺）に沿って情報表示イメージを集中するレイアウトとしている。これにより、撮影のしやすさを確保している。

仮に、図５（ｂ）で左辺と上辺以外の他の辺である右辺側にも情報表示を行った場合、図５（ｂ）で右辺に沿って表示される情報表示が図５（ｃ）では画面中央付近に表示されることになって撮影画像の視認を妨げてしまう。しかし、本実施形態では、このような問題が生じない。

＜第２実施形態＞
第２実施形態に係るビデオカメラは、第１実施形態に係るビデオカメラと比較すると、ビデオ制御部１１５が有する画像出力処理部の構成のみが異なるため、ここでは、画像出力処理部の構成を中心に説明を行うこととして、他の構成要素の説明を省略する。また、第２表示部１２３の解像度はＱＨＤ（ハイビジョンサイズの１／４の解像度の９６０×５４０）とする。また、第３表示部１２４の解像度は、ＦＨＤ（フルハイビジョンサイズの解像度の１９２０×１０８０）とする。

図６は、ビデオ制御部１１５が備える、第１実施形態に係る画像出力処理部６００の構成を示すブロック図である。図６に示す第１リサイズ部６０４及び第２リサイズ部６０５はそれぞれ、図２に示した第１リサイズ部２０４及び第２リサイズ部２０５と同等である。また、図６に示す出力ＩＦ６０６，６０７，６０８はそれぞれ図２に示した出力ＩＦ２０６，２０７，２０８と同等であり、情報表示イメージ６０１は図２に示した情報表示イメージ２０１と同等である。

画像出力処理部６００では、第１実施形態に係る画像出力処理部２００と比較すると、第２表示部１２３と第３表示部１２４に重畳表示するための情報表示用イメージ６０２が共通のイメージとされて、第２記憶部１１２に記憶されることである。これは、第２表示部１２３と第３表示部１２４の解像度が整数倍の拡大・縮小関係にあるため、ＱＨＤサイズで生成した情報表示イメージを、補間処理を行う必要なく、単純に縦横２倍することによってＦＨＤへ変換することができるからである。このように情報表示用イメージ６０２を共有化することにより、第２表示部１２３と第３表示部１２４のそれぞれでの情報表示用イメージの描画処理を個別に管理する必要がなくなる。そのため、情報表示用イメージの記憶容量を削減することができ、また、解像度に合わせたサイズの文字等の表示用パーツデータの共有化による記憶容量の削減が可能になる。

［画像出力処理部２００による情報表示イメージの重畳表示処理］
図７は、画像出力処理部６００による情報表示イメージの重畳表示処理のフローチャートである。図７の処理は、ビデオカメラが撮影モードで動作しており、撮像素子１０２が撮像した画像（スルー画像、カメラ信号画像）を、逐次、第１表示部１２２と所定の表示部に表示している際に、一定周期で行う処理である。この処理は、システム制御部１１１が第３記憶部１１６のＲＯＭに格納されたプログラムを、ワークメモリに展開して実行することにより画像出力処理部６００の動作を制御することで実現される。

先ず、ステップＳ７０１では、システム制御部１１１は、第３記憶部１１６を参照して、前回の出力設定メニュー画面の表示で情報表示の画像出力先が変更されたか否かを判定する。システム制御部１１１は、設定が変更されている場合（Ｓ７０１でＹＥＳ）、処理をステップＳ７０２に進め、設定が変更されていない場合（Ｓ７０１でＮＯ）、処理をステップＳ７０３へ進める。

ステップＳ７０２では、システム制御部１１１は、第２表示部１２３と第３表示部１２４のうち、情報表示イメージを重畳表示させるように設定された表示部へ情報表示イメージが出力されるようにする。また、システム制御部１１１は、情報表示イメージの重畳表示を行わない表示部へ情報表示イメージが出力されないようにする。ステップＳ７０３では、システム制御部１１１は、第２表示部１２３と第３表示部１２４に重畳表示するための情報表示用イメージ６０２の描画処理を行う。そして、ステップＳ７０４では、システム制御部１１１は、第１表示部１２２用の情報表示イメージ７０１の描画処理を行い、その後、処理を終了させる。

なお、図３の出力設定メニュー画面に、情報表示の画像出力先の選択肢として「ＥＶＦ・外部モニタの両方」が追加され場合には、「ＥＶＦ・外部モニタの両方」が設定されたときには図７の処理を行い、そうでないときに図４の処理を行うようにしてもよい。また、ステップＳ７０１後、ステップＳ７０２の前に、第１表示部１２２が閉じられているかどうかを判定するようにしてもよい。この場合、第１表示部１２２が開かれているなら、処理をステップＳ７０２へ進める。一方、第１表示部１２２が閉じられているなら、情報表示イメージの重畳表示先から第１表示部１２２を除外し、情報表示イメージの重畳表示先を第２表示部１２３及び第３表示部１２４の両方とする。これによって、第１表示部１２２が閉じられて、ユーザが表示画面を見ることができない状況でのシステム制御部１１１の処理負荷を軽減することができる。一方、ユーザは、第２表示部１２３及び第３表示部１２４のいずれかにより、情報表示の内容を確認することができる。

＜その他の実施形態＞
以上、本発明をその好適な実施形態に基づいて詳述してきたが、本発明はこれら特定の実施形態に限られるものではなく、この発明の要旨を逸脱しない範囲の様々な形態も本発明に含まれる。さらに、上述した各実施形態は本発明の一実施形態を示すものにすぎず、各実施形態を適宜組み合わせることも可能である。例えば、上記説明では、システム制御部１１１（ＣＰＵ）が図３及び図６のフローチャートに示した制御をはじめとしてビデオカメラの各種制御を行うとした。ビデオカメラの全体的な制御は、このように１つのハードウェア（ＣＰＵ）が行ってもよいし、複数のハードウェア（ＣＰＵ）が処理を分担する構成であってもよい。

また、上記実施形態では、本発明に係る画像処理装置として、撮像装置の一例であるビデオカメラを取り上げたが、本発明はこれに限定されるものではない。即ち、本発明は、画像を撮影するカメラと、撮影中の画像を表示するための複数の画像出力先（表示装置、外部表示装置に対する出力手段）を備える電子機器に対して適用することができる。例えば、本発明は、カメラを備えた各種の電子機器（デジタルスチルカメラ、パーソナルコンピュータ、ＰＤＡ、携帯電話端末、ゲーム機等）に適用可能である。

本発明は、以下の処理を実行することによっても実現される。即ち、上述した実施形態の機能を実現するソフトウェア（プログラム）をネットワーク又は各種記憶媒体を介してシステム或いは装置に供給し、そのシステム或いは装置のコンピュータ（又はＣＰＵやＭＰＵ等）がプログラムコードを読み出して実行する処理である。この場合、そのプログラム、及び該プログラムを記憶した記憶媒体は本発明を構成することになる。

１０２ 撮像素子
１０６ カメラ信号処理部
１１１ システム制御部
１１２ 第２記憶部
１１３ 入力操作部
１２２ 第１表示部
１２３ 第２表示部
１２４ 第３表示部
２００，６００ 画像出力処理部
２０４，６０４ 第１リサイズ部
２０５，６０５ 第２リサイズ部

Claims (10)

1. 画像を撮像する撮像手段と、
   本体表示部を含む３以上の画像出力先へ、前記撮像手段により撮像された画像を前記３以上の画像出力先のそれぞれの解像度に応じた解像度にリサイズして同時に出力する出力手段と、
   前記撮像手段による画像撮影時の撮影情報を、前記３以上の画像出力先のそれぞれの解像度に応じた解像度で、前記３以上の画像出力先のそれぞれに出力される画像に個別に重畳する重畳手段と、
   前記３以上の画像出力先のうち前記本体表示部を除く複数の画像出力先の中から、前記撮影情報を重畳させる画像出力先を選択させる選択手段と、
   前記本体表示部に出力される画像及び前記選択手段により選択された画像出力先に出力される画像には前記重畳手段により前記撮影情報を重畳して前記出力手段で出力し、前記選択手段により選択されなかった画像出力先に出力する画像には前記撮影情報を重畳せずに前記出力手段で出力するように制御を行う制御手段と、を備えることを特徴とする画像処理装置。
2. 前記選択手段は、前記３以上の画像出力先のうち前記本体表示部を除く複数の画像出力先の中から、少なくとも１つの画像出力先は選択できないようにすることを特徴とする請求項１記載の画像処理装置。
3. 前記制御手段は、前記本体表示部へ画像を出力しないように前記出力手段を制御した場合には、前記３以上の画像出力先のうち前記本体表示部を除く複数の画像出力先の中から前記選択手段によって選択されなかった画像出力先の少なくとも１つに対して出力する画像には前記重畳手段により前記撮影情報を重畳して前記出力手段で出力するように制御を行うこと特徴とする請求項１又は２記載の画像処理装置。
4. 前記重畳手段は、前記３以上の画像出力先のうち前記本体表示部を除く複数の画像出力先に出力される画像に対して共通する撮影情報を重畳させ、
   前記選択手段において、前記３以上の画像出力先のうち前記本体表示部を除く複数の画像出力先に前記共通する撮影情報の前記重畳手段による重畳を行うか否かの選択が可能となっていることを特徴とする請求項１乃至３のいずれか１項に記載の画像処理装置。
5. 前記共通する撮影情報は、同じ解像度の撮影情報であることを特徴とする請求項４記載の画像処理装置。
6. 前記撮影情報は、前記３以上の画像出力先のうち前記本体表示部を除く複数の画像出力先のそれぞれの表示基準点を挟む２辺に沿ってレイアウトされ、他の辺に沿って表示されないようにレイアウトされていることを特徴とする請求項５記載の画像処理装置。
7. 前記重畳手段は、前記３以上の画像出力先のうち前記本体表示部を除く複数の画像出力先のそれぞれに対して、それぞれの解像度に応じて前記撮影情報のサイズを整数倍した異なるサイズの撮影情報を重畳することを特徴とする請求項４に記載の画像処理装置。
8. 画像を撮像する撮像手段と、本体表示部を含む３以上の画像出力先とを備える画像処理装置の制御方法であって、
   前記３以上の画像出力先のうち前記本体表示部を除く複数の画像出力先の中から、撮影情報を重畳させる画像出力先を選択させる選択ステップと、
   前記撮像手段により撮像された画像を前記３以上の画像出力先のそれぞれの解像度に応じた解像度にリサイズして、前記３以上の画像出力先へ同時に出力する出力ステップと、
   前記撮像手段による画像撮影時の撮影情報を、前記本体表示部と前記選択ステップで選択された画像出力先のそれぞれの解像度に応じた解像度で、前記本体表示部と前記選択ステップで選択された画像出力先のそれぞれに出力される画像に個別に重畳する重畳ステップと、
   前記本体表示部に出力する画像及び前記選択ステップで選択された画像出力先に出力する画像には前記重畳ステップにより前記撮影情報を重畳して出力し、前記選択ステップで選択されなかった画像出力先に出力する画像には前記撮影情報を重畳せずに出力するように制御を行う制御ステップと、を有することを特徴とする画像処理装置の制御方法。
9. 画像を撮像する撮像手段と、本体表示部を含む３以上の画像出力先とを備える画像処理装置の制御方法をコンピュータに実行させるためのプログラムであって、
   前記制御方法は、
   前記３以上の画像出力先のうち前記本体表示部を除く複数の画像出力先の中から、撮影情報を重畳させる画像出力先を選択させる選択ステップと、
   前記撮像手段により撮像された画像を前記３以上の画像出力先のそれぞれの解像度に応じた解像度にリサイズして、前記３以上の画像出力先へ同時に出力する出力ステップと、
   前記撮像手段による画像撮影時の撮影情報を、前記本体表示部と前記選択ステップで選択された画像出力先のそれぞれの解像度に応じた解像度で、前記本体表示部と前記選択ステップで選択された画像出力先のそれぞれに出力される画像に個別に重畳する重畳ステップと、
   前記本体表示部に出力する画像及び前記選択ステップで選択された画像出力先に出力する画像には前記重畳ステップにより前記撮影情報を重畳して出力し、前記選択ステップで選択されなかった画像出力先に出力する画像には前記撮影情報を重畳せずに出力するように制御を行う制御ステップと、を有することを特徴とするプログラム。
10. 請求項９記載のプログラムを格納したことを特徴とするコンピュータで読み取り可能な記憶媒体。