JP2024016622A - 撮像装置およびその制御方法 - Google Patents

Abstract

【課題】表示する映像を素早く切り替えることが可能な撮像装置およびその制御方法を提供すること。【解決手段】撮像素子と、撮像素子を用いて得られた本線映像と、外部から入力される外部映像とを選択的に出力する出力部を有する撮像装置である。撮像装置は、出力部からの外部映像の出力が有効に設定されている場合、本線映像の解像度を外部映像の解像度と等しくなるように変更する。【選択図】図４

Description

本発明は、撮像装置およびその制御方法に関する。

例えばテレビ放送に用いられる撮像装置には、他の撮像装置が出力している映像や、放送中の映像など、外部から入力される映像を表示する機能を有するものがある（特許文献１）。このような、外部から入力される映像はリターン映像と呼ばれ、自身が撮影して出力する映像は本線映像と呼ばれる。特許文献１に記載されている撮像装置は、本線映像とリターン映像とを並行してユーザが確認できるよう、別個の表示装置に表示している。

特開２０２０－１２７２４５号公報

本線映像とリターン映像とを１つの表示装置に同時に、もしくは切り替え可能に表示することで、表示装置の数および撮像システムの規模を削減することができる。しかしながら、本線映像とリターン映像とを１つの表示装置に表示する場合、表示する映像に応じて、映像のフォーマットおよび／または表示装置の設定を切り替える必要がある。そのため、映像の切り替えを指示してから表示されるまでにタイムラグが生じうる。映像を頻繁に切り替えする場合、このタイムラグにより使い勝手が悪くなる可能性がある。

本発明はその一態様において、表示する映像を素早く切り替えることが可能な撮像装置およびその制御方法を提供する。

上述の目的は、撮像素子と、撮像素子を用いて得られた本線映像と、外部から入力される外部映像とを選択的に出力する出力手段と、出力手段から出力される映像を制御する制御手段と、を有し、制御手段は、出力手段からの外部映像の出力が有効に設定されている場合、本線映像の解像度を外部映像の解像度と等しくなるように変更し、出力手段からの外部映像の出力が有効に設定されていない場合、本線映像の解像度を変更しない、ことを特徴とする撮像装置によって達成される。

本発明によれば、表示する映像を素早く切り替えることが可能な撮像装置およびその制御方法を提供することができる。

実施形態に係る撮像装置の機能構成例を示すブロック図 実施形態に係る撮像装置に接続可能な拡張ユニットの機能構成例を示すブロック図 撮像装置と拡張ユニットの接続形態に関する模式図 実施形態における解像度の自動制御処理の一例を示すフローチャート 実施形態におけるフレームレートの自動制御処理の一例を示すフローチャート 実施形態における表示制御処理の一例を示すフローチャート 実施形態における外部出力設定画面の例を示す図

以下、添付図面を参照して本発明をその例示的な実施形態に基づいて詳細に説明する。なお、以下の実施形態は特許請求の範囲に係る発明を限定しない。また、実施形態には複数の特徴が記載されているが、その全てが発明に必須のものとは限らず、また、複数の特徴は任意に組み合わせられてもよい。さらに、添付図面においては、同一若しくは同様の構成に同一の参照番号を付し、重複した説明は省略する。

なお、以下の実施形態では、本発明をビデオカメラのような撮像装置で実施する場合に関して説明する。しかし、本発明は撮像機能と、映像信号の外部入力機能とを有する任意の電子機器でも実施可能である。このような電子機器には、撮像装置に加え、コンピュータ機器（パーソナルコンピュータ、タブレットコンピュータ、メディアプレーヤ、ＰＤＡなど）、スマートフォン、ゲーム機などが含まれる。これらは例示であり、本発明は他の電子機器でも実施可能である。

図１は、本発明の実施形態に係る撮像装置１００の機能構成例を示すブロック図である。内部バス１３０に接続されている機能ブロック間では、内部バス１３０を通じてデータおよび制御信号を通信可能である。

メモリ１０２は、例えばＤＲＡＭなどの揮発性メモリであってよい。メモリ１０２は、ＣＰＵ１０１および画像処理部１０４の処理に用いられる。また、メモリ１０２は、撮像画像のバッファメモリや、ディスプレイ１０５のビデオメモリとしても用いられる。

不揮発性メモリ１０３は一般的にはＥＥＰＲＯＭなどの半導体メモリである。しかし、不揮発性メモリ１０３はハードディスクなどの記憶装置を含みうる。不揮発性メモリ１０３には、ＣＰＵ１０１が実行するプログラム、撮像装置１００の設定値、メニュー画面などに用いるＧＵＩ（Ｇｒａｐｈｉｃａｌ Ｕｓｅｒ Ｉｎｔｅｒｆａｃｅ）データなどが記憶される。

ＣＰＵ１０１は、プログラムを実行可能な１つ以上のマイクロプロセッサを意味する。ＣＰＵ１０１は、不揮発性メモリ１０３に記憶されたプログラムをメモリ１０２にロードして実行する。ＣＰＵ１０１は、プログラムに従って各機能ブロックの動作を制御することにより、後述する表示制御処理を含む、撮像装置１００の各種の機能を実現する。

画像処理部１０４は、メモリ１０２に格納された画像データに対して予め定められた画像処理を適用し、用途に応じた信号や画像データを生成したり、各種の情報を取得および／または生成したりする。画像処理部１０４は例えば特定の機能を実現するように設計されたＡＳＩＣ(Application Specific Integrated Circuit)のような専用のハードウェア回路であってよい。あるいは画像処理部１０４はＤＳＰ(Digital Signal Processor)やＧＰＵ(Graphics Processing Unit)のようなプロセッサがソフトウェアを実行することで特定の機能を実現する構成であってもよい。画像処理部１０４は、取得もしくは生成した情報やデータを、用途に応じてＣＰＵ１０１やメモリ１０２などに出力する。

画像処理部１０４が適用可能なする画像処理には、例えば、前処理、色補間処理、補正処理、検出処理、データ加工処理、評価値算出処理、特殊効果処理などが含まれうる。
前処理には、信号増幅、基準レベル調整、欠陥画素補正、Ａ／Ｄ変換などが含まれうる。
色補間処理は、撮像素子にカラーフィルタが設けられている場合に行われ、画像データを構成する個々の画素データに含まれていない色成分の値を補間する処理である。色補間処理はデモザイク処理とも呼ばれる。
補正処理には、ホワイトバランス調整、階調補正、撮像光学系の光学収差に起因する画像劣化の補正（画像回復）、撮像光学系の周辺減光の影響の補正、色補正などの処理が含まれうる。
検出処理には、特徴領域（たとえば顔領域や人体領域）やその動きの検出、人物の認識処理などが含まれうる。
データ加工処理には、信号形式の変換、領域の切り出し（トリミング）、合成、スケーリング（解像度変換）、符号化および復号、画像データを格納したファイルデータの生成などの処理が含まれうる。表示用画像データや記録用画像データの生成もデータ加工処理に含まれる。
評価値算出処理には、自動焦点検出（ＡＦ）に用いる信号や評価値の生成、自動露出制御（ＡＥ）に用いる評価値の生成などの処理が含まれうる。ＡＦ処理およびＡＥ処理はＣＰＵ１０１が実行する。
特殊効果処理には、ボケ効果の付加、色調の変更、リライティングなどの処理などが含まれうる。
なお、これらは画像処理部１０４が適用可能な処理の例示であり、画像処理部１０４が適用する処理を限定するものではない。

ディスプレイ１０５は、ＣＰＵ１０１の制御に基づいて、本線映像、外部映像（リターン映像）、記録媒体１０９に記憶された映像などを表示する。ディスプレイ１０５はまた、メニュー画面など、撮像装置１００の設定値の確認や変更のためのＧＵＩ画面などを表示する。ＣＰＵ１０１は、後述する切り替えボタン１０７の操作により、ディスプレイ１０５に対し、本線映像とリターン映像との一方を選択的に出力する。

図１にはディスプレイ１０５が撮像装置１００に内蔵された構成と示している。しかし、ディスプレイ１０５は外部装置であってもよい。ディスプレイ１０５が外部装置の場合、撮像装置１００はディスプレイ１０５が接続されたインターフェースに、ディスプレイ１０５に表示するための映像信号を出力する。

操作部１０６は、キーボード、マウス、ダイヤル、ジョイスティック、タッチセンサ、タッチパッドなど、ユーザ操作を受け付ける１つ以上の入力デバイスを有する。ディスプレイ１０５がタッチディスプレイの場合、ディスプレイ１０５が有するタッチパネルは操作部１０６に含まれる。後述する、ディスプレイ１０５や外部表示装置に表示する映像をリターン映像と本線映像との間で切り替える切り替えボタン１０７もまた操作部１０６に含まれる。なお、切り替えボタン１０７は、映像の出力系統ごとに設けられてもよい。

なお、タッチパネルは、接触の有無および接触を検出した座標を出力する。ＣＰＵ１０１は、タッチパネルの出力に応じて、フリックなど公知のジェスチャ入力を認識することもできる。ＣＰＵ１０１は、操作部１０６に含まれる入力デバイスに対する操作を監視し、操作が検出されると、操作された入力デバイスに割り当てられている機能および操作に応じた動作を実行する。

記録媒体Ｉ／Ｆ１０８は、メモリカードなどの着脱可能な記録媒体１０９とアクセスするためのインターフェースである。ＣＰＵ１０１は、画像処理部１０４が生成し、メモリ１０２に格納する記録用画像データを、記録媒体Ｉ／Ｆ１０８を通じて、記録媒体１０９にデータを記録する。また、ＣＰＵ１０１は、記録媒体１０９に記録されている画像データを読み出し、メモリ１０２に格納する。

外部Ｉ／Ｆ１１０は、外部機器との通信インターフェースである。外部Ｉ／Ｆ１１０は、１つ以上の通信規格に準拠し、通信規格に応じたコネクタや送受信器を有する。ＵＳＢ(Universal Serial BUS)、ＨＤＭＩ（登録商標）(High-Definition Multimedia Interface)、ＳＤＩ(Serial Digital Interface)が代表的な通信規格である。なお、外部Ｉ／Ｆ１１０は、無線ＬＡＮやＢｌｕｅｔｏｏｔｈ（登録商標）などの無線通信規格に準拠してもよい。また、後述する拡張ユニットは外部Ｉ／Ｆ１１０に接続される。ＣＰＵ１０１は、外部Ｉ／Ｆ１１０を通じて、外部機器と映像信号、音声信号、制御信号の入出力を行う。

外部入力部１１１は例えばＳＤＩ端子やＨＤＭＩ端子である。外部入力部１１１にはリターン映像（外部映像）が入力されうる。外部出力部１１２は例えばＳＤＩ端子やＨＤＭＩ端子である。ＣＰＵ１０１は、後述する切り替えボタン１０７の操作により、外部出力部１１２から本線映像とリターン映像との一方を選択的に出力することができる。

撮像部１１３は、撮影光学系、ＣＣＤセンサやＣＭＯＳセンサなどの撮像素子、シャッタ、絞りなどを有するカメラユニットである。撮影光学系は、ズームレンズ、フォーカスレンズなどの可動レンズを含む。撮像部１１３は、絞りや可動レンズを駆動する駆動回路、撮像素子の動作を制御するタイミングジェネレータ、撮像素子から読み出されたアナログ画像信号をＡ／Ｄ変換するＡ／Ｄ変換器などの周辺回路も有する。撮像部１１３の動作はＣＰＵ１０１が制御する。撮像部１１３は撮影により得られた画像データをメモリ１０２に順次格納する。

図２は、撮像装置１００の機能を拡張する拡張ユニット２００の機能構成例を示すブロック図である。拡張ユニット２００は、撮像装置１００の外部Ｉ／Ｆに直接接続されてもよいし、他の拡張ユニットを介して撮像装置１００の外部Ｉ／Ｆに間接的に接続されてもよい。なお、機能の拡張とは、新たな機能の付加であっても、既存の機能の強化であってもよい。

拡張ユニット２００は、撮像装置１００からディスプレイおよび撮像部を取り除いた機能構成を有する。図２に示された機能ブロックの動作は、図１において同じ名称を有する機能ブロックの動作と同様であるため、個々の機能ブロックに関する説明は省略する。なお、撮像装置１００と拡張ユニット２００とで同じ名称を有する機能ブロックであっても、拡張ユニット２００が有する機能ブロックの方が多機能および／または高性能でありうる。

なお、拡張ユニットは外部Ｉ／Ｆ２０９を複数有しうる。この場合、外部Ｉ／Ｆ２０９の１つに撮像装置１００が接続され、他の１つに他の拡張ユニットが接続されうる。このように、撮像装置１００には拡張ユニットが複数接続されうる。

図３は、撮像装置１００と拡張ユニット２００の接続パターンの例を表した図である。図３（Ａ）は、撮像装置１００のみの状態を表している。図３（Ｂ）は、拡張ユニット２００を撮像装置１００に接続した状態を表した図である。撮像装置１００の外部Ｉ／Ｆ１１０と拡張ユニット２００の外部Ｉ／Ｆ２０７を接続することで拡張ユニット２００と撮像装置１００を接続することが可能である。

以下、撮像装置１００において外部入力部１１１と外部出力部１１２に関して実施する動作ついての記載は、
・拡張ユニット２００の外部入力部２１０と外部出力部２１１、
・撮像装置１００の外部入力部１１１と拡張ユニット２００の外部出力部２１１、
・と拡張ユニット２００の外部入力部２１０と撮像装置１００の外部出力部１１２、
のいずれの組み合わせについても実施可能である。同様に、複数の拡張ユニット２００が撮像装置１００に接続されている場合には、任意の外部入力部と外部出力部との組み合わせについて実施することができる。

次に、図４に示すフローチャートを用いて、撮像装置１００が表示装置に出力する本線映像の解像度をＣＰＵ１０１が自動制御する処理に関して説明する。なお、ここで解像度を制御する本線映像は撮像装置１００または拡張ユニット２００に接続された表示装置に表示するための本線映像である。スイッチャーに出力したり、記録に用いたりる本線映像の解像度は本処理では変更しない。したがって、以下の説明において、外部出力部１１２から出力される本線映像は、外部出力部１１２に接続された外部表示装置に出力する本線映像である。また、ディスプレイ１０５に出力する本線映像の解像度についても、外部出力部１１２から出力される表示用の本線映像の解像度と同様に制御することができる。以下の説明において、表示装置はディスプレイ１０５と外部表示装置との両方を意味する。

なお、表示用の本線映像の解像度は、ＣＰＵ１０１が自動制御する代わりに、ユーザが設定してもよい。表示用の本線映像の解像度を自動制御するか、ユーザ設定に従うかは、メニュー画面などを通じてユーザが変更可能であってよい。ＣＰＵ１０１は、撮像素子から読み出す画素や加算読み出しの有無などを制御することにより、本線映像の解像度を制御することができる。

表示用の本線映像の解像度を自動制御する場合、ＣＰＵ１０１は、リターン映像の出力が「有効」に設定されている（表示装置にリターン映像が表示されうる状態にある）か否かに応じて、表示用の本線映像の解像度を制御する。具体的には、ＣＰＵ１０１は、リターン映像の出力が「有効」に設定されていない（「無効」に設定されている）場合には、リターン映像の解像度にかかわらず、表示用の本線映像の解像度は変更しない。

一方、リターン映像の出力が「有効」に設定されている場合、ＣＰＵ１０１は、表示用の本線映像の解像度をリターン映像の解像度と同じになるように変更する。これにより表示装置に表示する映像を本線映像とリターン映像との間で切り替える際に映像および表示装置の解像度変換が発生しなくなる。そのため、映像の素早い切り替えが可能となり、使い勝手が向上する。

表示用の本線映像の解像度の自動制御処理は様々なタイミングで実行することができる。例えば、撮像装置１００の起動時、図７の出力設定画面（後述）によりリターン映像の出力に関する設定が行われた際、外部入力部１１１へのリターン映像の入力を検出した際、メニュー画面を通じたユーザ操作などがあるが、これらに限定されない。

Ｓ４０１でＣＰＵ１０１は、メモリ１０２に保存されている現在のリターン出力設定を読み込む。なお、ＣＰＵ１０１は、不揮発性メモリ１０３や記録媒体１０９から現在のリターン出力設定を読み込んでもよい。

次に、Ｓ４０２でＣＰＵ１０１は、直近に実行したＳ４０４でメモリ１０２に保存した前回のリターン出力設定を読み込む。なお、表示用の本線映像の解像度の自動制御処理を表示装置ごとに実行する場合、ＣＰＵ１０１は、現在の処理対象である表示装置について直近に実行したＳ４０４でメモリ１０２に保存した前回のリターン出力設定を読み込む。なお、現在のリターン出力設定と同様、ＣＰＵ１０１は、不揮発性メモリ１０３や記録媒体１０９から前回のリターン出力設定を読み込んでもよい。また、例えば前回のリターン出力設定が存在しない場合などには、ＣＰＵ１０１はＳ４０２をスキップしてＳ４０３を実行してもよい。

Ｓ４０３でＣＰＵ１０１は、Ｓ４０１で取得した現在のリターン出力設定とＳ４０２で取得した前回のリターン出力設定とを比較し、同じであるか否かを判定する。ＣＰＵ１０１は、両者が同じ（リターン出力設定に変化がない）と判定されれば表示用の本線映像の解像度を変更することなく自動制御処理を終了する。一方、ＣＰＵ１０１は、両者が同じでない（リターン出力設定に変化がある）と判定されればＳ４０４を実行する。なお、Ｓ４０２を実行していない場合、あるいはＳ４０２で前回のリターン出力設定が取得できなかった場合、ＣＰＵ１０１は、リターン出力設定に変化があると見なし、Ｓ４０４を実行する。

Ｓ４０４でＣＰＵ１０１は、メモリ１０２（不揮発性メモリ１０３や記録媒体１０９でもよい）に保存されている前回のリターン出力設定をＳ４０１で取得した現在のリターン出力設定で更新する。前回のリターン出力設定が保存されていない場合は現在のリターン出力設定を単純に保存すればよい。なお、Ｓ４０２を実行しない場合には、Ｓ４０４も実行しなくてよい。

Ｓ４０５でＣＰＵ１０１は、Ｓ４０１で取得した現在のリターン出力設定が「有効」であるか否かを判定し、リターン出力設定が有効であると判定されればＳ４０６を、判定されなければＳ４０８を実行する。

Ｓ４０６でＣＰＵ１０１は、外部出力部１１２から出力する表示用の本線映像の解像度をメモリ１０２（不揮発性メモリ１０３や記録媒体１０９でもよい）に保存する。なお、Ｓ４０６を実行することなくＳ４０７を実行してもよい。

Ｓ４０７でＣＰＵ１０１は、外部出力部１１２から出力する表示用の本線映像の解像度を、リターン映像の解像度と等しくなるように設定し、解像度の自動制御処理を終了する。この後、ＣＰＵ１０１は、設定された解像度、つまり、リターン映像と同じ解像度で、本線映像を外部出力部１１２から出力する。なお、リターン映像の解像度は、外部入力部１１１に入力されているリターン映像から取得することができる。また、一度取得したリターン映像の解像度を不揮発性メモリまたは記録媒体１０９に保存しておき、次回以降は保存された解像度を参照してもよい。また、リターン映像の解像度をユーザに入力させてもよい。ＣＰＵ１０１は他の方法でリターン映像の解像度を取得してもよい。

外部出力部１１２から出力する表示用の映像の解像度が、出力先の表示装置の解像度と連動するように設定されている場合がある。この場合、ＣＰＵ１０１はまず解像度の連動を無効としてから、表示用の本線映像の解像度を変更する。

また、ＣＰＵ１０１は、本線映像の出力先の装置が表示装置か否かを判定し、表示装置と判定された場合のみ、本線映像の解像度をリターン映像の解像度に合わせるようにしてもよい。

さらに、表示用の本線映像の解像度を自動制御するかどうかを、出力系統（端子）ごとに設定可能としてもよい。この場合、ＣＰＵ１０１は、解像度の自動制御が可能に設定されていない出力系統から出力する本線映像については解像度を変更しない。

Ｓ４０８でＣＰＵ１０１は、外部出力部１１２から出力する表示用の本線映像の解像度を、リターン映像の解像度に合わせる前の解像度に設定し（戻し）、解像度の自動制御処理を終了する。この後、ＣＰＵ１０１は、設定（戻）された解像度で、本線映像を外部出力部１１２から出力する。リターン映像の解像度に合わせる前の解像度は、例えば直近にＳ４０６で保存された解像度である。なお、Ｓ４０６の直近の実行時に部出力部の解像度が取得できない場合は、ＣＰＵ１０１はＳ４０８の処理をすることなく外部出力部の解像度設定の処理を終了してもよい。

なお、Ｓ４０１～Ｓ４０３でリターン出力設定の変化の有無を判定する代わりに、外部入力部１１１にリターン映像が入力されているか否かを判定してもよい。
外部入力部１１１にリターン映像が入力されている場合、ＣＰＵ１０１は、Ｓ４０７を実行し、入力されているリターン映像の解像度を、表示用の本線映像の解像度として設定することができる。

一方、外部入力部１１１にリターン映像が入力されていない場合も、ＣＰＵ１０１は、Ｓ４０７を実行することができる。ただし、この場合ＣＰＵ１０１は、直近に入力されたリターン映像の解像度や、ユーザが入力したリターン映像の解像度（例えば１９２０×１０８０や２０４８×１０８０）を、表示用の本線映像の解像度として設定することができる。

なお、例えば撮像装置１００複数の表示装置が接続され、個々の表示装置が別個のリターン映像と本線映像とを切り替えて表示可能である場合、ＣＰＵ１０１は表示装置もしくはリターン映像ごとに表示用の本線映像の解像度の自動制御処理を実行してもよい。

このように、本線映像の解像度の自動制御処理を実行し、本線映像をリターン映像と同じ解像度で出力する。そして、その後、切り替えボタン１０７への操作により、本線映像からリターン映像への切り替えが指示されたことに応じて、本線映像からリターン映像の出力に切り替える。このとき、本線映像とリターン映像の解像度が同じであるため、リターン映像への出力切り替え時には、解像度変更処理が不要となるため、素早く映像を切り替えることが可能となる。

図４の処理のうち、Ｓ４０１、Ｓ４０２は起動時に実行し、Ｓ４０３以降は他のタイミングで実行してもよい。例えば、メニュー画面を介してのユーザ操作により、リターン映像を出力するインターフェース（端子）の設定や、リターン映像の出力の有効／無効の設定が変更された場合に、Ｓ４０３以降の処理を実行するようにしてもよい。

次に、図５に示すフローチャートを用いて、撮像装置１００の本線映像のフレームレートをＣＰＵ１０１が自動制御する処理に関して説明する。

なお、本線映像のフレームレートは、ＣＰＵ１０１が自動制御する代わりに、ユーザが設定してもよい。本線映像のフレームレートを自動制御するか、ユーザ設定に従うかは、メニュー画面などを通じてユーザが変更可能であってよい。

本線映像のフレームレートを自動制御する場合、ＣＰＵ１０１は、リターン映像が入力されているか、リターン映像と本線映像との位相同期が完了していれば、本線映像のフレームレートをリターン映像のフレームレートに合わせる。

本線映像のフレームレートの自動制御処理は様々なタイミングで実行することができる。例えば、撮像装置１００の起動時、リターン映像の出力に関する設定が行われた際、外部入力部１１１へのリターン映像の入力を検出した際、メニュー画面を通じたユーザ操作などがあるが、これらに限定されない。

Ｓ５０１でＣＰＵ１０１は、現在の外部入力部１１１の状態を取得する。

次に、Ｓ５０２でＣＰＵ１０１は、直近に実行したＳ５０４でメモリ１０２に保存した前回の外部入力部１１１の状態を読み込む。ＣＰＵ１０１は、不揮発性メモリ１０３や記録媒体１０９から前回の外部入力部１１１の状態を読み込んでもよい。また、例えば前回の外部入力部１１１の状態が存在しない場合などには、ＣＰＵ１０１はＳ５０２をスキップしてＳ５０３を実行してもよい。

Ｓ５０３でＣＰＵ１０１は、Ｓ５０１で取得した現在の外部入力部１１１の状態とＳ５０２で取得した前回の外部入力部１１１の状態とを比較し、同じであるか否かを判定する。ＣＰＵ１０１は、両者が同じ（外部入力部１１１の状態に変化がない）と判定されれば本線映像のフレームレートフレームを変更することなく自動制御処理を終了する。一方、ＣＰＵ１０１は、両者が同じでない（外部入力部１１１の状態に変化がある）と判定されればＳ５０４を実行する。なお、Ｓ５０２を実行していない場合、あるいはＳ５０２で前回の外部入力部１１１の状態が取得できなかった場合、ＣＰＵ１０１は、リターン出力設定に変化があると見なし、Ｓ５０４を実行する。

Ｓ５０４でＣＰＵ１０１は、メモリ１０２（不揮発性メモリ１０３や記録媒体１０９でもよい）に保存されている前回の外部入力部１１１の状態をＳ５０１で取得した現在の外部入力部１１１の状態で更新する。前回の外部入力部１１１の状態が保存されていない場合は現在の外部入力部１１１の状態を単純に保存すればよい。なお、Ｓ５０２を実行しない場合には、Ｓ５０４も実行しなくてよい。

Ｓ５０５でＣＰＵ１０１は、Ｓ５０１で取得した現在の外部入力部１１１の状態から、リターン映像が入力されているか否かを判定し、さらに、図７のリターン出力設定画面でリターン映像の出力が有効に設定されたかを判断する。ＣＰＵ１０１は、リターン映像が入力されており、かつ、リターン映像の出力が有効に設定されていると判定されればＳ５０６を実行し、判定されなければ本線映像のフレームレートフレームを変更することなく自動制御処理を終了する。

Ｓ５０６でＣＰＵ１０１は、本線映像の位相とリターン映像の位相との同期状態を取得する。

Ｓ５０７でＣＰＵ１０１は、Ｓ５０６で取得した同期状態から、本線映像とリターン映像との位相同期処理が完了しているか否かを判定する。ＣＰＵ１０１は、本線映像とリターン映像との位相同期処理が完了していると判定されればＳ５０８を実行し、判定されなければ本線映像のフレームレートフレームを変更することなく自動制御処理を終了する。

Ｓ５０８でＣＰＵ１０１は、本線映像の現在のフレームレートをメモリ１０２（不揮発性メモリ１０３や記録媒体１０９でもよい）に保存する。なお、ＣＰＵ１０１は、Ｓ５０８の処理をスキップしてＳ５０９を実行してもよい。

Ｓ５０９でＣＰＵ１０１は、外部入力部１１１に入力されているリターン映像のフレームレートを取得する。なお、リターン映像のフレームレートは、外部入力部１１１に入力されているリターン映像から取得することができる。また、一度取得したリターン映像のフレームレートを不揮発性メモリまたは記録媒体１０９に保存しておき、次回以降は保存されたフレームレートを参照してもよい。また、リターン映像のフレームレートをユーザに入力させてもよい。ＣＰＵ１０１は他の方法でリターン映像のフレームレートを取得してもよい。

Ｓ５１０でＣＰＵ１０１は、本線映像のフレームレートを、Ｓ５０９で取得したリターン映像のフレームレートと等しくなるように設定する。その後、ＣＰＵ１０１は、撮像装置１００のフレームレート設定の処理を終了する。なお、本線映像のフレームレートをリターン映像のフレームレートと等しくなるように設定した後、本線映像とリターン映像との位相が非同期になりうる。この場合、ＣＰＵ１０１は、本線映像のフレームレートを、Ｓ５０８で保存したフレームレートに戻してもよい。

次に、図６に示すフローチャートを用いて、撮像装置１００における本線映像とリターン映像の表示制御処理に関して説明する。複数の表示装置が利用可能な場合、この処理は表示装置ごとに実行することができる。この処理は、切り替えボタン１０７の操作を受付可能な状態、例えば、撮影スタンバイ状態や記録用の撮影の実行中などに繰り返し実行することができる。

Ｓ６０１でＣＰＵ１０１は、Ｓ４０１と同様に、メモリ１０２に保存されている現在のリターン出力設定を読み込む。なお、ＣＰＵ１０１は、不揮発性メモリ１０３や記録媒体１０９から現在のリターン出力設定を読み込んでもよい。

Ｓ６０２でＣＰＵ１０１は、Ｓ６０１で取得した現在のリターン出力設定が「有効」であるか否かを判定し、リターン出力設定が有効であると判定されればＳ６０３を、判定されなければＳ６１２を実行する。

Ｓ６０３でＣＰＵ１０１は、切り替えボタン１０７の状態を読み込む。
Ｓ６０４でＣＰＵ１０１は、Ｓ６０３で読み込んだ切り替えボタン１０７の状態から、切り替えボタン１０７が操作（例えば押下）されているか否かを判定する。ＣＰＵ１０１は、切り替えボタン１０７が操作されていると判定されればＳ６０５を実行し、判定されなければＳ６１２を実行する。

本実施形態では、切り替えボタン１０７が操作されている間はリターン映像を表示し、切り替えボタン１０７が操作されていない間は本線映像を表示するように制御するものとする。切り替えボタン１０７の操作と表示する映像との対応関係を逆にしてもよい。また、切り替えボタン１０７が押下されるごとにリターン映像と本線映像とを切り替えるようにしてもよい。いずれの場合でもＣＰＵ１０１は、リターン映像を表示する場合にはＳ６０５を実行し、本線映像を表示する場合にはＳ６１２を実行する。

Ｓ６０５でＣＰＵ１０１は、本線映像の位相とリターン映像の位相との同期状態を取得する。

Ｓ６０６でＣＰＵ１０１は、Ｓ６０５で取得した同期状態から、本線映像とリターン映像との位相同期処理が完了しているか否かを判定する。ＣＰＵ１０１は、本線映像とリターン映像との位相同期処理が完了していると判定されればＳ６０７を実行し、判定されなければＳ６１１を実行する。

Ｓ６０７でＣＰＵ１０１は、外部入力部１１１に入力されているリターン映像の解像度とフレームレートを取得する。
Ｓ６０８でＣＰＵ１０１は、表示用の本線映像の解像度とフレームレートを取得する。

Ｓ６０９でＣＰＵ１０１は、Ｓ６０７で取得したリターン映像の解像度およびフレームレートと、Ｓ６０８で取得した表示用の本線映像の解像度およびフレームレートとを比較し、解像度およびフレームレートが同じであるか否かを判定する。ＣＰＵ１０１は、リターン映像と表示用の本線映像とが同じ解像度およびフレームレートを有すると判定されればＳ６１０を、判定されなければＳ６１１を実行する。図４、図５の処理により、解像度、フレームレートの自動制御処理が実行されている場合は、リターン映像と表示用の本線映像とが同じ解像度およびフレームレートを有した状態となる。

Ｓ６１０でＣＰＵ１０１は、ディスプレイ１０５または外部出力部１１２に接続されている外部表示装置に対し、外部入力部１１１に入力されているリターン映像の出力を開始する。リターン映像を出力する表示装置は、例えば外部入力部１１１おいてリターン映像が入力されている端子に応じて定まるものとする。そして、ＣＰＵ１０１は、表示制御処理を終了する。なお、ＣＰＵ１０１はＳ６０４から処理を繰り返してもよい。リターン映像と表示用の本線映像とが同じ解像度およびフレームレートのため、変換処理などを実行せずに、素早く本線映像からリターン映像への切り替えが可能となる。

Ｓ６１１でＣＰＵ１０１は、ディスプレイ１０５または外部出力部１１２に接続されている外部表示装置に対し、リターン映像でも本線映像でもない、予め定められた映像（例えば黒映像）の出力を開始する。この予め定められた映像は、リターン映像が表示できないことを示す。黒映像に代えて、あるいは黒映像に重畳して、リターン映像が表示できないことを示すメッセージを表示するようにしてもよい。なお、ＣＰＵ１０１は、Ｓ６１１の代わりにＳ６１２を実行してもよい。この場合、切り替えボタン１０７の操作によって表示される映像が切りかわらないため、ＣＰＵ１０１は、リターン映像が表示できないことを示すメッセージを本線映像に重畳表示する。位相の同期処理が完了したことに応じて、リターン映像を出力するようにしてもよい。

Ｓ６１２でＣＰＵ１０１は、リターン映像の出力が無効に設定されているため、ディスプレイ１０５または外部出力部１１２に接続されている外部表示装置に対し、表示用の本線映像を出力する。そして、ＣＰＵ１０１は、表示制御処理を終了する。なお、ＣＰＵ１０１はＳ６０４から処理を繰り返してもよい。

図７は、撮像装置１００がディスプレイ１０５に表示する、メニュー画面の一部である、リターン出力設定画面の一例を示す。ユーザは、外部出力部１１２に接続された外部表示装置に対して、外部入力部１１１に入力されるリターン映像の出力を有効とするか無効とするかを、リターン出力設定画面を通じて設定することができる。設定は外部出力部１１２が備えるインターフェース（出力端子）ごとに行うことができる。リターン出力設定画面において、まず、インターフェースの選択画面（不図示）が表示される。インターフェースの選択画面には、リターン映像の出力対象として設定可能なインターフェースと、リターン映像の出力の有効／無効についての現在の設定とが表示されている。

ユーザが操作部１０６を操作して、リターン映像の出力の有効／無効の設定を変更するインターフェースを選択する。インターフェースを選択すると、選択したインターフェースに対応するリターン映像の出力有効／無効設定画面を表示する。本実施形態では、外部出力部１１２がＨＤＭＩ端子およびＳＤＩ端子を１つずつ有しているものとする。図７（Ａ）に示すリターン出力設定画面７０１はＨＤＭＩ端子に対するリターン映像の出力有効／無効の設定を行う画面である。また、図７（Ｂ）に示すリターン出力設定画面７０５はＳＤＩ端子に対するリターン映像の出力有効／無効の設定を行う画面である。

Ｓ６１１でＣＰＵ１０１は、ディスプレイ１０５または外部出力部１１２に接続されている外部表示装置に対し、リターン映像でも本線映像でもない、予め定められた映像（例えば黒映像）の出力を開始する。この予め定められた映像は、リターン映像が表示できないことを示す。黒映像に代えて、あるいは黒映像に重畳して、リターン映像が表示できないことを示すメッセージを表示するようにしてもよい。なお、ＣＰＵ１０１は、Ｓ６１１の代わりにＳ６１２を実行してもよい。この場合、切り替えボタン１０７の操作によって表示される映像が切りかわらないため、ＣＰＵ１０１は、リターン映像が表示できないことを示すメッセージを本線映像に重畳表示する。

Ｓ６１２でＣＰＵ１０１は、ディスプレイ１０５または外部出力部１１２に接続されている外部表示装置に対し、表示用の本線映像を出力する。そして、ＣＰＵ１０１は、表示制御処理を終了する。なお、ＣＰＵ１０１はＳ６０４から処理を繰り返してもよい。

図７は、撮像装置１００がディスプレイ１０５に表示する、リターン出力設定画面の一例を示す。ユーザは、外部出力部１１２に接続された外部表示装置に対して、外部入力部１１１に入力されるリターン映像の出力を有効とするか無効とするかを、リターン出力設定画面を通じて設定することができる。設定は外部出力部１１２が備えるインタフェース（出力端子）ごとに行うことができる。ここでは、外部出力部１１２がＨＤＭＩ端子およびＳＤＩ端子を１つずつ有しているものとする。図７（Ａ）に示すリターン出力設定画面７０１はＨＤＭＩ端子に対する設定を行う画面である。また、図７（Ｂ）に示すリターン出力設定画面７０５はＳＤＩ端子に対する設定を行う画面である。

ＣＰＵ１０１は、例えば操作部１０６に含まれる方向キーもしくはタッチパネルの操作に応じて、「有効」ボタン７０３と「無効」ボタン７０４のいずれかを選択状態とする。そして、ＣＰＵ１０１は、例えば操作部１０６に含まれる決定ボタンの操作を検出した時点で選択状態にあるボタンに応じた値を設定する。

以上説明したように、リターン映像の出力が「有効」に設定されている（表示装置にリターン映像が表示されうる状態にある）場合、表示用の本線映像の解像度をリターン映像の解像度と同じになるように変更するようにした。これにより表示装置に表示する映像を本線映像とリターン映像との間で切り替える際に、映像および表示装置の解像度変換が発生しなくなる。そのため、映像の素早い切り替えが可能となり、使い勝手が向上する。

（その他の実施形態）
本発明は、上述の実施形態の１以上の機能を実現するプログラムを、ネットワーク又は記憶媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータにおける１つ以上のプロセッサーがプログラムを読出し実行する処理でも実現可能である。また、１以上の機能を実現する回路（例えば、ＡＳＩＣ）によっても実現可能である。

本実施形態の開示は、以下の画像処理装置、撮像装置、画像処理方法、およびプログラムを含む。
（項目１）
撮像素子と、
前記撮像素子を用いて得られた本線映像と、外部から入力される外部映像とを選択的に出力する出力手段と、
前記出力手段から出力される映像を制御する制御手段と、を有し、
前記制御手段は、
前記出力手段からの前記外部映像の出力が有効に設定されている場合、前記本線映像の解像度を前記外部映像の解像度と等しくなるように変更し、
前記出力手段からの前記外部映像の出力が有効に設定されていない場合、前記本線映像の解像度を変更しない、
ことを特徴とする撮像装置。
（項目２）
前記出力手段からの前記外部映像の出力を有効に設定する設定手段と、
前記出力手段から出力する映像を、前記本線映像から前記外部映像に切り替えるための切替指示を入力する指示手段を有し、
前記制御手段は、
前記設定手段により前記外部映像の出力が有効に設定されたことに応じて、前記外部映像の解像度と等しい解像度で前記本線映像を前記出力手段から出力するように制御し、
前記設定手段により前記外部映像の出力が有効に設定されている状態で、前記指示手段により前記切替指示が入力されたことに応じて、前記出力手段から前記外部映像を出力するように制御する、
ことを特徴とする項目１に記載の撮像装置。
（項目３）
前記制御手段はさらに、
前記出力手段からの前記外部映像の出力が有効に設定されている場合、前記本線映像のフレームレートを前記外部映像のフレームレートと等しくなるように変更し、
前記出力手段からの前記外部映像の出力が有効に設定されていない場合、前記本線映像のフレームレートを変更しない、
ことを特徴とする項目１に記載の撮像装置。
（項目４）
前記制御手段は、前記本線映像のフレームレートを、前記本線映像と前記外部映像との位相の同期処理が完了している状態における前記外部映像のフレームレートと等しくなるように変更することを特徴とする項目３に記載の撮像装置。
（項目５）
前記出力手段から出力する映像を、前記本線映像から前記外部映像に切り替えるための切替指示を入力する指示手段を有し、
前記指示手段により前記切替指示が入力されたことに応じて、前記制御手段は、
前記本線映像のフレームレートが前記外部映像のフレームレートと等しくなるように変更されている場合は、前記外部映像に切り替えるように制御し、
前記本線映像のフレームレートが前記外部映像のフレームレートと等しくなるように変更されていない場合は、前記外部映像ではなく、特定の映像に切り替えるように制御する、
ことを特徴とする項目３に記載の撮像装置。
（項目６）
前記撮像装置が複数の前記出力手段を有する場合、前記制御手段は、前記出力手段ごとに、出力される映像を制御することを特徴とする項目１から５のいずれか１項に記載の撮像装置。
（項目７）
前記出力手段が、前記本線映像および前記外部映像とを同じ表示装置に出力することを特徴とする項目１から６のいずれか１項に記載の撮像装置。
（項目８）
前記制御手段は、前記出力手段に表示装置が接続されていない場合には前記出力端子からの出力される映像を制御しないことを特徴とする項目１から７のいずれか１項に記載の撮像装置。
（項目９）
前記制御手段は、前記出力手段から出力する映像の解像度が前記出力手段に接続されている表示装置の解像度と連動する設定がなされている場合には、当該設定を無効にしてから前記本線映像の解像度を前記外部映像の解像度と等しくなるように変更することを特徴とする項目１から８のいずれか１項に記載の撮像装置。
（項目１０）
前記撮像装置に、前記本線映像および前記外部映像が入力される拡張ユニットが接続されている場合、前記制御手段は、前記拡張ユニットが有する出力手段から出力される映像ついて、前記撮像装置が有する前記出力手段から出力される映像に対する制御と同様の制御を実行することを特徴とする項目１から９のいずれか１項に記載の撮像装置。
（項目１１）
前記出力手段からの前記外部映像の出力の設定が有効から無効に変化した場合、前記制御手段は、前記本線映像の解像度を前記外部映像の解像度と等しくなるように変更する前の解像度に戻すことを特徴とする項目１から１０のいずれか１項に記載の撮像装置。
（項目１２）
撮像素子と、
前記撮像素子を用いて得られた本線映像と、外部から入力される外部映像とを選択的に出力する出力手段と、を有する撮像装置が実行する制御方法であって、
前記出力手段からの前記外部映像の出力が有効に設定されているか否かを判定することと、
前記出力手段からの前記外部映像の出力が有効に設定されていると判定された場合、前記本線映像の解像度を前記外部映像の解像度と等しくなるように変更することと、
前記出力手段からの前記外部映像の出力が有効に設定されていないと判定された場合、場合、前記本線映像の解像度を変更しないことと、
を有することを特徴とする撮像装置の制御方法。
（項目１３）
撮像素子と、
前記撮像素子を用いて得られた本線映像と、外部から入力される外部映像とを選択的に出力する出力手段と、を有する撮像装置のコンピュータを、項目１から１１のいずれか１項に記載の撮像装置が有する制御手段として機能させるためのプログラム。

１００…撮像装置、１０１…ＣＰＵ、１０２…メモリ、１０３…不揮発性メモリ、１０４…画像処理部、１０５…ディスプレイ、１０６…操作部、１０７…切り替えボタン、１１０…外部Ｉ／Ｆ、１１１…外部入力部、１１２…外部出力部

Claims (13)

1. 撮像素子と、
   前記撮像素子を用いて得られた本線映像と、外部から入力される外部映像とを選択的に出力する出力手段と、
   前記出力手段から出力される映像を制御する制御手段と、を有し、
   前記制御手段は、
   前記出力手段からの前記外部映像の出力が有効に設定されている場合、前記本線映像の解像度を前記外部映像の解像度と等しくなるように変更し、
   前記出力手段からの前記外部映像の出力が有効に設定されていない場合、前記本線映像の解像度を変更しない、
   ことを特徴とする撮像装置。
2. 前記出力手段からの前記外部映像の出力を有効に設定する設定手段と、
   前記出力手段から出力する映像を、前記本線映像から前記外部映像に切り替えるための切替指示を入力する指示手段を有し、
   前記制御手段は、
   前記設定手段により前記外部映像の出力が有効に設定されたことに応じて、前記外部映像の解像度と等しい解像度で前記本線映像を前記出力手段から出力するように制御し、
   前記設定手段により前記外部映像の出力が有効に設定されている状態で、前記指示手段により前記切替指示が入力されたことに応じて、前記出力手段から前記外部映像を出力するように制御する、
   ことを特徴とする請求項１に記載の撮像装置。
3. 前記制御手段はさらに、
   前記出力手段からの前記外部映像の出力が有効に設定されている場合、前記本線映像のフレームレートを前記外部映像のフレームレートと等しくなるように変更し、
   前記出力手段からの前記外部映像の出力が有効に設定されていない場合、前記本線映像のフレームレートを変更しない、
   ことを特徴とする請求項１に記載の撮像装置。
4. 前記制御手段は、前記本線映像のフレームレートを、前記本線映像と前記外部映像との位相の同期処理が完了している状態における前記外部映像のフレームレートと等しくなるように変更することを特徴とする請求項３に記載の撮像装置。
5. 前記出力手段から出力する映像を、前記本線映像から前記外部映像に切り替えるための切替指示を入力する指示手段を有し、
   前記指示手段により前記切替指示が入力されたことに応じて、前記制御手段は、
   前記本線映像のフレームレートが前記外部映像のフレームレートと等しくなるように変更されている場合は、前記外部映像に切り替えるように制御し、
   前記本線映像のフレームレートが前記外部映像のフレームレートと等しくなるように変更されていない場合は、前記外部映像ではなく、特定の映像に切り替えるように制御する、
   ことを特徴とする請求項３に記載の撮像装置。
6. 前記撮像装置が複数の前記出力手段を有する場合、前記制御手段は、前記出力手段ごとに、出力される映像を制御することを特徴とする請求項１に記載の撮像装置。
7. 前記出力手段が、前記本線映像および前記外部映像とを同じ表示装置に出力することを特徴とする請求項１に記載の撮像装置。
8. 前記制御手段は、前記出力手段に表示装置が接続されていない場合には前記出力手段から出力される映像を制御しないことを特徴とする請求項１に記載の撮像装置。
9. 前記制御手段は、前記出力手段から出力する映像の解像度が前記出力手段に接続されている表示装置の解像度と連動する設定がなされている場合には、当該設定を無効にしてから前記本線映像の解像度を前記外部映像の解像度と等しくなるように変更することを特徴とする請求項１に記載の撮像装置。
10. 前記撮像装置に、前記本線映像および前記外部映像が入力される拡張ユニットが接続されている場合、前記制御手段は、前記拡張ユニットが有する出力手段から出力される映像ついて、前記撮像装置が有する前記出力手段から出力される映像に対する制御と同様の制御を実行することを特徴とする請求項１に記載の撮像装置。
11. 前記出力手段からの前記外部映像の出力の設定が有効から無効に変化した場合、前記制御手段は、前記本線映像の解像度を前記外部映像の解像度と等しくなるように変更する前の解像度に戻すことを特徴とする請求項１に記載の撮像装置。
12. 撮像素子と、
    前記撮像素子を用いて得られた本線映像と、外部から入力される外部映像とを選択的に出力する出力手段と、を有する撮像装置が実行する制御方法であって、
    前記出力手段からの前記外部映像の出力が有効に設定されているか否かを判定することと、
    前記出力手段からの前記外部映像の出力が有効に設定されていると判定された場合、前記本線映像の解像度を前記外部映像の解像度と等しくなるように変更することと、
    前記出力手段からの前記外部映像の出力が有効に設定されていないと判定された場合、場合、前記本線映像の解像度を変更しないことと、
    を有することを特徴とする撮像装置の制御方法。
13. 撮像素子と、
    前記撮像素子を用いて得られた本線映像と、外部から入力される外部映像とを選択的に出力する出力手段と、を有する撮像装置のコンピュータを、請求項１から１１のいずれか１項に記載の撮像装置が有する制御手段として機能させるためのプログラム。

Images