JP6032912B2 - 撮像装置、その制御方法及びプログラム - Google Patents

Description

本発明は、ピーキング機能を有する撮像装置、その制御方法及びプログラムに関する。

従来から、映画用のデジタルシネマカメラでの被写体に対するピント合わせは、ほぼカメラマンによるマニュアルフォーカス（Manual Focus：ＭＦ）操作で行われている。また、ＴＶ局用その他の業務用デジタルビデオカメラをはじめ、民生用のデジタルビデオカメラ等でも、モデルによりオートフォーカス（Auto Focus：ＡＦ）だけでなく、ＭＦにも切り替えることが可能なものがある。

フォーカス調整を容易にするために、フォーカス調整時に、高域成分が強調され、画像の輪郭が明瞭化された撮像画をビューファインダ等に表示する機能が利用されている。この機能は「ピーキング、輪郭補正、エッジ強調、エンハンサ」等と称され、撮影映像から輪郭情報を抽出し、元映像に付加する形で輪郭を強調する技術である。

例えば、特許文献１には、「フォーカス調整用信号生成装置」として、輝度信号からＲＧＢ信号に変換し、ＲＧＢそれぞれに垂直方向又は水平方向にＬＰＦ、ＨＰＦをかけた結果の絶対値のいずれかを加算してフォーカス調整用のＲＧＢ信号を生成することが開示されている。

また、特許文献２には、「ビューファインダ、撮像装置および表示信号生成回路」として、映像信号の三原色ごとに高域成分を検出してピーキング信号を抽出し、その信号に重み付けによる加算を行い、映像信号の三原色に加算することが開示されている。

特許第４４７４６４１号公報 特許第４２４５０１９号公報

そうした中で、撮像素子の大判化や明るいレンズを用いた撮影により、被写界深度の浅い映像撮影も行われ、撮影映像の高解像度化とも相まって、ＭＦ操作によるピント合わせは容易ではなかった。
フォーカスアシスト機能としてのピーキング機能を用いても、撮像素子の多画素化や大判化の一方で、撮像装置の小型化や撮像システム全体のスリム化の要求の中では、撮影の際に必ずしも撮影解像度がそのまま表示可能なビューファインダをはじめとした高解像度大画面の表示装置を使用可能とは限らず、フォーカス確認の視認性は十分ではなかった。

本発明は、このような従来技術の課題に鑑みてなされたものであり、多画素映像のエッジ情報を失うことがなく、厳密なフォーカス合せのためのフォーカスアシスト機能を実現できるようにすることを目的とする。

本発明の撮像装置は、予め定められた複数の色が所定の配列で配置された複数の画素を有し、光学系を介して結像された被写体光学像を映像信号に変換する撮像素子と、前記撮像素子により得られた映像信号に対して、デベイヤおよび縮小処理を行う変換手段と、前記変換手段による前記デベイヤおよび縮小処理が行われる前の前記映像信号を前記複数の色のそれぞれの色に対応する映像信号に振り分け、前記それぞれの色に対応する高周波成分を抽出し、前記抽出した高周波成分からピーキング情報を生成する生成手段と、前記ピーキング情報を、前記変換手段により前記デベイヤおよび縮小処理が行われた映像信号に反映する処理手段とを備えることを特徴とする。

本発明によれば、多画素映像のエッジ情報を失うことがなく、厳密なフォーカス合せのためのフォーカスアシスト機能を実現することができる。

第１の実施形態に係るデジタルシネマカメラの構成例を示すブロック図である。 第１の実施形態におけるピーキング処理のための構成を示すブロック図である。 第１の実施形態においてピーキング処理を行う際のイメージ図である。 第２の実施形態におけるピーキング処理のための構成を示すブロック図である。 第２の実施形態においてピーキング処理を行う際のイメージ図である。 第３の実施形態におけるピーキング処理のための構成を示すブロック図である。 第３の実施形態においてピーキング処理を行う際のイメージ図である。

以下、添付図面を参照して、本発明の好適な実施形態について説明する。
（第１の実施形態）
第１の実施形態に係る撮像装置の一例として、ピーキング機能を有するデジタルシネマカメラについて説明する。ピーキング機能は、フォーカス調整用に映像中のエッジ部分等を強調表示する機能である。
図１のブロック図において、レンズ部１０１は、被写体像を撮像素子１０２の撮像面上に結像する光学系を構成し、ユーザによるマニュアル操作を可能とするズーム機能、焦点調節機能及び絞り調節機能を備える。撮像素子１０２は、多数の光電変換素子が２次元的に配列された構成を有し、レンズ部１０１によって結像された被写体光学像を画素単位の映像信号に変換する。撮像素子１０２は、例えばＣＭＯＳ（Complementary Metal Oxide Semiconductor）イメージセンサやＣＣＤ（Charged Coupled Device）イメージセンサであってよい。撮像素子１０２はまた光電変換素子による電荷蓄積時間を調整することによる電子シャッター機能を備える。

撮像素子駆動部１０３は、カメラ信号処理部１０６の制御するタイミングに従って撮像素子１０２を駆動制御する。ＣＤＳ／ＡＧＣ部１０４は、撮像素子１０２からのアナログ映像信号を相関二重サンプリング（ＣＤＳ）してノイズを削減し、システム制御部１１１の制御に従って信号レベルのゲイン制御（ＡＧＣ）を行う。Ａ／Ｄ変換器１０５は、ＣＤＳ／ＡＧＣ部１０４からのアナログ映像信号をデジタル映像信号に変換し、カメラ信号処理部１０６に供給する。カメラ信号処理部１０６は、システム制御部１１１と連携して、タイミング信号の生成、自動露出（Auto Exposure：ＡＥ）制御、ガンマ調整、オートフォーカス（Auto Focus：ＡＦ）制御等、カメラ撮像系の制御を行う。更に、後述するような撮像映像からの高周波成分抽出とそれによるピーキング情報の重畳もカメラ信号処理部１０６で行うものとする。

本実施形態に係るデジタルシネマカメラには、用途に応じた第１記憶部１０７、第２記憶部１１６、第３記憶部１１２、第４記憶部１１９を備える。ここでは便宜上、第１記憶部１０７がカメラ信号処理用、第２記憶部１１６がビデオ制御用、第３記憶部１１２がシステム制御用、第４記憶部１１９がコーデック用として個別に設けられているものを例にするが、物理的には同じ記憶装置で実現してもよい。第１〜第４記憶部１０７、１１６、１１２、１１９は、典型的には読み書き可能な半導体メモリによって構成されるが、少なくとも１つが他の記憶装置で構成されてもよい。
第１記憶部１０７は、撮像した映像を信号処理する際のフレームメモリ等としてカメラ信号処理部１０６が使用する。レンズ駆動部１０８は、システム制御部１１１の制御に従って、ユーザによるマニュアル操作以外でも、レンズ部１０１の図示しないモータやアクチュエータ等を駆動し、ズーム倍率やフォーカス調整、露出調整を行うことが可能である。レンズ駆動部１０８の制御は、システム制御部１１１がカメラ信号処理部１０６での映像信号の処理結果に基づいて行う。例えばＡＦ制御時には、カメラ信号処理部１０６が求めたＡＦ評価値に基づいてシステム制御部１１１がレンズ駆動部１０８を制御し、レンズ部１０１のフォーカス調整用レンズを駆動制御することで、レンズ部１０１を被写体に合焦させる。

マイク１１０は、周囲の音を記録する際に有効とされ、マイク１１０からの音声信号はカメラ信号処理部１０６に供給される。例えば撮像素子１０２で撮像した映像と併せてマイク１１０からの音声を記録する場合、カメラ信号処理部１０６は両者の時間軸の整合をとってビデオ制御部１１５に供給する。

システム制御部１１１は、例えばＣＰＵにより構成され、第３記憶部１１２に記憶されたプログラムを実行することにより、デジタルシネマカメラの動作全般を制御する。第３記憶部１１２は、例えばＲＯＭやＲＡＭを含み、システム制御部１１１が実行するプログラムや各種設定、初期値等を記憶する。また、第３記憶部１１２は、システム制御部１１１のワークエリアとしても用いられる。

入力操作部１１３は、撮影者がデジタルシネマカメラに指示を与えるためのユーザインタフェースであり、キー、各種操作ボタン等の入力デバイスを備える。計時部１１４は、リアルタイムクロック（ＲＴＣ）とバックアップ電池を備え、システム制御部１１１からの要求に応じて日時情報を返信する。

ビデオ制御部１１５は、第１表示部１２２及び第２表示部１２３への色相、彩度、明度の調整を含む表示制御、アナログライン出力部１２４の出力制御、デジタルデータＩ／Ｆ部１２５の出力制御及び記録／再生部１２０の制御等を行う。第１表示部１２２及び第２表示部１２３を含む各映像出力系に対する映像信号の解像度変換や、ゼブラパターンの重畳等もビデオ制御部１１５が行う。ビデオ制御部１１５は、さらに撮影情報やユーザ設定メニュー、タッチパネル操作に必要な機能ボタン表示等のＯＳＤ（On Screen Display）表示制御も行う。第２記憶部１１６は、ビデオ制御用の記憶部であり、ビデオ制御部１１５がビデオベースバンド信号に関する信号処理を行う際のフレームメモリ、ワークメモリ等として使用する。

Ｈ．２６４コーデック部１１７は、動画像の符号化／復号化処理を行う動画像コーデックの一例である。符号化／復号化の形式はＭＰＥＧ（Moving Picture Experts Group）−２方式をはじめ、他の形式であってよい。同様に、ＪＰＥＧ（Joint Photographic Experts Group）コーデック部１１８は、静止画像の符号化／復号化処理を行う静止画コーデックの一例である。やはり符号化／復号化の形式はＪＰＥＧ２０００やＰＮＧ等、他の形式であってよい。なお、本実施形態では、Ｈ．２６４コーデック部１１７と回路を共用するため、及び再生動画からの静止画撮影機能（キャプチャ機能）を実現するため、ＪＰＥＧコーデック部１１８はビデオ制御部１１５に接続されている。ただし、ＪＰＥＧコーデック部１１８はカメラ信号処理部１０６に直接接続されてもよい。第４記憶部１１９は、コーデック用であり、Ｈ．２６４コーデック部１１７及びＪＰＥＧコーデック部１１８が映像信号の符号化／復号化の際に用いる。

記録／再生部１２０は、ビデオ制御部１１５とＨ．２６４コーデック部１１７又はＪＰＥＧコーデック部１１８により、符号化処理され、記録フォーマットとして処理された記録データを記録媒体１２１に対して記録したり、読み出したりする。なお、記録媒体１２１はメモリカードに限定されず、ＤＶＤや更に高容量の光ディスク、ＨＤＤ、ＳＳＤ等であっても、それぞれに応じた記録再生システムを、別途、構成可能である。

第１表示部１２２及び第２表示部１２３は、いずれも同様の情報を表示することができる。本実施形態において、第１表示部１２２は、例えば筐体の側面等に開閉可能に設けられる比較的大型の表示装置である。また、第２表示部１２３は、第１表示部１２２よりも小型の表示装置であり、ファインダ内に設けられているものとする。これら第１表示部１２２及び第２表示部１２３には、撮像モードでは撮像素子１０２からの入力映像や拡大映像に加え、撮影アスペクト枠表示等の補助表示が表示される。撮像素子１０２からの入力映像を順次表示することで、第１表示部１２２及び第２表示部１２３は電子ビューファインダ（ＥＶＦ）として機能する。一方、再生モード時、第１表示部１２２及び第２表示部１２３には、記録媒体１２１に記録されている動画像や静止画像が表示される。また、入力操作部１１３からの撮影者による入力操作情報や、記録媒体１２１のメモリカード内の任意の画像情報（撮影情報）等が表示される。

アナログライン出力部１２４は、アナログコンポーネント映像の出力や、Ｓ端子出力、コンポジット映像出力等のインタフェース群である。アナログライン出力部１２４を外部モニタ等に接続して、本デジタルシネマカメラからの映像出力を外部モニタに表示することができる。デジタルデータＩ／Ｆ部１２５は、ＵＳＢやＳＤＩ、ＨＤＭＩ等のデジタルインタフェースを１つ以上、含むことができる。

次に、図２及び図３を参照して、本実施形態に係るデジタルシネマカメラでのマニュアルフォーカス操作において、フォーカスアシスト機能として実現するピーキング処理を説明する。
図２は、ピーキング処理のための構成を示すブロック図であり、カメラ信号処理部１０６内に他の機能と共に含まれている。図３は、第１の実施形態においてピーキング処理を行う際のイメージ図である。

２０１は画像データ振り分け回路であり、Ａ／Ｄ変換器１０５でデジタル信号に変換された撮像素子１０２の素子配列に従った画素データを、各色に振り分けて、次段の高周波成分抽出回路に振り分ける。ここでの撮像素子は、図３（ａ）に示すように、Ｒ、Ｇｒ、Ｇｂ、Ｂがセンサ上に田の字に４画素の繰り返しで並んでいるＢａｙｅｒ配列のＣＭＯＳセンサであり、画素数が３８４０×２１６０であるものとする。画像データ振り分け回路２０１は、図３（ｂ）に示すように、Ｂａｙｅｒ配列の各色画素データを振り分けて高周波成分抽出回路２０２〜２０５にデータを流す。

２０２はＲ画素高周波成分抽出回路であり、画像データ振り分け回路２０１で振り分けられたＲ画素データから、一般的なＨＰＦ（ハイパスフィルタ）やＢＰＦ（バンドパスフィルタ）で、高周波成分（エッジ情報）を抽出する。他の高周波成分抽出回路２０３〜２０５は、Ｒ画素高周波成分抽出回路２０２と扱う画素色が異なるだけで、処理内容は同一である。これら高周波成分抽出回路２０２〜２０５が相まって抽出手段として機能する。

２０６はピーキング情報生成手段として機能する比較・選択回路であり、図３（ｃ）に示すように、高周波成分抽出回路２０２〜２０５で各色画素にフィルタ処理した高周波成分の大小をＢａｙｅｒ単位で比較して、最も大きいものを選択してピーキング情報として出力する。図３（ｃ）の例では、Ｒ１１'、Ｇｒ１１'、Ｇｂ１１'、Ｂ１１'の高周波成分のうち、Ｇｂ１１'が最も大きかった例である。比較の結果として、Ｂａｙｅｒ４画素の高周波成分から１つのピーキング情報を選出することになるので、エッジ情報の解像度は縦横それぞれ半分の１９２０×１０８０となる。

２０７は現像回路であり、Ａ／Ｄ変換器１０５でデジタル信号に変換された撮像素子１０２の素子配列に従った画素データをＤｅｂａｙｅｒして、ＲＧＢ４４４に現像処理する。ＲＧＢ４４４のまま後段に流しても良いが、ここでは説明を簡潔にするために、色空間変換を行い、ＲＧＢ４４４からＹＣＣ４４４にするものとする。

２０８は解像度変換手段として機能する解像度変換回路であり、現像回路２０７で現像したＹＣＣ４４４を、後段のビデオ制御部１１５につながっている表示部１２２、１２３に表示したり、映像信号出力端子から出力したりするように、一般的なフィルタ処理（例えばＢｉＣＵＢＩＣ等）により解像度変換を行う。ここでは、３８４０×２１６０から１９２０×１０８０に縮小処理するものとする。縮小処理した輝度Ｙについて示したのが図３（ｄ）である。

２０９は重畳又は置換手段として機能する重畳回路であり、比較・選択回路２０６でＢａｙｅｒ４画素の高周波成分から１画素選ばれたピーキング情報（１９２０×１０８０）を、解像度変換回路２０８でリサイズされた表示映像（１９２０×１０８０）の輝度信号Ｙに対して重畳処理する。図３（ｅ）がそのイメージであるが、重畳処理では任意の割合でミックスしても、別途設けた任意の敷居値以上のピーキング情報に置換してもよい。

以上説明したように、各色画素データの高周波成分から１つのピーキング情報を抽出する際に、高周波成分であるエッジ情報をピーキング情報として抽出することができる。したがって、撮像素子よりも低い表示解像度の表示データにピーキング処理を実施する場合でも、多画素映像のエッジ情報を失うことがなく、厳密なフォーカス合せのためのフォーカスアシスト機能を実現することができる。これにより、高解像度撮影時のピーキング処理によるマニュアルフォーカスアシスト動作の視認性を改善することができる。

第１の実施形態では、Ｂａｙｅｒ４画素の高周波成分の大小を比較するようにしたが、Ｂｙａｅｒ４画素のうちＧｒとＧｂの２画素の高周波成分の大小を比較するようにしてもよい。基本的な考え方は第１の実施形態と同様であるので特に図解はしないが、輝度に換算して５８．７％程度を占めるＧｒｅｅｎの処理だけでも、フォーカスアシストのためのピーキング処理では十分なシステムもある。実装システムのハードリソースや消費電力の観点から、全色比較に対するシュリンク版としての意味がある。
効果としても、第１の実施形態と同様、高解像度撮影時のピーキング処理によるマニュアルフォーカスアシスト動作の視認性を改善することができる。

（第２の実施形態）
本発明の第２の実施形態を説明する。第２の実施形態に係るピーキング機能を有するデジタルシネマカメラの構成は、第１の実施形態と同様であり、ここではその説明を省略する。

次に、図４及び図５を参照して、本実施形態に係るデジタルシネマカメラでのマニュアルフォーカス操作において、フォーカスアシスト機能として実現するピーキング処理を説明する。
図４は、ピーキング処理のための構成を示すブロック図であり、カメラ信号処理部１０６内に他の機能と共に含まれている。画像データ振り分け回路２０１、抽出回路２０２〜２０５、現像回路２０７、解像度変換回路２０８及び重畳回路２０９は第１の実施形態と同様である。また、図５は、第２の実施形態においてピーキング処理を行う際のイメージ図であり、第１の実施形態における図３に対応する内容となっている。

２１０はピーキング情報生成手段として機能する演算回路であり、図５（ｃ）に示すように、高周波成分抽出回路２０２〜２０５で各色画素にフィルタ処理した高周波成分をＢａｙｅｒ単位で演算する。
輝度方程式Ｙ＝eＧ＋fＢ＋gＲ (e, f, g は係数) とした場合、例えば、ここでは、ＮＴＳＣ輝度方程式Ｙ＝０．５８７Ｇ＋０．１１４Ｂ＋０．２９９Ｒを例に説明すると、近似式として、Ｒ：Ｇｒ：Ｇｂ：Ｂを３：３：３：１の割合で、
Ｙ１１'＝（３・Ｇｒ１１'＋３・Ｇｂ１１'＋Ｂ１１'＋３・Ｒ１１'）・α・・・（１）
α：任意の定数
として加算し、その結果をピーキング情報として出力する。演算の結果として、Ｂａｙｅｒ４画素の高周波成分から１つのピーキング情報を選出することになるので、エッジ情報の解像度は縦横それぞれ半分の１９２０×１０８０となる。

以上説明したように、各色画素データの高周波成分から１つのピーキング情報を抽出する際に、高周波成分であるエッジ情報をピーキング情報として抽出することができる。したがって、撮像素子よりも低い表示解像度の表示データにピーキング処理を実施する場合でも、多画素映像のエッジ情報を失うことがなく、厳密なフォーカス合せのためのフォーカスアシスト機能を実現することができる。これにより、高解像度撮影時のピーキング処理によるマニュアルフォーカスアシスト動作の視認性を改善することができる。

第２の実施形態では、Ｂａｙｅｒ４画素の高周波成分を所定の割合で加算するようにしたが、Ｂｙａｅｒ４画素のうちＧｒとＧｂの２画素の高周波成分を加算するようにしてもよい。すなわち、
Ｙ１１'＝（Ｇｒ１１'＋Ｇｂ１１'）・α・・・（２）
α：任意の定数
として加算し、その結果をピーキング情報として出力する。基本的な考え方は第１の実施形態と同様であるので特に図解はしないが、輝度に換算して５８．７％程度を占めるＧｒｅｅｎの処理だけでも、フォーカスアシストのためのピーキング処理では十分なシステムもある。実装システムのハードリソースや消費電力の観点から、全色比較に対するシュリンク版としての意味がある。
効果としても、第２の実施形態と同様、高解像度撮影時のピーキング処理によるマニュアルフォーカスアシスト動作の視認性を改善することができる。

（第３の実施形態）
本発明の第３の実施形態を説明する。第３の実施形態に係るピーキング機能を有するデジタルシネマカメラの構成は、第１の実施形態と同様であり、ここではその説明を省略する。

次に、図６及び図７を参照して、本実施形態に係るデジタルシネマカメラでのマニュアルフォーカス操作において、フォーカスアシスト機能として実現するピーキング処理を説明する。
図６は、ピーキング処理のための構成を示すブロック図であり、カメラ信号処理部１０６内に他の機能と共に含まれている。画像データ振り分け回路２０１、抽出回路２０２〜２０５、現像回路２０７、解像度変換回路２０８及び重畳回路２０９は第１の実施形態と同様である。また、図７は、第３の実施形態においてピーキング処理を行う際のイメージ図であり、第１の実施形態における図３に対応する内容となっている。

２１１はピーキング情報生成手段として機能する演算・比較・選択回路であり、図７（ｃ）に示すように、高周波成分抽出回路２０２〜２０５で各色画素にフィルタ処理した高周波成分をＢａｙｅｒ単位で演算し、比較して、最も大きいものを選択してピーキング情報として出力する。図７（ｃ）の例では、演算対象を結んだ方向がお互いに直行する（Ｇｒ１１'＋Ｇｂ１１'）と（Ｒ１１'＋Ｂ１１'）をレベル比較して、大きい方であるＡ１１'を選択している。演算、比較の結果として、Ｂａｙｅｒ４画素の高周波成分から１つのピーキング情報を選出することになるので、エッジ情報の解像度は縦横それぞれ半分の、１９２０×１０８０となる。

以上説明したように、各色画素データの高周波成分から１つのピーキング情報を抽出する際に、高周波成分であるエッジ情報をピーキング情報として抽出することができる。したがって、撮像素子よりも低い表示解像度の表示データにピーキング処理を実施する場合でも、多画素映像のエッジ情報を失うことがなく、厳密なフォーカス合せのためのフォーカスアシスト機能を実現することができる。これにより、高解像度撮影時のピーキング処理によるマニュアルフォーカスアシスト動作の視認性を改善することができる。

以上、本発明をその好適な実施形態に基づいて詳述してきたが、本発明はこれら特定の実施形態に限られるものではなく、この発明の要旨を逸脱しない範囲の様々な形態も本発明に含まれる。上述の実施形態の一部を適宜組み合わせても良い。特に、撮像素子の構造として、Ｂａｙｅｒ配列を前提にして説明しているが、画素並びが異なるものや、他の配色が混ざったもので、繰り返し単位での処理を考えることで、本発明を適用可能である。

また、上記実施形態では、本発明をデジタルシネマカメラに適用した例を説明したが、本発明は、フォーカスアシストのためのピーキング機能を有する撮像装置に対して適用可能である。このような撮像装置には、例えば放送局やその他業務用のデジタルビデオカメラ、デジタルスチルカメラ、カメラ付き携帯情報端末、カメラ付き携帯電話等が含まれる。

（その他の実施形態）
また、本発明は、以下の処理を実行することによっても実現される。すなわち、上述した実施形態の機能を実現するソフトウェア（プログラム）を、ネットワーク又は各種記憶媒体を介してシステム或いは装置に供給し、そのシステム或いは装置のコンピュータ（又はＣＰＵやＭＰＵ等）がプログラムを読み出して実行する処理である。

１０１：レンズ部、１０２：撮像素子、１０６：カメラ信号処理回路、１１１：システム制御回路、２０１：画像データ振り分け回路、２０２〜２０５：高周波成分抽出回路、２０６：比較・選択回路、２０７：現像回路、２０８：解像度変換回路、２０９：重畳回路、２１０：演算回路、２１１：演算・比較・選択回路

Claims (15)

1. 予め定められた複数の色が所定の配列で配置された複数の画素を有し、光学系を介して結像された被写体光学像を映像信号に変換する撮像素子と、
   前記撮像素子により得られた映像信号に対して、デベイヤおよび縮小処理を行う変換手段と、
   前記変換手段による前記デベイヤおよび縮小処理が行われる前の前記映像信号を前記複数の色のそれぞれの色に対応する映像信号に振り分け、前記それぞれの色に対応する高周波成分を抽出し、前記抽出した高周波成分からピーキング情報を生成する生成手段と、
   前記ピーキング情報を、前記変換手段により前記デベイヤおよび縮小処理が行われた映像信号に反映する処理手段とを備えることを特徴とする撮像装置。
2. 前記生成手段は、前記抽出した前記それぞれの色に対応する高周波成分に対して、前記所定の配列に基づく領域毎に比較及び演算のうち少なくともいずれかを実行してピーキング情報を生成することを特徴とする請求項１に記載の撮像装置。
3. 前記生成手段は、前記所定の配列に基づく領域毎に、前記それぞれの色に対応する高周波成分の大小を比較して、最も大きいものをピーキング情報として出力することを特徴とする請求項２に記載の撮像装置。
4. 前記所定の配列はＲ、Ｇｒ、ＧｂおよびＢが並べられたＢａｙｅｒ配列であり、
   前記生成手段は、Ｂａｙｅｒ単位で、Ｒ、Ｇｒ、ＧｂおよびＢの４画素、あるいは、ＧｒおよびＧｂの２画素の高周波成分の大小を比較して、最も大きい高周波成分をピーキング情報として出力することを特徴とする請求項３に記載の撮像装置。
5. 前記生成手段は、前記所定の配列に基づく領域毎に、前記それぞれの色に対応する高周波成分を所定の割合で加算して得られた結果をピーキング情報として出力することを特徴とする請求項２に記載の撮像装置。
6. 前記所定の配列はＲ、Ｇｒ、ＧｂおよびＢが並べられたＢａｙｅｒ配列であり、
   前記生成手段は、Ｂａｙｅｒ単位で、Ｒ、Ｇｒ、ＧｂおよびＢのそれぞれに対応する高周波成分を所定の割合で加算して得られた結果をピーキング情報として出力することを特徴とする請求項５に記載の撮像装置。
7. 前記所定の割合をＲ：Ｇｒ：Ｇｂ：Ｂを３：３：３：１とすることを特徴とする請求項６に記載の撮像装置。
8. 前記所定の配列はＲ、Ｇｒ、ＧｂおよびＢが並べられたＢａｙｅｒ配列であり、
   前記生成手段は、Ｂａｙｅｒ単位で、Ｇｒ、Ｇｂの２画素の高周波成分を加算して、その加算した高周波成分をピーキング情報として出力することを特徴とする請求項２に記載の撮像装置。
9. 前記所定の配列はＲ、Ｇｒ、ＧｂおよびＢが並べられたＢａｙｅｒ配列であり、
   前記生成手段は、Ｂａｙｅｒ単位でＲ、Ｇｒ、Ｇｂ、Ｂの４画素のうち、ＧｒとＧｂの高周波成分を加算し、かつＲとＢの高周波成分を加算し、その大小を比較して、大きいものをピーキング情報として出力することを特徴とする請求項２に記載の撮像装置。
10. 前記処理手段は、前記ピーキング情報を、前記変換手段により前記デベイヤおよび縮小処理が行われた映像信号の輝度信号に反映することを特徴とする請求項１乃至９の何れか１項に記載の撮像装置。
11. 前記処理手段により処理された映像信号を表示する表示手段と、
    前記撮像素子により得られた映像信号を記録する記録手段とをさらに備えることを特徴とする請求項１乃至１０の何れか１項に記載の撮像装置。
12. 前記記録手段は、前記撮像素子により得られ前記変換手段で前記縮小処理が行われていない映像信号を記録することを特徴とする請求項１１に記載の撮像装置。
13. 前記変換手段は、前記撮像素子により得られた映像信号の色空間を変換することを特徴とする請求項１乃至１２の何れか１項に記載の撮像装置。
14. 予め定められた複数の色が所定の配列で配置された複数の画素を有し、光学系を介して結像された被写体光学像を映像信号に変換する撮像素子、を備えた撮像装置の制御方法であって、
    前記撮像素子により得られた映像信号に対して、デベイヤおよび縮小処理を行うステップと、
    前記デベイヤおよび縮小処理が行われる前の前記映像信号を前記複数の色のそれぞれの色に対応する映像信号に振り分け、前記それぞれの色に対応する高周波成分を抽出し、前記抽出した高周波成分からピーキング情報を生成するステップと、
    前記ピーキング情報を、前記デベイヤおよび縮小処理が行われた映像信号に反映するステップとを有することを特徴とする撮像装置の制御方法。
15. 予め定められた複数の色が所定の配列で配置された複数の画素を有し、光学系を介して結像された被写体光学像を映像信号に変換する撮像素子、を備えた撮像装置を制御するためのプログラムであって、
    前記撮像素子により得られた映像信号に対して、デベイヤおよび縮小処理を行う処理と、
    前記デベイヤおよび縮小処理が行われる前の前記映像信号を前記複数の色のそれぞれの色に対応する映像信号に振り分け、前記それぞれの色に対応する高周波成分を抽出し、前記抽出した高周波成分からピーキング情報を生成する処理と、
    前記ピーキング情報を、前記デベイヤおよび縮小処理が行われた映像信号に反映する処理とをコンピュータに実行させるためのプログラム。

Images