JP2015142286A - 画像処理装置、撮像装置、制御方法、及びプログラム - Google Patents

Abstract

【課題】撮像記録中において記録される画像と電子ビューファインダとして表示される画像の同時性を担保する。
【解決手段】画像処理装置は、取得された画像信号に基づく画像を所定の周波数帯域に分離した複数の周波数帯画像を生成する。そして画像処理装置は、記録用の画像を、複数の周波数帯画像に予め定められた画像処理を適用し、該複数の画像に基づいて生成する。また画像処理装置は、表示用の画像を、予め定められた画像処理が適用された複数の周波数帯画像のうちの一部の周波数帯画像に基づいて生成する。
【選択図】図３

Description

本発明は、画像処理装置、撮像装置、制御方法、及びプログラムに関し、特に電子ビューファインダに係る表示技術に関する。

デジタルカメラ等の撮像装置の中には、撮像した画像を撮像装置が有する表示装置に表示させることでビューファインダの機能（電子ビューファインダ）を実現するものがある。近年では光学式ビューファインダを備えず、電子ビューファインダのみを使用させる撮像装置もあり、このような装置における電子ビューファインダとして提示される画像の重要性は高い。

特許文献１には、連写撮影中の電子ビューファインダに係る画像の表示遅延を低減する技術が開示されている。

特開２００５−１４２７０７号公報

特許文献１の撮像装置では、撮像素子から記録用の信号の読み出しと電子ビューファインダ用の信号の読み出しとを交互に行い、後者の信号の処理を優先的に行うことで電子ビューファインダに係る画像の表示遅延を低減している。しかしながら、このように２種類の信号読み出しによって生成される記録用の画像と電子ビューファインダに係る表示用の画像とは撮像タイミングがずれており、同時性が担保されないものであった。

本発明は、上述の問題点に鑑みてなされたものであり、撮像記録中において記録される画像と電子ビューファインダとして表示される画像の同時性を担保する画像処理装置、撮像装置、制御方法、及びプログラムを提供することを目的とする。

前述の目的を達成するために、本発明の画像処理装置は、以下の構成を備えることを特徴とする。具体的には画像処理装置は、撮像により出力された画像信号を取得する取得手段と、取得手段により取得された画像信号に基づく画像を所定の周波数帯域に分離した複数の周波数帯画像を生成する分離手段と、分離手段により生成された周波数帯画像に予め定められた画像処理を適用する画像処理手段と、画像処理手段により予め定められた画像処理が適用された複数の周波数帯画像に基づいて記録用の画像を生成する第１の生成手段と、画像処理手段により予め定められた画像処理が適用された複数の周波数帯画像のうちの一部の周波数帯画像に基づいて表示用の画像を生成する第２の生成手段と、記録用の画像または表示用の画像を出力する出力手段と、を有することを特徴とする。

このような構成により本発明によれば、撮像記録中において記録される画像と電子ビューファインダとして表示される画像の同時性を担保することが可能となる。

本発明の実施形態に係るデジタルカメラ１００の機能構成を示したブロック図 本発明の実施形態に係る信号処理部１０４の階層別処理に係る構成を例示したブロック図 本発明の実施形態に係るデジタルカメラ１００で実行される表示記録処理を例示したフローチャート 従来手法及び実施形態に係る手法の表示記録処理を例示したタイミングチャート 変形例に係る手法の表示記録処理を例示したタイミングチャート

［実施形態］
以下、本発明の例示的な実施形態について、図面を参照して詳細に説明する。以下に説明する一実施形態は、画像処理装置の一例としての、撮像記録中に画像の記録と電子ビューファインダに係る画像の表示を行うことが可能なデジタルカメラに、本発明を適用した例を説明する。しかし、本発明は、撮像により得られた画像から記録用の画像と表示用の画像とを生成することが可能な任意の機器に適用可能である。また、本明細書において、「階層別処理」とは、周波数帯域に応じて複数の階層に分けた画像ごとに異なるノイズ低減処理を行い、ノイズ低減後の複数の画像（周波数帯画像）から出力する画像の各画素を選択的に抽出することにより該画像を生成する処理をいう。

《デジタルカメラ１００の構成》
図１は、本発明の実施形態に係るデジタルカメラ１００の機能構成を示すブロック図である。

ＣＰＵ１０８は、デジタルカメラ１００が有する各ブロックの動作を制御する。本実施形態ではＣＰＵ１０８は不図示のＲＯＭ及びＲＡＭを有するプログラマブルプロセッサであるものとして説明する。ＣＰＵ１０８は、ＲＯＭに記憶された各ブロックの動作プログラムを読み出し、ＲＡＭに展開して実行することにより各ブロックの動作を制御する。

撮像部１０２は、例えばＣＣＤやＣＭＯＳセンサ等の撮像素子である。撮像部１０２は、結像光学系１０１により撮像素子の受光面に結像された光学像を光電変換することにより、アナログ画像信号を出力する。結像光学系１０１は、レンズ及び絞りを有しており、ＣＰＵ１０８から出力された制御信号に応じて駆動する不図示の駆動部によりフォーカス調節や露出調節に係る動作制御が行われる。

Ａ／Ｄ変換部１０３は、撮像部１０２により出力されたアナログ画像信号に対してＡ／Ｄ変換処理を適用することにより、デジタル画像データを生成する。Ａ／Ｄ変換部１０３が生成するデジタル画像データは、アナログ画像信号に単にＡ／Ｄ変換を適用した所謂ＲＡＷデータである。本実施形態では撮像部１０２の撮像素子は、所謂ベイヤー配列に従って各光電変換素子が配置されているものとし、Ａ／Ｄ変換部１０３で得られるＲＡＷデータの各画素の色成分は、ベイヤー配列に従っているものとする。即ち、撮像素子の各画素に適用されたカラーフィルタが原色ＲＧＢの場合、ＲＡＷデータは各画素にＲＧＢのいずれかの情報のみを有する所謂点順次のデータである。

信号処理部１０４は、Ａ／Ｄ変換部１０３により出力されたＲＡＷデータに対して、種々の信号処理を適用する。信号処理部１０４は、例えばノイズ除去処理、ガンマ処理、補間処理、マトリクス変換等の処理をＲＡＷデータに対して適用する。本実施形態では信号処理部１０４は、上述した階層別処理も行う。また信号処理部１０４は、各画素がＲＧＢのいずれかの色成分の画素値のみを有するＲＡＷデータを、各画素がＲＧＢ全ての色成分の画素値を有する通常の画像データに変換する現像処理（同時化処理）も行う。信号処理部１０４において種々の信号処理がなされて得られた画像データは、メモリＩ／Ｆ１０６を介してメモリ１０７に格納される。

画像処理部１０５は、メモリ１０７に格納された画像データに対して、用途に応じた画像処理や符号化処理等の必要な処理を行う。本実施形態では画像処理部１０５は、画像データの色変換や拡大縮小に係る画像処理、及び所定の記録形式に従った符号化処理を行う。

表示部１０９は、例えばＬＣＤ等の、デジタルカメラ１００が有する表示装置である。表示部１０９は、撮像により得られた画像信号に対応する画像データが表示されることで、電子ビューファインダとして機能する。

記録媒体１１０は、例えばデジタルカメラ１００が有する内蔵メモリや、メモリカードやＨＤＤ等のデジタルカメラ１００に着脱可能に接続された記録装置である。デジタルカメラ１００において撮影が行われた場合、画像処理部１０５により生成された記録用の画像データは、記録媒体１１０に記録される。

本実施形態ではハードウェアとしてデジタルカメラ１００が備える各ブロックにおいて処理が実現されるものとして説明するが、本発明の実施はこれに限らず、各ブロックの処理は該各ブロックと同様の処理を行うプログラムで実現されてもよい。

《階層別処理》
ここで、信号処理部１０４において行われる本実施形態の階層別処理について図を用いて説明する。図２は、信号処理部１０４の階層別処理に係る内部構成を示したブロック図である。

図２に示されるように、階層別処理は分離部２００、処理メモリ２１０、ノイズ低減部２２０及び合成部２３０により処理が行われ、周波数帯域ごとに好適にノイズを低減した画像を生成することができる。本実施形態では信号処理部１０４は、画像データの高周波帯域と２種類の低周波帯域についてそれぞれノイズを低減する処理を行い、画像出力を行う。

分離部２００は、入力されたＲＡＷデータから、２種類の低周波帯域の画像データ（周波数帯画像）を生成し、これらのデータとＲＡＷデータとを処理メモリ２１０に格納する。具体的には分離部２００は、入力されたＲＡＷデータをそのまま処理メモリ２１０に格納するとともに、低域通過フィルタ（ＬＰＦ）２０１にも出力する。

ＬＰＦ２０１は、入力されたＲＡＷデータのうち、所定の低周波数帯域のみを通過させるフィルタである。具体的にはＬＰＦ２０１はＲＡＷデータから得られる例えばＲ成分、Ｇ成分、Ｂ成分の各々の画像データに対して、あるいはＲＡＷデータをＹＵＶ空間に変換したデータに対して低域通過フィルタを適用することで、低周波帯のＲＡＷデータを出力する。出力されたＲＡＷデータはダウンサンプリング（ＤＳ）部２０２に入力される。

ＤＳ部２０２は、入力された低周波帯のＲＡＷデータにダウンサンプリング処理（低解像度化するための変換処理）を行い、低解像度化した画像データを生成する。低周波帯の画像データでは画像データの高周波成分が除去されているため、このようなダウンサンプリング処理を行ったとしても間引き処理を行った場合のような情報損失の影響は低い。またダウンサンプリング処理により画像データが低解像度化、即ち画素数が低減されることで、後述のノイズ除去処理における回路規模を低減させたり、ノイズ除去処理に係る演算量を減少させることができる。ダウンサンプリング処理のレベルは、ＬＰＦ２０１において適用された伝達関数に応じて決定される。例えばＬＰＦ２０１の伝達関数がＨ（ｚ）＝１／２（１＋Ｚ-1）で表現される場合、ＤＳ部２０２では水平方向及び垂直方向の各々について画素数を１／２に減少させる処理が行われる。ＤＳ部２０２は、低解像度化した画像データ（第１低周波帯画像データ）を処理メモリ２１０に格納するとともに、該データをＬＰＦ２０３にも出力する。

ＬＰＦ２０３及びＤＳ部２０４は、ＬＰＦ２０１及びＤＳ部２０２と同様の構成であり、入力された第１低周波帯画像データからさらに低周波帯域の画像データの抽出及び低解像度化の処理を行う。ＤＳ部２０４は、ダウンサンプリング処理により得られた低解像度化した画像データ（第２低周波帯画像データ）を処理メモリ２１０に格納する。

以下の説明では、本実施形態の分離部２００から処理メモリ２１０に格納される画像データは、ＲＡＷデータ、水平及び垂直方向の画素数がＲＡＷデータの１／２である第１低周波帯画像データ及び１／４である第２低周波帯画像データであるものとして説明する。また第１低周波帯画像データ及び第２低周波帯画像データは、ＤＳ部２０２またはＤＳ部２０４において水平方向２×垂直方向２の４画素から１画素を生成することになるため、同時化処理も便宜的に行って出力されているものとする。

ノイズ低減部２２０は、処理メモリ２１０に格納されているＲＡＷデータまたは画像データに対し、ノイズ除去処理を実行する。図２では、図の縦方向に上から順に第１ライン、第２ライン、第３ラインの３段のラインを並べて示しているが、これらのラインは記録用の画像データを出力する際の各ラインに入力されるデータを明示するものである。即ち、分離部２００からは第１ラインを介してＲＡＷデータが、第２ラインを介して第１低周波帯画像データが、第３ラインを介して第２低周波帯画像データが処理メモリ２１０に格納される。また記録用の画像データを出力する場合、ノイズ低減部２２０の第１ラインにはＲＡＷデータが、第２ラインには第１低周波帯画像データが、第３ラインには第２低周波帯画像データが入力される。

高域通過フィルタ（ＨＰＦ）２２１は、入力された画像データのうち、エッジ成分等の所定の高周波帯域のみを通過させるフィルタである。具体的にはＲＡＷデータが入力される場合、ＨＰＦ２２１は例えばＲ成分、Ｇ成分、Ｂ成分の各々の画像データに対して高域通過フィルタを適用することで、高周波帯のＲＡＷデータを出力する。出力されたＲＡＷデータはノイズ除去部２２２に入力される。ＨＰＦ２２１の伝達関数は例えばＨ（ｚ）＝１／２（１−Ｚ-1）等であってよい。またＨＰＦ２２１においてＲＡＷデータに対して高域通過フィルタの適用がなされる場合は、同時化処理もともに行われるものとする。

ノイズ除去部２２２は、ＨＰＦ２２１から入力された画像データからノイズを除去する。ノイズ除去は、例えば画像データに含まれるエッジ成分の代表方向を検出し、検出した代表方向に沿った低域通過フィルタを適用することで平滑化を行う方法を用いてよい。

第２ラインにおけるＨＰＦ２２３及びノイズ除去部２２４の構成は、第１ラインにおけるＨＰＦ２２１及びノイズ除去部２２２の構成と同様である。また第３ラインにおけるノイズ除去部２２５は、ノイズ除去部２２２及びノイズ除去部２２４と同様である。

なお、本実施形態のノイズ低減部２２０では、各ノイズ除去部に入力される際にはデータは同時化された状態となっている。これは、点順次の画像データに比べて画像情報が欠落することがないため、ノイズ除去処理において高精度にノイズを抑圧することができることによる。

合成部２３０は、出力用の画像データを行う際に、複数の周波数帯の画像データを合成する。具体的には、３つのラインの各々に入力される画像データは解像度が異なるため、まずアップサンプリング（ＵＳ）部２３１あるいは２３４で合成対象の画像データと解像度を一致させる。またアップサンプリングされた画像データは、アップサンプリングにおいて補間を行った場合は周波数帯域が変わるため、ＵＳ部２３１及び２３４の後段にはＬＰＦ２３２及びＬＰＦ２３５が設けられ、周波数帯を元に戻す処理を行っている。このように解像度を同一にされた異なる周波数帯の画像データは、画素合成部２３３あるいは画素合成部２３６において１つの画像データに合成される。例えば記録用の画像データを出力する際には、合成部２３０ではノイズが低減された高周波帯画像データ、第１低周波帯画像データ、及び第２低周波帯画像データが合成されることになる。

《表示記録処理》
このような構成をもつ本実施形態のデジタルカメラ１００で行われる表示記録処理について、図３のフローチャートを用いて具体的な処理を説明する。本表示記録処理は、例えば撮像を順次行う連写撮影中等、撮像記録中に画像の記録とともに該画像を電子ビューファインダ用途として表示部１０９に表示する処理を行う際の動作を示した処理である。該フローチャートに対応する処理は、ＣＰＵ１０８が、例えばＲＯＭに記憶されている対応する処理プログラムを読み出し、ＲＡＭに展開して実行することにより信号処理部１０４及び画像処理部１０５を制御することで実現することができる。本表示記録処理は、例えば撮像により順次取得されたＲＡＷデータが信号処理部１０４に入力された際に開始されるものとして説明する。

Ｓ３０１で、信号処理部１０４は、分離部２００において入力されたＲＡＷデータから第１低周波帯画像データ及び第２低周波帯画像データを生成する。そして各データを処理メモリ２１０に格納する。

Ｓ３０２で、信号処理部１０４は、処理メモリ２１０に格納されたデータのうち、表示部１０９への表示用の画像データの生成に使用するデータを選択する。具体的には信号処理部１０４は、表示部１０９の表示解像度（画素数）に対応させて、ＲＡＷデータ、第１低周波帯画像データ、及び第２低周波帯画像データの中から表示用の画像データの生成に使用するデータを選択する。例えば表示部１０９の表示解像度が水平方向６４０画素×垂直方向４８０画素であり、ＲＡＷデータの解像度が水平方向２５６０画素×垂直方向１９２０画素である場合を考える。このとき、第１低周波帯画像データの解像度は水平方向１２８０画素×垂直方向９６０画素、第２低周波帯画像データの解像度は水平方向６４０画素×垂直方向４８０画素となる。従って、信号処理部１０４は第２低周波帯画像データが表示用の画像データに適合すると判断し、使用するデータとして選択する。また例えば表示部１０９の表示解像度が水平方向６４０画素×垂直方向４８０画素であり、ＲＡＷデータの解像度が水平方向１２８０画素×垂直方向５６０画素である場合を考える。このとき、第１低周波帯画像データの解像度は水平方向６４０画素×垂直方向４８０画素、第２低周波帯画像データの解像度は水平方向３２０画素×垂直方向２４０画素となる。従って、信号処理部１０４は表示部１０９の解像度以下の第１低周波帯画像データ及び第２低周波帯画像データが表示用の画像データに適合すると判断し、使用するデータとして選択する。即ち、本ステップにおいて信号処理部１０４は、表示解像度よりも低い解像度を有するデータを、表示用の画像データの生成に使用するデータとして選択する。

Ｓ３０３で、信号処理部１０４は、表示用の画像データの生成に使用するデータに対してノイズ低減部２２０でノイズ除去処理を行う。具体的には信号処理部１０４は、使用するデータを解像度の高い順にノイズ低減部２２０の第１ライン〜第３ラインに入力し、ノイズ除去処理を行う。例えば使用するデータが第２低周波帯画像データのみである場合、信号処理部１０４は第１ラインに第２低周波帯画像データを入力し、ノイズ低減部２２０から高周波帯のノイズを除去した画像データを出力させる。また例えば使用するデータが第１低周波帯画像データ及び第２低周波帯画像データである場合、信号処理部１０４は第１ラインに第１低周波帯画像データ、第２ラインに第２低周波帯画像データを入力する。そしてノイズ低減部２２０から高周波帯のノイズを除去した２種類の解像度の画像データを出力させる。

Ｓ３０４で、信号処理部１０４は、合成部２３０において必要に応じてアップサンプリング処理、ＬＰＦの適用、合成処理を行って、表示用の画像データを出力する。具体的には信号処理部１０４は、Ｓ３０３において複数のラインに画像データを入力した場合は本ステップにおいて該画像データの合成処理を行う。また信号処理部１０４は、Ｓ３０３において第１ラインにのみ画像データを入力した場合は、本ステップにおいて合成部２３０における合成処理を行わずにノイズが低減された画像データを表示用の画像データとしてそのまま出力する。

Ｓ３０５で、信号処理部１０４は、表示用の画像データに対してその他の信号処理（ガンマ処理、補間処理、マトリクス変換等）を行う。

ここで、表示用の画像データに係る信号処理部１０４の処理は完了するため、ＣＰＵ１０８は以降で表示用の画像データの表示処理と記録用の画像データの記録処理とを並列で処理する。

Ｓ３０６で、画像処理部１０５は、表示部１０９に表示するために必要な色調整等の画像処理を表示用の画像データに適用し、表示用の画像信号を生成して表示部１０９に出力し、電子ビューファインダとしての画像表示を行う。これにより表示記録処理のうちの表示に係る処理が完了する。

一方、Ｓ３０７で、信号処理部１０４は、処理メモリ２１０に格納された全てのデータに対してノイズ低減部２２０でノイズ除去処理を行う。具体的には信号処理部１０４は、第１ラインにＲＡＷデータ、第２ラインに第１低周波帯画像データ、第３ラインに第２低周波帯画像データを入力し、ノイズ除去処理を行う。

Ｓ３０８で、信号処理部１０４は、合成部２３０においてアップサンプリング処理、ＬＰＦの適用、合成処理を行って、記録用の画像データを出力する。また、信号処理部１０４はＳ３０９で、記録用の画像データに対してその他の信号処理（ガンマ処理、補間処理、マトリクス変換等）を行う。

Ｓ３１０で、画像処理部１０５は、記録媒体１１０に記録するために必要な色調整や拡大縮小等の画像処理を記録用の画像データに適用した後、さらに符号化処理等の必要な処理を適用して記録用の画像データを完成する。

Ｓ３１１で、ＣＰＵ１０８は、生成された記録用の画像データを記録媒体１１０に伝送して記録させ、本表示記録処理のうちの記録に係る処理を完了する。

このようにすることで、記録される画像データと同時性を有する画像を表示部１０９に表示することができる。また本実施形態の手法は、１回の画像記録及び表示について特許文献１に記載の方法よりも読み出し回数を少なくできるため、表示遅延も解消することができる。具体的には図４（ａ）に示されるように、特許文献１の手法ではセンサ読み出しが２回行われた後に表示用の画像データ（モニタ画像）に係る処理が行われ、その後表示部１０９への画像提示がなされる。これに対し、図４（ｂ）に示されるように、本実施形態の手法では１回のセンサ読み出しが行われた後に表示用の画像データに係る処理が行われ、表示部１０９への画像提示がなされるため、撮影から表示までの遅延時間が低減できる。また、一般的に記録用の画像データの解像度に比べて表示部１０９の表示解像度は低いため、本実施形態の手法では全ての周波数帯画像ではなく一部の周波数帯画像のみを表示用の画像データの生成に使用する。即ち、表示に係る処理に要する時間は記録に係る処理に要する時間よりも短いため、記録に係る処理の開始時期も従来の手法よりも早めることができる。

また本実施形態の手法では、表示用の画像データは低域通過フィルタやダウンサンプリングにより生成された画像であり、従来の画素間引きにより生成された画像とは異なるため、画質の面でも向上している。

以上説明したように、本実施形態の画像処理装置は、撮像記録中において記録される画像と電子ビューファインダとして表示される画像の同時性を担保することができる。具体的には画像処理装置は、取得された画像信号に基づく画像を所定の周波数帯域に分離した複数の周波数帯画像を生成する。そして画像処理装置は、記録用の画像を、複数の周波数帯画像に予め定められた画像処理を適用し、該複数の画像に基づいて生成する。また画像処理装置は、表示用の画像を、予め定められた画像処理が適用された複数の周波数帯画像のうちの一部の周波数帯画像に基づいて生成する。

［変形例］
上述した実施形態では、表示部１０９の表示解像度にのみ基づいて表示用の画像データの生成に使用するデータを選択するものとして説明したが、本発明の実施はこれに限られるものではない。

例えば、表示部１０９に表示する画像の画質や解像感の向上を優先する設定がなされる場合には、表示記録処理のＳ３０２の処理において、信号処理部１０４は表示解像度よりも高い解像度を有するデータを選択してもよい。あるいは該表示解像度よりも高い解像度を有するデータ及び該解像度よりも低い解像度を有する１以上のデータを選択してもよい。例えば表示部１０９の表示解像度が水平方向６４０画素×垂直方向４８０画素であり、ＲＡＷデータの解像度が水平方向２０００画素×垂直方向１５００画素である場合を考える。このとき、第１低周波帯画像データの解像度は水平方向１０００画素×垂直方向７５０画素、第２低周波帯画像データの解像度は水平方向５００画素×垂直方向３７５画素となる。従って、信号処理部１０４は第１低周波帯画像データが表示用の画像データに適合すると判断し、使用するデータとして選択すればよい。あるいは、複数の周波数帯の画像データを合成した方が画質は向上するため、信号処理部１０４は第１低周波帯画像データ及び第２低周波帯画像データが表示用の画像データに適合すると判断し、使用するデータとして選択してもよい。

また例えば、撮像が行われてから表示部１０９に表示されるまでの遅延時間を短縮する、レスポンス性能を優先する設定がなされる場合には、表示記録処理のＳ３０２の処理において、信号処理部１０４は表示解像度に依らず、１つのデータのみを選択してもよい。例えば、上記の例のように第２低周波帯画像データの解像度が水平方向５００画素×垂直方向３７５画素で表示解像度の水平方向６４０画素×垂直方向４８０画素より小さいとしても、信号処理部１０４は第２低周波帯画像データを使用するデータに選択してもよい。この場合、画像処理部１０５において表示解像度まで拡大する処理が適用される。このようにすることで、ノイズ低減部２２０におけるノイズ除去処理の演算量を低減し、及び合成部２３０における合成処理を行わないようにすることができるため、図５に示されるように、上記実施形態の手法よりも表示遅延量を低減することができる。なお、使用するデータとして第１低周波帯画像データのように表示解像度よりも高い１つのデータが選択され、表示時には該画像データを画像処理部１０５で縮小するものであってもよい。しかし、ノイズ低減に係る演算量を低減する観点では、最も画素数の少ないデータを使用することが好適であることは言うまでもない。

［その他の実施形態］
また、本発明は、以下の処理を実行することによっても実現される。即ち、上述した実施形態の機能を実現するソフトウェア（プログラム）を、ネットワーク又は各種記憶媒体を介してシステム或いは装置に供給し、そのシステム或いは装置のコンピュータ（またはＣＰＵやＭＰＵ等）がプログラムを読み出して実行する処理である。

Claims (10)

1. 撮像により出力された画像信号を取得する取得手段と、
   前記取得手段により取得された画像信号に基づく画像を所定の周波数帯域に分離した複数の周波数帯画像を生成する分離手段と、
   前記分離手段により生成された前記複数の周波数帯画像の各々に予め定められた画像処理を適用する画像処理手段と、
   前記画像処理手段により前記予め定められた画像処理が適用された前記複数の周波数帯画像に基づいて記録用の画像を生成する第１の生成手段と、
   前記画像処理手段により前記予め定められた画像処理が適用された前記複数の周波数帯画像のうちの一部の周波数帯画像に基づいて表示用の画像を生成する第２の生成手段と、
   前記記録用の画像または前記表示用の画像を出力する出力手段と、を有する
   ことを特徴とする画像処理装置。
2. 前記画像処理手段による前記予め定められた画像処理には、ノイズ低減処理が含まれることを特徴とする請求項１に記載の画像処理装置。
3. 前記画像処理手段は、前記複数の周波数帯画像のうちの低周波帯域の周波数帯画像に対して低解像度化するための変換処理を適用し、
   前記第２の生成手段は、前記表示用の画像が表示される表示手段の解像度に応じて、前記変換処理が適用された前記周波数帯画像から前記一部の周波数帯画像を選択する
   ことを特徴とする請求項１または２に記載の画像処理装置。
4. 前記第２の生成手段は、前記表示用の画像の画質を優先する設定がなされている場合に、前記変換処理が適用された後に前記表示手段の解像度よりも高い解像度を有するまたは該解像度以下の解像度を有する１以上の前記周波数帯画像を前記一部の周波数帯画像として選択することを特徴とする請求項３に記載の画像処理装置。
5. 前記第２の生成手段は、前記取得手段により取得された画像信号の撮影がなされてから前記表示用の画像が表示されるまでの表示遅延を短縮する設定がなされている場合に、前記変換処理が適用された後に前記表示手段の解像度に対応する解像度を有する１つの前記周波数帯画像を前記一部の周波数帯画像として選択することを特徴とする請求項３または４に記載の画像処理装置。
6. 前記表示用の画像は、前記記録用の画像よりも低い解像度を有することを特徴とする請求項３乃至５のいずれか１項に記載の画像処理装置。
7. 前記取得手段は順次行われた撮像により出力された画像信号を順次取得し、
   前記第１の生成手段は、前記第２の生成手段による前記表示用の画像の生成の後に開始される
   ことを特徴とする請求項１乃至６のいずれか１項に記載の画像処理装置。
8. 撮像手段と、
   請求項１乃至７のいずれか１項に記載の画像処理装置と、
   前記画像処理装置から出力された表示用の画像を表示する表示手段と、
   前記画像処理装置から出力された記録用の画像を記録媒体に記録する記録手段と、を有する
   ことを特徴とする撮像装置。
9. 取得手段が、撮像により出力された画像信号を取得する取得工程と、
   分離手段が、前記取得工程において取得された画像信号に基づく画像を所定の周波数帯域に分離した複数の周波数帯画像を生成する分離工程と、
   画像処理手段が、前記分離工程において生成された前記周波数帯画像に予め定められた画像処理を適用する画像処理工程と、
   第１の生成手段が、前記画像処理工程において前記予め定められた画像処理が適用された前記複数の周波数帯画像に基づいて記録用の画像を生成する第１の生成工程と、
   第２の生成手段が、前記画像処理工程において前記予め定められた画像処理が適用された前記複数の周波数帯画像のうちの一部の周波数帯画像に基づいて表示用の画像を生成する第２の生成工程と、
   出力手段が、前記記録用の画像または前記表示用の画像を出力する出力工程と、を有する
   ことを特徴とする画像処理装置の制御方法。
10. コンピュータを、請求項１乃至７のいずれか１項に記載の画像処理装置の各手段として機能させるためのプログラム。

Images