JP6161307B2 - 撮像装置およびその制御方法 - Google Patents

Description

本発明は、撮像装置に関し、特に撮像装置本体での再現像時の画像信号処理に関するものである。

近年、３Ｄ（３次元）シネマや、３Ｄディスプレイ等、立体映像関連機器の普及が急速に進んでいる。立体映像を鑑賞する仕組みとしては、対象物を左目で見た像に対応する「左目用画像」と、右目で見た像に対応する「右目用画像」を表示するのが一般的である。視差バリア方式、レンチキュラ方式等では鑑賞対象の映像を視差分割する方法や、左右で特性の異なるフィルタを介して、左目と右目に異なる映像を入射させる方法等が知られている。

一方、立体映像として鑑賞できる画像の撮影方法として、異なる視点の画像を同時に撮影する方法がある。特許文献１に記載の固体撮像素子は、該素子上に形成した複数の微小レンズと、複数の微小レンズの各々に近接して配置した、対を成すフォトダイオードを備える。フォトダイオード対のうち、一方のフォトダイオードの出力から第１の画像信号を得て、他方のフォトダイオードの出力から第２の画像信号を得る。第１及び第２の画像信号をそれぞれ左目用画像、右目用画像の各信号として用いることで、立体映像を鑑賞できる。

また、撮影済み画像に対し、現像処理に関する各種パラメータを設定して再現像を実行し、新たな画像を生成する機能を有する撮像装置が知られている。撮影済み画像に対するパラメータとしては、例えばホワイトバランスやコントラスト等の調整用パラメータ等がある。また、ノイズの大きな画像に対してノイズ低減処理を施す処理系や、ボケ具合を利用したソフトフォーカス等のフィルタ処理系を備える装置も存在する。特許文献２に開示の装置では、予め撮影された画像に対し、新たなパラメータを設定して再現像した結果を表示可能である。ユーザは再現像結果を見ながら何度でもパラメータを変更でき、最終結果を新たな画像データとして保存できる。

特開昭５８-２４１０５号公報 特許第４１２６６４０号公報

立体映像表示では、左右方向に視差を持たせた画像を、鑑賞者がそれぞれ対応する目で見えるようにするため、背景技術で述べたいずれかの方式を用いて、左目用画像と右目用画像を用意する必要がある。したがって、通常の画像処理に比べて処理時間がかかってしまう。加えて、再現像処理やフィルタ処理等においても、新たな現像結果やフィルタ処理後の画像を表示するまでの所要時間の短縮化が課題である。処理時間が長いと、ユーザの操作性を低下させてしまうことが懸念される。

本発明の目的は、再現像処理やフィルタ処理等を行った画像を立体視表示用に出力可能な撮像装置において、ユーザの操作性を高めることである。

上記課題を解決するために、本発明に係る装置は、複数の視差画像を出力する撮像装置であって、画像処理の操作指示を行う操作手段と、前記操作手段の操作指示により設定される画像処理用のパラメータを用いて第１の視差画像および第２の視差画像を処理する画像処理手段を備える。前記画像処理手段は、前記操作手段により前記パラメータの変更操作が行われた場合、変更された前記パラメータを用いて第１の視差画像または第２の視差画像の一方を生成し、その後に前記操作手段により前記パラメータの変更操作が行われない場合には、残りの一方の第２の視差画像または第１の視差画像を生成する。

本発明によれば、再現像処理やフィルタ処理等を行った画像を立体視表示用に出力可能な撮像装置において、ユーザの操作性を高めることができる。

本発明の第１実施形態に係る基本シーケンスを説明するフローチャートである。 本発明の第２実施形態に係る基本シーケンスを説明するフローチャートである。 本発明の実施形態に係る撮像装置の構成例を示すブロック図である。 撮像素子の画素構成（Ａ）および受光状態（Ｂ）を説明する図である。 ＲＡＷデータのファイル形式を例示する構成図である。 ＲＡＷデータのファイル形式の別例を示す構成図である。 ＪＰＥＧファイル形式を例示する構成図である。

以下に、本発明の各実施形態を、添付図面に基づいて詳細に説明する。
図１および図２の処理を説明する前に、本発明の実施形態に共通する装置構成を説明する。図３は、本発明の実施形態に係る撮像装置としてデジタルカメラのブロック構成を例示する概略構成図である。
撮影レンズ部２００は撮像光学系を構成する複数のレンズを備える。撮像素子２０１は撮影レンズ部２００を介して結像される被写体光を受光する。撮像素子２０１にはＣＣＤ（電荷結合素子）センサやＣＭＯＳ（相補型金属酸化膜半導体）センサ等が用いられ、被写体像を光電変換する。撮像素子２０１により取得した画素データはＡ(アナログ)／Ｄ（デジタル）変換器２０２を介して制御部２０３に送られる。

Ａ／Ｄ変換器２０２は、撮像素子２０１のアナログ出力信号をデジタル信号に変換し、制御部２０３に出力する。制御部２０３はマイクロコンピュータを備え、ＣＰＵ（中央演算処理装置）が制御プログラムを実行することにより、各構成要素（符号２０４ないし２１０参照）の制御やデータ処理等、撮像装置全体を制御する。揮発性メモリ２０４は、Ａ／Ｄ変換器２０２がデジタル信号に変換した画像データを一時的に保持する。不揮発性メモリ２０５は、制御部２０３のマイクロコンピュータで処理する撮像装置の実行プログラムを記憶している。

デコーダ２０６は、外部メモリ２０８から読み出した画像ファイルの解析、画像データの解凍、データ形式の変換処理等を行う。デコーダ２０６は、例えばＪＰＥＧ(Joint Photographic Experts Group)形式の画像データの処理を行う。画像処理部２０７は、撮影された静止画の画像データに対する画像処理を行う。外部メモリ２０８には、コンパクトフラッシュ（登録商標）やスマートメディア、またはハードディスクドライブ等が利用可能である。画像処理部２０７が処理した画像データは、制御部２０３が所定のファイル形式のデータに変換して外部メモリ２０８に出力する。また、外部メモリ２０８から制御部２０３が読み込んだファイルのデータは、揮発性メモリ２０４に一時的に記憶され、デコーダ２０６が解凍する。形式変換されたデータに対して画像処理部２０７は再度現像処理を行い、制御部２０３のマイクロコンピュータがファイルを再構築する。再現像機能にて、再構築後のファイルデータは外部メモリ２０８へ書き出され、該メモリに記憶される。

表示部２０９は液晶表示デバイス等を備える。表示部２０９は、外部メモリ２０８に出力したファイルの画像や、画像処理部２０７が処理した結果、および再現像設定を行った場合の画像パラメータ等を表示する。操作部２１０は、スイッチ、ボタン、タッチパネル等を備える。ユーザは表示部２０９が表示した画像や情報を見ながら、操作部２１０を使用して制御部２０３に指示を与える。

次に、図４（Ａ）を参照して撮像素子の画素構成を説明する。図４（Ａ）は撮像素子２０１の１画素の構成例を正面から示す概略図である。撮像素子２０１は複数の光電変換部を備え、撮像光学系の射出瞳の分割された異なる領域を通過した光束を受光して電気信号に変換する。図４（Ａ）に示す画素３０１は、１個のマイクロレンズ３０２と、光電変換素子として複数のフォトダイオード（以下、ＰＤという）を有する。左側に位置するＰＤ３０３と、右側に位置するＰＤ３０４がマイクロレンズ３０２に対して配置されている。１個のマイクロレンズに対するＰＤの数は２つ以上であればよく、例えば、４つのＰＤ群や９つのＰＤ群等を配置した実施形態でもよい。

図４（Ｂ）は撮影レンズ部２００の射出瞳から出た光束が撮像素子２０１に入射する様子を表した概念図である。画素アレイ３００は、マイクロレンズ３０２と、カラーフィルタ３０５と、ＰＤ３０３および３０４を有する。図４（Ｂ）において、各マイクロレンズ３０２に対して、撮影レンズの射出瞳３０６から出た光束の中心を光軸３０９とする。射出瞳３０６から出た光は、光軸３０９を中心として撮像素子２０１に入射する。一部領域３０７、３０８は、撮影レンズの射出瞳３０６の領域である。光線３１０、３１１は、一部領域３０７を通過する光のうち最外周の光線である。光線３１２、３１３は、一部領域３０８を通過する光のうち最外周の光線である。射出瞳３０６から出る光束のうち、光軸３０９を境界線として、図４（Ｂ）の上側の光束はＰＤ３０４に入射し、下側の光束はＰＤ３０３に入射する。つまり、ＰＤ３０３とＰＤ３０４は、撮影光学系の射出瞳の異なる領域からの光束をそれぞれ受光する。

撮像素子２０１は、複数のＰＤからの全ての画像信号を出力する。画像処理部２０７は撮像素子２０１が出力した全てのＰＤデータを、右目用画像データと左目用画像データに分離して画像処理を行うことが可能である。画像処理部２０７が処理した結果は、ＲＡＷファイルとして外部メモリ２０８に記憶される。以下では、揮発性メモリ２０４に格納された画像データをＲＡＷデータという。ＲＡＷデータを含むファイルがＲＡＷファイルである。ＲＡＷデータは、全画素の各ＰＤの出力情報を含む。

図５、図６は、ＲＡＷデータを外部メモリ２０８に記憶する場合のファイル形式を例示する。図５は、画像処理部２０７が右目用画像、左目用画像の各データを別々に処理することで、２つのＲＡＷ画像データとして保存した形式のファイル例４００を示す。ＲＡＷヘッダ部４０１は、現像パラメータ４０５や、各画像データが保持されているアドレスへのオフセット４０６〜４１３を有する。ＲＡＷヘッダ情報には、以下の付帯情報、および各画像データを格納する領域のオフセット情報が含まれる（括弧内に符号を示す）。

・メタデータＡ（４０５）：表示用ＪＰＥＧ画像部４０３に格納される画像データに関連する撮影情報やパラメータ等。
・オフセット値Ｂ（４０６）：左目用サムネイル画像と右目用サムネイル画像を合成した合成サムネイル画像を格納するサムネイル画像部４１４の先頭位置までのオフセットデータ。
・オフセット値Ｃ（４０７）：左目用サムネイル画像部４１５の先頭位置までのオフセットデータ。
・オフセット値Ｄ（４０８）：右目用サムネイル画像部４１６の先頭位置までのオフセットデータ。
・オフセット値Ｅ（４０９）：左目用ＪＰＥＧ画像と右目用ＪＰＥＧ画像を合成した合成ＪＰＥＧ画像を格納する表示用ＪＰＥＧ画像部４１７の先頭位置までのオフセットデータ。
・オフセット値Ｆ（４１０）：左目用の表示用ＪＰＥＧ画像部４１８の先頭位置までのオフセットデータ。
・オフセット値Ｇ（４１１）：右目用の表示用ＪＰＥＧ画像部４１９の先頭位置までのオフセットデータ。
・オフセット値Ｈ（４１２）：左目用のＲＡＷ画像部４２０の先頭位置までのオフセットデータ。
・オフセット値Ｉ（４１３）：右目用のＲＡＷ画像部４２１の先頭位置までのオフセットデータ。
オフセット値ＢないしＩは、ＲＡＷヘッダ部４０１の基準位置から算出される各画像部までの相対位置情報であり、これらの値により画像ファイル内における各画像データの開始位置が特定される。

サムネイル画像部４０２は、左目用サムネイル画像と右目用サムネイル画像との合成サムネイル画像を格納する合成サムネイル画像部４１４、左目用サムネイル画像部４１５、右目用サムネイル画像部４１６から成る。表示用ＪＰＥＧ画像部４０３は、左目用ＪＰＥＧ画像と右目用ＪＰＥＧ画像との合成ＪＥＰＧ画像を格納するＪＰＥＧ画像部４１７、左目用のＪＰＥＧ画像部４１８、右目用のＪＰＥＧ画像部４１９から成る。ＲＡＷ画像部４０４は、左目用ＲＡＷ画像部４２０と右目用ＲＡＷ画像部４２１から成る。
なお、サムネイル画像データは、ＪＰＥＧ画像データを間引いてリサイズした画像データであり、縮小画像の一覧表示等に行う場合に使用される。

図６は、画像処理部２０７が右目用画像データと左目用画像データに分けずに、そのままＲＡＷデータをファイルとして保存した形式のファイル例４２２を示す。
ＲＡＷヘッダ部４２３は、現像パラメータ（メタデータ４２７）や各画像データが保持されているアドレスへのオフセット４２８〜４３４を有する。図５との相違点は、オフセット４３４である。オフセット値Ｊは、ＲＡＷヘッダ部４２３の基準位置からＲＡＷ画像部４２６の先頭位置までのオフセット情報である。メタデータＡ（４２７）や、オフセット値Ｂ〜Ｇ（４２８〜４３３）は、図５に示すメタデータＡ（４０５）、オフセット値Ｂ〜Ｇ（４０６〜４１１）と同様である。

サムネイル画像部４２４は、左目用サムネイル画像および右目用サムネイル画像を合成して生成した合成サムネイル画像のデータを格納するサムネイル画像部４３５を有する。左目用サムネイル画像データはサムネイル画像部４３６に格納され、右目用サムネイル画像データはサムネイル画像部４３７に格納される。表示用ＪＰＥＧ画像部４２５は、右目用画像および左目用画像を合成して生成した合成ＪＰＥＧ画像のデータを格納する表示用ＪＰＥＧ画像部４３８を有する。左目用のＪＰＥＧ画像データは表示用ＪＰＥＧ画像部４３９に格納され、右目用のＪＰＥＧ画像データは表示用ＪＰＥＧ画像部４４０に格納される。ＲＡＷ画像部４２６にＲＡＷデータが格納される。

［第１実施形態］
以下、本発明の第１実施形態を説明する。
図１は、本実施形態に係る再現像処理の基本シーケンスを説明するフローチャートである。画像処理用パラメータとしてホワイトバランス（以下、ＷＢと略記する）調整用のパラメータを例示し、再現像処理の対象ファイルが外部メモリ２０８に保存されているものとする。

表示部２０９に表示しているメニューや再生表示画面から、操作部２１０を用いたユーザ操作により、再現像機能を選択されると、再現像対象画像の選択処理（Ｓ１００）に移る。再現像対象画像の選択処理では、外部メモリ２０８に保存されているファイルの中から対象ファイルが選択される。選択方法としては、例えば複数枚の再生画像をユーザに提示してユーザに選択操作を促す方法を用いる。説明の便宜上、本実施形態では対象画像を１枚とするが、複数枚でもよい。ユーザ操作により、再現像対象ファイルが選択されると、Ｓ１０１に処理を進め、制御部２０３は、指定された画像ファイルのデータを外部メモリ２０８から読み込んで揮発性メモリ２０４に展開して記憶させ、画像ファイルの情報取得を行う。画像ファイルから取得する情報は、撮影時の現像パラメータの他、画像サイズ、画像フォーマット等の再現像処理に必要な項目を示す情報である。図５のファイル例４００の場合、ＲＡＷヘッダ部４０１から情報が取得される。

Ｓ１０２でデコーダ２０６は対象画像ファイルをデコード処理し、画像処理部２０７が扱うことができる形式である、左目用ＲＡＷ画像部４２０と右目用ＲＡＷ画像部４２１の各データを取得する（Ｓ１０３）。なお、図６に示すファイル例４２２の場合には、ＲＡＷ画像部４２６のデータが取得される。このＲＡＷデータは再現像の元になるデータとなるため、現像処理が終了するまでの間、揮発性メモリ２０４が保持し続ける。画像処理部２０７はＳ１０１で取得したパラメータを使い、Ｓ１０３で取得したＲＡＷデータから右目用ＲＡＷ画像のみを現像し、右目用ＪＰＥＧ画像データを生成する（Ｓ１０４）。表示部２０９は現像結果である右目用ＪＰＥＧ画像をＧＵＩ（グラフィカル・ユーザ・インターフェース）表示する（Ｓ１０５）。図６に示すファイル例４２２の場合、画像処理部２０７はＲＡＷデータを現像するが、右目用データだけを抽出して右目用ＪＰＥＧ画像データを生成する。表示部２０９は再現像可能なパラメータ等を表示し、Ｓ１０６へ処理を進める。

Ｓ１０６で制御部２０３はユーザ操作を判定し、操作部２１０によるユーザ操作指示がＷＢの設定変更である場合、パラメータ変更と判定してＳ１０７へ処理を進める。Ｓ１０７で画像処理部２０７は、指定されたＷＢパラメータを用いて、右目用ＲＡＷ画像のみを再現像し、右目用ＪＰＥＧ画像データを生成する。なお、図６に示すファイル例４２２の場合、画像処理部２０７は、ＲＡＷデータからから右目用データだけを抽出して右目用ＪＰＥＧ画像データを生成する。そして、表示部２０９は右目用ＪＰＥＧ画像データを取得して画像を表示し、ＧＵＩ表示を更新する（Ｓ１０８）。Ｓ１０６に処理を戻し、ユーザからの操作待ち状態となる。

Ｓ１０６にて、操作部２１０によるユーザ操作指示が３Ｄ表示指定である場合、制御部２０３は判定結果に従ってＳ１０９に処理を進める。Ｓ１０９で画像処理部２０７は、現在設定されている画像についての左目用ＪＰＥＧ画像を現像してデータを生成する。Ｓ１０８へ処理を進め、表示部２０９はＧＵＩ画面を生成して表示処理を行う。右目用ＪＰＥＧ画像と左目用ＪＰＥＧ画像が交互に表示されることにより、立体視表示が行われる。なお、本実施形態にて立体視表示用のＶＲＡＭデータの生成方法等は特に問わない。

またＳ１０６にて、操作部２１０によるユーザ操作指示が画像ファイルの保存指定である場合、Ｓ１１０へ処理を進める。制御部２０３は画像処理部２０７を制御し、右目用ＪＰＥＧ画像データおよび左目用ＪＰＥＧ画像データに加えて、両者を加算合成した合成ＪＰＥＧ画像データを生成する。また、サムネイル画像に関しても、左目用、右目用の各サムネイル画像データに加えて、両者を加算合成した合成サムネイル画像データが生成される。次のＳ１１１で制御部２０３は、ヘッダ情報等を付与したファイルとして生成し、該ファイルを外部メモリ２０８に保存する制御を行う。表示部２０９は処理結果を表示する（Ｓ１１２）。現像結果を立体視表示用の画像で表示する場合には、右目用画像データおよび左目用画像データを使用し、また立体視表示を行わない場合には合成画像データを使用して表示処理が行われる。

図７は、生成したファイルの構成例を示す。ファイルは、ＤＣＦヘッダ部５０１、サムネイル画像部５０２、ＪＰＥＧ画像部５０３から構成される。ＤＣＦ（Design rule for Camera File system）は、デジタルカメラにおいて画像データを共通の仕様で扱うための画像ファイル形式である。ＤＣＦヘッダ部５０１は、撮影情報、パラメータ等のメタデータＡ（５０４）と、以下に示す各画像部までのオフセットＢ〜Ｇ（５０５〜５１０参照）を有する。

・オフセット値Ｂ（５０５）：左目用サムネイル画像と右目用サムネイル画像を合成した合成サムネイル画像を格納する合成サムネイル画像部５１１の先頭位置までのオフセットデータ。
・オフセット値Ｃ（５０６）：左目用サムネイル画像部５１２の先頭位置までのオフセットデータ。
・オフセット値Ｄ（５０７）：右目用サムネイル画像部５１３の先頭位置までのオフセットデータ。
・オフセット値Ｅ（５０８）：左目用ＪＰＥＧ画像と右目用ＪＰＥＧ画像を合成した合成ＪＰＥＧ画像を格納する合成ＪＰＥＧ画像部５１４の先頭位置までのオフセットデータ。
・オフセット値Ｆ（５０９）：左目用ＪＰＥＧ画像部５１５の先頭位置までのオフセットデータ。
・オフセット値Ｇ（５１０）：右目用ＪＰＥＧ画像部５１６の先頭位置までのオフセットデータ。

サムネイル画像部５０２は合成サムネイル画像部５１１、左目用サムネイル画像部５１２、右目用サムネイル画像部５１３から成る。ＪＰＥＧ画像部５０３は、合成ＪＰＥＧ画像部５１４、左目用ＪＰＥＧ画像部５１５、右目用ＪＰＥＧ画像部５１６から成る。

第１実施形態によれば、パラメータの切り替え時（Ｓ１０６での判定結果がパラメータ変更操作の場合）には、右目用ＪＰＥＧ画像データのみが生成されて表示される。これにより、再現像結果の表示までに要する処理時間を短縮し、素早いプレビュー表示をユーザに提示できる。立体視表示の場合（Ｓ１０６での判定結果が３Ｄ表示の場合）には、左目用ＪＰＥＧ画像データのみを生成し、既存の右目用ＪＰＥＧ画像データと組み合わせて表示させることができるので、余計な手間がかからない。この結果、ユーザの操作性を低下させることなく、再現像時に立体視表示が可能となる。
なお、本実施形態では現像パラメータ変更時に右目用ＪＰＥＧ画像データを生成してから、立体視表示の際に左目用ＪＰＥＧ画像データを生成したが、画像データの生成順序を逆にしても構わない。その場合、図１のＳ１０４、Ｓ１０７で左目用ＪＰＥＧ画像の現像処理が実行され、Ｓ１０９で右目用ＪＰＥＧ画像の現像処理が実行される。

［第２実施形態］
次に本発明の第２実施形態を説明する。第１実施形態では立体視表示のタイミングに応じて、右目用ＪＰＥＧ画像、左目用ＪＰＥＧ画像、合成ＪＰＥＧ画像等を生成し、その都度、画像の種類を変更する例を説明した。第２実施形態では、右目用および左目用の画像データを常に生成しながらもユーザの操作性を低下させずに再現像処理の結果を表示できる形態について説明する。なお、第２実施形態にて第１実施形態の場合と同様の構成要素については既に使用した符号を用いることにより、それらの詳細な説明を省略し、主として相違点を説明する。

図２のフローチャートを参照して、本実施形態における再現像処理を説明する。なお、Ｓ１００ないしＳ１０５、Ｓ１１０ないしＳ１１２の処理については、図１で説明した第１実施形態の場合と同様であるため、Ｓ１２０以降を説明する。
Ｓ１２０で制御部２０３はユーザ操作を判定し、操作部２１０によるユーザ操作指示がＷＢの設定変更である場合、パラメータ変更と判定してＳ１２１に処理を進める。また、操作部２１０によるユーザ操作指示が画像ファイルの保存指定である場合、Ｓ１１０へ処理を進める。

Ｓ１２１で画像処理部２０７は右目用ＪＰＥＧ画像を現像してデータを生成する。表示部２０９は、生成された右目用ＪＰＥＧ画像データをＧＵＩ表示する（Ｓ１２２）。次のＳ１２３で制御部２０３はユーザ操作を受け付け、操作指示を判定する。現像パラメータを変更して、直ちに現像結果を確認したいユーザは、この段階で次の現像パラメータ値に変更すればよい。ユーザ操作指示があった場合、Ｓ１２０に処理を戻すが、ユーザ操作がなければ、Ｓ１２４に処理を進め、画像処理部２０７は左目用ＪＰＥＧ画像データを生成する。表示部２０９は再度ＧＵＩ表示を更新して現像結果を表示する（Ｓ１２５）。右目用ＪＰＥＧ画像と左目用ＪＰＥＧ画像を交互に表示することで立体視表示が可能となる。Ｓ１２２の段階で右目用ＪＰＥＧ画像を表示する際には立体視表示ではないが、Ｓ１２５の段階ではデータ生成済みの右目用ＪＰＥＧ画像と、左目用ＪＰＥＧ画像とを組み合わせて立体視表示が行われる。

Ｓ１２５の処理の後で、Ｓ１２０に処理を戻す。なお、Ｓ１２０で判定結果が画像ファイルの保存指示である場合には、Ｓ１１０ないしＳ１１２の処理が実行された後、処理を終了する。本実施形態では右目用ＪＰＥＧ画像を生成してから左目用ＪＰＥＧ画像を生成したが、生成する画像を逆順にしてもよい。

第２実施形態では、常に右目用ＪＰＥＧ画像と左目用ＪＰＥＧ画像を生成するが、どちらか一方のＪＰＥＧ画像が生成されたタイミングで表示を更新する。これにより、ユーザが設定した現像パラメータでの現像処理の結果を直ちに表示できる。また、右目用および左目用のＪＰＥＧ画像のデータが生成されたタイミングで、再現像時にユーザは立体視表示画像を確認できるので、ユーザに快適な操作性を提供できる。

２０１：撮像素子
２０３：マイクロコンピュータ
２０６：デコーダ
２０７：画像処理部
２０８：外部メモリ
２０９：表示部
２１０：操作部

Claims (7)

1. 複数の視差画像を出力する撮像装置であって、
   画像処理の操作指示を行う操作手段と、
   前記操作手段の操作指示により設定される画像処理用のパラメータを用いて第１の視差画像および第２の視差画像を処理する画像処理手段を備え、
   前記画像処理手段は、前記操作手段により前記パラメータの変更操作が行われた場合、変更された前記パラメータを用いて第１の視差画像または第２の視差画像の一方を生成し、その後に前記操作手段により前記パラメータの変更操作が行われない場合には、残りの一方の第２の視差画像または第１の視差画像を生成することを特徴とする撮像装置。
2. 第１の視差画像および第２の視差画像を記憶する記憶手段と、
   前記記憶手段に記憶された第１の視差画像または第２の視差画像を読み出す制御手段と、
   前記画像処理手段による処理に従って画像を表示する表示手段をさらに備え、
   前記画像処理手段は、前記制御手段により前記記憶手段から読み出した第１の視差画像または第２の視差画像に対して、前記パラメータを用いて前記処理を行うことを特徴とする請求項１に記載の画像処理装置。
3. 前記画像処理手段は、前記操作手段により前記パラメータを変更する操作が行われた場合、変更された前記パラメータを用いて第１の視差画像または第２の視差画像の一方を生成し、前記操作手段により立体視表示の操作指示が行われた場合に残りの一方の第２の視差画像または第１の視差画像を生成することを特徴とする請求項１または２に記載の撮像装置。
4. 前記操作手段により前記パラメータの変更操作が行われた場合、変更された前記パラメータを用いて前記画像処理手段が生成した第１の視差画像または第２の視差画像の一方を表示手段が取得して画像を表示し、その後に前記操作手段により前記パラメータの変更操作が行われない場合には、前記画像処理手段が生成した残りの一方の第２の視差画像または第１の視差画像を表示手段が取得して立体視表示を行うことを特徴とする請求項３に記載の撮像装置。
5. 前記操作手段によって、画像処理された画像の保存指定の操作が行われた場合、前記画像処理手段は前記第１の視差画像と第２の視差画像を合成して合成画像を生成することを特徴とする請求項１から４のいずれか１項に記載の撮像装置。
6. 各マイクロレンズに対して、撮像光学系の射出瞳の分割された異なる領域を通過した光束を受光して光電変換する複数の光電変換部を有する撮像素子を備え、
   前記撮像素子により取得した画素データから前記第１の視差画像および第２の視差画像として左目用画像データおよび右目用画像データを生成して出力することを特徴とする請求項１から５のいずれか１項に記載の撮像装置。
7. 複数の視差画像を出力する撮像装置にて実行される制御方法であって、
   画像処理の操作指示を受け付ける操作ステップと、
   前記操作ステップでの操作指示により設定される画像処理用のパラメータを用いて第１の視差画像および第２の視差画像を処理する画像処理ステップを有し、
   前記画像処理ステップでは、前記操作ステップにて前記パラメータの変更操作が行われた場合、変更された前記パラメータを用いて第１の視差画像または第２の視差画像の一方を生成し、その後に前記操作ステップにて前記パラメータの変更操作が行われない場合には、残りの一方の第２の視差画像または第１の視差画像を生成することを特徴とする撮像装置の制御方法。
   

Images