JP2023072581A - 撮像装置およびその制御方法、レンズ装置、像倍率補正用データ、画像処理装置および画像処理方法、ならびにアクセサリ装置 - Google Patents

Abstract

【課題】フォーカス範囲が制限された状態で撮影された画像のブリージングを適切に補正するための撮像装置およびその制御方法、レンズ装置、像倍率補正用データ、画像処理装置および画像処理方法、ならびにアクセサリ装置を提供すること。【課題手段】撮像装置は、レンズ装置から、レンズ装置の合焦範囲を設定する部材の状態に応じた像倍率補正に関する情報を取得する。撮像装置は、レンズ装置を用いて撮影された画像の画角を、像倍率補正に関する情報と、画像の撮影時のレンズ装置の状態に関する情報とに基づいて補正する。撮影時のレンズ装置の状態に関する情報には部材の状態が含まれる。【選択図】図２

Description

本発明は撮像装置およびその制御方法、レンズ装置、像倍率補正用データ、画像処理装置および画像処理方法、ならびにアクセサリ装置に関する。

フォーカスレンズの移動によって生じる画角変化（ブリージング）を補正する技術が知られている（特許文献１）。

特開２００８－４２４０５号公報

特許文献１では、最も狭い画角となる無限遠を基準として、画角の広くなる至近側のフォーカスレンズ位置で撮影された画像をトリミングしてブリージングを補正している。そのため、フォーカス範囲（フォーカスレンズの移動範囲）を制限して撮影した画像について、不必要なトリミングが行われうる。

また、至近端が最も狭い画角となるブリージングを補正する場合には、無限遠側のフォーカスレンズ位置で撮影された画像を拡大およびトリミングする。この場合も、フォーカス範囲（フォーカスレンズの駆動範囲）を制限して撮影した画像について、不必要な拡大およびトリミングが行われうる。

本発明はこのような従来技術の課題に鑑みてなされたものである。本発明はその一態様において、フォーカス範囲が制限された状態で撮影された画像のブリージングを適切に補正するための撮像装置およびその制御方法、レンズ装置、像倍率補正用データ、画像処理装置および画像処理方法、ならびにアクセサリ装置を提供する。

上述の目的は、例えば、レンズ装置から、レンズ装置の合焦範囲を設定する部材の状態に応じた像倍率補正に関する情報を取得する取得手段と、レンズ装置を用いて撮影された画像の画角を、像倍率補正に関する情報と、画像の撮影時のレンズ装置の状態に関する情報とに基づいて補正する補正手段と、を有し、撮影時のレンズ装置の状態に関する情報には部材の状態が含まれることを特徴とする撮像装置によって達成される。

本発明によれば、フォーカス範囲が制限された状態で撮影された画像のブリージングを適切に補正するための撮像装置およびその制御方法、レンズ装置、像倍率補正用データ、画像処理装置および画像処理方法、ならびにアクセサリ装置を提供することができる。

本発明のレンズ装置及び撮像装置の概略ブロック構成図 本発明のフォーカスレンズの位置と補正倍率の関係を示した模式図 本発明のフォーカス駆動範囲限定状態での補正倍率を示した模式図 本発明のフォーカスレンズの位置と補正倍率の関係を示した模式図 本発明の像倍率補正処理の動作フロー図 本発明のレンズ装置と撮像装置のレンズ通信フロー図 本発明の像倍率補正データの構造についての説明図 ホワイトバランス制御フロー図

以下、添付図面を参照して本発明をその例示的な実施形態に基づいて詳細に説明する。なお、以下の実施形態は特許請求の範囲に係る発明を限定しない。また、実施形態には複数の特徴が記載されているが、その全てが発明に必須のものとは限らず、また、複数の特徴は任意に組み合わせられてもよい。さらに、添付図面においては、同一若しくは同様の構成に同一の参照番号を付し、重複した説明は省略する。

なお、以下では、本発明をデジタルカメラで実施する形態に関して説明する。しかし、本発明には撮像素子や撮像光学系などの撮像機能は必須でない。そのため、本発明は画像データを取扱可能な任意の電子機器で実施可能である。このような電子機器には、撮像装置の他に、コンピュータ機器（パーソナルコンピュータ、タブレットコンピュータ、メディアプレーヤ、ＰＤＡなど）、携帯電話機、スマートフォン、ゲーム機、ロボット、ドローン、ドライブレコーダが含まれる。これらは例示であり、本発明は他の電子機器でも実施可能である。

●（第１実施形態）
図１は、本発明の実施形態に係る、レンズ装置および撮像装置からなる撮像システムの機能構成例を示すブロック図である。撮像装置１００には、レンズマウント部１８０を介して、レンズ装置１５０が着脱可能に装着されている。なお、レンズ装置１５０は撮像装置１００に一体化されていてもよい。

まず、撮像装置１００内の構成について説明する。撮像素子１０２は、例えばＣＣＤイメージセンサやＣＭＯＳイメージセンサなどである。撮像素子１０２には光電変換部を有する画素が複数、２次元的に配列されており、レンズ装置１５０が生成する光学像を画素信号群（アナログ画像信号）に変換する。撮像素子１０２は例えば原色ベイヤー配列のカラーフィルタを有する。従って、各画素はＲ（赤）、Ｇ（緑）、青（Ｂ）のいずれかのカラーフィルタを有する。なお、原色ベイヤー配列以外のカラーフィルタを用いてもよい。

例えば、撮像素子１０２は、補色フィルタを配列したカラーフィルタを用いても良い。また、撮像素子１０２は、像ブレを抑制するために、レンズ装置１５０の光軸に垂直な面のｘ軸方向とｙ軸方向に移動可能である。撮像素子１０２の移動は、イメージャー駆動部１０９を通じてシステム制御部１３０が制御する。

画像生成部１０３は撮像素子１０２から得られるアナログ画像信号をデジタル画像信号に変換する。デジタル画像信号は、メモリ制御部１０５および画像処理部１４０へ入力される。

タイミング発生部１０４は、撮像素子１０２、画像生成部１０３、メモリ制御部１０５、システム制御部１３０および画像処理部１４０にクロック信号および同期信号を供給する。

メモリ制御部１０５は、画像生成部１０３、タイミング発生部１０４、画像表示装置１０６、メモリ１０７、記録部１０８および画像処理部１４０を制御する。画像生成部１０３からのデジタル画像信号は、画像処理部１４０およびメモリ制御部１０５を介してメモリ１０７および記録部１０８に書き込まれる。

画像表示装置１０６は、例えばＬＣＤや有機ＥＬディスプレイである。画像表示装置１０６は、撮像装置１００が撮影モードのとき、撮像素子１０２を用いて撮像した動画を逐次表示し、電子ビューファインダー（ＥＶＦ）機能を実現する。画像表示装置１０６は、撮像装置１００が再生モードのとき、メモリ１０７および記録部１０８に記録された画像を表示する。また、画像表示装置１０６は、メニュー画面などのユーザインタフェースや、撮像システムに関する情報なども表示する。

メモリ１０７は、撮影で得られた、あるいは記録部１０８から読み出された静止画データや動画データを格納したり、システム制御部１３０の作業領域として使用されたりする。メモリ１０７の一部は画像表示装置１０６用のビデオメモリとして用いられてもよい。また、メモリ１０７は不揮発性の領域を有し、撮像装置１００の設定値、システム制御部１３０が実行するプログラム、ＧＵＩデータなどを記憶する。メモリ１０７の不揮発性領域は、後述する、レンズ装置１５０の光学収差補正に関するデータ、像倍率補正に関するデータも記憶する。

記録部１０８は、例えば着脱可能なメモリカードである。撮影によって得られた画像は、データファイルに格納されて記録部１０８に記録される。記録部１０８は撮像装置１００に内蔵された記憶装置であってもよい。

シャッター制御部１１０は、システム制御部１３０の制御に基づいて、シャッター１０１を駆動する。

ＳＷ１（スイッチ１）１１５は、シャッタースイッチの半押し操作によってオンする。システム制御部１３０は、ＳＷ１のオンを、静止画の撮影準備指示として認識し、予め定められた撮影準備動作を実行する。撮影準備動作には、ＡＦ（自動焦点検出）処理、ＡＥ（自動露出制御）処理、ＡＷＢ（自動ホワイトバランス調整）処理などが含まれうる。

ＳＷ２（スイッチ２）１１６は、シャッタースイッチの全押し操作によってオンする。システム制御部１３０は、ＳＷ２のオンを、静止画の撮影開始指示として認識し、予め定められた静止画撮影動作を実行する。静止画撮影動作は、露出条件にしたがった撮像素子１０２の露光動作、撮像素子１０２から得られる画像信号から記録用の静止画データファイルを生成する動作、生成した静止画データファイルを記録部１０８に記録する動作などを含みうる。

カメラ操作部１１７は、ユーザが撮像装置１００に指示を与えるために設けられたスイッチ、ボタン、キーなどの入力デバイスの総称である。カメラ操作部１１７を構成する入力デバイスは、割り当てられた機能に応じた名称を有する。例えば、カメラ操作部１１７には、動画記録スイッチ、撮影モードを選択するための撮影モード選択ダイヤル、メニューボタン、方向キー、決定キーなどが含まれる。

なお、同一の入力デバイスに割り当てられる機能は可変であってよい。また、入力デバイスはタッチディスプレイを用いたソフトウェアボタンもしくはキーであってもよい。また、操作部１１７は、音声入力や視線入力など、非接触な入力方法に対応した入力デバイスを含んでもよい。

ジャイロセンサ１１８は、撮像装置１００の姿勢に応じた信号を生成し、システム制御部１３０に出力する。ジャイロセンサ１１８が出力する信号は、像ブレ補正のための撮像素子１０２の移動やシフトレンズ１５４の駆動を制御するために用いられる。

Ｉ／Ｆ（インターフェース）１２０は、レンズ装置１５０との通信インターフェースである。Ｉ／Ｆ１２０はコネクタ１９０を通じてレンズ装置１５０のＩ／Ｆ１７０と電気的に接続される。システム制御部１３０は、Ｉ／Ｆ１２０を通じてレンズ制御部１６０と通信することができる。システム制御部１３０は、Ｉ／Ｆ１２０を通じたレンズ制御部１６０との通信により、レンズ装置１５０の情報を取得したり、レンズ装置１５０の動作を制御したりする。

コネクタ１９０は、撮像装置１００とレンズ装置１５０との信号や電力を伝達する電気的な接点である。

システム制御部１３０はプログラムを実行可能な１つ以上のプロセッサ（ＣＰＵ）である。システム制御部１３０は、メモリ１０７の不揮発性領域に記憶されたプログラムを実行することにより、撮像装置１００およびレンズ装置１５０の動作を制御し、撮像システムの機能を実現する。システム制御部１３０は、シャッタースイッチ１１５、１１６およびカメラ操作部１１７の操作を監視し、操作が検出された場合には操作に応じた処理を実行する。

制御部１３０内のＡＦ制御部１３１、ＡＥ制御部１３２、レンズ通信制御部１３３、および光学補正制御部１３４は、システム制御部１３０が実行する動作の一部を機能ブロックとして表現したものである。したがって、これらの制御部１３１～１３４の動作は、実際にはシステム制御部１３０がプログラムを実行して実現する。

ＡＦ制御部１３１は、撮像装置１００のＡＦ処理を司る。ＡＦ制御部１３１は、Ｉ／Ｆ１２０を介してレンズ装置１５０から得られる焦点距離やフォーカスレンズ１５１の位置などの情報と、例えば画像処理部１４０が生成するＡＦ評価値に基づいてフォーカスレンズ駆動量を決定する。ＡＦ制御部１３１は、レンズ通信制御部１３３およびＩ／Ｆ１２０を介して、フォーカスレンズ駆動量を含んだ制御信号をレンズ装置１５０に送信することによって、フォーカスレンズ１５１の位置を制御する。

ＡＥ制御部１３２は、撮像装置１００のＡＥ処理を司る。ＡＥ制御部１３２は、Ｉ／Ｆ１２０を介してレンズ装置１５０から得られる開放Ｆ値や焦点距離などの情報と、例えば画像処理部１４０が生成するＡＥ評価値などに基づいて、露出条件（絞り値、シャッタースピード、ＩＳＯ感度など）を決定する。ＡＥ制御部１３２は、レンズ通信制御部１３３およびＩ／Ｆ１２０を介して、絞り値を含んだ制御信号をレンズ装置１５０に送信することによって、絞り１５３の開口量を制御する。また、ＡＥ制御部１３２は、ＩＳＯ感度に基づいて撮像素子１０２で用いるゲインを制御する。

レンズ通信制御部１３３は、撮像装置１００とレンズ装置１５０との通信処理を司る。Ｉ／Ｆ１２０を介してレンズ装置１５０が装着されたことを検知すると、撮像装置１００はレンズ通信制御部１３３を通じてレンズ装置１５０との通信が可能になる。

例えば、システム制御部１３０が情報要求信号を送信すると、レンズ制御部１６０は後述する図５のフローチャートに示すような動作によってレンズ装置１５０に関する情報を撮像装置１００に送信する。撮像装置１００とレンズ装置１５０とは、任意のタイミングもしくはタイミング発生部１０４より出力された撮像同期信号に基づいたタイミングで通信することができる。レンズ装置１５０は、タイミング発生部１０４からの撮像同期信号が入力されると、同期信号通信モードで、レンズ装置１５０の現在の状態に関する情報である状態情報を送信するようにしてもよい。状態情報はフォーカスレンズ位置、フォーカスレンズ状態、絞り値、焦点距離、収差可変量などであってよい。なお、収差可変量は特定の機種のレンズ装置１５０が送信するものであり、含まれない場合もある。

光学補正制御部１３４は、レンズ装置１５０から受信した情報に応じて、設計データを含めた光学収差補正に関する情報と像倍率補正に関するデータをメモリ１０７から読み出し、読み出した情報からレンズ装置の状態情報に応じた補正値を決定する。光学補正制御部１３４は、決定した補正値を画像処理部１４０に設定することにより、画像処理部１４０における像倍率補正、歪曲収差補正、倍率色収差補正、周辺光量補正、および、画像回復などの光学収差補正に関する処理を制御する。

画像処理部１４０はデジタル画像信号に対して様々な処理を適用し、信号や画像データを生成したり、各種の情報を取得および／または生成したりする。画像処理部１４０は例えば特定の機能を実現するように設計されたＡＳＩＣのような専用のハードウェア回路であってもよいし、少なくとも一部の機能をＤＳＰのようなプロセッサがプログラムを実行することで実現する構成であってもよい。

ここで、画像処理部１４０が適用する画像処理には、色補間処理、補正処理、検出処理、データ加工処理、評価値算出処理、特殊効果処理などが含まれる。
色補間処理は、撮影時に得られない色成分の値を補間する処理であり、デモザイク処理とも呼ばれる。
補正処理には、ホワイトバランス調整、階調補正、レンズ装置１５０の撮像光学系の光学収差に起因する画像劣化の補正（画像回復）、撮像光学系の周辺減光の影響の補正、色補正などの処理が含まれる。
検出処理には、特徴領域（たとえば顔領域や人体領域）やその動きの検出、人物の認識処理などが含まれる。
データ加工処理には、合成、スケーリング、符号化および復号、ヘッダ情報生成（データファイル生成）などの処理が含まれる。
評価値算出処理には、自動焦点検出（ＡＦ）に用いる信号や評価値の生成、自動露出制御（ＡＥ）に用いる評価値の生成などの処理が含まれる。
特殊効果処理には、ボケ効果の付加、色調の変更、リライティングなどの処理などが含まれる。
なお、上述した処理は画像処理部１４０が適用可能な処理の例示であり、画像処理部１４０が適用する処理を限定するものではない。

画像処理部１４０は、用途に応じた画像データを生成することができる。そのうち、記録用の画像データは、設定に従った形式のデータファイルに格納して記録部１０８に記録される。また、表示用の画像データは、画像表示装置１０６に表示される。

画像処理部１４０内のリサイザ１４１、像倍率補正部１４２、歪曲収差補正部１４３、倍率色収差補正部１４４、周辺光量補正部１４５、および画像回復部１４６は、システム制御部１３０が実行する動作の一部を機能ブロックとして表現したものである。したがって、これらの機能ブロック１４１～１４６の動作は、実際には画像処理部１４０が実行する。

像倍率補正部１４２は、レンズ装置１５０のブリージングを、画角の広くなった画像に対して拡大処理とトリミング処理を適用することによって、基準となる画角に補正する。像倍率補正部１４２の動作の詳細については後述する。

歪曲収差補正部１４３は、光学補正制御部１３４が取得した歪曲収差の補正データに基づいて、デジタル画像信号に対して歪曲収差の補正処理を適用する。

倍率色収差補正部１４４は、光学補正制御部１３４が取得した倍率色収差の補正データに基づいて、デジタル画像信号に対して倍率色収差の補正処理を適用する。

周辺光量補正部１４５は、光学補正制御部１３４が取得した周辺光量の補正データに基づいて、デジタル画像信号に対して周辺光量の補正処理を適用する。

画像回復部１４６は、光学補正制御部１３４が取得した画像回復のための補正データに基づいて、デジタル画像信号に対して画像回復処理を適用する。

次にレンズ装置１５０について説明する。レンズ装置１５０は、可動レンズであるフォーカスレンズ１５１、ズームレンズ１５２、シフトレンズ１５４を含む、複数の光学部材から構成される撮像光学系を有する。

フォーカスレンズ１５１は、光軸方向に移動し、撮像光学系の合焦距離を調整する。
ズームレンズ１５２は、光軸方向に移動して撮像光学系の焦点距離（画角）を調整する。
絞り１５３は、開口径（絞り値）が可変であり、レンズ装置１５０から撮像装置１００に入射する光量を調整する。
シフトレンズ１５４は、光軸方向に対して直交し、かつ互いに直行するｘ軸方向とｙ軸方向に移動可能であり、撮像装置１００の動きによる像ブレを抑制するように移動が制御される。

フォーカス制御部１５５は、レンズ制御部１６０もしくはレンズ操作部１６１の制御に従い、フォーカスレンズ１５１を駆動する。また、フォーカス制御部１５５は、フォーカスレンズ１５１の現在位置もしくは撮像光学系の合焦距離などのフォーカス情報をレンズ制御部１６０へ出力する。

ズーム制御部１５６は、レンズ制御部１６０もしくはレンズ操作部１６１の制御に従い、ズームレンズ１５２を駆動する。また、ズーム制御部１５６は、現在の撮像光学系の焦点距離などのズーム情報をレンズ制御部１６０へ出力する。

ズームレンズ１５２は、撮像光学系の光学収差の量を可変するための収差可変レンズを有してもよい。収差可変レンズもズーム制御部１５６によって光軸方向への移動が制御される。ズームレンズ１５２が収差可変レンズを有する場合、ズーム制御部１５６は、収差可変量に関する情報をレンズ制御部１６０へ出力する。

絞り制御部１５７は、レンズ制御部１６０もしくはレンズ操作部１６１の制御に従って絞り１５３を駆動し、絞り１５３の開口量（絞り値）を制御する。また、絞り制御部１５７は、現在の絞り値などの絞り情報をレンズ制御部１６０へ出力する。

角速度検出部１５８は、レンズ装置１５０の特定方向（例えばＹａｗおよびＰｉｔｃｈ方向）の角速度を検出し、レンズ制御部１６０へ出力する。

光学防振制御部１５９は、レンズ制御部１６０の制御に従い、レンズ装置１５０の角速度情報や、撮像装置１００のジャイロセンサ１１８の出力に基づく情報に基づいてシフトレンズ１５４を駆動する。また、光学防振制御部１５９は、シフトレンズ１５４の位置情報をレンズ制御部１６０へ出力する。

レンズ情報記憶部１６５は、レンズ装置１５０（撮像光学系）の光学収差に関する設計データ、像倍率補正に関する設計データ、フォーカスリミットスイッチの有無や状態数など、レンズ装置１５０に関する静的な情報を記憶する不揮発性メモリである。レンズ情報記憶部１６５はレンズ制御部１６０が参照可能である。

レンズ制御部１６０は、例えばプログラムを実行可能なプロセッサ（ＣＰＵ）と、プログラムを記憶する不揮発性メモリと、実行するプログラムをロードするためのメモリとを有する。レンズ制御部１６０は、ＣＰＵでプログラムを実行することにより、各機能ブロックの動作を制御する。また、レンズ制御部１６０は、システム制御部１３０からの要求に応じてレンズ装置１５０に関する情報を送信したり、絞り１３３やフォーカスレンズ１５１などの可動部材の駆動を制御したりする。

レンズ操作部１６１は、レンズ装置１５０の筐体に設けられ、ユーザがレンズ装置１５０の動作に関する設定を切り替えたり調整を行ったりするための入力デバイスの総称である。レンズ操作部１６１には例えばフォーカスリミットスイッチ、フォーカス操作リング、ズーム操作リング、ＡＦ／ＭＦスイッチ、防振オンオフスイッチ、収差可変コントロールリングなどが含まれうる。これらは例示であり、他の操作部材が含まれてもよい。

フォーカスリミットスイッチは、レンズ装置１５０のフォーカス範囲（合焦範囲またはフォーカスレンズ１５１の駆動範囲）を指定するスイッチである。本実施形態では一例として、レンズ装置１５０が、以下の３つのフォーカス範囲（モード）を指定可能なフォーカスリミットスイッチを有するものとする。
・フルモード
フォーカスレンズ１５１の駆動範囲に制限がないモードである。フォーカスレンズは可動範囲全体（例えば至近端（＜０．３ｍ）～無限遠の合焦距離の範囲）で駆動される。
・マクロモード
合焦距離をマクロ撮影に適した至近距離の範囲（例えば０．３ｍ～０．５ｍ）に限定してフォーカスレンズ１５１が駆動されるモードである。
・通常モード
ポートレート撮影や遠景など、一般的な撮影に適した合焦距離（例えば０．５ｍ～無限遠）の範囲でフォーカスレンズ１５１が駆動されるモードである。
なお、フルモード以外のモードは単なる例示であり、モードの数や種類は任意である。

フォーカスリミットスイッチを持たないレンズ装置１５０については、撮像装置１００はフルモードもしくは通常モードのみを有するレンズ装置として取り扱うことができる。また、レンズ装置１５０のフォーカス範囲は、撮像装置１００の設定によってもフォーカスリミットスイッチと同様に制御することができる。したがって、システム制御部１３０は、フォーカスリミットスイッチの有無および／または状態に加え、フォーカス範囲に関する撮像装置１００の設定の有無および／または設定状態を考慮して、フォーカス範囲を認識する。

レンズ制御部１６０は、レンズ操作部１６１の操作を検出すると、Ｉ／Ｆ１７０を介して操作内容を撮像装置１００（システム制御部１３０）へ送信する。システム制御部１３０は、Ｉ／Ｆ１２０を介してレンズ操作部１６１の操作内容を受信すると、操作内容に応じて、レンズ装置１５０の機能の動作モードを切り替える。

Ｉ／Ｆ（インターフェース）１７０は、撮像装置１００との通信インターフェースである。Ｉ／Ｆ１７０はコネクタ１９０を通じて撮像装置１００のＩ／Ｆ１２０と電気的に接続される。レンズ制御部１６０は、Ｉ／Ｆ１７０を通じてシステム制御部１３０と通信することができる。レンズ制御部１６０は、Ｉ／Ｆ１７０を通じたシステム制御部１３０との通信により、レンズ装置１５０の情報を送信したり、レンズ装置１５０の動作を制御したりする。

次に、本実施形態において撮像装置１００が実行する像倍率補正処理について説明する。
像倍率補正処理は、フォーカスレンズ１５１の駆動によって生じるレンズ装置１５０（撮像光学系）の画角変動（ブリージング）を補正する処理である。ここでは、基準画角よりも広い画角で撮影された画像に拡大処理とトリミング処理を適用して基準画角相当の画像を生成することにより、画角変動を補正するものとする。本発明では、画像処理部１４０の像倍率補正部１４２に画角変動を補正するための画角補正値を設定することにより、システム制御部１３０が像倍率補正処理を制御することができる。

次に、画角補正値の決定方法について説明する。システム制御部１３０は、後述する像倍率補正に関する情報、レンズ装置１５０に関する情報、撮像装置１００に関する情報を参照して、画角補正値を決定することができる。

像倍率補正に関する情報は、フォーカスレンズの位置（レンズ装置１５０の合焦距離）に応じた画角変動を補正するための情報であり、補正倍率、基準倍率、および最大倍率が含まれる。これらの倍率はレンズ装置１５０の焦点距離、合焦距離、収差可変量、フォーカスリミットスイッチの状態に応じて変化する。また、レンズ装置１５０の機種に応じて、像倍率補正に関する情報に含まれる情報数が変化しうる。したがって、レンズ装置１５０のレンズ情報記憶部１６５に、レンズ装置１５０に適した像倍率補正に関する情報が予め記憶されている。

なお、補正倍率の代わりに、補正倍率を得ることが可能な他の情報を用いてもよい。例えばフォーカスレンズの位置に応じた画角変動率を用いることができる。画角変動率の逆数を取得することにより補正倍率が得られる。

システム制御部１３０は、像倍率補正に関する情報をレンズ制御部１６０との通信によってレンズ装置１５０から取得し、メモリ１０７に記憶する。なお、像倍率補正に関する情報は、撮像装置１００が有する外部インタフェース（ＵＳＢ、無線ＬＡＮ、Bluetooth（登録商標）インタフェースなど）を通じて通信可能な外部装置から取得してもよい。あるいは、複数のレンズ装置の機種についての像倍率補正に関する情報を予めメモリ１０７に記憶しておき、装着されたレンズ装置１５０の機種に応じた情報をメモリ１０７から取得してもよい。

システム制御部１３０は、フォーカスレンズ位置、焦点距離、フォーカスリミットスイッチの状態など、レンズ装置１５０の現在の状態に関する情報を、任意のタイミング、および／または、撮像フレームに同期したタイミングで、レンズ装置１５０から取得する。

システム制御部１３０はまた、ＡＥ処理やユーザ設定などに基づく撮影条件など、撮像装置１００に関する情報を取得する。そして、システム制御部１３０は、取得した、レンズ装置１５０および撮像装置１００に関する情報を用いて画角補正値を決定する。

像倍率補正に関する情報について詳細に説明する。図２は、レンズ装置のフォーカスレンズの位置と補正倍率との関係例を模式的に示す図である。図２および以下の説明では、理解を容易にするため、フォーカスレンズ位置の代わりに、フォーカスレンズ位置に対応する合焦距離を用いている場合がある。

図２に実線２０１で示す例では、合焦距離が０．３ｍのフォーカスレンズ位置での補正倍率は１００％である。倍率１００％は１倍に相当し、元の大きさのままであること（拡大されないこと）を意味する。同様に、合焦距離が０．５ｍ、無限遠のフォーカスレンズ位置での補正倍率はそれぞれ１３０％、１５０％である。このように、図２の関係を有するレンズ装置は、ブリージングによって無限遠側の画角が広くなる特性を有している。

実線２０１の関係に従って補正倍率を画角補正値として像倍率補正部１４２に設定することで、システム制御部１３０はフォーカスレンズ位置（合焦距離）の変化による画角変化を補正することができる。これが、像倍率補正処理である。

図２に示す関係は、レンズ装置１５０の状態（焦点距離や収差可変量）に応じて変化する。従って、レンズ装置１５０の複数の状態について関係を記憶しておく。なお、ある状態における関係から他の状態における関係が換算できる場合、基準となる関係と換算に必要な情報を記憶しておいてもよい。また、状態の関数として関係を表現できる場合には、関数を記憶してもよい。状態ごとに関係を記憶する場合、記憶に必要な容量を削減するため、後述する様に離散的な複数の状態について記憶することができる。

図３は、レンズ装置１５０のレンズ操作部１６１がフォーカスリミットスイッチを有する場合の、フォーカスリミットスイッチの状態に応じた、フォーカスレンズの位置と補正倍率との関係例を模式的に示す図である。ここでは、先に説明したように、フォーカスリミットスイッチがフルモード、マクロモード、通常モードのいずれかを設定可能であるものとする。

図３（ａ）は、フォーカスリミットスイッチの状態がフルモードである場合の補正倍率とフォーカスレンズ位置の関係例を模式的に示す図である。３０２は、至近端から０.３ｍの合焦距離に相当するフォーカスレンズ位置での補正倍率が基準倍率であることを示している。３０３は、無限遠の合焦距離に相当するフォーカスレンズ位置で補正倍率が最大となり、基準倍率を１００％としたときに１５０％であることを示している。フォーカスリミットスイッチの状態がフルモードの場合、至近端から無限遠までの合焦距離（フォーカスレンズの可動範囲全域）について像倍率補正が可能であるが、画像は最大で１５０％（１．５倍）拡大される。

図３（ｂ）は、フォーカスリミットスイッチの状態がマクロモードである場合の補正倍率とフォーカスレンズ位置の関係例を模式的に示す図である。マクロモードでは、フォーカスレンズが０．３～０．５ｍの合焦距離の範囲に限定されて駆動される。３０５は、０．３ｍの合焦距離に相当するフォーカスレンズ位置での補正倍率が基準倍率であることを示している。３０６は、０．５ｍの合焦距離に相当するフォーカスレンズ位置で補正倍率が最大となり、基準倍率を１００％としたときに１３０％であることを示している。フォーカスリミットスイッチの状態がマクロモードの場合、最大倍率が１３０％となり、フルモードの場合よりも基準倍率に対する最大倍率を低減することができる。

図３（ｃ）は、フォーカスリミットスイッチの状態が通常モードである場合の補正倍率とフォーカスレンズ位置の関係例を模式的に示す図である。通常モードでは、フォーカスレンズが０．５ｍ～無限遠の合焦距離の範囲に限定されて駆動される。３０８は、０．５ｍの合焦距離に相当するフォーカスレンズ位置での補正倍率が基準倍率であることを示している。３０９は、無限遠の合焦距離に相当するフォーカスレンズ位置で補正倍率が最大となり、基準倍率を１００％としたときに１１５％であることを示している。フォーカスリミットスイッチの状態が通常モードの場合、最大倍率が１１５％となり、フルモードおよびマクロモードの場合よりも基準倍率に対する最大倍率を低減することができる。

このように、本実施形態では、フォーカスレンズの駆動範囲に応じて基準倍率となる補正倍率を変更することにより、フォーカスレンズの駆動範囲における画像の最大倍率を抑制することができる。画像は拡大することで画質が低下するため、最大倍率は低い方がよい。従来は、フォーカスレンズの駆動範囲が限定される場合であってもフルモードと同様にして倍率を決定していたため、倍率が不必要に大きくなり、画質の低下を招いていた。また、基準倍率が適用される画像に対する不必要なトリミング処理が発生する。

例えば、通常モードが設定されている場合でも従来はフルモードに基づく倍率が適用されるため、フォーカスレンズの駆動範囲の至近端である０．５ｍの合焦距離で撮影された画像に対して１３０％（１．３倍）の拡大処理が適用される。また、合焦距離が無限遠で撮影された画像の画角を合焦距離が０．５ｍのときの画角と合わせるため、さらに１１５％（１．１５倍）の拡大処理が適用される。すなわち、合焦距離が無限遠で撮影された画像には、総倍率１．５倍（１．３倍×１．１５倍）の拡大処理が適用される。

これに対し、本実施形態では、フォーカスレンズの駆動範囲の至近端である０．５ｍの合焦距離で撮影された画像に対する補正倍率を基準倍率とする。そのため、０．５ｍの合焦距離で撮影された画像には拡大処理が適用されない（１００％（１倍）の拡大処理が適用されてもよい）。従って、合焦距離が無限遠で撮影された画像に対して画角変動を補正するために適用される拡大処理の総倍率は１．１５倍であり、拡大による画質低下を抑制することができる。

本実施形態は、ブリージングによって、合焦距離が長くなるほど画角が広くなるレンズ装置を想定している。そのため、フォーカスレンズの駆動範囲のうち、画角が最小となる最短の合焦距離に対応するフォーカスレンズ位置における補正倍率が基準倍率となるようにする。本実施形態によれば、ブリージングによる画角変化を抑制しつつ、従来よりも画角の補正による画質の低下を抑制することができる。

図４を用いて、フォーカスリミットスイッチに応じた基準倍率と最大倍率とから補正倍率を取得する方法を説明する。フォーカスリミットスイッチは図３と同様のフルモード、マクロモード、通常モードのいずれかを設定可能であるものとする。

図４は、基準倍率、最大倍率を、フォーカスリミットスイッチの状態に応じて以下の様に設定する場合の例に対応する。
フルモード ：基準倍率は補正倍率１００％、最大倍率は１５０％
マクロモード：基準倍率は補正倍率１００％、最大倍率は１３０％
通常モード ：基準倍率は補正倍率１３０％、最大倍率は１５０％

図４はフォーカスレンズの位置と補正倍率との関係の例を示す。実線２０１で示す関係は、図２に示したものと同じである。
４０２は、０．３ｍの合焦距離に相当するフォーカスレンズ位置での補正倍率を示す。
４０３は、０．５ｍの合焦距離に相当するフォーカスレンズ位置での補正倍率を示す。
４０４は、無限遠の合焦距離に相当するフォーカスレンズ位置での補正倍率を示す。

フォーカスレンズの駆動範囲を考慮しない場合、図２に示した通り、４０２は１００％、４０３は１３０％、４０４は１５０％である。
フルモードではフォーカスレンズが可動範囲の全域で駆動される。そのため、図２と同様に、０．３ｍの合焦距離に相当するフォーカスレンズ位置での補正倍率１００％を基準倍率として、無限遠の合焦距離に相当するフォーカスレンズ位置での最大倍率１５０％までの拡大処理が適用される。これは、図３（ａ）に示したものと同等の像倍率補正処理に相当する。

マクロモードではフォーカスレンズが０．３～０．５ｍの合焦範囲に対応する範囲で駆動される。この場合、０．３ｍの合焦距離に相当するフォーカスレンズ位置での補正倍率１００％を基準倍率として、０．５ｍの合焦距離に相当するフォーカスレンズ位置での最大倍率１３０％までの拡大処理を適用する。これは、図３（ｂ）に示したものと同等の像倍率補正処理に相当する。

通常モードではフォーカスレンズが０．５～無限遠の合焦範囲に対応する範囲で駆動される。この場合、０．５ｍの合焦距離に相当するフォーカスレンズ位置での補正倍率１３０％を基準倍率として、無限遠の合焦距離に相当するフォーカスレンズ位置での最大倍率１５０％までの補正を行う。フルモードでの補正倍率１３０％を基準倍率１００％に変更することで、最大拡大率は１１５％となる。これは、図３（ｃ）に示したものと同等の像倍率補正処理に相当する。

システム制御部１３０は、像倍率補正部１４２に設定する画角補正値を以下のようにして決定することができる。
フォーカスレンズ位置（合焦距離）に対応した補正倍率を画角補正値とし、以下のように画角補正値を決定する。
画角補正値が基準倍率未満の場合：画角補正値＝１００％とする。
画角補正値が基準倍率以上、最大倍率未満の場合：画角補正値＝画角補正値／基準倍率×１００％とする。
画角補正値が最大倍率より大きい場合：画角補正値＝最大倍率／基準倍率×１００％とする。

例えば、通常モードに対する画角補正値は、基準倍率（合焦距離０．５ｍ）が１３０％、最大倍率（合焦距離無限遠）が１５０％である。合焦距離０．５ｍに対応する４０３の補正倍率（１３０％）は、基準倍率（１３０％）以上であることから、画角補正値は１３０／１３０×１００％から１３０％となる。また、合焦距離無限遠に対応する４０４の補正倍率（１５０％）は、最大倍率に等しいため、画像補正値は１５０／１３０×１００％から１１５％となる。これは、図３（ｃ）に示した関係に等しい。

なお、撮像装置１００の設定によってフォーカス範囲がフルモード、マクロモード、通常モードに設定される場合も、フォーカスリミットスイッチでモードが設定されている場合と同様にシステム制御部１３０は画角補正値を決定できる。

レンズ装置１５０がフォーカスリミットスイッチを持たない場合、システム制御部１３０はレンズ装置１５０に記憶された像倍率補正に関する情報を取得する。また、システム制御部１３０は、フォーカスレンズ位置（合焦距離）、基準倍率、最大倍率を取得する。そして、システム制御部１３０は、以下のように画角補正値を決定することができる。

画角補正値が基準倍率より小さい場合：画角補正値＝１００％とする。
画角補正値が基準倍率以上、最大倍率未満の場合：画角補正値＝画角補正値／基準倍率×１００％とする。
画角補正値が最大倍率以上の場合：画角補正値＝最大倍率／基準倍率×１００％とする。
このように、レンズ装置１５０がフォーカスリミットスイッチを持つ場合も持たない場合も同様の処理によってシステム制御部１３０は画角補正値を決定することができる。

なお、基準倍率と最大倍率は、レンズ装置１５０に記憶された情報をカメラ操作部１１７からのユーザー指示に応じて変更できるようにしてもよい。

なお、先に示した例では、フォーカスレンズの駆動範囲が至近側において制限されている場合に、制限された駆動範囲の至近端に相当する補正倍率が１００％（１倍）となるように基準倍率を変更する構成について説明した。しかし、フォーカスレンズの駆動範囲が至近側において制限されている場合に、駆動範囲の至近端に相当する補正倍率をフルモードのときよりも小さく（ただし１００％以上）すれば、最大倍率を抑制するという本発明の効果は得られる。

次に、図５に示すフローチャートを用いて、上述した像倍率補正処理の手順に関して説明する。
Ｓ５０１でシステム制御部１３０は、装着されているレンズ装置１５０に関する像倍率補正に関する情報を取得し、例えばレンズ装置１５０の機種名と関連づけて、メモリ１０７の不揮発性領域に記憶する。Ｓ５０１は、撮像装置１００の起動時、レンズ装置１５０の装着検出時、所定のユーザ指示の検出時などに実行することができる。なお、メモリ１０７に既にレンズ装置１５０の像倍率補正に関する情報が記憶されている場合、Ｓ５０１は実行しなくてもよい。

図７は、メモリ１０７に記憶する像倍率補正に関する情報のデータ（像倍率補正用データ）のデータ構成例を示す図である。像倍率補正用データは、基本情報領域７０１、ヘッダ領域７０２、補正値格納領域７０３を有する。本実施形態では、像倍率補正に関する情報として、レンズ装置１５０が焦点距離の可変なズームレンズの場合、ワイド端とテレ端との焦点距離範囲を複数に分割する。そして、分割点の焦点距離とフォーカスリミットスイッチの状態との組み合わせについて基準倍率、最大倍率を記憶する。また、合焦可能な距離範囲を複数に分割し、分割点に対応する合焦距離と焦点距離との組み合わせごとに補正倍率を記憶する。

基本情報領域７０１は、レンズ装置が像倍率補正に対応しているか否かを示す情報と、補正情報の数を示す情報とが格納される。システム制御部１３０は、基本情報領域７０１を参照することにより、装着されているレンズ装置１５０が像倍率補正に対応しているか否かを判定することができる。システム制御部１３０は、装着されているレンズ装置１５０が像倍率補正に対応していないと判定されれば、像倍率補正を実施せずに撮影を実行してもよい。

ヘッダ領域７０２は、レンズ装置１５０の焦点距離範囲の分割数（ズームレンズの場合は複数）ｎＮｕｍ、合焦可能な距離範囲の分割数ｆＮｕｍ、フォーカスリミットスイッチの状態数ｓｗＮｕｍと、個々の情報の分割点の情報などが格納される。ｓｗＮｕｍは１以上の自然数であり、ｓｗＮｕｍが１の場合はフォーカスリミットスイッチを持たないレンズ装置であることを示す。

焦点距離ｎ［０］～ｎ［ｎＮｕｍ－１］には焦点距離の離散的な値が格納される。
合焦距離ｆ［０］［０］～ｆ［ｎＮｕｍ－１］［ｆＮｕｍ－１］には、離散的な焦点距離ごとに離散的な合焦距離の値が格納される。
基準倍率ｂ［０］［０］～ｂ［ｎＮｕｍ－１］［ｓｗＮｕｍ－１］には、フォーカスリミットスイッチの状態と離散的な焦点距離との組み合わせごとに、基準倍率となる補正倍率が格納される。
最大倍率ｍ［０］［０］～ｍ［ｎＮｕｍ－１］［ｓｗＮｕｍ－１］には、フォーカスリミットスイッチの状態と離散的な焦点距離との組み合わせごとに、最大倍率となる補正倍率が格納される。

補正値格納領域７０３には、離散的な焦点距離と離散的な合焦距離との組み合わせごとに補正倍率が格納される。この補正倍率は、フルモードにおける補正倍率に相当する。

システム制御部１３０は、撮影時のフォーカスリミットスイッチの状態とレンズ装置１５０の焦点距離とに基づいて、基準倍率および最大倍率をヘッダ領域７０２から取得することができる。

また、システム制御部１３０は、撮影時のレンズ装置１５０の焦点距離、合焦距離（フォーカスレンズ位置）に基づいて、対応する補正倍率を補正値格納領域７０３から取得することができる。

記憶されていない値の組み合わせに対応する情報についてシステム制御部１３０は、記憶されている近い値の組み合わせを線形補間するなどして取得することができる。

ヘッダ領域７０２に格納されている焦点距離範囲の分割数（情報数）、合焦可能な距離範囲の分割数、フォーカスリミットスイッチの状態数により、格納されている情報の総数を知ることができる。また、ヘッダ領域７０２および補正値格納領域７０３に格納されるデータが固定長であれば、必要な情報が格納されているアドレスを容易に知ることができる。

なお、焦点距離ｎの代わりに収差可変情報分割数ｓＮｕｍ、収差可変情報ｓ、対応する像倍率倍率を用いてもよい。収差可変情報を記憶しているレンズ装置１５０を装着した場合は、撮像装置１００は収差可変量に応じた像倍率補正処理を行う

メモリ１０７に像倍率補正に必要な情報が用意できると、システム制御部１３０は、撮影スタンバイ状態における処理を実行しながら、ＳＷ２のオンまたは動画撮影開始ボタンの操作が検出されるのを待機する。撮影スタンバイ状態における処理は例えばライブビュー表示処理や、シャッターボタン１１５、１１６以外に対するユーザ操作に応じた処理である。

Ｓ５０２でシステム制御部１３０は、ＳＷ２のオンまたは動画撮影ボタンの操作を検知すると撮影動作を開始する。

Ｓ５０３でシステム制御部１３０は、自動露出制御（ＡＥ）および自動焦点検出（ＡＦ）処理などを行う。静止画撮影時と動画撮影時とでは処理の詳細を異ならせてもよい。

Ｓ５０４でシステム制御部１３０は、撮像素子１０２などの動作を制御して、静止画もしくは動画の１フレーム分の撮影動作を実行する。また、画像生成部１０３が撮像素子１０２から読み出されたアナログ画像信号からデジタル画像信号を生成する。

Ｓ５０５でシステム制御部１３０は、Ｓ５０４における撮影時のレンズ装置１５０の状態に関する情報（撮影情報）をレンズ制御部１６０から取得する。撮影情報は、焦点距離、合焦距離（フォーカスレンズ位置）を含み、レンズ装置１５０の機種によってはさらに収差可変量などが含まれてもよい。システム制御部１３０は、取得した撮影情報をメモリ１０７に格納する。

Ｓ５０６でシステム制御部１３０は、レンズ装置１５０のフォーカスリミットスイッチの状態をレンズ制御部１６０から取得し、メモリ１０７に格納する。なお、フォーカスリミットスイッチの状態も、Ｓ５０５で撮影情報として取得してもよい。

Ｓ５０７でシステム制御部１３０は、Ｓ５０１で取得した像倍率補正に関する情報、Ｓ５０５で取得した撮影情報、およびＳ５０６で取得したフォーカスリミットスイッチの状態から画角補正値を決定し、像倍率補正部１４２に設定する。

Ｓ５０８でシステム制御部１３０は、画像処理部１４０を制御し、Ｓ５０４で取得した１フレームの画像に対し、像倍率補正処理を含む画像処理を適用する。画像処理部１４０は記録用の静止画データファイルまたは動画データファイルと、表示用の画像データを生成する。表示用の画像データはメモリ１０７に格納され、記録用の画像データファイルは記録部１０８に記録される。

Ｓ５０９でシステム制御部１３０は、撮影終了の条件を満たしているか否かを判定する。例えば静止画撮影でＳＷ２がオンのままである場合と、動画撮影中に動画撮影ボタンの操作が検出されない場合、システム制御部１３０は撮影終了の条件を満たしていないと判定し、次フレームの撮影を行うためにＳ５０３を実行する。一方、例えば静止画撮影でＳＷ１、ＳＷ２がオフである場合と、動画撮影中に動画撮影ボタンの操作が検出された場合、システム制御部１３０は撮影終了の条件を満たしていると判定し、図５に示す処理を終了する。

次に、図６に示すフローチャートを用いて、レンズ装置１５０が撮像装置１００との間で行う通信動作について説明する。レンズ装置１５０と撮像装置１００との間の通信は、レンズ装置１５０および撮像装置１００のいずれが開始する。

Ｓ６０１でレンズ制御部１６０は、システム制御部１３０に基本情報を送信する。基本情報はレンズ装置１５０が記憶している、機種情報、像倍率補正情報の有無、フォーカスリミットスイッチの有無や状態数など、レンズ装置１５０の静的な情報であってよい。なお、システム制御部１３０からレンズ制御部１６０に対して撮像装置１００の機種情報をレンズ制御部１６０に送信してもよい。Ｓ６０１は例えば撮像装置１００の起動時や、レンズ装置１５０撮像装置１００に装着された際に実行されうる。

Ｓ６０２でレンズ制御部１６０は、システム制御部１３０から像倍率補正に関する情報の要求を受信したか否かを判定し、受信したと判定されればＳ６０３を実行し、判定されなければＳ６０４を実行する。

Ｓ６０３でレンズ制御部１６０は、レンズ情報記憶部１６５に記憶されている像倍率補正に関する情報、すなわち図７に示した像倍率補正用データを、システム制御部１３０に送信する。そして、レンズ制御部１６０はＳ６０４を実行する。

Ｓ６０４でレンズ制御部１６０は、システム制御部１３０からフォーカスリミットスイッチの状態の要求を受信したか否かを判定し、受信したと判定されればＳ６０５を実行し、判定されなければＳ６０６を実行する。

Ｓ６０５でレンズ制御部１６０は、フォーカスリミットスイッチの状態を示す情報をシステム制御部１３０に送信する。そして、レンズ制御部１６０はＳ６０６を実行する。

Ｓ６０６でレンズ制御部１６０は、システム制御部１３０から撮影情報の要求を受信したか否かを判定し、受信したと判定されればＳ６０７を実行し、判定されなければＳ６０８を実行する。

Ｓ６０７でレンズ制御部１６０は、現在の焦点距離および合焦距離に関する情報を撮影情報としてシステム制御部１３０に送信する。そして、レンズ制御部１６０はＳ６０８を実行する。

Ｓ６０８でレンズ制御部１６０は、システム制御部１３０から通信停止指示を受信したか否かを判定し、受信したと判定されればシステム制御部１３０との通信を終了し、判定されなければＳ６０２を実行する。

なお、ここでは画角変動の補正を記録前に行う場合について説明した。しかし、画角変動の補正は記録後に行ってもよい。例えば、記録用画像データに図７に示した像倍率補正に関する情報もしくは像倍率補正に関する情報を特定可能な情報（例えばレンズ装置の機種名など）と、各フレームについての撮影情報（フォーカスリミットスイッチの状態を含む）を含めて記録する。記録済みの画像データを処理する装置は、像倍率補正に関する情報を画像データファイルもしくは外部機器などから取得し、撮影情報とともに用いて、記録済みの画像データに対して画角変動を補正することが可能である。

（変形例１）
静止画の連写中もしくは動画の撮影中にフォーカス範囲が変更された場合、変更前後のフォーカス範囲に応じて基準倍率を変更するか否かを判定してもよい。例えば、フルモードから通常モードに切り替えられた場合には、画角が途中から変化しないよう、通常モードに切り替えられた際に基準倍率を変更せず、フルモードでの補正を継続してもよい。

（変形例２）
本実施形態では無限遠側で画角が広くなるレンズ装置に対する画角変動の補正について説明した。しかし、至近端側で画角が広くなるレンズ装置についても同様に補正することが可能である。この場合、図２～図４に示した関係において、フォーカスレンズ位置の至近端と無限遠の位置が逆になり、倍率がトリミング率になる。フォーカス範囲の最大距離が無限遠よりも近い距離に制限される場合、制限されたフォーカス範囲の無限遠側の端部のフォーカスレンズ位置のトリミング率が１００％（トリミングなし）となるように変更すればよい。これにより、不要なトリミングが生じることを抑制できる。

（変形例３）
なお、本実施形態ではレンズ装置１５０が像倍率補正用データを撮像装置１００に送信する例を説明したが、撮像装置１００が他の方法で像倍率補正用データを取得する構成にしても良い。

例えば、レンズ装置１５０と撮像装置１００との間にアダプタ装置が接続されている場合に、撮像装置１００はアダプタ装置から、レンズ装置１５０の像倍率補正用データを取得するようにしても良い。例えば、アダプタ装置がレンズ装置１５０とは異なる種類のレンズ装置の像倍率補正用データを有している場合には、レンズ装置１５０または撮像装置１００から装着されているレンズ装置の種別を示す情報を受信する。そして、受信した情報に対応する種別のレンズ装置の像倍率補正用データを撮像装置１００に送信するように構成してもよい。アダプタ装置は、一例として、マウント種別を変換するマウントコンバーターや、光学系を有するエクステンダー、スピードブースター等である。また、アダプタ装置およびレンズ装置１５０のように、撮像装置１００に直接的に装着可能な装置をまとめてアクセサリ装置と呼ぶ。

（変形例４）
また、本実施形態では、像倍率補正用データにおいて条件（例えばレンズ装置１５０の撮影状態）ごとの複数の補正が格納され、撮像装置１００が像倍率補正データに対して撮影時の条件と照らし合わせることで補正値を特定する例を説明した。ここで、レンズ装置１５０が像倍率補正用データに対して撮影時の条件と照らし合わせる処理を行い、特定された補正値を撮像装置１００に送信する構成をとっても良い。

（変形例５）
また、本実施形態の一部また全部の構成をサーバー上で行う構成としても良い。例えば撮像装置１００がレンズ装置１５０ではなくサーバー上のストレージに記憶されたレンズ装置１５０の像倍率補正用データをサーバーからダウンロードする構成であっても良い。また、撮像装置１００がレンズ１５０の種別と撮影時の条件をサーバーに送信することで、撮影時の条件に対応する補正値をサーバーからダウンロードする構成であっても良い。また、撮影された静止画データまたは動画データとこのデータに対応する撮影時の条件をサーバー上にアップロードし、サーバー上の処理部で画像処理を行い、補正後の静止画または動画をサーバーから取得する構成であっても良い。

（変形例６）
また、本実施形態の像倍率補正を、PC等の画像処理装置で行う構成としても良い。この場合、画像処理装置はサーバー等から像倍率補正用データを取得し、撮像装置１００から直接的または間接的に静止画データもしくは動画データを取得することで、像倍率補正を行う。

本実施形態では、レンズ装置の合焦範囲を設定する部材の状態に応じた像倍率補正に関する情報を取得し、レンズ装置を用いて撮影された画像の画角を、像倍率補正に関する情報と、画像の撮影時のレンズ装置の状態に関する情報とに基づいて補正するようにした。例えば、レンズ装置のフォーカスレンズの駆動範囲が制限されている場合、フォーカスレンズの移動に伴って生じる画角変化を補正するための画像拡大処理における基準倍率を、駆動範囲に応じて変更することができる。この場合、不必要に画像を拡大することなく画角変化を補正することができ、補正による画質低下を抑制することができる。

●（第２実施形態）
次に、本発明の第２実施形態について説明する。本実施形態は画像処理部１４０におけるホワイトバランス調整処理に関する。ブリージングを補正するためにトリミングを行う場合、トリミングによって除去される領域をホワイトバランス調整処理に反映すると、トリミング後の画像の色味が不自然に変化する恐れがある。

本実施形態は、このような課題に対し、像倍率補正処理を行う場合でも適切なホワイトバランス調整処理を実現する。

図８は、像倍率補正処理を行った場合のホワイトバランス制御処理に関するフローチャートである。
Ｓ９０１で画像処理部１４０は、処理対象のフレームについての撮影情報を取得する。なお、撮影情報はシステム制御部１３０が取得した際に画像処理部１４０に供給してもよい。
Ｓ９０２で画像処理部１４０は、撮影情報に含まれる、あるいは別途取得したフォーカスリミットスイッチの状態に基づいて、像倍率補正における最大倍率をメモリ１０７から取得する。例えば、第１実施形態で説明したレンズ装置においてフォーカスリミットスイッチの状態が通常モードであれば、最大倍率として１１５％が得られる。

Ｓ９０３で画像処理部１４０は、最大倍率を用いて、ＷＢ調整処理に用いる検出領域の縮小率Ｒを決定する。検出領域は、白と推定される画素に係るＷＢ補正値を算出するための検出領域、特定被写体（例えば、自然の緑色）に係るＷＢ補正値を算出するための検出領域、あるいはＷＢ制御に関わる顔などの特徴領域などである。

画像処理部１４０は、Ｓ９０２で取得した最大倍率Ｅｍａｘを用い、例えば以下の式（１）によって検出領域の縮小率Ｒを決定することができる。
Ｒ＝１／Ｅｍａｘ （１）
例えば、フォーカスリミットスイッチの状態が通常モードのときの最大倍率は１１５％であるから、検出領域の縮小率は８７％と決定される。

Ｓ９０４で画像処理部１４０は、Ｓ９０３で決定した縮小率を用いて、ＷＢ調整処理に用いる検出領域を設定する。具体的には、画像処理部１４０は、Ｓ９０３で算出した縮小率になるよう、像倍率補正処理を行わない場合のＷＢ制御に用いる検出領域を縮小する。

Ｓ９０５で画像処理部１４０は、Ｓ９０４で設定した検出領域を用い、像倍率補正処理を行わない場合と同様にＷＢ補正値を算出する。なお、画像から白画素や特定色の画素の領域を検出領域して用いてＷＢ補正値を算出する処理は公知であるため、詳細についての説明は省略する。

このように、本実施形態によれば、レンズ装置のブリージングによる画角変化の補正にトリミング処理を伴う場合、トリミング処理によって除去される領域をホワイトバランス調整処理に反映しないようにした。これにより、ユーザが視認する、補正後の画像領域に基づいてホワイトバランス調整処理が行われ、トリミング処理によって除去される領域の影響による色味の変化を抑制できる。

なお、ここではホワイトバランス調整処理について説明したが、ホワイトバランス補正値は画像に基づく評価値の一例である。画像に基づく他の評価値についても、トリミング処理によって除去される領域を用いないようにすることで、同様の効果が得られる。

（その他の実施形態）
本発明は、上述の実施形態の１以上の機能を実現するプログラムを、ネットワーク又は記憶媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータにおける１つ以上のプロセッサーがプログラムを読出し実行する処理でも実現可能である。また、１以上の機能を実現する回路（例えば、ＡＳＩＣ）によっても実現可能である。

本発明は上述した実施形態の内容に制限されず、発明の精神および範囲から離脱することなく様々な変更及び変形が可能である。したがって、発明の範囲を公にするために請求項を添付する。

１００…撮像装置、１０２…撮像素子、１３０…システム制御部、１４０…画像処理部、１４２…像倍率補正部、１５０…レンズ装置、１５１…フォーカスレンズ、１６０…レンズ制御部、１６１…レンズ操作部、１６５…レンズ情報記憶部

Claims (34)

1. レンズ装置から、前記レンズ装置の合焦範囲を設定する部材の状態に応じた像倍率補正に関する情報を取得する取得手段と、
   前記レンズ装置を用いて撮影された画像の画角を、前記像倍率補正に関する情報と、前記画像の撮影時の前記レンズ装置の状態に関する情報とに基づいて補正する補正手段と、
   を有し、
   前記撮影時の前記レンズ装置の状態に関する情報には前記部材の状態が含まれることを特徴とする撮像装置。
2. 前記像倍率補正に関する情報が、前記部材の状態ごとの基準倍率および最大倍率を含み、
   前記補正手段は、前記撮影時における前記部材の状態に応じた前記基準倍率および前記最大倍率とに基づいて前記画像の画角を補正することを特徴とする請求項１に記載の撮像装置。
3. 前記撮影時の前記レンズ装置の状態に関する情報には合焦距離が含まれ、
   前記補正手段は、前記部材の状態と前記合焦距離とに応じた、前記基準倍率から前記最大倍率までの倍率を用いて前記画像の画角を補正することを特徴とする請求項２に記載の撮像装置。
4. 前記レンズ装置の焦点距離が可変であり、前記像倍率補正に関する情報が、前記部材の状態と焦点距離との組み合わせに応じた情報であり、
   前記撮影時の前記レンズ装置の状態に関する情報には焦点距離が含まれ、
   前記補正手段は、前記撮影時における前記部材の状態と前記焦点距離との組み合わせに応じた前記基準倍率および前記最大倍率とに基づいて前記画像の画角を補正することを特徴とする請求項２に記載の撮像装置。
5. 前記補正手段は、前記レンズ装置の焦点距離と合焦距離との組み合わせに応じた補正倍率のうち、前記撮影時における前記部材の状態と前記焦点距離との組み合わせに応じた前記基準倍率に対応する補正倍率を１倍とした倍率で前記画像を拡大することにより前記画角を補正することを特徴とする請求項４に記載の撮像装置。
6. 前記取得手段は、さらに前記補正倍率を前記レンズ装置から取得することを特徴とする請求項５に記載の撮像装置。
7. 取得手段が、レンズ装置から、前記レンズ装置の合焦範囲を設定する部材の状態に応じた像倍率補正に関する情報を取得する取得工程と、
   補正手段が、前記レンズ装置を用いて撮影された画像の画角を、前記像倍率補正に関する情報と、前記画像の撮影時の前記レンズ装置の状態に関する情報とに基づいて補正する補正工程と、
   を有し、
   前記撮影時の前記レンズ装置の状態に関する情報には前記部材の状態が含まれることを特徴とする撮像装置の制御方法。
8. 撮像装置に着脱可能なレンズ装置であって、
   前記レンズ装置の合焦範囲を設定する部材の状態に応じた像倍率補正に関する情報を記憶する記憶手段と、
   装着された撮像装置に、前記像倍率補正に関する情報を送信する送信手段と、を有することを特徴とするレンズ装置。
9. 前記像倍率補正に関する情報が、前記部材の状態ごとの基準倍率および最大倍率を含むことを特徴とする請求項８に記載のレンズ装置。
10. 前記送信手段は、前記撮像装置からの要求に応じて、前記レンズ装置の状態に関する情報をさらに前記撮像装置に送信し、
    前記レンズ装置の状態に関する情報が、合焦距離と前記部材の状態とを含む、ことを特徴とする請求項８または９に記載のレンズ装置。
11. 前記レンズ装置の焦点距離が可変であり、前記像倍率補正に関する情報が、前記部材の状態と焦点距離との組み合わせに応じた情報であることを特徴とする請求項８または９に記載のレンズ装置。
12. 前記レンズ装置の焦点距離が可変であり、前記レンズ装置の状態に関する情報が、さらに焦点距離を含む、ことを特徴とする請求項１０に記載のレンズ装置。
13. 撮影された画像の画角を補正するために撮像装置で用いられる像倍率補正用データであって、
    前記画像の撮影に用いられたレンズ装置が有する、前記レンズ装置の合焦範囲を設定する部材の状態ごとの基準倍率および最大倍率を含む、像倍率補正に関するデータを有する、像倍率補正用データ。
14. さらに、前記レンズ装置の焦点距離と合焦距離との組み合わせに応じた補正倍率に関するデータを有することを特徴とする請求項１３に記載の像倍率補正用データ。
15. さらに、前記組み合わせに係る前記焦点距離と前記合焦距離とに関するデータを有することを特徴とする請求項１４に記載の像倍率補正用データ。
16. 撮影された画像を取得する取得手段と、
    撮影時のフォーカスレンズの位置に応じて前記画像に生じる画角変化を補正する補正手段と、を有し、
    前記補正は、基準画角よりも広い画角の画像を所定の倍率で拡大することを含み、
    前記補正手段は、前記フォーカスレンズの駆動範囲が制限された状態で前記画像が撮影されている場合には、前記フォーカスレンズの駆動範囲が制限されていない状態よりも、前記所定の倍率を小さくする、ことを特徴とする画像処理装置。
17. 前記補正手段は、前記フォーカスレンズの駆動範囲が制限された状態で前記画像が撮影されている場合には、前記基準画角の画像が拡大されないようにすることを特徴とする請求項１６に記載の画像処理装置。
18. 前記補正手段は、前記画像の撮影時における、前記画像の撮影に用いられたレンズ装置が有する前記フォーカスレンズの駆動範囲を指定する操作部の状態に基づいて、前記フォーカスレンズの駆動範囲が制限された状態で前記画像が撮影されているか否かを判定することを特徴とする、請求項１６または１７に記載の画像処理装置。
19. 前記補正手段は、前記画像の撮影時における、前記画像の撮影に用いられた撮像装置の前記フォーカスレンズの駆動範囲を指定する設定に基づいて、前記フォーカスレンズの駆動範囲が制限された状態で前記画像が撮影されているか否かを判定することを特徴とする、請求項１６または１７に記載の画像処理装置。
20. 前記補正手段は、前記フォーカスレンズの駆動範囲の至近端が制限されている場合、前記至近端に対応するフォーカスレンズの位置で得られる画像の画角を前記基準画角とすることを特徴とする請求項１６から１９のいずれか１項に記載の画像処理装置。
21. 撮像素子と、
    前記撮像素子によって撮影された画像を処理する請求項１６から２０のいずれか１項に記載の画像処理装置と、を有する撮像装置。
22. 装着されたレンズ装置から、焦点距離、フォーカスレンズの駆動範囲を指定する操作部の状態、合焦距離に応じた、前記補正に関する情報を取得する通信手段をさらに有することを特徴とする請求項２１に記載の撮像装置。
23. 前記補正に関する情報が、焦点距離範囲の分割数、合焦可能な距離範囲の分割数、およびフォーカスレンズの駆動範囲を指定する操作部の状態数を含むことを特徴とする請求項２２に記載の撮像装置。
24. 前記通信手段は、前記レンズ装置から、前記画像の撮影時における前記レンズ装置の情報を取得することを特徴とする請求項２２または２３に記載の撮像装置。
25. 前記画像の撮影時における前記レンズ装置の情報が、焦点距離、合焦距離、およびフォーカスレンズの駆動範囲を指定する操作部の状態であることを特徴とする請求項２４に記載の撮像装置。
26. 前記画像を、前記補正に関する情報および前記画像の撮影時における前記レンズ装置の情報と関連づけて記録することを特徴とする請求項２４または２５に記載の撮像装置。
27. 撮像装置に装着可能なアクセサリ装置であって、
    前記撮像装置と通信する通信手段を有し、
    前記通信手段は、前記撮像装置に装着されたレンズ装置に関する情報を送信し、
    前記レンズ装置に関する情報は、焦点距離、フォーカスレンズの駆動範囲を指定する操作部の状態、合焦距離に応じた、補正に関する情報を送信することを特徴とするアクセサリ装置。
28. 前記補正に関する情報が、焦点距離範囲の分割数、合焦可能な距離範囲の分割数、およびフォーカスレンズの駆動範囲を指定する操作部の状態数を含むことを特徴とする請求項２７に記載のアクセサリ装置。
29. 前記アクセサリ装置は、前記レンズ装置であることを特徴とする請求項２７または２８に記載のアクセサリ装置。
30. 前記アクセサリ装置は、前記レンズ装置と前記撮像装置との間に装着されるアダプタ装置であることを特徴とする請求項２７または２８に記載のアクセサリ装置。
31. 画像処理装置が実行する画像処理方法であって、
    撮影された画像を取得することと、
    撮影時のフォーカスレンズの位置に応じて前記画像に生じる画角変化を補正することと、を有し、
    前記補正は、基準画角よりも広い画角の画像を所定の倍率で拡大することを含み、
    前記補正することは、前記フォーカスレンズの駆動範囲が制限された状態で前記画像が撮影されている場合には、前記フォーカスレンズの駆動範囲が制限されていない状態よりも、前記所定の倍率を小さくすることを含む、ことを特徴とする画像処理方法。
32. 撮影された画像を取得する取得手段と、
    撮影時のフォーカスレンズの位置に応じて前記画像に生じる画角変化を補正する補正手段と、
    前記画像から評価値を取得する取得手段と、を有し、
    前記補正は、基準画角よりも広い画角の画像をトリミングすることを含み、
    前記取得手段は、前記画像に前記補正が行われる場合は、前記トリミングによって除去される領域を用いずに前記評価値を取得する、ことを特徴とする画像処理装置。
33. 前記評価値がホワイトバランス補正値であることを特徴とする請求項３２に記載の画像処理装置。
34. コンピュータを、請求項１６から２０、３２および３３のいずれか１項に記載の画像処理装置が有する各手段として機能させるためのプログラム。

Images