JP6442231B2 - 像ブレ補正装置及びその制御方法、プログラム、記憶媒体 - Google Patents

Description

本発明は、デジタルカメラやデジタルビデオ等の撮像装置における像ブレ補正技術に関するものである。

近年、デジタルカメラやデジタルビデオカメラには、撮影者の手ブレを補正する機能を有する像ブレ補正装置が搭載されているものが多い。このような像ブレ補正装置には、大きく分けて、撮影光学系内のシフトレンズや、撮像素子を光軸と垂直な方向に移動させて像ブレの補正を行う機械的な像ブレ補正装置と、画像の切り出し範囲を制御することにより像ブレの補正を行う電子的像ブレ補正装置とがある。

例えば、特許文献１には、電子的に像ブレ補正を行いながら動画撮影を行う技術が記載されている。

特開２０００−３５７０４０号公報

特許文献１に開示されている様に、電子的な像ブレ補正は手ブレに合わせて撮像素子が取得する画像の一部の範囲を切り出す。この時の切り出し範囲以外の領域（余白）は撮影中に生ずると思われる手ブレの最大量より大きく、余裕をもって設定しておく必要がある。なぜならば撮影中の手ブレ量は事前に予測できないためである。そのため撮像素子の撮像領域を有効に活用できていないという問題がある。

本発明は上述した課題に鑑みてなされたものであり、その目的は、動画撮影における電子的な像ブレ補正において、撮像素子の撮像領域をできるだけ有効に利用できるようにすることである。

本発明に係わる像ブレ補正装置は、装置の振れに起因する像ブレを補正するように、被写体像を撮像する撮像素子により取得された画像の座標を変換する変換手段と、前記変換手段により座標を変換された画像から所定の範囲を切り出す画像切り出し手段と、前記画像切り出し手段により画像を切り出す場合に、画像を表示する表示手段に表示する第１の画像の切り出し範囲と、画像を記録する記録手段に記録する第２の画像の切り出し範囲とを異ならせるように前記切り出し手段を制御する制御手段と、を備えることを特徴とする。

本発明によれば、動画撮影における電子的な像ブレ補正において、撮像素子の撮像領域をできるだけ有効に利用することが可能となる。

本発明の第１の実施形態に係わる撮像装置の構成を示したブロック図。 第１の実施形態における表示画像と記録画像の違いを説明する図。 記録画像の撮影条件毎の違いを説明する図。 第１の実施形態における画像表示動作を示すフローチャート。 第１の実施形態における画像記録動作を示すフローチャート。 第２の実施形態における表示画像と記憶画像の違いを説明する図。 第３の実施形態における撮像装置のブロック図。 第３の実施形態における表示画像と記憶画像の違いを説明する図。 第４の実施形態における表示画像と記憶画像の違いを説明する図。 第５の実施形態における撮像装置のブロック図。

以下、本発明の実施形態について、添付図面を参照して詳細に説明する。

（第１の実施形態）
図１は、本発明の第１の実施形態に係わるカメラ（撮像装置）の構成を示したブロック図である。図１において、撮影光学系を構成するレンズ部１１からの入射光束（撮影光）は、絞り１３ａで光量制限された後に、シャッタ１２ａを通り撮像素子１９に被写体像として結像される。撮像素子１９は、ＣＭＯＳセンサやＣＣＤなどの半導体撮像素子である。

レンズ部１１は更に複数の光学レンズ群により構成され、これらのレンズ群のうち一部はＡＦ駆動モータ１４ａからの駆動力を受けて光軸１０上を移動し、所定の合焦位置に停止することで焦点調節を行う。ＡＦ駆動モータ１４ａはフォーカス駆動部１４ｂからの駆動信号を受けることで駆動される。

また、レンズ部１１のうち一部の光学レンズ群は、ズーム駆動モータ１５ａからの駆動力を受けて光軸１０上を移動し、所定のズーム位置に停止することで撮影画角を変更する。ズーム駆動モータ１５ａは、ズーム駆動部１５ｂからの駆動信号を受けることで駆動される。

絞り１３ａは、絞り羽根を有しており、絞り羽根は絞り駆動部１３ｂからの駆動力を受けることで作動して光通過口となる開口面積（絞り口径）を変化させる。シャッタ１２ａは、シャッタ羽根を有しており、これらのシャッタ羽根は、シャッタ駆動部１２ｂからの駆動力を受けることで光通過口となる開口部を開閉する。これにより、撮像素子１９に入射する光束を制御する。

また、撮影時の条件（被写体輝度等）などに応じてストロボ１６ａは閃光駆動部１６ｂからの駆動信号を受けて駆動（発光）される。さらに、撮影動作を撮影者に知らせるためにスピーカー１７ａが発音駆動部１７ｂからの駆動信号を受けて駆動（発音）される。

フォーカス駆動部１４ｂ、ズーム駆動部１５ｂ、絞り駆動部１３ｂ、シャッタ駆動部１２ｂ、閃光駆動部１６ｂ、発音駆動部１７ｂは、撮影制御部１８により制御される。

撮影制御部１８には、レリーズ操作部１２ｃ、絞り操作部１３ｃ、ズーム操作部１５ｃ、閃光操作部１６ｃ及び防振操作部１１９からの操作信号が入力されるように構成されている。そして、カメラの撮影状態に合わせて上記操作信号を各々フォーカス駆動部１４ｂ、ズーム駆動部１５ｂ、絞り駆動部１３ｂ、シャッタ駆動部１２ｂ、閃光駆動部１６ｂに与えて撮影条件を設定し、撮影が行われる。

なお、絞り１３ａの開口径やストロボ１６ａの発光は、通常は撮影時にカメラ側で自動的に設定するため、絞り操作部１３ｃおよび閃光操作部１６ｃは通常は不要であるが、撮影者が任意に撮影条件を設定したい場合のために設けられている。

撮影制御部１８は、後述する信号処理部１１０に取り込まれた画像信号に基づいて被写体輝度の測定（測光）を行い、この測光結果に基づいて絞り１３ａの絞り口径とシャッタ１２ａの閉じタイミング（露光時間）を定めている。また、撮影制御部１８は、フォーカス駆動部１４ｂを駆動させながら、信号処理部１１０の出力に基づいてレンズ部１１の一部であるフォーカスレンズの合焦位置を求めている。

撮像素子１９から出力される映像信号は信号処理部１１０に入力される。信号処理部１１０は、入力された信号に対して輝度信号や色信号を形成するなどの信号処理を行ってカラー映像信号を形成する。そして、信号処理部１１０で信号処理された映像信号は、画像補正部１１１に入力される。画像補正部１１１では、入力された信号のガンマ補正や圧縮処理を行う。

次に、防振操作部１１９が操作され、撮像装置の振れに起因する像ブレを補正する像ブレ補正を動作させる場合の画像処理内容について説明する。

画像補正部１１１の信号は、動きベクトル検出部１１２に入力される。動きベクトル検出部１１２では画像補正部１１１より順次入力される各画像間における同じ特徴点の座標変化に基づいて動きベクトルを検出する。座標変換部１１３では動きベクトル検出部１１２で求めた動きベクトルの変化に基づいて画像補正部１１１からの画像に対して座標変換を行う。これにより手ブレや被写体ブレが低減された座標変換画像となる。

第１の画像切り出し部１１４では、座標変換部１１３で座標変換された座標変換画像において略中央範囲の画像のみを第１の切り出し範囲として設定する。そして、切り出し範囲の周囲の余白部の画像は、手ブレにより画面の構図が変化した時に生ずる画面欠けを補完する目的に用いる。

なお、余白部は大きな手ブレが生じた場合でも満足な補完が出来る様に十分な量を設けており、その量は焦点距離や被写体距離で変更してもよい。即ち撮影光学系の焦点距離が長い場合（テレ側）には手ブレにより画面上の像ブレ量が増え、又、被写体が近い時にはシフトブレの影響が大きくなることにより画面上の像ブレ量が増える。そのため、それらに応じて切り出し範囲を狭く設定し、余白部を多く確保しておいてもよい。画像表示部１１５では第１の画像切り出し部１１４で切り出された切り出し画像を撮像装置の外部液晶モニターに表示する。

この信号処理部１１０の処理から画像表示部１１５による画像表示までは撮影者による撮影動作と同期して行われており、撮影者は像ブレの低減された画像を確認しながら撮影を続行できる。座標変換部１１３で座標変換された座標変換画像は画像記憶部１１６に記憶される。

第２の画像切り出し部１１７は画像記憶部１１６に所定区間画像が記憶された時に作動する。詳細は図２を用いて後述するが、第２の画像切り出し部１１７は、画像記憶部１１６に記憶された座標変換後の画像の上記の所定区間中の画像が重なり合う最大範囲を第２の切り出し範囲として切り出す。すなわち第２の切り出し範囲は所定区間の撮影後にその画像の状態で設定される。上記の所定区間中の画像においてブレ量が少なく、像ブレ補正量が小さいほど画像の重なり合う範囲が広くなり切り出し範囲は広くできる。第２の画像切り出し部１１７で切り出された切り出し画像は画像記録部１１８に記録される。

図２（ａ）は、画像表示部１１５に表示される第１の画像切り出し部１１４の切り出し画像を画像表示順に示している。そして、画像表示部１１５には撮像素子で撮像される画像２１ａの中で第１の切り出し範囲２２ａの画像のみが表示される。ここで、図２（ａ）の各画像２１ａから２１ｅは上下方向の位置がずれているが、これは上下方向に手ブレがあり、それを軽減するために座標変換部１１３で各画像を座標変換したためである。

図２（ａ）から分かる様に、各画像２１に対して第１の切り出し範囲２２は十分に小さい。そのため、手ブレにより画像２１ｃの様に画像２１ａに比較して上下方向に大きくずれた画像に対しても第１の切り出し範囲２２の余白は十分に設けられている。前述したようにこれはより大きな手ブレを補正する場合に備えているためである。

図２（ｂ）は、画像記録部１１８に記録される第２の画像切り出し部１１７の切り出し画像を画像記録順に示している。そして、画像記録部１１８には撮像素子で撮像される画像２１ａの中で第２の切り出し範囲２３ａが記録される。

図２（ｂ）から分かる様に各画像２１に対して第２の切り出し範囲２３は第１の切り出し範囲２２より大きい。これは画像２１ａから２１ｅに対して像ブレ補正を行った後で画像２１ａから２１ｅが重なる最大範囲を第２の切り出し範囲として設定しているためである。

図２（ｂ）では画像２１ｃの様に画像２１ａに比較して上下方向に大きくずれた画像に対しても第２の切り出し範囲２３の余白は殆ど設けられていない。しかし切り出し範囲を設定する画像は画像記憶部１１６に記憶済であり、それら画像の中で最大のブレ量は既に分かっているため、余白に余裕を残しておく必要が無い。前述した様に第２の画像切り出し部１１７は画像記憶部１１６に所定区間の画像が記憶された時に作動するわけであるが、前述の余白を少なくする目的においてはその所定区間は撮影条件が略等しい撮影画像が連続する区間に設定するのがよい。

この目的のために、図１において撮影制御部１８からの撮影条件変化信号が第２の画像切り出し部１１７に入力されている。撮影条件変化信号とは、次のようなものである。まず、信号処理部１１０から撮影制御部１８に入力されるコントラスト信号（焦点状態の検出）およびその時のレンズ部１１内のフォーカスレンズの位置（不図示）から求まる撮像装置から撮影被写体までの距離変化の検出信号がある。また、動きベクトル検出部１１２から撮影制御部１８に入力される撮像装置の動き信号（パンニング、フレーミング状態検出）、ズーム操作部１５ｃから撮影制御部１８に入力されるズーム変更信号（撮影焦点距離の変更検出）もある。さらに、レリーズ操作部１２ｃから撮影制御部１８に入力されるレリーズ信号（撮影開始、終了検出）等もある。そしてそれらの撮影条件変更が行われない区間の全画像における最大重なり範囲を第２の切り出し範囲としている。

これは撮像装置から被写体までの距離が近くなるとシフトブレの影響で手ブレによる画像劣化量が増えることや、焦点距離が長くなると手ブレによる画像劣化量が多くなることを考慮する必要があるためである。そしてそのような撮影条件を他の撮影条件と切り離して第２の切り出し範囲を毎回設定することで、手ブレが少ない画像に対しても手ブレの多い画像を基準とした切り出し範囲が設定されることを防止している。

また、最大重なり範囲を大きくするには上述した所定区間は短い方が好ましい。なぜならば所定区間が長くなると、その間の撮影者の姿勢変化など大きなブレが重畳してくるためである。そこで焦点状態やパンニング、フレーミングなど撮影シーンが大きく変化した時を利用し、その前後で第２の切り出し範囲を再設定している。

図３は上記の所定区間ごとの第２の切り出し範囲変更を説明する図であり、図３(ａ)は画像表示部１１５に表示される画像、図３（ｂ）は記録部１１８に記録される画像である。ここで画像２１ａから２１ｅに関しては図２（ａ）、図２（ｂ）で説明した内容と同じである。

撮影中に矢印３６で示すズーミング、パンニングが行われた後も、図３（ａ）における画像３１ａから３１ｅの第１の切り出し範囲３２ａから３２ｅは、ズーミング、パンニング前と変わらない。ここで前述したようにズームで焦点距離が長くなるので手ブレによる画像のズレが大きくなると予想し、第１の切り出し範囲３１をより狭く設定（余白を多く）してもよい。

それに対し図３（ｂ）では、矢印３６でパンニング、ズーミングが発生する前までの画像２１ａから２１ｅで第２の切り出し範囲２３ａから２３ｅを設定し、パンニング、ズーミングが発生した後の画像３１ａから３１ｅにおいて、これら画像の最大重なり範囲を第２の切り出し範囲として設定する。図３（ｂ）ではズーミングにより焦点距離が長くなり画像ズレ量が多くなっているため、第２の切り出し範囲３４ａはパンニング、ズーミング前の第２の切り出し範囲２３ａより狭くなっている。

このように、本実施形態では、撮影条件（画面のズレ量の大きさに違いがでる）により第２の画像の切り出し範囲を設定し直しているので、画面のずれ量が小さい時には撮像素子の画面をより有効に利用出来る。

なお、図３（ａ）において、画像３１ｃでは第１の切り出し範囲３２ｃに対して画面の欠け３４ｃが発生するほど大きなブレが生じている。そのため、図３（ｂ）の第２の画像切り出し範囲はその大きなブレにも対応して第１の切り出し範囲より狭く設定して画面欠け３５ｃを目立たなくすることも出来る。しかしながら撮影者が撮影中に観察している画角より狭い画像を記録するのは好ましくないため、第２の切り出し範囲を第１の切り出し範囲以上の大きさに設定している。つまり、第２の切り出し範囲は第１の切り出し範囲より狭くしないようにしている。このことから、記録される画像３１ｃにおいても画面欠け３５ｃは発生するが、その画面欠けに関しては再トリミングするなどして撮影者の好みに合わせて編集できる可能性を残しておく。

図４は、本実施形態における画像を撮影してから撮影画像を画像表示部１１５に表示するまでの動作を示すフローチャートであり、このフローは防振操作部１１９がオンの時において撮影開始に伴ってスタートする。なお、説明を分かりやすくするために、本実施形態の特徴的な動作と直接関係ない機能、要素の説明は省略する。

ステップＳ４００１では、レリーズ操作部１２ｃの操作により撮像素子１９はレンズ部１１を通して結像される被写体情報を信号処理部１１０に出力する。ステップＳ４００２では信号処理部１１０、画像補正部１１１で処理した画像信号に対して動きベクトル検出部１１２は同じ特徴点における連続する画像間の画像平面の動きベクトル（２次元方向のズレの量と方向）を検出する。

ステップＳ４００３では、ステップＳ４００２で得られた動きベクトルに基づいて座標変換部１１３が動きベクトル検出に対応する画像の座標変換を行う。これにより撮影時の手ブレや被写体ブレ（像ブレ）を軽減した画像が得られる。ステップＳ４００４では、座標変換済の画像を画像記憶部１１６に記憶する。この記憶画像は第２の画像切り出し部で切り出されて画像記録部１１８に記録される。この詳細は図５を用いて後述する。

ステップＳ４００５では、座標変換部１１３の画像に対して第１の画像切り出し部１１４が画像中央の所定範囲を切り出す。言い換えれば、画面端の余白を切り捨てる。なお、この時の余白は撮影中に予測される手ブレ補正量より十分大きく設定される。

ステップＳ４００６では第１の画像切り出し部１１４で切り出された範囲の画像（図２（ａ）の範囲２２ａなど）を画像表示部１１５に表示する。撮影者は画像表示部１１５が表示する手ブレの軽減された画像を確認しながら撮影を続行できる。

図５は、本実施形態における画像記憶部１１６より画像を読み出してから画像記録部１１８に記録するまでの動作を示すフローチャートであり、このフローは画像記憶部１１６への同一の撮影条件における画像の記憶が終了した時点でスタートする。

具体的には、第２の画像切り出し部１１７に入力される撮影制御部１８からの撮影条件変化信号が発生した時点でこのフローはスタートする。なお、説明を分かりやすくするために、本実施形態の特徴的な動作と直接関係ない機能、要素の説明は省略する。

ステップＳ５００１では、画像記憶部１１６から記憶されている画像を順次読み出す。ステップＳ５００２では読み出された画像を順番に重ね合わせて合成をしていく。この時、各画像は座標変換部１１３により手ブレ補正量に応じてずれているので画像の端では重ならない領域が出てくる。

ステップＳ５００３では、ステップＳ５００２の動作を同一撮影条件における全画像の重ね合わせ処理が完了するまではステップＳ５００１に戻り、Ｓ５００１、Ｓ５００２の動作を繰り返して待機する。同一撮影条件画像の重ね合わせ処理が終了するとステップＳ５００４に進む。

ステップＳ５００４では、ステップＳ５００２で重ね合わせた画像においてすべての画像が重なる最大領域を所定の画像アスペクト比で求める。この領域が第２の画像切り出し部１１７で切り出す第２の切り出し範囲になる。ステップＳ５００５では、ステップＳ５００４で設定した第２の切り出し範囲が第１の切り出し範囲と同じ面積か、それより広いかを判定し、同じ面積か、それより広い場合にはステップＳ５００７に進み、狭い場合にはステップＳ５００６に進む。

ステップＳ５００６では第２の切り出し範囲を第１の切り出し範囲と同じ範囲として設定する。これにより第２の切り出し範囲が第１の切り出し範囲より狭くならず、撮影者が電子ビューファインダーで見ている画像以上に画像がトリミングされてしまうことを防ぐことができる。

ステップＳ５００７では、記憶部１１６から再度記憶画像を読み出す。ステップＳ５００８では、読み出された画像に対して、第２の画像切り出し部１１７が、ステップＳ５００４からＳ５００６で求めた第２の切り出し範囲で画像を切り出す。ステップＳ５００９では、第２の画像切り出し部１１７で切り出された画像を画像記録部１１８に記録する。

ステップＳ５０１０では、同一撮影条件の全ての画像が第２の画像切り出し部１１７で切り出され、画像記録部１１８に記録されるまでステップＳ５００５からＳ５００７の動作を繰り返して待機する。

ステップＳ５０１１では、次の撮影条件の画像が記憶部１１６に記憶されている場合にはステップＳ５００１に戻り、そうでない場合にはこのフローを終了する。

以上説明したように、本実施形態によれば、表示される画像よりも記憶される画像の切り出し範囲を広くできるため、撮像素子の性能を有効に利用できる。また得られた画像を撮影者が編集する場合においても画像の切り出し範囲が広い分トリミング自由度を上げることが出来る。

このように、本実施形態においては、撮像素子１９と、撮像素子１９の動きベクトル信号（動きベクトル検出部１１２）に基づいて撮像素子が取得する画像の座標を変換する座標変換部１１３と、座標変換部１１３で座標変換された座標変換画像において所定の切り出し範囲を設定し画像切り出しを行う画像切り出し部１１４，１１７と、画像切り出し部で切り出された切り出し画像を順次表示する画像表示部１１５と、画像切り出し部で切り出された切り出し画像を記録する記録部１１８とで撮像装置を構成し、画像切り出し部１１４，１１７は切り出す画像範囲を画像表示部１１５で表示する画像と記録部１１８に記録する画像で異ならせる。

より詳しくは、撮像素子１９の出力画像を順次記憶する画像記憶部１１６を備え、画像切り出し部は、座標変換部１１３で座標変換された座標変換画像において所定の第１の切り出し範囲を設定し画像切り出しを行う第１の画像切り出し部１１４と、画像記憶部１１６の記憶画像において第１の切り出し範囲とは異なる第２の切り出し範囲を設定し画像切り出しを行う第２の画像切り出し部１１７とで構成され、画像表示部１１５は第１の画像切り出し部１１４で切り出された第１の切り出し画像を表示し、画像記録部１１８は第２の画像切り出し部１１７で切り出された第２の切り出し画像を記録する。

また、第２の画像切り出し部１１７は所定区間（条件が略等しい撮影画像が連続する区間）における撮像素子１９が順次取得する画像間の動きベクトルに基づいて画像切り出し範囲を設定し、設定した切り出し範囲で所定区間中における画像を切り出す。また第２の切り出し範囲が前記第１の切り出し範囲より小さくなることを制限する制限部（図５のステップＳ５００５、Ｓ５００６）を設ける。

（第２の実施形態）
図６は、本発明の第２の実施形態における画像切り出しを示す図である。第１の実施形態では第２の切り出し範囲２３を画像が重なる最大範囲（ＡＮＤ範囲）に設定していたが、第２の実施形態では第２の切り出し範囲６１を多方面に座標変換され範囲が広がる合成画像の最少範囲（ＯＲ範囲）に設定している。

図６（ａ）は図２（ａ）と同様に画像表示部に表示される画像を示しており、第１の切り出し範囲２２も図２（ａ）の第１の実施形態と同じである。それに対して、記録部１１８に記録される画像は、図６（ｂ）に示されるように同一撮影条件で撮影された区間における画像に対して以下の切り出しを行う。即ちブレ補正して位置がずれた各々の画像の端をすべて含む最少範囲である第２の切り出し範囲６１を第２の画像切り出し部１１７が切り出す。そのため手ブレにより撮像素子１９が取得できない撮像範囲(画面の欠け)も生じるが、その範囲に対しては所定のパターン６２を表示する。撮影者は編集時に画面の欠けの量や頻度をみながら編集の区間を変えて画像のトリミングを行うことで撮像素子１９をより有効に利用できる。

例えば図６（ｂ）において画像２１ａから２１ｅまでの画像すべてが重なり合った領域を設定しようとすると図２（ｂ）の第２の切り出し範囲２３と同等の切り出し範囲が必要になる。しかし、画面の欠けを見ながら画像２１ａ，２１ｂまでを所定区間に設定すると切り出し範囲は破線６３に示すように第２の切り出し範囲２３より広く設定できる。

以上説明したように、本実施形態によれば、表示される画像よりも記憶される画像の切り出し範囲を広くできるため、得られた画像を撮影者が編集する場合においても画像の切り出し範囲が広い分トリミング自由度を上げることが出来る。

（第３の実施形態）
図７は、本発明の第３の実施形態の撮像装置のブロック図である。第１の実施形態では第２の切り出し範囲２３を画像が重なる最大範囲に設定していたが、第３の実施形態では、第２の切り出し範囲は画像の範囲と同じに設定し、座標変換されない状態で記録部１１８に記録する。

図７において画像補正部１１１の信号が直接画像記憶部１１６に入力される。そのため、画像記憶部１１６内の記憶画像には手ブレ補正は行われていない。また、同時に動きベクトル検出部１１２の動きベクトル情報も対応する画像と関連づけられて記憶される。これは、記憶された画像を撮影後に再生するときに用いられる。

第２の画像切り出し部１１７は記憶部１１６に記憶された各画像における全範囲を切り出し範囲に設定する。画像記録部１１８は第２の画像切り出し部１１７で切り出された画像を動きベクトル情報と共に記録する。

図８（ａ）は図２（ａ）と同様に画像表示部に表示される画像を示しており、第１の切り出し範囲２２も図２（ａ）の第１の実施形態と同じである。それに対して記録部１１８に記録される画像は図８（ｂ）に示されるように同一撮影条件で撮影された区間の画像に対してブレ補正を行わない画像である。そのため撮影される主被写体８２ａから８２ｅは画面上下方向にずれている。第２の画像切り出し部１１７は各画像の全画面を第２の切り出し範囲８１として切り出す。

記録部１１８に記録される各画像には動きベクトル検出部１１２で検出した動きベクトル情報が関連付けされているため、撮影後に画像記録部１１８の画像を再生する時にはこの動きベクトル情報を用いて各画像を座標変換する。そしてその後に、第１の画像切り出し部１１４で画像切り出しを行い画像表示部１１５で再生表示を行う。

撮影者は、画像記録部１１８の記録画像を編集する時には各画像に対して好みの特性のブレ補正を行い、必要な範囲を画像トリミングすることが出来る。

以上説明したように、本実施形態によれば、表示される画像よりも記憶される画像の切り出し範囲を広くできるため、得られた画像を撮影者が編集する場合においても画像の切り出し範囲が広い分トリミング自由度を上げることが出来る。

（第４の実施形態）
図９は本発明の第４の実施形態の切り出し範囲を説明する図であり、撮像装置の全体構成は第１の実施形態を示す図１のブロック図と同じである。本実施形態では、画像表示部１１５に表示される画像の切り出し範囲が第１から第３の実施形態と異なる。

図９（ｂ）は記録部１１８に記録される画像であり、これは図２（ｂ）と同じであり、同様な切り出し範囲の設定になっている。図９（ａ）において第１の画像切り出し部１１４の切り出し範囲９１は撮影開始時の画像の全画面（切り出し範囲９１ａ）と同じ範囲となっている。そしてその切り出し範囲９１が画像表示部１１５の表示範囲となる。そのためブレ補正に伴い画面の欠け９２が発生する。

しかしながら撮影者は撮像素子１９が撮像する全ての画像範囲（画角）を見渡せるのでそれを撮影構図やパンニング等に活かすことができ、撮像素子１９を有効利用できる。画像記録部１１８に記録される画像は画面欠けが無いために高い品位があり、しかも撮影中に発生したブレ量に合わせた最大範囲が切り出されるために無駄の無い画像を得ることができる。

以上説明したように、本実施形態によれば、表示される画像と記憶される画像の切り出し範囲を異ならせて撮像素子を有効利用できるため、撮影時は使いやすく自由度の高い編集も可能になる。

（第５の実施形態）
この第５の実施形態は、本発明をレンズ交換式のカメラ（撮像装置）に適用したものである。図１０は、第５の実施形態に係わるカメラ（撮像装置）の構成を示した図である。図１０において、カメラ３０００は、交換レンズ１０００とカメラ本体２０００とがレンズマウント１１００，１２００により、機械的及び電気的に着脱可能に接続されて構成されている。

本実施形態では、交換レンズ１０００がレンズ制御部１０１０を有し、交換レンズ１０００の各部は、レンズ制御部１０１０がカメラ本体２０００側の撮影制御部１８と通信することにより制御される。

それ以外の撮像装置の動作及び像ブレ補正における画像の切り出し方法は、第１の実施形態と同じであるため、説明を省略する。

（その他の実施形態）
本発明は、上述の実施形態の１以上の機能を実現するプログラムを、ネットワーク又は記憶媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータにおける１つ以上のプロセッサーがプログラムを読出し実行する処理でも実現可能である。また、１以上の機能を実現する回路（例えば、ＡＳＩＣ）によっても実現可能である。

１９：撮像素子、１１２：動きベクトル検出部、１１３：座標変換部、１１４：第１の画像切り出し部、１１５：画像表示部、１１６：画像記憶部、１１７：第２の画像切り出し部、１１８：画像記録部

Claims (11)

1. 装置の振れに起因する像ブレを補正するように、被写体像を撮像する撮像素子により取得された画像の座標を変換する変換手段と、
   前記変換手段により座標を変換された画像から所定の範囲を切り出す画像切り出し手段と、
   前記画像切り出し手段により画像を切り出す場合に、画像を表示する表示手段に表示する第１の画像の切り出し範囲と、画像を記録する記録手段に記録する第２の画像の切り出し範囲とを異ならせるように前記切り出し手段を制御する制御手段と、
   を備えることを特徴とする像ブレ補正装置。
2. 前記画像切り出し手段は、前記変換手段で座標を変換された画像から第１の画像を切り出す第１の切り出し手段と、前記変換手段で座標を変換されて記憶手段に記憶された画像から第２の画像を切り出す第２の切り出し手段と、を有することを特徴とする請求項１に記載の像ブレ補正装置。
3. 前記変換手段は、前記撮像素子により取得された画像の動きベクトルに基づいて前記撮像素子により取得された画像の座標を変換することを特徴とする請求項２に記載の像ブレ補正装置。
4. 前記第２の切り出し手段は、所定区間の間に前記撮像素子が順次に取得する画像の間の動きベクトルに基づいて画像の切り出し範囲を設定し、設定された切り出し範囲に基づいて前記所定区間における画像を切り出すことを特徴とする請求項２に記載の像ブレ補正装置。
5. 前記所定区間は撮影条件がほぼ同じである画像が連続する区間であることを特徴とする請求項４に記載の像ブレ補正装置。
6. 前記制御手段は、前記第２の画像切り出し範囲が前記第１の画像切り出し範囲と同じ大きさか又は小さくなるように前記切り出し手段を制御することを特徴とする請求項１乃至５のいずれか１項に記載の像ブレ補正装置。
7. 前記制御手段は、前記動きベクトルの情報を対応する画像と関連付けて前記記憶手段に記憶させることを特徴とする請求項３に記載の像ブレ補正装置。
8. 被写体像を撮像する撮像素子と、
   請求項１乃至７のいずれか１項に記載の像ブレ補正装置と、
   を備えることを特徴とする撮像装置。
9. 装置の振れに起因する像ブレを補正するように、被写体像を撮像する撮像素子により取得された画像の座標を変換する変換工程と、
   前記変換工程により座標を変換された画像から所定の範囲を切り出す画像切り出し工程と、
   前記画像切り出し工程により画像を切り出す場合に、画像を表示する表示手段に表示する第１の画像の切り出し範囲と、画像を記録する記録手段に記録する第２の画像の切り出し範囲とを異ならせるように前記切り出し工程を制御する制御工程と、
   を有することを特徴とする像ブレ補正方法。
10. 請求項９に記載の像ブレ補正方法の各工程をコンピュータに実行させるためのプログラム。
11. 請求項９に記載の像ブレ補正方法の各工程をコンピュータに実行させるためのプログラムを記憶したコンピュータが読み取り可能な記憶媒体。

Images