JP2017201356A5 - 画像処理装置、撮像装置、画像処理装置の制御方法、プログラム、および、記憶媒体 - Google Patents

Description

本発明は、カメラ等に搭載される画像処理装置およびその制御方法に関し、特に流し撮りを好適に行うための撮影補助技術に関する。

本発明の目的は、流し撮りアシストモード中において、手ブレ及び被写体ブレの補正機構を動作させ、安定した画像で被写体を狙いながらアシスト効果を得られる画像処理装置を提供することである。さらに、該画像処理装置を有する撮像装置、該画像処理装置の制御方法、プログラム及び記憶媒体を提供することである。

本発明の一側面としての画像処理装置は、表示手段を備えた撮像装置により取得された静止画像を前記表示手段に表示させる処理を行う画像処理装置であって、前記撮像装置により取得される画像から主被写体の領域を抽出して前記表示手段に表示するように制御する制御手段と、前記撮像装置に加わる振れを検出する第１の検出手段にて検出された振れと前記画像から動きベクトルを検出する第２の検出手段にて検出された動きベクトルに基づいて、前記主被写体の動きに関する情報を算出する算出手段と、前記静止画像を取得するための撮影中において、前記主被写体の動きに関する情報を示す動きベクトルに基づいて、前記撮像装置に搭載された光学的補正手段を制御する補正制御手段とを有し、前記制御手段は、前記表示手段に表示される前記主被写体の領域を、前記静止画像を取得するための撮影開始前に、前記主被写体の動きに関する情報を示す動きベクトルに基づいて変更することを特徴とする。

Claims (19)

1. 表示手段を備えた撮像装置により取得された静止画像を前記表示手段に表示させる処理を行う画像処理装置であって、
   前記撮像装置により取得される画像から主被写体の領域を抽出して前記表示手段に表示するように制御する制御手段と、
   前記撮像装置に加わる振れを検出する第１の検出手段にて検出された振れと前記画像から動きベクトルを検出する第２の検出手段にて検出された動きベクトルに基づいて、前記主被写体の動きに関する情報を算出する算出手段と、
   前記静止画像を取得するための撮影中において、前記主被写体の動きに関する情報を示す動きベクトルに基づいて、前記撮像装置に搭載された光学的補正手段を制御する補正制御手段とを有し、
   前記制御手段は、前記表示手段に表示される前記主被写体の領域を、前記静止画像を取得するための撮影開始前に、前記主被写体の動きに関する情報を示す動きベクトルに基づいて変更することを特徴とする画像処理装置。
2. 前記画像は、移動する前記主被写体を追ってパンニング中の前記撮像装置により取得される、前記表示手段に表示される表示用画像であることを特徴とする請求項１に記載の画像処理装置。
3. 前記主被写体の動きを被写体ブレ成分と手ブレ成分に分離する分離手段を更に有することを特徴とする請求項１または２に記載の画像処理装置。
4. 前記制御手段は、移動する前記主被写体を追うパンニング中における、前記被写体ブレ成分の補正量と前記手ブレ成分の補正量の少なくとも一方を表示するよう、前記表示手段を制御することを特徴とする請求項３に記載の画像処理装置。
5. 前記主被写体の位置を算出する被写体位置算出手段を更に有し、
   前記制御手段は、
   現在の主被写体の位置と所定時間前の主被写体の位置との差が第１の閾値以上であって、所定の最大移動量以上であるときは、前記抽出された領域を前記所定の最大移動量だけ移動するよう変更し、
   前記差が前記第１の閾値以上であって、前記所定の最大移動量より小さいときは、前記抽出された領域を現在の主被写体を抽出できる位置まで移動するよう変更し、
   前記差が前記第１の閾値より小さいときは、前記抽出された領域を変更しない、
   ことを特徴とする請求項１乃至４のいずれか一項に記載の画像処理装置。
6. 前記抽出して表示された主被写体の領域は、前記撮像装置が取得する画像のうち前記主被写体を含む領域であることを特徴とする請求項１乃至５のいずれか一項に記載の画像処理装置。
7. 前記手ブレ成分の補正量は、前記表示手段において、ゲージの増減、あるいは、ゲージ内のマークの移動で表現されることを特徴とする請求項４に記載の画像処理装置。
8. 前記被写体ブレ成分の補正量は、前記表示手段において、矩形の移動で表現されることを特徴とする請求項４または７に記載の画像処理装置。
9. 前記表示手段は、前記手ブレ成分が第２の閾値以上のとき、明滅する領域を表示することを特徴とする請求項４に記載の画像処理装置。
10. 前記表示手段は、前記被写体ブレ成分の絶対値が第３の閾値以上であり、かつ、前記被写体ブレ成分がゼロ以上のとき、正の方向に被写体ブレが発生していることを示す領域を表示し、
    前記被写体ブレ成分の絶対値が前記第３の閾値以上であり、かつ、前記被写体のブレ成分がゼロより小さいとき、負の方向に被写体ブレが発生していることを示す領域を表示する、ことを特徴とする請求項４または９に記載の画像処理装置。
11. 前記撮像装置の振れから手ブレ成分を抽出する抽出手段を更に有し、
    前記分離手段は、ローパスフィルタであることを特徴とする請求項３に記載の画像処理装置。
12. 前記撮像装置の振れから手ブレ成分を抽出する抽出手段を更に有し、
    前記制御手段は、前記静止画像を取得するための撮影中において、前記撮像装置の振れと前記主被写体の動きに基づいて算出される補正量とに基づいて前記撮像装置が有する補正手段を駆動する制御を行い、
    前記撮影開始前に、前記抽出手段により抽出された前記手ブレ成分を用いて、前記補正手段を駆動する制御を行い、
    前記抽出手段は、ハイパスフィルタであり、
    前記補正手段は、シフトレンズまたは撮像素子であることを特徴とする請求項１に記載の画像処理装置。
13. 前記制御手段は、前記静止画像を取得するための撮影中において、前記撮像装置の振れと前記主被写体の動きに基づいて算出される補正量とに基づいて前記撮像装置が有する補正手段を駆動する制御を行い、
    前記補正手段は、シフトレンズまたは撮像素子であることを特徴とする請求項１に記載の画像処理装置。
14. 前記制御手段は、前記静止画像を取得するための撮影開始前に、前記主被写体の領域を、前記主被写体の動きに関する情報を示す動きベクトルに基づいて電子的補正手段により変更することを特徴とする請求項１に記載の画像処理装置。
15. 前記電子的補正手段は、手ブレを補正する手段であることを特徴とする請求項１４に記載の画像処理装置。
16. 被写体の画像を撮像する撮像素子と、
    前記画像を表示する表示手段と、
    請求項１乃至１５のうちいずれか一項に記載の画像処理装置と、を有することを特徴とする撮像装置。
17. 表示手段を備えた撮像装置により取得された静止画像を前記表示手段に表示させる処理を行う画像処理装置の制御方法であって、
    前記撮像装置により取得される画像から主被写体の領域を抽出して前記表示手段に表示するように制御する制御ステップと、
    前記撮像装置に加わる振れと前記画像から検出される動きベクトルに基づいて、前記主被写体の動きに関する情報を算出する算出ステップと、
    前記静止画像を取得するための撮影中において、前記主被写体の動きに関する情報を示す動きベクトルに基づいて、前記撮像装置に搭載された光学的補正手段を制御するステップとを有し、
    前記制御ステップにおいて、前記表示手段に表示される前記主被写体の領域は、前記静止画像を取得するための撮影開始前に、前記主被写体の動きに関する情報を示す動きベクトルに基づいて変更されることを特徴とする画像処理装置の制御方法。
18. 表示手段を備えた撮像装置のコンピュータに、前記撮像装置により取得された静止画像を前記表示手段に表示させる処理を行わせるコンピュータプログラムであって、
    前記処理は、
    前記撮像装置により取得される画像から主被写体の領域を抽出して前記表示手段に表示するように制御する処理と、
    前記撮像装置に加わる振れと前記画像から検出される動きベクトルに基づいて、前記主被写体の動きに関する情報を算出する処理と、
    前記静止画像を取得するための撮影中において、前記主被写体の動きに関する情報を示す動きベクトルに基づいて、前記撮像装置に搭載された光学的補正手段を制御する処理とを有し、
    前記表示手段に表示するように制御する処理において、前記表示手段に表示される前記主被写体の領域は、前記静止画像を取得するための撮影開始前に、前記主被写体の動きに関する情報を示す動きベクトルに基づいて変更することを特徴とするコンピュータプログラム。
19. 請求項１８に記載のコンピュータプログラムが記憶されたコンピュータが読み取り可能な記憶媒体。