JP2022120683A5 - - Google Patents

Claims (21)

1. 撮像した画像から所定の領域を拡大して出力する電子拡大手段と、
   撮像した複数の画像から動きベクトルを検出する動きベクトル検出手段と、
   前記所定の領域において検出された第１の動きベクトルの重みを、前記所定の領域外の領域で検出された第２の動きベクトルの重みよりも大きくして、第１の代表動きベクトルを算出する第１の代表ベクトル算出手段と、
   前記第１の代表ベクトル算出手段よりも、前記第１の動きベクトルに対する、前記第２の動きベクトルの重みを大きくして、第２の代表動きベクトルを算出する第２の代表ベクトル算出手段と、
   前記第１の代表動きベクトルと前記第２の代表動きベクトルとに基づいて第３の代表動きベクトルを算出する第３の代表ベクトル算出手段と、を備え、
   前記第３の代表ベクトル算出手段は、
   前記電子拡大手段における拡大倍率が閾値以上の場合は、前記第１の代表動きベクトルの重みを、前記第２の代表動きベクトルの重みよりも大きくして前記第３の代表動きベクトルを決定し、
   前記電子拡大手段における拡大倍率が前記閾値未満の場合は、前記第２の代表動きベクトルの重みを、前記第１の代表動きベクトルの重みよりも大きくして前記第３の代表動きベクトルを決定することを特徴とする画像処理装置。
2. 前記第１の代表ベクトル算出手段は、前記第１の動きベクトルを算出し、前記第１の動きベクトルを前記第１の代表動きベクトルとして出力し、
   前記第２の代表ベクトル算出手段は、前記第２の動きベクトルを算出し、前記第２の動きベクトルを前記第２の代表動きベクトルとして出力することを特徴とする請求項１に記載の画像処理装置。
3. 前記第３の代表ベクトル算出手段は、前記電子拡大手段における拡大倍率が閾値以上の場合は、前記第１の代表動きベクトルを前記第３の代表動きベクトルとして決定し、前記電子拡大手段における拡大倍率が前記閾値未満の場合は、前記第２の代表動きベクトルを前記第３の代表動きベクトルとして決定することを特徴とする請求項１または２に記載の画像処理装置。
4. 前記第３の代表ベクトル算出手段は、前記第１の代表動きベクトルと、前記第２の代表動きベクトルとを所定の割合で加算平均した値を出力することを特徴とする請求項１または２に記載の画像処理装置。
5. 前記第３の代表ベクトル算出手段は、前記電子拡大手段における拡大倍率が前記閾値以上の場合は、前記第１の代表動きベクトルの加算割合が次第に大きく、前記第２の代表動きベクトルの加算割合が次第に小さくなるように変化させて加算平均した値を出力することを特徴とする請求項４に記載の画像処理装置。
6. 前記第３の代表ベクトル算出手段は、前記加算割合の変化量を、前記電子拡大手段における拡大倍率の変化量に応じて決定することを特徴とする請求項５に記載の画像処理装置。
7. 前記第３の代表ベクトル算出手段は、前記電子拡大手段における拡大倍率の変化量が大きくなるにつれて、前記加算割合の変化量を大きくすることを特徴とする請求項６に記載の画像処理装置。
8. 前記閾値は、撮影者の過去の手振れを計測して得られた第１の振れ角度または予め定められた手振れによる第２の振れ角度に基づいて算出された値であり、前記第１の振れ角度または前記第２の振れ角度に基づく画角の変化量が、前記電子拡大手段で拡大される前記所定の領域の水平方向または垂直方向の幅以上となる値であることを特徴とする請求項３乃至７のいずれか１項に記載の画像処理装置。
9. 前記第３の代表ベクトル算出手段の出力に基づいて、撮影画角を変更する画角変更手段をさらに備えることを特徴とする請求項１乃至８のいずれか１項に記載の画像処理装置。
10. 振れ量に応じて出力が変化する振れ検出センサの振れが生じていないときの出力である基準値を算出する基準値算出手段をさらに備え、該基準値算出手段は、前記電子拡大手段における拡大倍率によらず、前記第２の代表ベクトル算出手段の出力に基づいて前記基準値を算出することを特徴とする請求項１乃至９のいずれか１項に記載の画像処理装置。
11. 前記振れ検出センサの出力に基づいて、撮像光学系に設けられ光軸を偏向する光学系であるブレ補正レンズの移動を制御する制御手段をさらに備えることを特徴とする請求項１０に記載の画像処理装置。
12. 前記制御手段は、さらに前記第３の代表ベクトル算出手段の出力に基づいて前記ブレ補正レンズを移動させることを特徴とする請求項１１に記載の画像処理装置。
13. 撮像した画像から所定の領域を拡大して出力する電子拡大手段と、
    撮像した複数の画像を用いて動きベクトルを検出する動きベクトル検出手段と、
    前記動きベクトル検出手段により検出された動きベクトルに基づいて像ブレ補正を制御する制御手段と、を有し、
    前記制御手段は、前記電子拡大手段における拡大倍率が閾値以上の場合は、前記画像における前記所定の領域内の被写体の移動量を軽減するように前記像ブレ補正を制御し、前記拡大倍率が前記閾値未満の場合は、前記画像における背景の移動量を軽減するように前記像ブレ補正を制御することを特徴とする画像処理装置。
14. 前記制御手段は、前記拡大倍率が前記閾値以上の場合は、前記所定の領域において検出された第１の動きベクトルの重みを、前記所定の領域ではない領域で検出された第２の動きベクトルの重みよりも大きくして前記像ブレ補正を制御することを特徴とする請求項１３に記載の画像処理装置。
15. 前記制御手段は、前記拡大倍率が前記閾値未満の場合は、前記第１の動きベクトルの重みを前記第２の動きベクトルの重みよりも大きくせずに前記像ブレ補正を制御することを特徴とする請求項１４に記載の画像処理装置。
16. 電子補正手段を有し、
    前記制御手段は、前記電子補正手段を制御することで前記像ブレ補正を制御することを特徴とする請求項１３乃至１５のいずれか１項に記載の画像処理装置。
17. 前記制御手段は、撮影光学系に含まれる光学補正手段を制御することで前記像ブレ補正を制御することを特徴とする請求項１３乃至１５のいずれか１項に記載の画像処理装置。
18. 撮像した画像から所定の領域を拡大して出力する電子拡大工程と、
    撮像した複数の画像から動きベクトルを検出する動きベクトル検出工程と、
    前記所定の領域において検出された第１の動きベクトルの重みを、前記所定の領域外の領域で検出された第２の動きベクトルの重みよりも大きくして、第１の代表動きベクトルを算出する第１の代表ベクトル算出工程と、
    前記第２の動きベクトルの重みを、前記第１の動きベクトルの重みよりも大きくして、第２の代表動きベクトルを算出する第２の代表ベクトル算出工程と、
    前記第１の代表動きベクトルと前記第２の代表動きベクトルとに基づいて第３の代表動きベクトルを算出する第３の代表ベクトル算出工程と、を有し、
    前記第３の代表ベクトル算出工程において、
    前記電子拡大工程における拡大倍率が閾値以上の場合は、前記第１の代表動きベクトルの重みを、前記第２の代表動きベクトルの重みよりも大きくして前記第３の代表動きベクトルを決定し、
    前記電子拡大工程における拡大倍率が前記閾値未満の場合は、前記第２の代表動きベクトルの重みを、前記第１の代表動きベクトルの重みよりも大きくして前記第３の代表動きベクトルを決定することを特徴とする画像処理方法。
19. 撮像した画像から所定の領域を拡大して出力する電子拡大工程と、
    撮像した複数の画像を用いて動きベクトルを検出する動きベクトル検出工程と、
    前記動きベクトル検出工程で検出された動きベクトルに基づいて像ブレ補正を制御する制御工程と、を有し、
    前記制御工程は、前記電子拡大工程における拡大倍率が閾値以上の場合は、前記画像における前記所定の領域内の被写体の移動量を軽減するように前記像ブレ補正を制御し、前記電子拡大工程における拡大倍率が前記閾値未満の場合は、前記画像における背景の移動量を軽減するように前記像ブレ補正を制御することを特徴とする画像処理方法。
20. 請求項１８または１９に記載の画像処理方法をコンピュータに実行させるためのプログラム。
21. 請求項１８または１９に記載の画像処理方法をコンピュータに実行させるためのプログラムを記憶したコンピュータが読み取り可能な記憶媒体。