JP2022045787A5 - - Google Patents

Description

本発明の請求項１に係る画像処理装置は、第１の撮影条件に応じて１つのグループとしての画像数を設定し、前記グループにおける隣接画像の間で位置合わせする順列位置合わせ、及び基準画像に残り画像を位置合わせする参照位置合わせを行う位置合わせ手段と、前記位置合わせ手段を制御し、前記順列位置合わせと前記参照位置合わせを組み合わせて、撮像手段により時系列に連続して撮影された、同一の被写体を含む複数の画像を位置合わせする制御手段と、前記位置合わせ手段によって前記順列位置合わせされた複数の画像を合成する順列位置合わせ合成、及び前記位置合わせ手段によって前記参照位置合わせされた複数の画像を合成する参照位置合わせ合成を行う画像合成手段と、を備え、前記制御手段は、前記画像合成手段を制御し、前記順列位置合わせ合成と前記参照位置合わせ合成を組み合わせて、合成画像を生成することを特徴とする。

（ａ）ブレ量
振動検出手段１０７により検出されたブレ量が大きい時は順列位置合わせ合成の合成枚数を減らす。この場合、撮影条件出力手段１０５は、この振動検出手段１０７で検出されたブレ量を、撮影条件として出力する。このときのブレ量は、ステップＳ３０３の撮影開始処理の前に検出されたブレ量を用いればよい。

また、参照位置合わせ合成から順列位置合わせ合成へ変更する際に残りの画像数を考慮してもよい。例えば、図４における画像４１ａ～４１ｉまでのブレ量が小さく画像４１ｊのブレ量が大きい場合、画像４１ｊから順列位置合わせ合成に変更しても実質的には画像４１ａと画像４１ｊの参照位置合わせ合成となる。そのため、残りの画像数が所定数未満（例えば２枚未満）の場合には合成方法を変更しないようにしてもよい。

Claims (20)

1. 第１の撮影条件に応じて１つのグループとしての画像数を設定し、前記グループにおける隣接画像の間で位置合わせする順列位置合わせ、及び基準画像に残り画像を位置合わせする参照位置合わせを行う位置合わせ手段と、
   前記位置合わせ手段を制御し、前記順列位置合わせと前記参照位置合わせを組み合わせて、撮像手段により時系列に連続して撮影された、同一の被写体を含む複数の画像を位置合わせする制御手段と、
   前記位置合わせ手段によって前記順列位置合わせされた複数の画像を合成する順列位置合わせ合成、及び前記位置合わせ手段によって前記参照位置合わせされた複数の画像を合成する参照位置合わせ合成を行う画像合成手段と、
   を備え、
   前記制御手段は、前記画像合成手段を制御し、前記順列位置合わせ合成と前記参照位置合わせ合成を組み合わせて、合成画像を生成することを特徴とする画像処理装置。
2. 撮影条件出力手段を更に備え、
   前記撮影条件出力手段から出力される前記第１の撮影条件に基づいて、前記制御手段は前記画像合成手段における前記順列位置合わせ合成と前記参照位置合わせ合成の組み合わせの制御を行うことを特徴とする請求項１記載の画像処理装置。
3. 前記位置合わせ手段は、前記複数の画像に第２の撮影条件が異なる特定の画像が含まれる場合、前記特定の画像の直前及び直後に撮影された画像の位置合わせ軌跡を算出し、前記算出された位置合わせ軌跡を利用して、前記特定の画像の位置合わせを行うことを特徴とする請求項１又は２記載の画像処理装置。
4. 前記直前及び直後に撮影された画像は、前記第２の撮影条件が揃った画像であることを特徴とする請求項３記載の画像処理装置。
5. 前記第２の撮影条件はストロボ発光の有無であり、
   前記撮像手段は、
   先幕シンクロ撮影により前記複数の画像を生成する場合、前記特定の画像であるストロボ発光画像の直前に、前記第２の撮影条件が揃った画像であるストロボ非発光画像を撮影し、後幕シンクロ撮影により前記複数の画像を生成する場合、前記特定の画像であるストロボ発光画像の直後に、前記第２の撮影条件が揃った画像であるストロボ非発光画像を撮影することを特徴とする請求項４記載の画像処理装置。
6. 前記制御手段は、前記後幕シンクロ撮影において前記ストロボ発光画像の直後に撮影された前記ストロボ非発光画像を、前記合成画像の生成に用いないことを特徴とする請求項５記載の画像処理装置。
7. 前記制御手段は、
   前記位置合わせ手段に、前記第１の撮影条件に応じて前記参照位置合わせにより前記グループの画像を位置合わせさせ、
   前記特定の画像が最後の画像であるグループであって、その次のグループが存在しない場合、前記撮像手段に、前記複数の画像の撮影の後に前記同一の被写体を含む画像を追加で撮影させ、前記直後に撮影された画像として用いることを特徴とする請求項３乃至６のいずれか１項に記載の画像処理装置。
8. 前記制御手段は、
   前記特定の画像が最後の画像であるグループであって、その次のグループが存在する場合、前記次のグループの最初の画像を、前記直後に撮影された画像として用いることを特徴とする請求項７記載の画像処理装置。
9. 前記制御手段は、
   前記特定の画像が最後の画像であるグループの画像合成に、前記直後に撮影された画像を用いないことを特徴とする請求項７又は８記載の画像処理装置。
10. 前記制御手段は、
    前記特定の画像が前記順列位置合わせグループに含まれる場合、前記直前に撮影された画像に対する前記直後に撮影された画像の構図ズレに基づき、前記位置合わせ軌跡を算出することを特徴とする請求項３乃至６のいずれか１項に記載の画像処理装置。
11. 前記制御手段は、
    前記特定の画像が前記参照位置合わせグループに含まれる場合、前記基準画像に対する、前記直前及び直後に撮影された画像の夫々の構図ズレの差分に基づき、前記位置合わせ軌跡を算出することを特徴とする請求項３乃至６のいずれか１項に記載の画像処理装置。
12. 前記第１の撮影条件は撮影焦点距離であることを特徴とする請求項１乃至１１のいずれか１項に記載の画像処理装置。
13. 前記グループに属する画像の数は、前記撮影焦点距離が第１の距離の場合、前記撮影焦点距離が前記第１の距離よりも短い第２の距離の場合よりも少ないことを特徴とする請求項１２に記載の画像処理装置。
14. 前記第１の撮影条件は、ブレ量、光学防振性能、ブレの周波数特性、防振開始からの経過時間、撮影開始からの経過時間の少なくともいずれかであることを特徴とする請求項１乃至１３のいずれか１項に記載の画像処理装置。
15. 前記第１の撮影条件はブレ量であり、前記グループに属する画像の数は、前記ブレ量が第１の量の場合、前記ブレ量が前記第１の量よりも小さい第２の量の場合よりも少ないことを特徴とする請求項１乃至１４のいずれか１項に記載の画像処理装置。
16. 前記制御手段は、長秒時撮影の場合、撮影初期は前記順列位置合わせ合成を行い、撮影後期は前記参照位置合わせ合成を行って、複数の合成画像を生成し、その後、前記複数の合成画像の前記参照位置合わせ合成を行うよう前記位置合わせ手段を制御することを特徴とする請求項７乃至９のいずれか１項に記載の画像処理装置。
17. 前記位置合わせ手段は、３枚以上の画像を１つのグループとして設定することを特徴とする請求項１乃至１６のいずれか１項に記載の画像処理装置。
18. 画像センサを有し、撮像画像を出力する撮像部を有する撮像装置であって、
    第１の撮影条件に応じて１つのグループとしての画像数を設定し、前記グループにおける隣接画像の間で位置合わせする順列位置合わせ、及び基準画像に残り画像を位置合わせする参照位置合わせを行う位置合わせ手段と、
    前記位置合わせ手段を制御し、前記順列位置合わせと前記参照位置合わせを組み合わせて、前記撮像部により時系列に連続して撮影された、同一の被写体を含む複数の画像を位置合わせする制御手段と、
    前記位置合わせ手段によって前記順列位置合わせされた複数の画像を合成する順列位置合わせ合成、及び前記位置合わせ手段によって前記参照位置合わせされた複数の画像を合成する参照位置合わせ合成を行う画像合成手段と、
    を備え、
    前記制御手段は、前記画像合成手段を制御し、前記順列位置合わせ合成と前記参照位置合わせ合成を組み合わせて、合成画像を生成することを特徴とする撮像装置。
19. 第１の撮影条件に応じて１つのグループとしての画像数を設定し、前記グループにおける隣接画像の間で位置合わせする順列位置合わせ、及び基準画像に残り画像を位置合わせする参照位置合わせを行う位置合わせステップと、
    前記位置合わせステップを制御し、前記順列位置合わせと前記参照位置合わせを組み合わせて、撮像手段により時系列に連続して撮影された、同一の被写体を含む複数の画像を位置合わせする制御ステップと、
    前記位置合わせステップにおいて前記順列位置合わせされた複数の画像を合成する順列位置合わせ合成、及び前記位置合わせステップにおいて前記参照位置合わせされた複数の画像を合成する参照位置合わせ合成を行う画像合成ステップと、
    前記画像合成ステップを制御し、前記順列位置合わせ合成と前記参照位置合わせ合成を組み合わせて、合成画像を生成することを特徴とする制御方法。
20. コンピュータを、請求項１乃至１７のいずれか１項に記載された画像処理装置の各手段として機能させることを特徴とするプログラム。