JP2015207851A5 - - Google Patents

Description

本発明の一側面としての画像処理方法は、複数の視差画像のそれぞれに対して、不要光が撮像面に到達することにより生じた第一成分を、前記複数の視差画像の複数の相対差分情報に基づいて決定するステップと、前記複数の視差画像のそれぞれの前記第一成分の合成値を算出するステップと、前記第一成分の前記合成値に基づいて定められる第二成分を前記複数の視差画像の合成画像から低減するステップとを有する。

本発明の他の側面としての画像処理装置は、複数の視差画像のそれぞれに対して、不要光が撮像面に到達することにより生じた第一成分を、前記複数の視差画像の複数の相対差分情報に基づいて決定する決定手段と、前記複数の視差画像のそれぞれの前記第一成分の合成値を算出する成分合成手段と、前記第一成分の前記合成値に基づいて定められる第二成分を前記複数の視差画像の合成画像から低減する低減手段とを有する。

本発明の他の側面としての撮像装置は、光学像を光電変換して複数の視差画像を出力する撮像素子と、前記複数の視差画像のそれぞれに対して、不要光が撮像面に到達することにより生じた第一成分を、前記複数の視差画像の複数の相対差分情報に基づいて決定する決定手段と、前記複数の視差画像のそれぞれの前記第一成分の合成値を算出する成分合成手段と、前記第一成分の前記合成値に基づいて定められる第二成分を前記複数の視差画像の合成画像から低減する低減手段とを有する。

本発明の他の側面としての画像処理プログラムは、複数の視差画像のそれぞれに対して、不要光が撮像面に到達することにより生じた第一成分を、前記複数の視差画像の複数の相対差分情報に基づいて決定するステップと、前記複数の視差画像のそれぞれの前記第一成分の合成値を算出するステップと、前記第一成分の前記合成値に基づいて定められる第二成分を前記複数の視差画像の合成画像から低減するステップと、をコンピュータに実行させるように構成されている。

Claims (20)

1. 複数の視差画像のそれぞれに対して、不要光が撮像面に到達することにより生じた第一成分を、前記複数の視差画像の複数の相対差分情報に基づいて決定するステップと、
   前記複数の視差画像のそれぞれの前記第一成分の合成値を算出するステップと、
   前記第一成分の前記合成値に基づいて定められる第二成分を前記複数の視差画像の合成画像から低減するステップと、を有することを特徴とする画像処理方法。
2. 前記複数の視差画像のそれぞれを基準画像として設定し、該基準画像と該基準画像を除く他の視差画像との差分を算出して前記複数の相対差分情報を求めるステップを更に有することを特徴とする請求項１に記載の画像処理方法。
3. 前記相対差分情報を求めるステップにおいて、
   基準画像と該基準画像を除く他の視差画像との差分を算出する前に、前記基準画像と前記他の視差画像の位置合わせを行うことを特徴とする請求項２に記載の画像処理方法。
4. 前記第一成分を決定するステップにおいて、
   前記複数の視差画像のうち、前記第一成分を決定する対象となる視差画像を基準画像として得られた複数の相対差分情報を負の値を切り捨てた２次元データとして取得し、
   前記２次元データの各位置において各相対差分情報の最大値を抽出し、前記基準画像における前記第一成分の位置および量を決定する、ことを特徴とする請求項１乃至３のいずれか１項に記載の画像処理方法。
5. 前記第一成分を決定するステップにおいて、
   前記複数の視差画像のうち、前記第一成分を決定する対象となる視差画像を基準画像として得られた複数の相対差分情報を負の値を切り捨てた２次元データとして取得し、
   前記２次元データの各位置において各相対差分情報の最小値を抽出し、前記基準画像における前記第一成分の位置および量を決定する、ことを特徴とする請求項１乃至３のいずれか１項に記載の画像処理方法。
6. 前記第一成分の合成値を算出するステップにおいて、前記複数の視差画像のそれぞれの該第一成分の加算値を該合成値として算出することを特徴とする請求項１乃至５のいずれか１項に記載の画像処理方法。
7. 前記第一成分の合成値を算出するステップにおいて、前記複数の視差画像のそれぞれの該第一成分の平均値を該合成値として算出することを特徴とする請求項１乃至５のいずれか１項に記載の画像処理方法。
8. 前記第二成分を低減するステップにおいて、前記第二成分は前記第一成分の前記合成値に重み係数を掛けて得られた値を用いて定められることを特徴とする請求項１乃至７のいずれか１項に記載の画像処理方法。
9. 前記第二成分の低減処理を行うための画像領域を設定するステップを更に有し、
   前記第二成分を低減するステップにおいて、設定された前記画像領域の内部の該第二成分を低減させることを特徴とする請求項１乃至８のいずれか１項に記載の画像処理方法。
10. 前記複数の視差画像は、撮像光学系の瞳のうち互いに異なる領域を通過した複数の光束に基づいて生成された複数の画像であることを特徴とする請求項１乃至９のいずれか１項に記載の画像処理方法。
11. 前記第一成分に関する情報を用いて、前記合成画像にゴースト成分を付加するステップを更に有することを特徴とする請求項１乃至１０のいずれか１項に記載の画像処理方法。
12. 前記複数の視差画像は３枚以上の視差画像であることを特徴とする請求項１乃至１１のいずれか１項に記載の画像処理方法。
13. 複数の視差画像のそれぞれに対して、不要光が撮像面に到達することにより生じた第一成分を、前記複数の視差画像の複数の相対差分情報に基づいて決定する決定手段と、
    前記複数の視差画像のそれぞれの前記第一成分の合成値を算出する成分合成手段と、
    前記第一成分の前記合成値に基づいて定められる第二成分を前記複数の視差画像の合成画像から低減する低減手段と、を有することを特徴とする画像処理装置。
14. 前記複数の視差画像の前記合成画像を生成する画像合成手段を更に有することを特徴とする請求項１３に記載の画像処理装置。
15. 光学像を光電変換して複数の視差画像を出力する撮像素子と、
    前記複数の視差画像のそれぞれに対して、不要光が撮像面に到達することにより生じた第一成分を、前記複数の視差画像の複数の相対差分情報に基づいて決定する決定手段と、
    前記複数の視差画像のそれぞれの前記第一成分の合成値を算出する成分合成手段と、
    前記第一成分の前記合成値に基づいて定められる第二成分を前記複数の視差画像の合成画像から低減する低減手段と、を有することを特徴とする撮像装置。
16. 前記複数の視差画像は、撮像光学系の瞳のうち互いに異なる領域を通過した光束に基づいて生成された複数の画像であり、
    前記撮像素子は、一つのマイクロレンズを共有する複数の画素を有し、
    前記複数の画素は、前記撮像光学系の瞳のうち互いに異なる領域を通過した光束を受光するように構成されていることを特徴とする請求項１５に記載の撮像装置。
17. 前記複数の画素は３つ以上の画素であることを特徴とする請求項１６に記載の撮像装置。
18. 前記第二成分の低減処理を行う画像領域を指定する入力手段を更に有し、
    前記低減手段は、前記入力手段を介して指定された前記画像領域の内部において、前記複数の視差画像の合成画像から前記第二成分を低減することを特徴とする請求項１６または１７に記載の撮像装置。
19. 複数の視差画像のそれぞれに対して、不要光が撮像面に到達することにより生じた第一成分を、前記複数の視差画像の複数の相対差分情報に基づいて決定するステップと、
    前記複数の視差画像のそれぞれの前記第一成分の合成値を算出するステップと、
    前記第一成分の前記合成値に基づいて定められる第二成分を前記複数の視差画像の合成画像から低減するステップと、をコンピュータに実行させるように構成されていることを特徴とする画像処理プログラム。
20. 請求項１９に記載の画像処理プログラムを記憶していることを特徴とする記憶媒体。