JP2015207841A5 - - Google Patents

Description

本発明の一側面としての画像処理方法は、複数の視差画像の複数の相対差分情報に基づいて該複数の視差画像のそれぞれの複数の第一不要成分を決定するステップと、前記複数の第一不要成分に基づいて方向成分情報を決定するステップと、前記複数の第一不要成分および前記方向成分情報に基づいて第二不要成分を決定するステップとを有する。

本発明の他の側面としての画像処理装置は、複数の視差画像の複数の相対差分情報に基づいて該複数の視差画像のそれぞれに関する複数の第一不要成分を決定する第一不要成分決定手段と、前記複数の第一不要成分に基づいて方向成分情報を決定する方向成分決定手段と、前記複数の第一不要成分および前記方向成分情報に基づいて第二不要成分を決定する第二不要成分決定手段とを有する。

本発明の他の側面としての撮像装置は、光学像を光電変換して複数の視差画像を出力する撮像素子と、前記画像処理装置とを有する。

本発明の他の側面としての画像処理プログラムは、複数の視差画像の複数の相対差分情報に基づいて該複数の視差画像のそれぞれに関する複数の第一不要成分を決定するステップと、前記複数の第一不要成分に基づいて方向成分情報を決定するステップと、前記複数の第一不要成分および前記方向成分情報に基づいて第二不要成分を決定するステップと、をコンピュータに実行させるように構成されている。

Claims (20)

1. 複数の視差画像の複数の相対差分情報に基づいて該複数の視差画像のそれぞれの複数の第一不要成分を決定するステップと、
   前記複数の第一不要成分に基づいて方向成分情報を決定するステップと、
   前記複数の第一不要成分および前記方向成分情報に基づいて第二不要成分を決定するステップと、を有することを特徴とする画像処理方法。
2. 前記複数の視差画像のそれぞれに関する前記第１の不要成分は、視差に関する成分と、不要光が撮像面に到達したことにより生じる成分と、を含むことを特徴とする請求項１に記載の画像処理方法。
3. 前記複数の視差画像の相対差分情報は、前記複数の視差画像のそれぞれを基準画像として設定し、該複数の視差画像のうち該基準画像を除く他の視差画像のそれぞれと該基準画像との差分を算出することで求められる情報であることを特徴とする請求項１または２に記載の画像処理方法。
4. 前記方向成分情報は、前記複数の視差画像における少なくとも２つの視差画像間の視差情報であることを特徴とする請求項１乃至３のいずれか１項に記載の画像処理方法。
5. 前記方向成分情報は、互いに異なる２つの方向における視差情報を含むことを特徴とする請求項１乃至４のいずれか１項に記載の画像処理方法。
6. 前記方向成分情報は、互いに異なる３つの方向おける視差情報を更に含むことを特徴とする請求項１乃至５のいずれか１項に記載の画像処理方法。
7. 前記第二不要成分は、不要光が撮像面に到達したことにより生じる成分であることを特徴とする請求項１乃至６のいずれか１項に記載の画像処理方法。
8. 前記方向成分情報は、前記複数の第一不要成分における同一座標位置での輝度成分を比較して決定されることを特徴とする請求項１乃至７のいずれか一項に記載の画像処理方法。
9. 前記方向成分情報は、前記同一座標位置での前記輝度成分が共通輝度成分であるか否かに基づいて決定されることを特徴とする請求項８に記載の画像処理方法。
10. 前記同一座標位置での前記輝度成分の差が所定の輝度差の範囲内である場合、該輝度成分は前記共通輝度成分であると決定されることを特徴とする請求項９に記載の画像処理方法。
11. 前記複数の第一不要成分を決定するステップにおいて、
    前記複数の視差画像のうち前記第一不要成分を決定する対象となる視差画像を基準画像として得られた前記複数の相対差分情報を負の値を切り捨てた２次元データとして取得し、
    前記２次元データの各位置において各相対差分情報の間の最大値を抽出し、前記基準画像における前記第一不要成分を決定する、ことを特徴とする請求項１乃至１０のいずれか１項に記載の画像処理方法。
12. 前記複数の視差画像から該複数の視差画像に対応する前記第二不要成分を減算して出力画像を生成するステップを更に有することを特徴とする請求項１乃至１１のいずれか１項に記載の画像処理方法。
13. 前記第二不要成分を決定する画素領域は、前記出力画像を生成するための画素領域よりも広いことを特徴とする請求項１２に記載の画像処理方法。
14. 前記第二不要成分を決定するステップにおいて、前記複数の視差画像の少なくとも１つまたは前記複数の視差画像を合成することで得られた合成画像における一部の領域に対して該第二不要成分を決定することを特徴とする請求項１乃至１３のいずれか１項に記載の画像処理方法。
15. 前記複数の視差画像は、撮像光学系の瞳のうち互いに異なる領域を通過した複数の光束に基づいて生成された複数の画像であることを特徴とする請求項１乃至１４のいずれか１項に記載の画像処理方法。
16. 前記第二不要成分に関する情報を用いて、前記複数の視差画像の少なくとも一つにゴースト成分を付加する補正処理を行うステップを更に有することを特徴とする請求項１乃至１５のいずれか１項に記載の画像処理方法。
17. 複数の視差画像の複数の相対差分情報に基づいて該複数の視差画像のそれぞれに関する複数の第一不要成分を決定する第一不要成分決定手段と、
    前記複数の第一不要成分に基づいて方向成分情報を決定する方向成分決定手段と、
    前記複数の第一不要成分および前記方向成分情報に基づいて第二不要成分を決定する第二不要成分決定手段と、を有することを特徴とする画像処理装置。
18. 光学像を光電変換して複数の視差画像を出力する撮像素子と、請求項１７に記載の画像処理装置と、を有することを特徴とする撮像装置。
19. 複数の視差画像の複数の相対差分情報に基づいて該複数の視差画像のそれぞれに関する複数の第一不要成分を決定するステップと、
    前記複数の第一不要成分に基づいて方向成分情報を決定するステップと、
    前記複数の第一不要成分および前記方向成分情報に基づいて第二不要成分を決定するステップと、をコンピュータに実行させるように構成されていることを特徴とする画像処理プログラム。
20. 請求項１９に記載の画像処理プログラムを記憶していることを特徴とする記憶媒体。