JP2015201722A5 - - Google Patents

Description

本発明の一側面としての画像処理装置は、被写体空間を異なる視点から撮像した視差画像を含む入力画像に対して再構成処理を行うことにより再構成画像を生成する画像処理装置であって、前記被写体空間の同一領域の情報を取得した前記入力画像の画素群を抽出する抽出手段と、前記抽出された画素群の各信号値に基づいて平均信号値を算出する算出手段と、前記画素群の少なくとも一つの画素の信号値を前記平均信号値で置換する置換手段と、前記平均信号値で置換された画素を含む前記入力画像から前記再構成画像を生成する生成手段と、前記入力画像に含まれる全ての視差画像を均一な重みで合成した合成画像の第１被写界深度よりも、前記再構成画像を生成するために設定された第２被写界深度のほうが深いか否かを判定する判定手段を有し、前記抽出手段は、前記第１被写界深度よりも前記第２被写界深度が深い場合に、前記画素群を抽出することを特徴とする。

Claims (16)

1. 被写体空間を異なる視点から撮像した視差画像を含む入力画像に対して再構成処理を行うことにより再構成画像を生成する画像処理装置であって、
   前記被写体空間の同一領域の情報を取得した前記入力画像の画素群を抽出する抽出手段と、
   前記抽出された画素群の各信号値に基づいて平均信号値を算出する算出手段と、
   前記画素群の少なくとも一つの画素の信号値を前記平均信号値で置換する置換手段と、
   前記平均信号値で置換された画素を含む前記入力画像から前記再構成画像を生成する生成手段と、
   前記入力画像に含まれる全ての視差画像を均一な重みで合成した合成画像の第１被写界深度よりも、前記再構成画像を生成するために設定された第２被写界深度のほうが深いか否かを判定する判定手段を有し、
   前記抽出手段は、前記第１被写界深度よりも前記第２被写界深度が深い場合に、前記画素群を抽出することを特徴とする画像処理装置。
2. 前記画素群のうち、前記再構成画像の生成に用いられる画素の信号値の全てを前記平均信号値で置換することを特徴とする請求項１に記載の画像処理装置。
3. 前記平均信号値は、前記各信号値と重みから算出され、
   前記重みは、前記画素群の各画素における光量に応じて決定されることを特徴とする請求項１又は２に記載の画像処理装置。
4. 前記重みは、前記画素群のうち光量が少ない画素ほど小さくなることを特徴とする請求項３に記載の画像処理装置。
5. 前記入力画像を撮像した際の撮影条件情報を取得する撮影条件情報取得手段と、
   前記被写体空間の距離情報を取得する距離情報取得手段を有し、
   前記抽出手段は、前記撮影条件情報と前記距離情報を用いて前記画素群を抽出することを特徴とする請求項１乃至４のいずれか１項に記載の画像処理装置。
6. 前記距離情報は、前記入力画像の視差情報から算出されることを特徴とする請求項５に記載の画像処理装置。
7. 前記再構成画像は、前記入力画像に含まれる視差画像を部分的に用いて生成されることを特徴とする請求項１乃至６のいずれか１項に記載の画像処理装置。
8. 前記第２被写界深度を設定する設定手段を有することを特徴とする請求項１に記載の画像処理装置。
9. 前記第２被写界深度は、Ｆ値を選択することで設定されることを特徴とする請求項８に記載の画像処理装置。
10. 被写体空間を異なる視点から撮像した視差画像を含む入力画像を生成する撮像手段と、
    前記入力画像に対して再構成処理を行うことにより再構成画像を生成する請求項１乃至９のいずれか１項に記載の画像処理装置を有することを特徴とする撮像装置。
11. 前記撮像手段は、被写体側から順に、
    被写体面からの光線を像側共役面へ結像する結像光学系と、
    前記像側共役面に位置するレンズアレイと、
    複数の画素を有する撮像素子を有し、
    前記レンズアレイは、前記結像光学系の瞳の異なる領域を通過した光線が、前記撮像素子の異なる画素へ入射するように構成されていることを特徴とする請求項１０に記載の撮像装置。
12. 前記撮像手段は、被写体側から順に、
    被写体面からの光線を像側共役面へ結像する結像光学系と、
    レンズアレイと、
    複数の画素を有する撮像素子を有し、
    前記レンズアレイは、前記像側共役面と前記撮像素子が共役関係になるように配置され、前記結像光学系の瞳の異なる領域を通過した光線が、前記撮像素子の異なる画素へ入射するように構成されていることを特徴とする請求項１０に記載の撮像装置。
13. 前記撮像手段は、被写体側から順に、
    被写体面からの光線を像側共役面に結像する複数の結像光学系と、
    複数の画素を有する撮像素子と、を有し、
    前記複数の結像光学系は、２次元的に配列されていることを特徴とする請求項１０に記載の撮像装置。
14. 被写体空間を異なる視点から撮像した視差画像を含む入力画像に対して再構成処理を行うことにより再構成画像を生成する画像処理方法であって、
    前記被写体空間の同一領域の情報を取得した前記入力画像の画素群を抽出する抽出工程と、
    前記抽出された画素群の各信号値に基づいて平均信号値を算出する算出工程と、
    前記画素群の少なくとも１つの画素の信号値を前記平均信号値で置換する置換工程と、
    前記平均信号値で置換された画素を含む前記入力画像から前記再構成画像を生成する生成工程と、
    前記入力画像に含まれる全ての視差画像を均一な重みで合成した合成画像の第１被写界深度よりも、前記再構成画像を生成するために設定された第２被写界深度のほうが深いか否かを判定する判定工程を含み、
    前記抽出工程は、前記第１被写界深度よりも前記第２被写界深度が深い場合に、前記画素群を抽出することを特徴とする画像処理方法。
15. 請求項１４に記載の画像処理方法の手順が記述されたコンピュータで実行可能なプログラム。
16. コンピュータに、請求項１４に記載の画像処理方法の各工程を実行させるためのプログラムが記憶されたコンピュータが読み取り可能な記憶媒体。