JP2012248001A5 - - Google Patents

Description

上記の目的を達成するために、本発明の画像処理装置は、複数の視点から被写体を撮像して得られた複数の撮像画像を含む撮像画像データを入力する入力手段と、前記複数の視点以外の視点から前記被写体を撮像した場合に得られる補間画像を含む補間画像データを前記撮像画像データに基づいて生成する画像補間手段と、前記複数の撮像画像と前記補間画像との重みづけ合成に用いられる、前記複数の撮像画像と前記補間画像との重み係数を、前記重みづけ合成により生成される合成画像において合焦する画像領域である合焦領域を示す合焦状態情報に基づいて、前記合成画像の領域ごとに設定する設定手段と、前記設定手段により設定された前記重み係数に基づいて前記複数の撮像画像と前記補間画像とを合成することで、合成画像を含む合成画像データを生成する合成手段とを有することを特徴とする。

Claims (14)

1. 複数の視点から被写体を撮像して得られた複数の撮像画像を含む撮像画像データを入力する入力手段と、
   前記複数の視点以外の視点から前記被写体を撮像した場合に得られる補間画像を含む補間画像データを前記撮像画像データに基づいて生成する画像補間手段と、
   前記複数の撮像画像と前記補間画像との重みづけ合成に用いられる、前記複数の撮像画像と前記補間画像との重み係数を、前記重みづけ合成により生成される合成画像において合焦する画像領域である合焦領域を示す合焦状態情報に基づいて、前記合成画像の領域ごとに設定する設定手段と、
   前記設定手段により設定された前記重み係数に基づいて前記複数の撮像画像と前記補間画像とを合成することで、合成画像を含む合成画像データを生成する合成手段とを有することを特徴とする画像処理装置。
2. 前記設定手段は、前記合成画像の合焦領域における前記補間画像の重み係数が、前記合成画像の合焦領域以外の領域の少なくとも一部における前記補間画像の重み係数よりも小さくなるように、前記重み係数を設定することを特徴とする請求項１に記載の画像処理装置。
3. 前記合焦領域における前記補間画像の重み係数は、ゼロであることを特徴とする請求項２に記載の画像処理装置。
4. 前記合焦領域と、該合焦領域以外の領域との間に中間領域を設定する中間領域設定手段を更に有し、
   前記合成手段は、前記中間領域に対して、合焦領域の補間画像データに対する重み係数と合焦領域以外の領域の補間画像データに対する重み係数との間の重み係数を用いて合成することを特徴とする請求項２又は３に記載の画像処理装置。
5. 前記設定手段は、前記重み係数を、前記重み係数が対応する画像が補間画像であるか否かに更に基づいて設定し、前記合成画像の合焦領域における撮像画像の重み係数を、同じ領域における補間画像の重み係数よりも大きくなるように設定することを特徴とする請求項１乃至４のいずれか一項に記載の画像処理装置。
6. 前記領域は画素であることを特徴とする請求項１乃至５のいずれか一項に記載の画像処理装置。
7. 焦点距離を示す焦点距離情報を入力する焦点距離入力手段と、
   前記領域ごとの前記被写体までの距離を取得する取得手段とを更に有し、
   前記合焦領域を示す合焦状態情報は、前記焦点距離情報と前記被写体までの距離とに基づいて決定されることを特徴とする請求項１乃至６のいずれか一項に記載の画像処理装置。
8. 前記取得手段は、前記撮像画像データに基づいて被写体までの距離を取得することを特徴とする請求項７に記載の画像処理装置。
9. 被写界深度を示す被写界深度情報を入力する被写界深度入力手段を更に有し、
   前記領域ごとの合焦の状態を示す合焦状態情報は、前記焦点距離情報と前記被写界深度情報と前記被写体までの距離とに基づいて決定されることを特徴とする請求項７又は８に記載の画像処理装置。
10. 複数の視点から被写体を撮像して得られた複数の撮像画像を含む撮像画像データを入力する入力手段と、
    前記複数の視点以外の視点から前記被写体を撮像した場合に得られる補間画像を含む補間画像データを前記撮像画像データに基づいて生成する画像補間手段と、
    前記複数の撮像画像と前記補間画像との重みづけ合成により生成される合成画像において合焦する画像領域である合焦領域を示す合焦状態情報に基づいて、前記複数の撮像画像と前記補間画像とを、前記合成画像の画素値が前記複数の撮像画像と前記補間顔図とにおいて対応する画素の画素値の加重加算になるように合成する合成手段とを備えることを特徴とする画像処理装置。
11. 被写体の、複数の視点に対応する複数の画像を含む画像データを入力する入力手段と、
    前記複数の画像を合成して得られる合成画像において合焦する画像領域である合焦領域を示す合焦状態情報に基づいて前記複数の画像を合成することで、前記合成画像を生成する合成手段と、を有し、
    前記合成手段は、前記合成画像の合焦領域における、前記合成画像を生成するための前記合成に用いられる前記複数の画像の数が、前記合成画像の合焦領域以外の領域の少なくとも一部において前記合成に用いられる前記複数の画像の数よりも少なくなるように、前記複数の画像を合成することを特徴とする
12. 画素値が、被写体を複数の視点から撮像して得られた複数の撮像画像と、前記複数の視点以外の視点から前記被写体を撮像した場合に得られる画像であり、前記複数の撮像画像に基づいて生成される補間画像とにおいて対応する画素の画素値の加重加算である合成画像を、画像合成により生成する生成手段と、
    前記合成画像において合焦する画像領域である合焦領域を示す合焦状態情報を入力する情報入力手段とを有し、
    前記生成手段は、前記合焦状態情報に基づいて、前記合成画像の合焦領域における前記補間画像の重みが、前記合成画像の合焦領域以外の領域の少なくとも一部における前記補間画像の重みよりも小さくなるように、前記画像合成を行うことを特徴とする画像処理装置。
13. コンピュータを請求項１乃至１２のいずれか一項に記載の画像処理装置の各手段として機能させるプログラム。
14. 複数の視点から被写体を撮像して得られた複数の撮像画像を含む撮像画像データを入力するステップと、
    前記複数の視点以外の視点から前記被写体を撮像した場合に得られる補間画像を含む補間画像データを前記撮像画像データに基づいて生成するステップと、
    前記複数の撮像画像と前記補間画像との重みづけ合成に用いられる、前記複数の撮像画像と前記補間画像との重み係数を、前記重みづけ合成により生成される合成画像において合焦する画像領域である合焦領域を示す合焦状態情報に基づいて、前記合成画像の領域ごとに設定するステップ、
    前記設定するステップで設定された前記重み係数に基づいて前記複数の撮像画像と前記補間画像とを合成することで、合成画像を含む合成画像データを生成する合成手段とを有することを特徴とする画像処理装置。