JP2017150878A5 - - Google Patents

Description

本発明の一側面としての画像処理装置は、被写体を照明する光源の位置が互いに異なる複数の光源条件での撮像により生成された複数の入力画像を取得し、光源条件に応じた入力画像における輝度情報の変化に関する情報を用いて、被写体の表面の法線情報を生成する生成手段と、撮像時における光源に関する情報である光源情報を用いて、法線情報または処理対象画像に対するノイズ低減処理の強度を設定するために用いる情報であるノイズ低減処理情報を取得する取得手段とを有することを特徴とする。

Claims (13)

1. 被写体を照明する光源の位置が互いに異なる複数の光源条件での撮像により生成された複数の入力画像を取得し、前記光源条件に応じた前記入力画像における輝度情報の変化に関する情報を用いて、前記被写体の表面の法線情報を生成する生成手段と、
   前記撮像時における前記光源に関する情報である光源情報を用いて、前記法線情報または処理対象画像に対するノイズ低減処理の強度を設定するために用いる情報であるノイズ低減処理情報を取得する取得手段とを有することを特徴とする画像処理装置。
2. 前記光源情報は、前記光源からの前記被写体への光照射方向に関する情報であることを特徴とする請求項１に記載の画像処理装置。
3. 前記光照射方向に関する情報は、前記撮像を行う撮像装置から前記被写体に向かう撮像方向と前記光照射方向とがなす角度または複数の前記光源からの前記光照射方向同士がなす角度の情報であることを特徴とする請求項２に記載の画像処理装置。
4. 前記光源情報は、前記光源条件の数に関する情報であることを特徴とする請求項１に記載の画像処理装置。
5. 前記光源条件の数に関する情報として、前記入力画像の数の情報を用いることを特徴とする請求項４に記載の画像処理装置。
6. 前記取得手段は、前記ノイズ低減処理情報を前記被写体における部分領域ごとに取得することを特徴とする請求項１から５のいずれか一項に記載の画像処理装置。
7. 前記ノイズ低減処理情報を用いて前記法線情報または前記処理対象画像に対する前記ノイズ低減処理を行う処理手段を有することを特徴とする請求項１から６のいずれか一項に記載の画像処理装置。
8. 前記処理対象画像は、前記入力画像であることを特徴とする請求項１から７のいずれか一項に記載の画像処理装置。
9. 前記処理対象画像は、仮想光源条件下での前記被写体の画像として前記法線情報を用いて生成されたリライティング画像であることを特徴とする請求項１から７のいずれか一項に記載の画像処理装置。
10. 被写体の光学像を光電変換する撮像素子と、
    該撮像素子からの出力を用いて生成された撮影画像を前記入力画像として取得する請求項１から９のいずれか一項に記載の画像処理装置とを有することを特徴とする撮像装置。
11. 前記画像処理装置は、撮像光学系の瞳のうち互いに異なる領域を通過した複数の光束を前記撮像素子における互いに異なる画素にて光電変換して得られた信号を用いて前記被写体までの距離に関する情報を算出し、該距離に関する情報に基づいて前記光源情報を取得することを特徴とする請求項１０に記載の撮像装置。
12. コンピュータに画像処理を実行させるコンピュータプログラムとしての画像処理プログラムであって、
    前記コンピュータに、
    被写体を照明する光源の位置が互いに異なる複数の光源条件での撮像により生成された複数の入力画像を取得させ、
    前記光源条件に応じた前記入力画像における輝度情報の変化に関する第２の情報とを用いて、前記被写体の表面の法線情報を生成させ、
    前記撮像時における前記光源に関する情報である光源情報を用いて、前記法線情報または処理対象画像に対するノイズ低減処理の強度を設定するために用いる情報であるノイズ低減処理情報を取得させることを特徴とする画像処理プログラム。
13. 前記コンピュータに、前記ノイズ低減処理情報を用いて前記法線情報または前記処理対象画像に対する前記ノイズ低減処理を行わせることを特徴とする請求項１２に記載の画像処理プログラム。