JP2018101982A5 - 画像処理方法、画像処理装置、プログラム、および記録媒体 - Google Patents

Description

本発明に係る画像処理方法は、複数の視点画像を取得し、前記複数の視点画像から得られる領域毎のコントラストと、前記複数の視点画像間の像ずれ量に基づいて複数の視点画像間の像ずれに関する分布情報を生成し、前記分布情報を出力あるいは記録する。

Claims (32)

1. 複数の視点画像を取得し、
   前記複数の視点画像から得られる領域毎のコントラストと、前記複数の視点画像間の像ずれ量に基づいて前記複数の視点画像間の像ずれに関する分布情報を生成し、
   前記分布情報を出力あるいは記録することを特徴とする画像処理方法。
2. 前記分布情報は、
   前記複数の視点画像からコントラスト分布を生成し、
   前記コントラスト分布に基づいて前記複数の視点画像間の像ずれ量に関する分布を求めることで生成されることを特徴とする請求項１に記載の画像処理方法。
3. 前記分布情報は、
   前記コントラスト分布において所定値以上の領域に対して前記像ずれ量を求め、所定値未満の領域に対して前記像ずれ量を求めずに生成されることを特徴とする請求項２に記載の画像処理方法。
4. 前記コントラスト分布は、前記複数の視点画像に基づく画像から領域毎に抽出した高周波成分に基づいて生成される分布であることを特徴とする請求項２または３に記載の画像処理方法。
5. 前記コントラスト分布は、前記視点画像毎の高周波成分の差に応じて生成されることを特徴とする請求項２乃至４のいずれか１項に記載の画像処理方法。
6. 前記コントラスト分布は、
   前記複数の視点画像それぞれにおいて、領域毎に高周波成分を抽出して得られる分布の差分に基づいて生成される差分コントラスト分布と、前記複数の視点画像に基づく画像から領域毎に抽出した高周波成分に基づいて生成される分布とを掛け合わせて生成されることを特徴とする請求項２乃至５のいずれか１項に記載の画像処理方法。
7. 前記分布情報は前記複数の視点画像に基づく画像と関連づけられて出力あるいは記録されることを特徴とする請求項２乃至６のいずれか１項に記載の画像処理方法。
8. 前記コントラスト分布が所定値以上の領域において前記複数の視点画像間の像ずれ量を算出し前記分布情報を生成することを特徴とする請求項２乃至７のいずれか１項に記載の画像処理方法。
9. 前記複数の視点画像に基づく画像に対して、前記分布情報に基づいて画像処理を行い、出力画像を生成することを特徴とする請求項１乃至８のいずれか１項に記載の画像処理方法。
10. 前記画像処理は、先鋭化の処理、平滑化の処理、または、これらの組み合わせ処理であることを特徴とする請求項９に記載の画像処理方法。
11. 前記分布情報の基準からの差が大きい領域より、差が小さい領域の方が、前記画像処理としての先鋭化の処理が強く行われることを特徴とする請求項１０に記載の画像処理方法。
12. 前記分布情報の基準からの差が小さい領域より、差が大きい領域の方が、前記画像処理としての平滑化の処理が強く行われることを特徴とする請求項１０に記載の画像処理方法。
13. 前記分布情報の基準からの差が小さい領域は、前記画像処理として先鋭化の処理を行い、差が大きい領域は、前記画像処理として平滑化の処理を行うことを特徴とする請求項１０に記載の画像処理方法。
14. 前記画像処理は、彩度を修正する処理であることを特徴とする請求項１０に記載の画像処理方法。
15. 前記複数の視点画像は、結像光学系の異なる瞳部分領域を通過する光束を受光する複数の光電変換部が設けられた画素を複数配列した撮像素子により取得される入力画像から生成される、ことを特徴とする請求項１乃至１４のいずれか１項に記載の画像処理方法。
16. 複数の視点画像を取得する取得手段と、
    前記複数の視点画像から得られる領域毎のコントラストと、前記複数の視点画像間の像ずれ量に基づいて複数の視点画像間の像ずれに関する分布情報を生成する生成手段と、
    前記分布情報を出力あるいは記録する出力手段と、を有することを特徴とする画像処理装置。
17. 前記分布情報は、
    前記複数の視点画像からコントラスト分布を生成し、
    前記コントラスト分布に基づいて前記複数の視点画像間の像ずれ量に関する分布を求めることで生成されることを特徴とする請求項１６に記載の画像処理装置。
18. 前記分布情報は、
    前記コントラスト分布において所定値以上の領域に対して前記像ずれ量を求め、所定値未満の領域に対して前記像ずれ量を求めずに生成されることを特徴とする請求項１７に記載の画像処理装置。
19. 前記コントラスト分布は、前記複数の視点画像に基づく画像から領域毎に抽出した高周波成分に基づいて生成される分布であることを特徴とする請求項１７または１８に記載の画像処理装置。
20. 前記コントラスト分布は、前記視点画像毎の高周波成分の差に応じて生成されることを特徴とする請求項１７乃至１９のいずれか１項に記載の画像処理装置。
21. 前記コントラスト分布は、
    前記複数の視点画像それぞれにおいて、領域毎に高周波成分を抽出して得られる分布の差分に基づいて生成される差分コントラスト分布と、前記複数の視点画像に基づく画像から領域毎に抽出した高周波成分に基づいて生成される分布とを掛け合わせて生成されることを特徴とする請求項１７乃至２０のいずれか１項に記載の画像処理装置。
22. 前記分布情報は前記複数の視点画像に基づく画像と関連づけられて出力あるいは記録されることを特徴とする請求項１７乃至２１のいずれか１項に記載の画像処理装置。
23. 前記コントラスト分布が所定値以上の領域において前記複数の視点画像間の像ずれ量を算出し前記分布情報を生成することを特徴とする請求項１７乃至２２のいずれか１項に記載の画像処理装置。
24. 前記複数の視点画像に基づく画像に対して、前記分布情報に基づいて画像処理を行い、出力画像を生成することを特徴とする請求項１６乃至２３のいずれか１項に記載の画像処理装置。
25. 前記画像処理は、先鋭化の処理、平滑化の処理、または、これらの組み合わせ処理であることを特徴とする請求項２４に記載の画像処理装置。
26. 前記分布情報の基準からの差が大きい領域より、差が小さい領域の方が、前記画像処理としての先鋭化の処理が強く行われることを特徴とする請求項２５に記載の画像処理装置。
27. 前記分布情報の基準からの差が小さい領域より、差が大きい領域の方が、前記画像処理としての平滑化の処理が強く行われることを特徴とする請求項２５に記載の画像処理装置。
28. 前記分布情報の基準からの差が小さい領域は、前記画像処理として先鋭化の処理を行い、差が大きい領域は、前記画像処理として平滑化の処理を行うことを特徴とする請求項２５に記載の画像処理装置。
29. 前記画像処理は、彩度を修正する処理であることを特徴とする請求項２５に記載の画像処理装置。
30. 前記複数の視点画像は、結像光学系の異なる瞳部分領域を通過する光束を受光する複数の光電変換部が設けられた画素を複数配列した撮像素子により取得される入力画像から生成される、ことを特徴とする請求項１乃至２９のいずれか１項に記載の画像処理装置。
31. 請求項１乃至１５に記載の画像処理方法をコンピュータに実行させることを特徴とするプログラム。
32. 請求項１乃至１５に記載の画像処理方法をコンピュータに実行させることを特徴とするプログラムを記録した記録媒体。