JP2017208606A5 - - Google Patents

Description

本発明の他の一側面としての画像処理装置は、撮像時の光学パラメータが第１のパラメータ値である第１の画像と第１のパラメータ値と異なる第２のパラメータ値である第２の画像に対して、第１の画像内の対象画素に対応する第２の画像内の対応画素を検出する処理を行う。該画像処理装置は、第１のパラメータ値および第２のパラメータ値がそれぞれ変化し得る所定範囲に応じて、第２の画像のうち対応画素の探索を行う部分領域である２次元探索領域を設定する領域設定手段と、２次元探索領域において探索を行うことにより対応画素を検出する検出手段とを有することを特徴とする。

また、本発明の他の一側面としての画像処理方法は、撮像時の光学パラメータが第１のパラメータ値である第１の画像と第１のパラメータ値と異なる第２のパラメータ値である第２の画像に対して、第１の画像内の対象画素に対応する第２の画像内の対応画素を検出する処理を行う方法である。該画像処理方法は、第１のパラメータ値および第２のパラメータ値がそれぞれ変化し得る所定範囲に応じて、第２の画像のうち対応画素の探索を行う部分領域である２次元探索領域を設定するステップと、２次元探索領域において探索を行うことにより対応画素を検出するステップとを有することを特徴とする。

Claims (15)

1. 撮像時の光学パラメータが第１のパラメータ値である第１の画像と前記第１のパラメータ値と異なる第２のパラメータ値である第２の画像に対して、前記第１の画像内の対象画素に対応する前記第２の画像内の対応画素を検出する処理を行う画像処理装置であって、
   前記第１のパラメータ値および前記第２のパラメータ値がそれぞれ変化し得る所定範囲に応じて、前記第２の画像のうち前記対応画素の探索を行う部分領域である２次元探索領域を設定する領域設定手段と、
   前記２次元探索領域において前記探索を行うことにより前記対応画素を検出する検出手段とを有することを特徴とする画像処理装置。
2. 前記対象画素は、前記第２の画像のうち前記第１および第２のパラメータ値に応じたエピポーラ線上に存在し、
   前記領域設定手段は、前記第１および第２のパラメータ値の前記所定範囲での変化に応じて前記第２の画像内で変化する前記エピポーラ線を全て包含するように前記２次元探索領域を設定することを特徴とする請求項１に記載の画像処理装置。
3. 前記所定範囲は、前記第１および第２のパラメータ値が変化し得る最大値から最小値までの範囲であることを特徴とする請求項２に記載の画像処理装置。
4. 前記光学パラメータは、前記撮像系が有する光学系の焦点距離、入射瞳の位置、前側主点の位置、光軸の向き、合焦距離、前記撮像系が有する撮像素子の前記光軸の方向での位置、前記撮像素子の中心と前記光軸との位置差、前記撮像素子の前記光軸に直交する面に対する倒れ角および前記撮像素子の前記光軸回りでの回転角のうち少なくとも１つであることを特徴とする請求項１から３のいずれか一項に記載の画像処理装置。
5. 前記光学パラメータは、少なくとも前記入射瞳の位置および前記光軸の向きを含むことを特徴とする請求項４に記載の画像処理装置。
6. 前記光学パラメータは、少なくとも前記焦点距離および前記入射瞳の位置を含むことを特徴とする請求項４に記載の画像処理装置。
7. 前記光学パラメータは、少なくとも前記焦点距離、前記入射瞳の位置および前記光軸の向きを含むことを特徴とする請求項４に記載の画像処理装置
8. 前記第１の画像および前記第２の画像は、互いに異なる視点位置からの撮像により取得された画像であり、
   前記光学パラメータは、前記視点位置間の距離を含むことを特徴とする請求項１から７のいずれか一項に記載の画像処理装置。
9. 前記第１の画像と前記対応画素が検出された前記第２の画像とを用いて、前記撮像系により撮像された被写体空間の奥行き情報を生成する奥行き情報生成手段をさらに有することを特徴とする請求項１から８のいずれか一項に記載の画像処理装置。
10. 前記第１の画像と前記対応画素が検出された前記第２の画像とを合成することにより合成画像または全焦点画像を生成する画像合成手段をさらに有することを特徴とする請求項１から８のいずれか一項に記載の画像処理装置。
11. 前記第１および第２の画像は、前記光学パラメータが互いに異なる第１の撮像系および第２の撮像系により取得された画像であることを特徴とする請求項１から１０のいずれか一項に記載の画像処理装置。
12. 前記第１および第２の撮像系は、該各撮像系が有する光学系の焦点距離が互いに異なることを特徴とする請求項１１に記載の画像処理装置。
13. 互いに異なる光学パラメータで撮像を行うことにより第１の画像および第２の画像を取得する撮像系と、
    請求項１から１２のいずれか一項に記載の画像処理装置とを有することを特徴とする撮像装置。
14. 撮像時の光学パラメータが第１のパラメータ値である第１の画像と前記第１のパラメータ値と異なる第２のパラメータ値である第２の画像に対して、前記第１の画像内の対象画素に対応する前記第２の画像内の対応画素を検出する処理を行う画像処理方法であって、
    前記第１のパラメータ値および前記第２のパラメータ値がそれぞれ変化し得る所定範囲に応じて、前記第２の画像のうち前記対応画素の探索を行う部分領域である２次元探索領域を設定するステップと、
    前記２次元探索領域において前記探索を行うことにより前記対応画素を検出するステップとを有することを特徴とする画像処理方法。
15. コンピュータに、撮像時の光学パラメータが第１のパラメータ値である第１の画像と前記第１のパラメータ値と異なる第２のパラメータ値である第２の画像に対して、前記第１の画像内の対象画素に対応する前記第２の画像内の対応画素を検出する処理を行わせるコンピュータプログラムであって、
    前記コンピュータに、
    前記第１のパラメータ値および前記第２のパラメータ値がそれぞれ変化し得る所定範囲に応じて、前記第２の画像のうち前記対応画素の探索を行う部分領域である２次元探索領域を設定する処理と、
    前記２次元探索領域において前記探索を行うことにより前記対応画素を検出する処理とを実行させることを特徴とする画像処理プログラム。