JP2017103756A5 - - Google Patents

Claims (29)

1. 低解像度画像データと当該低解像度画像データをアップサンプリングした画像データである高解像度画像データとを取得する画像データ取得手段と、
   前記高解像度画像データの画素値の信頼度を表す信頼度データを決定する信頼度データ決定手段と、
   を備え、
   前記信頼度データ決定手段は、
   前記高解像度画像データの対象画素の画素位置に対応する前記低解像度画像データにおける画素位置の近傍画素の画素値に基づいて決定される第１の評価値と、前記第１の評価値とは異なる方法によって前記近傍画素の画素値に基づいて決定される第２の評価値と、の比較に基づいて、前記高解像度画像データの前記対象画素の画素値の信頼度を決定する、
   画像データ処理装置。
2. 画像データをアップサンプリングするアップサンプリング手段をさらに備え、
   前記画像データ取得手段は、前記低解像度画像データを第１の補間方法を用いて前記アップサンプリング手段によってアップサンプリングすることで第１の高解像度画像データを取得し、かつ、前記低解像度画像データを前記第１の補間方法とは異なる第２の補間方法を用いて前記アップサンプリング手段によってアップサンプリングすることで第２の高解像度画像データを取得し、
   前記信頼度データ決定手段は、前記第１の高解像度画像データの前記対象画素の画素値を前記第１の評価値として用い、前記対象画素に対応する前記第２の高解像度画像データの画素値を前記第２の評価値として用いる、
   請求項１に記載の画像データ処理装置。
3. 撮影画像データと前記信頼度データとに基づいて、前記第１の高解像度画像データを補正する補正手段を更に備える、
   請求項２に記載の画像データ処理装置。
4. 前記第１の補間方法はバイリニア補間であり、前記第２の補間方法はニアレストネイバー補間である、
   請求項２または３に記載の画像データ処理装置。
5. 前記画像データ取得手段は、前記第１の高解像度画像データまたは前記第２の高解像度画像データのいずれかを、前記高解像度画像データとして取得する、
   請求項２から４のいずれか１項に記載の画像データ処理装置。
6. 前記低解像度画像データおよび高解像度画像データは、距離画像データ、動き画像データ、又は、セグメンテーション画像である、
   請求項１から５のいずれか１項に記載の画像データ処理装置。
7. 前記信頼度データ決定手段は、
   前記低解像度画像データにおける前記近傍画素の画素値の、第１の重み係数を用いた重み付け平均値を前記第１の評価値として決定し、
   前記低解像度画像データにおける前記近傍画素の画素値の、前記第１の重み係数とは異なる第２の重み係数を用いた重み付け平均値を前記第２の評価値として決定する、
   請求項１に記載の画像データ処理装置。
8. 前記第１の重み係数および前記第２の重み係数は、前記高解像度画像データの前記対象画素に対応する前記低解像度画像データにおける画素からの距離に応じて決定される、
   請求項７に記載の画像データ処理装置。
9. 前記第１の重み係数および前記第２の重み係数の一方は、前記近傍画素のうち、前記高解像度画像データの前記対象画素に対応する前記低解像度画像データにおける前記画素から、最も近い画素の重みが１であり、その他の画素の重みが０であるように決定される、
   請求項８に記載の画像データ処理装置。
10. 前記第１の重み係数および前記第２の重み係数の少なくとも一方は、前記高解像度画像データの前記対象画素に対応する前記低解像度画像データにおける前記画素からの距離に応じたガウス関数により決定される、
    請求項８または９に記載の画像データ処理装置。
11. 前記第１の重み係数および前記第２の重み係数の一方は、前記高解像度画像データの前記対象画素に対応する前記低解像度画像データにおける前記画素からの距離に反比例した値として決定される、
    請求項８から１０のいずれか１項に記載の画像データ処理装置。
12. 前記信頼度データ決定手段は、前記高解像度画像データの対象画素に対応する前記低解像度画像データにおける画素の近傍画素の画素値の最大値と最小値の差を前記第１の評価値とし、対象画素にかかわらずに０を前記第２の評価値とする、
    請求項１に記載の画像データ処理装置。
13. 前記信頼度は、画素値が信頼できるか信頼できないかを表す二値の情報であり、
    前記信頼度データ決定手段は、前記第１の評価値と前記第２の評価値の差が所定の閾値以下であれば、前記対象画素の信頼度を信頼できることを表す信頼度として決定し、前記差が前記所定の閾値よりも大きければ、前記対象画素の信頼度を信頼できないことを表す信頼度として決定する、
    請求項１から１２のいずれか１項に記載の画像データ処理装置。
14. 前記信頼度データ決定手段は、前記第１の評価値と前記第２の評価値の差が大きいほど信頼度が低くなるように、前記対象画素の信頼度を決定する、
    請求項１から１２のいずれか１項に記載の画像データ処理装置。
15. 低解像度画像データと当該低解像度画像データをアップサンプリングした画像データである高解像度画像データを取得する画像データ取得手段と、
    前記高解像度画像データの画素値の信頼度を表す信頼度データを決定する信頼度データ決定手段と、
    を備え、
    前記信頼度データ決定手段は、前記低解像度画像データの局所領域内の画素値の最大値と最小値の差に基づいて、前記局所領域に対応する前記高解像度画像データの画素の信頼度を決定する、
    画像データ処理装置。
16. 前記信頼度は、画素値が信頼できるか信頼できないかを表す二値の情報であり、
    前記信頼度データ決定手段は、
    全画素について信頼できないことを表す信頼度を有する信頼度データを用意し、
    前記局所領域内の画素値の最大値と最小値の差が所定の閾値以下の場合に、前記局所領域に対応する前記高解像度画像データの信頼度を、信頼できることを表す信頼度に更新する、
    請求項１５に記載の画像データ処理装置。
17. 前記信頼度は、画素値が信頼できるか信頼できないかを表す二値の情報であり、
    前記信頼度データ決定手段は、
    全画素について信頼できることを表す信頼度を有する信頼度データを用意し、
    前記局所領域内の画素値の最大値と最小値の差が所定の閾値より大きい場合に、前記局所領域に対応する前記高解像度画像データの信頼度を、信頼できないことを表す信頼度に更新する、
    請求項１５に記載の画像データ処理装置。
18. 前記局所領域は、隣接する４画素からなる正方形の領域であり、
    前記局所領域に対応する前記高解像度画像データの画素とは、前記４画素に対応する前記高解像度画像データの４画素を頂点とする正方形の領域に含まれる画素である、
    請求項１５から１７のいずれか１項に記載の画像データ処理装置。
19. 前記局所領域は、横方向に並んだ２画素からなる長方形の第１領域および、縦方向に並んだ２画素からなる長方形の第２領域であり、
    前記第１領域に対応する前記高解像度画像データの画素とは、前記２画素に縦方向に隣接する４画素に対応する前記高解像度画像データの４画素を頂点とする長方形の領域の内部に含まれる画素であり、
    前記第２領域に対応する前記高解像度画像データの画素とは、前記２画素に横方向に隣接する４画素に対応する前記高解像度画像データの４画素を頂点とする長方形の領域の内部に含まれる画素である、
    請求項１５から１７のいずれか１項に記載の画像データ処理装置。
20. 前記所定の閾値は、前記低解像度画像データのデータ分解能に基づいて設定される、
    請求項１３、１６、１７のいずれか１項に記載の画像データ処理装置。
21. 前記所定の閾値は、許容できるエラー量に基づいて設定される、
    請求項１３、１６、１７のいずれか１項に記載の画像データ処理装置。
22. 前記所定の閾値は、許容できる距離変化に基づいて設定される、
    請求項１３、１６、１７のいずれか１項に記載の画像データ処理装置。
23. 前記信頼度に少なくとも部分的に基づいて、前記高解像度画像データを補正する補正手段をさらに備える、
    請求項１から２２のいずれか１項に記載の画像データ処理装置。
24. 前記補正手段は、前記高解像度画像データの画素のうち、前記信頼度が閾値以下の画素のみを補正する、
    請求項２３に記載の画像データ処理装置。
25. 前記補正手段は、前記低解像度画像データおよび前記高解像度画像データに対応する画像データであって、前記高解像度画像データと同じ解像度を有する画像データにも基づいて、前記高解像度画像データを補正する、
    請求項２３または２４に記載の画像データ処理装置。
26. 撮像素子と、
    請求項１から２５のいずれか１項に記載の画像データ処理装置と、
    を備え、
    前記画像データ取得手段は、前記撮像素子から撮影画像データを取得し、前記撮影画像データから前記低解像度画像データを生成し、前記低解像度画像データを拡大して前記高解像度画像データを取得する、
    撮像装置。
27. 画像データ処理装置が行う画像データ処理方法であって、
    低解像度画像データと当該低解像度画像データをアップサンプリングした画像データである高解像度画像データとを取得する画像データ取得ステップと、
    前記高解像度画像データの画素値の信頼度を表す信頼度データを決定する信頼度データ決定ステップと、
    を含み、
    前記信頼度データ決定ステップでは、
    前記高解像度画像データの対象画素の画素位置に対応する前記低解像度画像データにおける画素の近傍画素から第１の評価値を決定し、
    前記高解像度画像データの対象画素の画素位置に対応する前記低解像度画像データにおける前記画素の前記近傍画素から、前記第１の評価値とは異なる方法により、第２の評価値を決定し、
    前記第１の評価値と前記第２の評価値の比較に基づいて、前記高解像度画像データの前記対象画素についての信頼度を決定する、
    画像データ処理方法。
28. 画像データ処理装置が行う画像データ処理方法であって、
    低解像度画像データと当該低解像度画像データをアップサンプリングした画像データである高解像度画像データを取得する画像データ取得ステップと、
    前記高解像度画像データの画素値の信頼度を表す信頼度データを決定する信頼度データ決定ステップと、
    を含み、
    前記信頼度データ決定ステップでは、前記低解像度画像データの局所領域内の画素値の最大値と最小値の差に基づいて、前記局所領域に対応する前記高解像度画像データの画素の信頼度を決定する、
    画像データ処理方法。
29. 請求項２７または２８に記載の画像データ処理方法の各ステップを、コンピュータに実
    行させるためのプログラム。