JP2000121319A5 - 画像処理装置および画像処理方法、並びに記録媒体 - Google Patents
画像処理装置および画像処理方法、並びに記録媒体 Download PDFInfo
- Publication number
- JP2000121319A5 JP2000121319A5 JP1998293212A JP29321298A JP2000121319A5 JP 2000121319 A5 JP2000121319 A5 JP 2000121319A5 JP 1998293212 A JP1998293212 A JP 1998293212A JP 29321298 A JP29321298 A JP 29321298A JP 2000121319 A5 JP2000121319 A5 JP 2000121319A5
- Authority
- JP
- Japan
- Prior art keywords
- distance
- image
- pixel
- related information
- pixels
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000003672 processing method Methods 0.000 title description 8
- 230000000875 corresponding Effects 0.000 description 30
- 238000001514 detection method Methods 0.000 description 7
- 238000011156 evaluation Methods 0.000 description 7
- 230000000694 effects Effects 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 238000000034 method Methods 0.000 description 1
Description
【特許請求の範囲】
【請求項1】 所定の対象物を撮影した第1および第2の画像に基づいて、前記対象物までの距離に関係する距離関係情報を求める画像処理装置であって、 前記第1の画像の画素と対応する、前記第2の画像の対応画素を検出する検出手段と、
前記対応画素に基づき、前記第1の画像の画素について、前記距離関係情報を求める処理手段と、
前記距離関係情報を画素値とする距離関係情報画像の画素から、前記距離関係情報の補正を行う対象とする補正対象画素を選択する選択手段と、
前記補正対象画素についての前記距離関係情報を、前記距離関係情報画像の他の画素についての前記距離関係情報に基づいて補正する補正手段と
を備えることを特徴とする画像処理装置。
【請求項2】 前記処理手段は、前記第1の画像の画素とその対応画素との間の視差を、前記距離関係情報として求める
ことを特徴とする請求項1に記載の画像処理装置。
【請求項3】 前記検出手段は、前記第1および第2の画像の画素の画素値を用いて、所定の評価関数を演算し、その演算結果に基づいて、前記対応画素を検出する
ことを特徴とする請求項1に記載の画像処理装置。
【請求項4】 前記選択手段は、前記距離関係情報に基づいて、前記補正対象画素を選択する
ことを特徴とする請求項1に記載の画像処理装置。
【請求項5】 前記選択手段は、前記第1の画像の画素の画素値に基づいて、前記補正対象画素を選択する
ことを特徴とする請求項1に記載の画像処理装置。
【請求項6】 前記補正手段は、前記補正対象画素についての前記距離関係情報を、その補正対象画素の近隣に位置する画素についての前記距離関係情報に基づいて補正する
ことを特徴とする請求項1に記載の画像処理装置。
【請求項7】 前記補正手段は、前記補正対象画素についての前記距離関係情報を、前記距離関係情報画像の他の画素についての前記距離関係情報に置換することにより補正する
ことを特徴とする請求項1に記載の画像処理装置。
【請求項8】 前記補正手段は、前記補正対象画素についての前記距離関係情報を、その補正対象画素を含む所定の領域内の他の画素についての前記距離関係情報に基づいて補正する
ことを特徴とする請求項1に記載の画像処理装置。
【請求項9】 前記補正手段は、前記第1の画像の画素とその対応画素との対応関係の確実性に基づいて、前記所定の領域内の画素を選択し、その選択した画素の前記距離関係情報に基づいて、前記補正対象画素についての前記距離関係情報を補正する
ことを特徴とする請求項8に記載の画像処理装置。
【請求項10】 前記補正手段は、前記所定の領域内の画素のうち、最外周に位置する画素を選択の対象とする
ことを特徴とする請求項9に記載の画像処理装置。
【請求項11】 前記検出手段は、前記第1および第2の画像の画素の画素値を用いて、所定の評価関数を演算し、その演算結果に基づいて、前記対応画素を検出し、
前記補正手段は、前記所定の評価関数の値に基づいて、前記第1の画像の画素とその対応画素との対応関係の確実性を評価する
ことを特徴とする請求項9に記載の画像処理装置。
【請求項12】 前記検出手段は、前記第1の画像の画素の画素値と、その画素に対応する可能性のある前記第2の画像の画素群それぞれの画素値とについて、所定の評価関数を演算し、その演算結果に基づき、前記第2の画像の画素群の中から、前記対応画素を検出し、
前記補正手段は、前記所定の評価関数の値に基づいて、前記第1の画像の画素とその対応画素との対応関係の確実性を評価する
ことを特徴とする請求項9に記載の画像処理装置。
【請求項13】 前記検出手段は、前記第1の画像の画素を含む第1の画素ブロックと、その画素に対応する可能性のある前記第2の画像の画素群それぞれの画素を含む第2の画素ブロックとを用いて、所定の評価関数を演算し、その演算結果に基づいて、前記対応画素を検出し、
前記補正手段は、前記所定の評価関数の値に基づいて、前記第1の画像の画素とその対応画素との対応関係の確実性を評価し、前記補正対象画素を含む第3の画素ブロックから、前記確実性が最も高い前記距離関係情報画像の画素を選択し、前記補正対象画素についての前記距離関係情報を、その選択した画素についての前記距離関係情報に置換することにより補正する
ことを特徴とする請求項9に記載の画像処理装置。
【請求項14】 前記所定の対象物を撮影し、前記第1および第2の画像を出力する撮像手段をさらに備える
ことを特徴とする請求項1に記載の画像処理装置。
【請求項15】 所定の対象物を撮影した第1および第2の画像に基づいて、前記対象物までの距離に関係する距離関係情報を求める画像処理方法であって、
前記第1の画像の画素と対応する、前記第2の画像の対応画素を検出する検出ステップと、
前記対応画素に基づき、前記第1の画像の画素について、前記距離関係情報を求める処理ステップと、
前記距離関係情報を画素値とする距離関係情報画像の画素から、前記距離関係情報の補正を行う対象とする補正対象画素を選択する選択ステップと、
前記補正対象画素についての前記距離関係情報を、前記距離関係情報画像の他の画素についての前記距離関係情報に基づいて補正する補正ステップと
を備えることを特徴とする画像処理方法。
【請求項16】 所定の対象物を撮影した第1および第2の画像に基づいて、前記対象物までの距離に関係する距離関係情報を求める処理を、コンピュータに行わせるためのプログラムが記録されているコンピュータ読み取り可能な記録媒体であって、
前記第1の画像の画素と対応する、前記第2の画像の対応画素を検出する検出ステップと、
前記対応画素に基づき、前記第1の画像の画素について、前記距離関係情報を求める処理ステップと、
前記距離関係情報を画素値とする距離関係情報画像の画素から、前記距離関係情報の補正を行う対象とする補正対象画素を選択する選択ステップと、
前記補正対象画素についての前記距離関係情報を、前記距離関係情報画像の他の画素についての前記距離関係情報に基づいて補正する補正ステップと
を備えるプログラムが記録されている
ことを特徴とするコンピュータ読み取り可能な記録媒体。
【請求項1】 所定の対象物を撮影した第1および第2の画像に基づいて、前記対象物までの距離に関係する距離関係情報を求める画像処理装置であって、 前記第1の画像の画素と対応する、前記第2の画像の対応画素を検出する検出手段と、
前記対応画素に基づき、前記第1の画像の画素について、前記距離関係情報を求める処理手段と、
前記距離関係情報を画素値とする距離関係情報画像の画素から、前記距離関係情報の補正を行う対象とする補正対象画素を選択する選択手段と、
前記補正対象画素についての前記距離関係情報を、前記距離関係情報画像の他の画素についての前記距離関係情報に基づいて補正する補正手段と
を備えることを特徴とする画像処理装置。
【請求項2】 前記処理手段は、前記第1の画像の画素とその対応画素との間の視差を、前記距離関係情報として求める
ことを特徴とする請求項1に記載の画像処理装置。
【請求項3】 前記検出手段は、前記第1および第2の画像の画素の画素値を用いて、所定の評価関数を演算し、その演算結果に基づいて、前記対応画素を検出する
ことを特徴とする請求項1に記載の画像処理装置。
【請求項4】 前記選択手段は、前記距離関係情報に基づいて、前記補正対象画素を選択する
ことを特徴とする請求項1に記載の画像処理装置。
【請求項5】 前記選択手段は、前記第1の画像の画素の画素値に基づいて、前記補正対象画素を選択する
ことを特徴とする請求項1に記載の画像処理装置。
【請求項6】 前記補正手段は、前記補正対象画素についての前記距離関係情報を、その補正対象画素の近隣に位置する画素についての前記距離関係情報に基づいて補正する
ことを特徴とする請求項1に記載の画像処理装置。
【請求項7】 前記補正手段は、前記補正対象画素についての前記距離関係情報を、前記距離関係情報画像の他の画素についての前記距離関係情報に置換することにより補正する
ことを特徴とする請求項1に記載の画像処理装置。
【請求項8】 前記補正手段は、前記補正対象画素についての前記距離関係情報を、その補正対象画素を含む所定の領域内の他の画素についての前記距離関係情報に基づいて補正する
ことを特徴とする請求項1に記載の画像処理装置。
【請求項9】 前記補正手段は、前記第1の画像の画素とその対応画素との対応関係の確実性に基づいて、前記所定の領域内の画素を選択し、その選択した画素の前記距離関係情報に基づいて、前記補正対象画素についての前記距離関係情報を補正する
ことを特徴とする請求項8に記載の画像処理装置。
【請求項10】 前記補正手段は、前記所定の領域内の画素のうち、最外周に位置する画素を選択の対象とする
ことを特徴とする請求項9に記載の画像処理装置。
【請求項11】 前記検出手段は、前記第1および第2の画像の画素の画素値を用いて、所定の評価関数を演算し、その演算結果に基づいて、前記対応画素を検出し、
前記補正手段は、前記所定の評価関数の値に基づいて、前記第1の画像の画素とその対応画素との対応関係の確実性を評価する
ことを特徴とする請求項9に記載の画像処理装置。
【請求項12】 前記検出手段は、前記第1の画像の画素の画素値と、その画素に対応する可能性のある前記第2の画像の画素群それぞれの画素値とについて、所定の評価関数を演算し、その演算結果に基づき、前記第2の画像の画素群の中から、前記対応画素を検出し、
前記補正手段は、前記所定の評価関数の値に基づいて、前記第1の画像の画素とその対応画素との対応関係の確実性を評価する
ことを特徴とする請求項9に記載の画像処理装置。
【請求項13】 前記検出手段は、前記第1の画像の画素を含む第1の画素ブロックと、その画素に対応する可能性のある前記第2の画像の画素群それぞれの画素を含む第2の画素ブロックとを用いて、所定の評価関数を演算し、その演算結果に基づいて、前記対応画素を検出し、
前記補正手段は、前記所定の評価関数の値に基づいて、前記第1の画像の画素とその対応画素との対応関係の確実性を評価し、前記補正対象画素を含む第3の画素ブロックから、前記確実性が最も高い前記距離関係情報画像の画素を選択し、前記補正対象画素についての前記距離関係情報を、その選択した画素についての前記距離関係情報に置換することにより補正する
ことを特徴とする請求項9に記載の画像処理装置。
【請求項14】 前記所定の対象物を撮影し、前記第1および第2の画像を出力する撮像手段をさらに備える
ことを特徴とする請求項1に記載の画像処理装置。
【請求項15】 所定の対象物を撮影した第1および第2の画像に基づいて、前記対象物までの距離に関係する距離関係情報を求める画像処理方法であって、
前記第1の画像の画素と対応する、前記第2の画像の対応画素を検出する検出ステップと、
前記対応画素に基づき、前記第1の画像の画素について、前記距離関係情報を求める処理ステップと、
前記距離関係情報を画素値とする距離関係情報画像の画素から、前記距離関係情報の補正を行う対象とする補正対象画素を選択する選択ステップと、
前記補正対象画素についての前記距離関係情報を、前記距離関係情報画像の他の画素についての前記距離関係情報に基づいて補正する補正ステップと
を備えることを特徴とする画像処理方法。
【請求項16】 所定の対象物を撮影した第1および第2の画像に基づいて、前記対象物までの距離に関係する距離関係情報を求める処理を、コンピュータに行わせるためのプログラムが記録されているコンピュータ読み取り可能な記録媒体であって、
前記第1の画像の画素と対応する、前記第2の画像の対応画素を検出する検出ステップと、
前記対応画素に基づき、前記第1の画像の画素について、前記距離関係情報を求める処理ステップと、
前記距離関係情報を画素値とする距離関係情報画像の画素から、前記距離関係情報の補正を行う対象とする補正対象画素を選択する選択ステップと、
前記補正対象画素についての前記距離関係情報を、前記距離関係情報画像の他の画素についての前記距離関係情報に基づいて補正する補正ステップと
を備えるプログラムが記録されている
ことを特徴とするコンピュータ読み取り可能な記録媒体。
【0001】
【発明の属する技術分野】
本発明は、画像処理装置および画像処理方法、並びに記録媒体に関し、特に、例えば、所定の対象物を、複数のカメラで撮影して得られる複数の画像の画素それぞれを相互に対応付け、対象物に対する視差や、対象物までの距離などを、画素ごとに求める、いわゆるステレオ画像処理を行う画像処理装置および画像処理方法、並びに記録媒体に関する。
【発明の属する技術分野】
本発明は、画像処理装置および画像処理方法、並びに記録媒体に関し、特に、例えば、所定の対象物を、複数のカメラで撮影して得られる複数の画像の画素それぞれを相互に対応付け、対象物に対する視差や、対象物までの距離などを、画素ごとに求める、いわゆるステレオ画像処理を行う画像処理装置および画像処理方法、並びに記録媒体に関する。
請求項15に記載の画像処理方法は、第1の画像の画素と対応する、第2の画像の対応画素を検出する検出ステップと、対応画素に基づき、第1の画像の画素について、距離関係情報を求める処理ステップと、距離関係情報を画素値とする距離関係情報画像の画素から、距離関係情報の補正を行う対象とする補正対象画素を選択する選択ステップと、補正対象画素についての距離関係情報を、距離関係情報画像の他の画素についての距離関係情報に基づいて補正する補正ステップとを備えることを特徴とする。
請求項16に記載の記録媒体は、第1の画像の画素と対応する、第2の画像の対応画素を検出する検出ステップと、対応画素に基づき、第1の画像の画素について、距離関係情報を求める処理ステップと、距離関係情報を画素値とする距離関係情報画像の画素から、距離関係情報の補正を行う対象とする補正対象画素を選択する選択ステップと、補正対象画素についての距離関係情報を、距離関係情報画像の他の画素についての距離関係情報に基づいて補正する補正ステップとを備えるプログラムが記録されていることを特徴とする。
請求項15に記載の画像処理方法においては、第1の画像の画素と対応する、第2の画像の対応画素を検出し、対応画素に基づき、第1の画像の画素について、距離関係情報を求め、距離関係情報を画素値とする距離関係情報画像の画素から、距離関係情報の補正を行う対象とする補正対象画素を選択し、補正対象画素についての距離関係情報を、距離関係情報画像の他の画素についての距離関係情報に基づいて補正するようになされている。
請求項16に記載の記録媒体に記録されるプログラムにおいては、第1の画像の画素と対応する、第2の画像の対応画素を検出し、対応画素に基づき、第1の画像の画素について、距離関係情報を求め、距離関係情報を画素値とする距離関係情報画像の画素から、距離関係情報の補正を行う対象とする補正対象画素を選択し、補正対象画素についての距離関係情報を、距離関係情報画像の他の画素についての距離関係情報に基づいて補正するようになされている。
【0161】
【発明の効果】
請求項1に記載の画像処理装置および請求項15に記載の画像処理方法、並びに請求項16に記載の記録媒体によれば、第1の画像の画素と対応する、第2の画像の対応画素が検出され、その対応画素に基づき、第1の画像の画素について、距離関係情報が求められる。さらに、距離関係情報を画素値とする距離関係情報画像の画素から、距離関係情報の補正を行う対象とする補正対象画素が選択され、その補正対象画素についての距離関係情報が、距離関係情報画像の他の画素についての距離関係情報に基づいて補正される。従って、第1および第2の画像どうしでの画素の対応付けを正確に行うことができなかった場合であっても、精度の高い距離関係情報を得ることが可能となる。
【発明の効果】
請求項1に記載の画像処理装置および請求項15に記載の画像処理方法、並びに請求項16に記載の記録媒体によれば、第1の画像の画素と対応する、第2の画像の対応画素が検出され、その対応画素に基づき、第1の画像の画素について、距離関係情報が求められる。さらに、距離関係情報を画素値とする距離関係情報画像の画素から、距離関係情報の補正を行う対象とする補正対象画素が選択され、その補正対象画素についての距離関係情報が、距離関係情報画像の他の画素についての距離関係情報に基づいて補正される。従って、第1および第2の画像どうしでの画素の対応付けを正確に行うことができなかった場合であっても、精度の高い距離関係情報を得ることが可能となる。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP29321298A JP4296617B2 (ja) | 1998-10-15 | 1998-10-15 | 画像処理装置および画像処理方法、並びに記録媒体 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP29321298A JP4296617B2 (ja) | 1998-10-15 | 1998-10-15 | 画像処理装置および画像処理方法、並びに記録媒体 |
Publications (3)
Publication Number | Publication Date |
---|---|
JP2000121319A JP2000121319A (ja) | 2000-04-28 |
JP2000121319A5 true JP2000121319A5 (ja) | 2005-12-02 |
JP4296617B2 JP4296617B2 (ja) | 2009-07-15 |
Family
ID=17791884
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP29321298A Expired - Fee Related JP4296617B2 (ja) | 1998-10-15 | 1998-10-15 | 画像処理装置および画像処理方法、並びに記録媒体 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP4296617B2 (ja) |
Families Citing this family (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8269820B2 (en) | 2006-11-02 | 2012-09-18 | Konica Minolta Holdings, Inc. | Wide-angle image acquiring method and wide-angle stereo camera device |
JP4752918B2 (ja) | 2009-01-16 | 2011-08-17 | カシオ計算機株式会社 | 画像処理装置、画像照合方法、および、プログラム |
JP5252642B2 (ja) * | 2009-04-13 | 2013-07-31 | 独立行政法人情報通信研究機構 | 奥行推定装置、奥行推定方法および奥行推定プログラム |
JP5870510B2 (ja) * | 2010-09-14 | 2016-03-01 | 株式会社リコー | ステレオカメラ装置、校正方法およびプログラム |
JP5533529B2 (ja) * | 2010-10-06 | 2014-06-25 | コニカミノルタ株式会社 | 画像処理装置及び画像処理システム |
JP5713350B2 (ja) * | 2011-10-25 | 2015-05-07 | 日本電信電話株式会社 | 画像処理装置、方法、及びプログラム |
JP5747797B2 (ja) * | 2011-11-29 | 2015-07-15 | コニカミノルタ株式会社 | 画像処理装置、画像処理方法および画像処理プログラム |
JP5818773B2 (ja) * | 2012-11-22 | 2015-11-18 | キヤノン株式会社 | 画像処理装置、画像処理方法及びプログラム |
JP6175878B2 (ja) * | 2013-04-25 | 2017-08-09 | 富士通株式会社 | 画像処理回路、画像処理装置及び画像処理方法 |
JP5980294B2 (ja) * | 2014-10-27 | 2016-08-31 | キヤノン株式会社 | データ処理装置、撮像装置、およびデータ処理方法 |
WO2017145945A1 (ja) | 2016-02-25 | 2017-08-31 | 京セラ株式会社 | ステレオカメラ装置、車両および視差算出方法 |
EP3358844A1 (en) * | 2017-02-07 | 2018-08-08 | Koninklijke Philips N.V. | Method and apparatus for processing an image property map |
JP7042185B2 (ja) * | 2018-07-27 | 2022-03-25 | 日立Astemo株式会社 | 距離算出装置 |
JP7269130B2 (ja) * | 2019-08-14 | 2023-05-08 | 日立Astemo株式会社 | 画像処理装置 |
-
1998
- 1998-10-15 JP JP29321298A patent/JP4296617B2/ja not_active Expired - Fee Related
Similar Documents
Publication | Publication Date | Title |
---|---|---|
EP2194725B1 (en) | Method and apparatus for correcting a depth image | |
EP2426642A1 (en) | Method, device and system for motion detection | |
US8144974B2 (en) | Image processing apparatus, method, and program | |
US20150278996A1 (en) | Image processing apparatus, method, and medium for generating color image data | |
JP2000121319A5 (ja) | 画像処理装置および画像処理方法、並びに記録媒体 | |
CN110084133B (zh) | 障碍物检测方法、装置、车辆、计算机设备和存储介质 | |
JP2004061446A (ja) | パターンマッチング処理方法及び画像処理装置 | |
WO2011125937A1 (ja) | キャリブレーションデータ選択装置、選択方法、及び選択プログラム、並びに三次元位置測定装置 | |
JP2011203811A (ja) | 画像処理装置、画像処理方法、画像処理プログラム、及び複眼デジタルカメラ | |
EP2511875A1 (en) | Apparatus and method for refining a value of a similarity measure | |
JP2001091247A (ja) | 距離データの検査方法およびその検査装置 | |
JP2019020778A5 (ja) | ||
US20080226159A1 (en) | Method and System For Calculating Depth Information of Object in Image | |
CN110120012B (zh) | 基于双目摄像头的同步关键帧提取的视频拼接方法 | |
CN112637573A (zh) | 一种多镜头切换的显示方法、系统、智能终端及存储介质 | |
US20090244264A1 (en) | Compound eye photographing apparatus, control method therefor , and program | |
JP4605582B2 (ja) | ステレオ画像認識装置及びその方法 | |
JP4021036B2 (ja) | ステレオ画像処理装置 | |
JP2001204041A5 (ja) | ||
KR20110133677A (ko) | 3d 영상 처리 장치 및 그 방법 | |
CN110009701B (zh) | 一种针对多镜头拍摄的白平衡调整方法 | |
JP3864491B2 (ja) | 視差算出装置、距離算出装置およびこれらの方法 | |
JPH09231369A (ja) | 画像情報入力装置 | |
JP3635327B2 (ja) | 焦点調整機構とズーム機構による高精度3次元計測方法およびそのための高精度3次元計測装置 | |
JP4265927B2 (ja) | ステレオ画像処理装置 |