JP2013253964A5 - - Google Patents

Download PDF

Info

Publication number
JP2013253964A5
JP2013253964A5 JP2013064231A JP2013064231A JP2013253964A5 JP 2013253964 A5 JP2013253964 A5 JP 2013253964A5 JP 2013064231 A JP2013064231 A JP 2013064231A JP 2013064231 A JP2013064231 A JP 2013064231A JP 2013253964 A5 JP2013253964 A5 JP 2013253964A5
Authority
JP
Japan
Prior art keywords
distance
spatial frequency
frequency band
images
measuring device
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2013064231A
Other languages
English (en)
Other versions
JP6214183B2 (ja
JP2013253964A (ja
Filing date
Publication date
Application filed filed Critical
Priority to JP2013064231A priority Critical patent/JP6214183B2/ja
Priority claimed from JP2013064231A external-priority patent/JP6214183B2/ja
Priority to US13/875,470 priority patent/US9324153B2/en
Publication of JP2013253964A publication Critical patent/JP2013253964A/ja
Publication of JP2013253964A5 publication Critical patent/JP2013253964A5/ja
Application granted granted Critical
Publication of JP6214183B2 publication Critical patent/JP6214183B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Claims (23)

  1. 異なる撮影パラメータで撮影したぼけの異なる複数枚の画像を用いて、被写体の距離情報を計測する距離計測装置であって、
    前記複数枚の画像のうちの少なくとも1枚の画像中に存在する空間周波数から空間周波数帯を決定する空間周波数決定手段と、
    前記複数枚の画像の前記空間周波数帯の成分を用いて該複数枚の画像の比較を行い、被写体の距離に依存する距離依存値を出力する画像比較手段と、
    を備える、距離計測装置。
  2. 前記複数枚の画像から処理対象領域を含む画像領域をそれぞれ選択し領域選択画像として出力する領域選択手段を更に備え、
    前記画像比較手段は、前記領域選択画像の前記空間周波数帯の成分を用いて画像の比較を行い、前記処理対象領域における被写体の距離に依存する距離依存値を出力する、
    請求項1に記載の距離計測装置。
  3. 前記空間周波数決定手段は、前記領域選択画像中に存在する空間周波数から距離依存値の出力に用いる空間周波数帯を決定する、
    請求項2に記載の距離計測装置。
  4. 前記空間周波数決定手段は、
    前記複数枚の画像の前記領域選択画像を周波数空間画像に変換し、
    前記複数枚の画像のうち少なくとも1枚の画像について、前記領域選択画像中に存在する空間周波数帯である特徴周波数帯を決定し、
    前記特徴周波数帯を含むように、距離依存値の出力に用いる空間周波数帯を選択する、
    請求項3に記載の距離計測装置。
  5. 前記空間周波数決定手段は、前記複数枚の画像のうち少なくとも1枚の画像から前記空間周波数帯を決定し、
    前記画像比較手段は、任意の前記領域選択画像に対して、前記空間周波数帯の成分に基づいて前記距離依存値を出力する、
    請求項2に記載の距離計測装置。
  6. 前記空間周波数決定手段は、
    前記複数枚の画像のうち少なくとも1枚の画像を周波数空間画像に変換し、
    前記複数枚の画像のうち少なくとも1枚の画像中に存在する空間周波数帯である特徴周波数帯を決定し、
    前記特徴周波数帯を含むように、距離依存値の出力に用いる空間周波数帯を選択する、
    請求項に記載の距離計測装置。
  7. 前記空間周波数決定手段は、
    予め用意された異なる空間周波数帯を通過させる複数のフィルタを前記領域選択画像に作用させ、
    前記複数のフィルタのうち少なくとも1つのフィルタが通過させる空間周波数帯を距離依存値の出力に用いる空間周波数帯として決定する、
    請求項3に記載の距離計測装置。
  8. 前記空間周波数決定手段は、
    予め用意された異なる周波数帯を通過させる複数のフィルタのうち高周波を通過させるフィルタから順に作用させ、
    出力された値が所定の閾値を超える最初のフィルタが通過させる空間周波数帯を、距離依存値の出力に用いる空間周波数帯として決定する、
    請求項に記載の距離計測装置。
  9. 前記空間周波数決定手段は、
    予め用意された異なる空間周波数帯を通過させる複数のフィルタを前記複数枚の画像のうちの少なくとも1枚の画像に作用させ、
    前記複数のフィルタのうち少なくとも1つのフィルタが通過させる空間周波数帯を距離依存値の出力に用いる空間周波数帯として決定する、
    請求項に記載の距離計測装置。
  10. 前記距離依存値と前記空間周波数帯から被写体の距離情報を決定する距離決定手段を更に備える、
    請求項1〜のいずれか1項に記載の距離計測装置。
  11. 前記距離決定手段は、前記距離依存値を撮影パラメータと前記空間周波数決定手段により決定された空間周波数帯に基づき距離に変換することを特徴とする請求項10に記載の距離計測装置。
  12. 前記距離決定手段は、前記距離依存値、前記撮影パラメータ、前記空間周波数帯、および距離の関係が予め保存されたテーブルを参照して距離を決定する、
    請求項10または11に記載の距離計測装置。
  13. 異なる撮影パラメータで撮影したぼけの異なる複数枚の画像を用いて、被写体の距離情報を計測する距離計測装置であって、
    含まれる周波数fcと帯域幅fbが下記の式を満足する所定の空間周波数帯を決定する空間周波数決定手段と、
    前記複数枚の画像の前記所定の空間周波数帯の成分を用いて該複数枚の画像の比較を行い、距離に依存する距離依存値を出力する画像比較手段と、
    を備える距離計測装置。
    0.3×fnq≦fc≦1×fnq
    0.1×fnq≦fb≦0.4×fnq
    ただし、fnqは、前記複数枚の画像を撮像した撮像素子のナイキスト周波数である。
  14. 異なる撮影パラメータで撮影したぼけの異なる複数枚の画像を用いて、被写体の距離情報を計測する距離計測装置であって、
    前記複数枚の画像のうち少なくとも1枚の画像中に存在する空間周波数から複数の空間周波数帯に対する加重値を決定する加重値決定手段と、
    前記複数の空間周波数帯のそれぞれについて、前記複数枚の画像の空間周波数帯成分を用いて画像の比較を行い、距離に依存する距離依存値を出力する画像比較手段と、
    を備える、距離計測装置。
  15. 前記画像比較手段は、各空間周波数帯に対する加重値を用いて各空間周波数帯の距離依存値の加重平均をとることにより、出力する距離依存値を決定する、
    請求項14に記載の距離計測装置。
  16. 前記複数の距離依存値と前記複数の空間周波数帯と各空間周波数帯に対する加重値に基づいて距離を決定する距離決定手段を更に備える、
    請求項14に記載の距離計測装置。
  17. 前記距離決定手段は、
    前記複数の空間周波数帯のそれぞれについて、前記距離依存値と前記空間周波数帯に基づいて距離を決定し、
    各空間周波数に対する加重値を用いて、各空間周波数帯について決定された前記距離の加重平均値をとることにより、処理対象領域における被写体までの距離を決定する、
    請求項16に記載の距離計測装置。
  18. 前記加重値算出手段は、あらかじめ用意された異なる周波数帯を通過させる複数のフィルタを前記領域選択画像に作用させ、出力された値の統計量に応じて、前記フィルタに対応する通過周波数帯ごとに加重値を決定する、
    請求項1417のいずれか1項に記載の距離計測装置。
  19. 撮像手段と、請求項1、13、14のいずれか1項に記載の距離計測装置とを備え、
    前記画像処理装置は、前記撮像手段を用いて異なる撮影パラメータで撮影されたぼけの異なる複数枚の画像に基づいて、処理対象領域における被写体の距離情報を計測する、
    撮像装置。
  20. 異なる撮影パラメータで撮影したぼけの異なる複数枚の画像を用いて、被写体の距離情報を計測する距離計測方法であって、
    前記複数枚の画像のうちの少なくとも1枚の画像中に存在する空間周波数から空間周波数帯を決定する空間周波数決定ステップと、
    前記複数枚の画像の前記空間周波数帯の成分を用いて該複数枚の画像の比較を行い、被写体の距離に依存する距離依存値を出力する画像比較ステップと、
    を含む距離計測方法。
  21. 異なる撮影パラメータで撮影したぼけの異なる複数枚の画像を用いて、被写体の距離情報を計測する距離計測方法であって、
    所定の空間周波数帯を、当該所定の空間周波数帯に含まれる周波数fcと当該所定の空間周波数帯の帯域幅fbが下記の式を満足するように決定する空間周波数決定ステップと、
    前記複数枚の画像の前記所定の空間周波数帯の成分を用いて該複数枚の画像の比較を行い、距離に依存する距離依存値を出力する画像比較ステップと、
    を含む、距離計測方法。
    0.3×fnq≦fc≦1×fnq
    0.1×fnq≦fb≦0.4×fnq
    ただし、fnqは、前記複数枚の画像を撮像した撮像素子のナイキスト周波数である。
  22. 異なる撮影パラメータで撮影したぼけの異なる複数枚の画像を用いて、被写体の距離情報を計測する距離計測方法であって、
    前記複数枚の画像のうち少なくとも1枚の画像中に存在する空間周波数から複数の空間周波数帯に対する加重値を決定する加重値決定ステップと、
    前記複数の空間周波数帯のそれぞれについて、前記複数枚の画像の空間周波数帯成分を用いて画像の比較を行い、距離に依存する距離依存値を出力する画像比較ステップと、
    を含む距離計測方法。
  23. コンピュータに請求項20〜22のいずれか1項に記載の方法の各ステップを実行させるためのプログラム。
JP2013064231A 2012-05-11 2013-03-26 距離計測装置、撮像装置、距離計測方法、およびプログラム Active JP6214183B2 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2013064231A JP6214183B2 (ja) 2012-05-11 2013-03-26 距離計測装置、撮像装置、距離計測方法、およびプログラム
US13/875,470 US9324153B2 (en) 2012-05-11 2013-05-02 Depth measurement apparatus, image pickup apparatus, depth measurement method, and depth measurement program

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2012109611 2012-05-11
JP2012109611 2012-05-11
JP2013064231A JP6214183B2 (ja) 2012-05-11 2013-03-26 距離計測装置、撮像装置、距離計測方法、およびプログラム

Publications (3)

Publication Number Publication Date
JP2013253964A JP2013253964A (ja) 2013-12-19
JP2013253964A5 true JP2013253964A5 (ja) 2016-05-19
JP6214183B2 JP6214183B2 (ja) 2017-10-18

Family

ID=49548309

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2013064231A Active JP6214183B2 (ja) 2012-05-11 2013-03-26 距離計測装置、撮像装置、距離計測方法、およびプログラム

Country Status (2)

Country Link
US (1) US9324153B2 (ja)
JP (1) JP6214183B2 (ja)

Families Citing this family (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6245885B2 (ja) 2013-08-02 2017-12-13 キヤノン株式会社 撮像装置およびその制御方法
JP2015035658A (ja) 2013-08-07 2015-02-19 キヤノン株式会社 画像処理装置、画像処理方法、および撮像装置
JP6292790B2 (ja) * 2013-08-08 2018-03-14 キヤノン株式会社 距離検出装置、撮像装置および距離検出方法
JP2015036841A (ja) 2013-08-12 2015-02-23 キヤノン株式会社 画像処理装置、距離計測装置、撮像装置、画像処理方法
JP6351238B2 (ja) 2013-11-15 2018-07-04 キヤノン株式会社 画像処理装置、撮像装置および距離補正方法
AU2013263760A1 (en) * 2013-11-28 2015-06-11 Canon Kabushiki Kaisha Method, system and apparatus for determining a depth value of a pixel
JP5895270B2 (ja) * 2014-03-28 2016-03-30 パナソニックIpマネジメント株式会社 撮像装置
US20170148177A1 (en) * 2014-06-03 2017-05-25 Sony Corporation Image processing apparatus, image processing method, and program
JP6415179B2 (ja) 2014-08-20 2018-10-31 キヤノン株式会社 画像処理装置、画像処理方法、および撮像装置並びにその制御方法
US9967535B2 (en) * 2015-04-17 2018-05-08 Light Labs Inc. Methods and apparatus for reducing noise in images
US9646225B2 (en) 2015-08-21 2017-05-09 Sony Corporation Defocus estimation from single image based on Laplacian of Gaussian approximation
US10003738B2 (en) 2015-12-18 2018-06-19 Light Labs Inc. Methods and apparatus for detecting and/or indicating a blocked sensor or camera module
CN107707819B (zh) * 2017-09-29 2021-04-13 北京小米移动软件有限公司 图像拍摄方法、装置及存储介质
US10992851B2 (en) 2018-02-15 2021-04-27 Canon Kabushiki Kaisha Image processing apparatus, image processing method, and non-transitory computer-readable storage medium, with image processing based on image processing condition and information equivalent to distance from focal plane
JP7117914B2 (ja) 2018-06-29 2022-08-15 キヤノン株式会社 画像処理装置、画像処理方法、及びプログラム
JP2020010146A (ja) 2018-07-05 2020-01-16 キヤノン株式会社 画像処理装置、画像処理方法、及びプログラム
JP7199169B2 (ja) 2018-07-05 2023-01-05 キヤノン株式会社 画像処理装置、画像処理方法、及びプログラム
JP2020141226A (ja) 2019-02-27 2020-09-03 キヤノン株式会社 画像処理装置、画像処理方法、及びプログラム

Family Cites Families (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS59160109A (ja) * 1983-03-03 1984-09-10 Nippon Kogaku Kk <Nikon> 光像検出装置
US4965840A (en) 1987-11-27 1990-10-23 State University Of New York Method and apparatus for determining the distances between surface-patches of a three-dimensional spatial scene and a camera system
JP2772079B2 (ja) * 1989-01-09 1998-07-02 オリンパス光学工業株式会社 自動合焦装置
JPH0646257B2 (ja) * 1990-02-02 1994-06-15 株式会社ニコン 焦点検出装置
JP3110095B2 (ja) * 1991-09-20 2000-11-20 富士通株式会社 測距方法及び測距装置
JPH05181057A (ja) * 1992-01-06 1993-07-23 Olympus Optical Co Ltd 自動合焦装置
JP2776294B2 (ja) * 1995-04-12 1998-07-16 日本電気株式会社 皮膚紋様画像の画像特徴抽出装置および画像処理装置
JP3481631B2 (ja) * 1995-06-07 2003-12-22 ザ トラスティース オブ コロンビア ユニヴァーシティー イン ザ シティー オブ ニューヨーク 能動型照明及びデフォーカスに起因する画像中の相対的なぼけを用いる物体の3次元形状を決定する装置及び方法
JP3008875B2 (ja) * 1997-02-25 2000-02-14 日本電気株式会社 被写体抽出装置
US6460003B1 (en) * 1999-07-01 2002-10-01 General Electric Company Apparatus and method for resolution calibration of radiographic images
JP4403477B2 (ja) 2000-01-26 2010-01-27 ソニー株式会社 画像処理装置及び画像処理方法
DE10214114A1 (de) * 2002-03-28 2003-10-23 Siemens Ag Verfahren und Vorrichtung zur Filterung eines mittels eines medizinischen Gerätes gewonnenen digitalen Bildes mittels eines Ortsfrequenzoperators
GB0514715D0 (en) * 2005-07-18 2005-08-24 Isis Innovation Combination of images
JP4895204B2 (ja) * 2007-03-22 2012-03-14 富士フイルム株式会社 画像成分分離装置、方法、およびプログラム、ならびに、正常画像生成装置、方法、およびプログラム
JP4452815B2 (ja) * 2007-07-31 2010-04-21 レーザーテック株式会社 深さ測定装置
JP4856263B2 (ja) * 2009-08-07 2012-01-18 シャープ株式会社 撮像画像処理システム、画像出力方法、プログラムおよび記録媒体
US8619122B2 (en) * 2010-02-02 2013-12-31 Microsoft Corporation Depth camera compatibility
US8406510B2 (en) * 2010-03-10 2013-03-26 Industrial Technology Research Institute Methods for evaluating distances in a scene and apparatus and machine readable medium using the same

Similar Documents

Publication Publication Date Title
JP2013253964A5 (ja)
JP2014145725A5 (ja)
JP2012044415A5 (ja)
JP2014128015A5 (ja) 撮像装置、像ブレ補正装置、及びそれらの制御方法、プログラム、記憶媒体
JP2015122553A5 (ja) 画像処理装置及び画像処理方法
JP2015219603A5 (ja)
JP2016129289A5 (ja)
JP2012217102A5 (ja) 画像処理装置及びその制御方法
JP2012186790A5 (ja)
JP2014119715A5 (ja)
JP2015125009A5 (ja)
JP2012195668A5 (ja)
JP2015005799A5 (ja)
JP2014060711A5 (ja)
JP2011205586A5 (ja)
JP2015103104A5 (ja)
JP2016223815A5 (ja)
JP2014219790A5 (ja)
JP2016066127A5 (ja)
JP2015105975A5 (ja)
JP2018101942A5 (ja)
JP2015187832A5 (ja)
JP2017079400A5 (ja)
JP2013192744A5 (ja)
JP2013074572A5 (ja)