JP2019032619A - 汚れ検出装置、カメラ、コンピュータプログラムおよび記録媒体 - Google Patents
汚れ検出装置、カメラ、コンピュータプログラムおよび記録媒体 Download PDFInfo
- Publication number
- JP2019032619A JP2019032619A JP2017152001A JP2017152001A JP2019032619A JP 2019032619 A JP2019032619 A JP 2019032619A JP 2017152001 A JP2017152001 A JP 2017152001A JP 2017152001 A JP2017152001 A JP 2017152001A JP 2019032619 A JP2019032619 A JP 2019032619A
- Authority
- JP
- Japan
- Prior art keywords
- dirt
- camera
- degree
- unit
- image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000004590 computer program Methods 0.000 title claims description 10
- 238000001514 detection method Methods 0.000 claims description 158
- 230000008859 change Effects 0.000 claims description 58
- 238000000034 method Methods 0.000 claims description 23
- 238000003384 imaging method Methods 0.000 claims description 20
- 230000008569 process Effects 0.000 claims description 14
- 239000000284 extract Substances 0.000 abstract description 5
- 238000004891 communication Methods 0.000 description 18
- 238000011109 contamination Methods 0.000 description 12
- 230000006870 function Effects 0.000 description 12
- 230000010354 integration Effects 0.000 description 12
- 238000012986 modification Methods 0.000 description 11
- 230000004048 modification Effects 0.000 description 11
- 238000012545 processing Methods 0.000 description 7
- 230000005540 biological transmission Effects 0.000 description 5
- 238000010586 diagram Methods 0.000 description 5
- 238000007796 conventional method Methods 0.000 description 3
- 238000002474 experimental method Methods 0.000 description 3
- 239000000470 constituent Substances 0.000 description 2
- 239000000428 dust Substances 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 230000010365 information processing Effects 0.000 description 2
- 241000208125 Nicotiana Species 0.000 description 1
- 235000002637 Nicotiana tabacum Nutrition 0.000 description 1
- 230000006399 behavior Effects 0.000 description 1
- 238000009792 diffusion process Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 239000011521 glass Substances 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 239000011347 resin Substances 0.000 description 1
- 229920005989 resin Polymers 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 239000013589 supplement Substances 0.000 description 1
Images
Landscapes
- Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)
- Closed-Circuit Television Systems (AREA)
- Image Analysis (AREA)
Abstract
Description
車両の後部に、当該車両の後方空間の様子を撮像するテレビジョンカメラ(以下「リアカメラ」と呼ぶ。)が搭載されることがある。車両には、リアカメラにより撮像された後方空間の画像(動画および静止画を含み、以下「後方画像」とも呼ぶ。)に基づいて、後方空間に存在する人や障害物を検知すると、運転者へアラートを通知するアプリケーションが導入されることもある。また、車両には、後方画像に基づいて後方空間の人や障害物を検知すると、その人や障害物を回避するように自動運転の挙動を決定するアプリケーションが導入されることもある。
図8は、汚れ検出装置14の動作を示すフローチャートである。リアカメラ12は、車両10の後方空間の様子を継続的に撮像し、複数の後方画像を順次汚れ検出装置14へ出力する。汚れ検出装置14の画像取得部34は、通信部30を介して、リアカメラ12により複数の時点で生成された複数の後方画像を取得する(S10)。
[項目1]
1つのカメラにより複数の時点で撮像された複数の画像を取得する取得部と、
前記取得部により取得された複数の画像間で輝度の変化度合いが相対的に低い領域である不変領域を検出する第1検出部と、
前記取得部により取得された複数の画像の中の少なくとも1つの対象画像から周波数領域のデータを抽出し、抽出された前記周波数領域のデータに基づいて、前記対象画像内の複数の領域のボケ度合いを検出する第2検出部と、
前記第1検出部により検出された前記不変領域と、前記第2検出部により検出された前記複数の領域のボケ度合いとに基づいて、前記カメラに付着した汚れの有無を推定する推定部と、
を備える汚れ検出装置。
この構成によると、第1検出部により検出された画像内の不変領域と、第2検出部により検出された画像内の複数領域のボケ度合いとを組み合わせることにより、カメラに付着した汚れの有無を推定する精度(言い換えれば正確度)を高めることができる。例えば、この構成によると、実際には汚れが付着していないにもかかわらず汚れが付着していると誤検出してしまうことを抑制できる。
[項目2]
前記推定部は、前記第1検出部により検出された不変領域の少なくとも一部と、前記第2検出部により検出されたボケ度合いが所定値より高い領域の少なくとも一部とが一致する場合に、前記カメラに汚れが付着したと推定する、
項目1に記載の汚れ検出装置。
この構成によると、輝度の変化が低く、かつ、ボケ度合いが高い領域が存在する場合に汚れが有りと推定することにより、汚れの有無の推定精度を高めることができる。
[項目3]
前記カメラは、車両に搭載されたカメラであって、当該車両の周囲を撮像するものであり、
前記車両の走行状態が、前記カメラの画像に変化を生じさせる所定の条件を満たすか否かを判定する判定部をさらに備え、
前記推定部は、前記判定部により前記車両の走行状態が前記条件を満たすと判定された場合に、前記カメラに付着した汚れの有無を推定する処理を実行する、
項目1または2に記載の汚れ検出装置。
この構成によると、変化が生じた画像に基づいて汚れの有無を推定するため、その推定精度を一層高めることができる。例えば、この構成によると、車両に動きがないことに起因する汚れの誤検出を抑制できる。
[項目4]
外界を撮像する撮像部と、
前記撮像部により複数の時点で撮像された複数の画像間で輝度の変化度合いが相対的に低い領域である不変領域を検出する第1検出部と、
前記撮像部により撮像された複数の画像の中の少なくとも1つの対象画像から周波数領域のデータを抽出し、抽出された前記周波数領域のデータに基づいて、前記対象画像内の複数の領域のボケ度合いを検出する第2検出部と、
前記第1検出部により検出された前記不変領域と、前記第2検出部により検出された前記複数の領域のボケ度合いとに基づいて、本カメラに付着した汚れの有無を推定する推定部と、
を備えるカメラ。
この構成によると、画像内の不変領域と、画像内の複数領域のボケ度合いとを組み合わせることにより、カメラに付着した汚れの有無を推定する精度を高めることができる。
[項目5]
1つのカメラにより複数の時点で撮像された複数の画像を取得し、
前記複数の画像間で輝度の変化度合いが相対的に低い領域である不変領域を検出し、
前記複数の画像の中の少なくとも1つの対象画像から周波数領域のデータを抽出し、抽出された前記周波数領域のデータに基づいて、前記対象画像内の複数の領域のボケ度合いを検出し、
前記不変領域と、前記複数の領域のボケ度合いとに基づいて、前記カメラに付着した汚れの有無を推定する、
ことをコンピュータに実行させるためのコンピュータプログラム。
この構成によると、画像内の不変領域と、画像内の複数領域のボケ度合いとを組み合わせることにより、カメラに付着した汚れの有無を推定する精度を高めることができる。
[項目6]
1つのカメラにより複数の時点で撮像された複数の画像を取得し、
前記複数の画像間で輝度の変化度合いが相対的に低い領域である不変領域を検出し、
前記複数の画像の中の少なくとも1つの対象画像から周波数領域のデータを抽出し、抽出された前記周波数領域のデータに基づいて、前記対象画像内の複数の領域のボケ度合いを検出し、
前記不変領域と、前記複数の領域のボケ度合いとに基づいて、前記カメラに付着した汚れの有無を推定する、
ことをコンピュータに実行させるためのコンピュータプログラムを記録したコンピュータ読み取り可能な記録媒体。
この構成によると、画像内の不変領域と、画像内の複数領域のボケ度合いとを組み合わせることにより、カメラに付着した汚れの有無を推定する精度を高めることができる。
Claims (6)
- 1つのカメラにより複数の時点で撮像された複数の画像を取得する取得部と、
前記取得部により取得された複数の画像間で輝度の変化度合いが相対的に低い領域である不変領域を検出する第1検出部と、
前記取得部により取得された複数の画像の中の少なくとも1つの対象画像から周波数領域のデータを抽出し、抽出された前記周波数領域のデータに基づいて、前記対象画像内の複数の領域のボケ度合いを検出する第2検出部と、
前記第1検出部により検出された前記不変領域と、前記第2検出部により検出された前記複数の領域のボケ度合いとに基づいて、前記カメラに付着した汚れの有無を推定する推定部と、
を備える汚れ検出装置。 - 前記推定部は、前記第1検出部により検出された不変領域の少なくとも一部と、前記第2検出部により検出されたボケ度合いが所定値より高い領域の少なくとも一部とが一致する場合に、前記カメラに汚れが付着したと推定する、
請求項1に記載の汚れ検出装置。 - 前記カメラは、車両に搭載されたカメラであって、当該車両の周囲を撮像するものであり、
前記車両の走行状態が、前記カメラの画像に変化を生じさせる所定の条件を満たすか否かを判定する判定部をさらに備え、
前記推定部は、前記判定部により前記車両の走行状態が前記条件を満たすと判定された場合に、前記カメラに付着した汚れの有無を推定する処理を実行する、
請求項1または2に記載の汚れ検出装置。 - 外界を撮像する撮像部と、
前記撮像部により複数の時点で撮像された複数の画像間で輝度の変化度合いが相対的に低い領域である不変領域を検出する第1検出部と、
前記撮像部により撮像された複数の画像の中の少なくとも1つの対象画像から周波数領域のデータを抽出し、抽出された前記周波数領域のデータに基づいて、前記対象画像内の複数の領域のボケ度合いを検出する第2検出部と、
前記第1検出部により検出された前記不変領域と、前記第2検出部により検出された前記複数の領域のボケ度合いとに基づいて、本カメラに付着した汚れの有無を推定する推定部と、
を備えるカメラ。 - 1つのカメラにより複数の時点で撮像された複数の画像を取得し、
前記複数の画像間で輝度の変化度合いが相対的に低い領域である不変領域を検出し、
前記複数の画像の中の少なくとも1つの対象画像から周波数領域のデータを抽出し、抽出された前記周波数領域のデータに基づいて、前記対象画像内の複数の領域のボケ度合いを検出し、
前記不変領域と、前記複数の領域のボケ度合いとに基づいて、前記カメラに付着した汚れの有無を推定する、
ことをコンピュータに実行させるためのコンピュータプログラム。 - 1つのカメラにより複数の時点で撮像された複数の画像を取得し、
前記複数の画像間で輝度の変化度合いが相対的に低い領域である不変領域を検出し、
前記複数の画像の中の少なくとも1つの対象画像から周波数領域のデータを抽出し、抽出された前記周波数領域のデータに基づいて、前記対象画像内の複数の領域のボケ度合いを検出し、
前記不変領域と、前記複数の領域のボケ度合いとに基づいて、前記カメラに付着した汚れの有無を推定する、
ことをコンピュータに実行させるためのコンピュータプログラムを記録したコンピュータ読み取り可能な記録媒体。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017152001A JP6970911B2 (ja) | 2017-08-04 | 2017-08-04 | 汚れ検出装置の制御方法、および汚れ検出装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017152001A JP6970911B2 (ja) | 2017-08-04 | 2017-08-04 | 汚れ検出装置の制御方法、および汚れ検出装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2019032619A true JP2019032619A (ja) | 2019-02-28 |
JP6970911B2 JP6970911B2 (ja) | 2021-11-24 |
Family
ID=65523518
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017152001A Active JP6970911B2 (ja) | 2017-08-04 | 2017-08-04 | 汚れ検出装置の制御方法、および汚れ検出装置 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6970911B2 (ja) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2021052234A (ja) * | 2019-09-20 | 2021-04-01 | 株式会社デンソーテン | 付着物検出装置および付着物検出方法 |
US11328428B2 (en) | 2019-12-18 | 2022-05-10 | Clarion Co., Ltd. | Technologies for detection of occlusions on a camera |
Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2004153422A (ja) * | 2002-10-29 | 2004-05-27 | Toshiba Corp | 撮影装置、顔照合装置、撮影装置の汚れ検知方法、及び顔照合方法 |
JP2006262242A (ja) * | 2005-03-18 | 2006-09-28 | Secom Co Ltd | 画像信号処理装置 |
JP2014027539A (ja) * | 2012-07-27 | 2014-02-06 | Clarion Co Ltd | レンズ洗浄装置 |
JP2014030188A (ja) * | 2012-07-03 | 2014-02-13 | Clarion Co Ltd | レンズ付着物検知装置、レンズ付着物検知方法、および、車両システム |
JP2015070566A (ja) * | 2013-09-30 | 2015-04-13 | 本田技研工業株式会社 | カメラのレンズ汚れ検知装置 |
JP2015153295A (ja) * | 2014-02-18 | 2015-08-24 | クラリオン株式会社 | 外界認識システム、車両、及びカメラの汚れ検出方法 |
JP2016015583A (ja) * | 2014-07-01 | 2016-01-28 | クラリオン株式会社 | 車載用撮像装置 |
JP2016033729A (ja) * | 2014-07-31 | 2016-03-10 | クラリオン株式会社 | 周囲環境認識装置 |
-
2017
- 2017-08-04 JP JP2017152001A patent/JP6970911B2/ja active Active
Patent Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2004153422A (ja) * | 2002-10-29 | 2004-05-27 | Toshiba Corp | 撮影装置、顔照合装置、撮影装置の汚れ検知方法、及び顔照合方法 |
JP2006262242A (ja) * | 2005-03-18 | 2006-09-28 | Secom Co Ltd | 画像信号処理装置 |
JP2014030188A (ja) * | 2012-07-03 | 2014-02-13 | Clarion Co Ltd | レンズ付着物検知装置、レンズ付着物検知方法、および、車両システム |
JP2014027539A (ja) * | 2012-07-27 | 2014-02-06 | Clarion Co Ltd | レンズ洗浄装置 |
JP2015070566A (ja) * | 2013-09-30 | 2015-04-13 | 本田技研工業株式会社 | カメラのレンズ汚れ検知装置 |
JP2015153295A (ja) * | 2014-02-18 | 2015-08-24 | クラリオン株式会社 | 外界認識システム、車両、及びカメラの汚れ検出方法 |
JP2016015583A (ja) * | 2014-07-01 | 2016-01-28 | クラリオン株式会社 | 車載用撮像装置 |
JP2016033729A (ja) * | 2014-07-31 | 2016-03-10 | クラリオン株式会社 | 周囲環境認識装置 |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2021052234A (ja) * | 2019-09-20 | 2021-04-01 | 株式会社デンソーテン | 付着物検出装置および付着物検出方法 |
US11568547B2 (en) | 2019-09-20 | 2023-01-31 | Denso Ten Limited | Deposit detection device and deposit detection method |
JP7243546B2 (ja) | 2019-09-20 | 2023-03-22 | 株式会社デンソーテン | 付着物検出装置および付着物検出方法 |
US11328428B2 (en) | 2019-12-18 | 2022-05-10 | Clarion Co., Ltd. | Technologies for detection of occlusions on a camera |
Also Published As
Publication number | Publication date |
---|---|
JP6970911B2 (ja) | 2021-11-24 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
Wu et al. | Lane-mark extraction for automobiles under complex conditions | |
US20120008866A1 (en) | Method and device for detecting an interfering object in a camera image | |
US20130286205A1 (en) | Approaching object detection device and method for detecting approaching objects | |
JP6230751B1 (ja) | 物体検出装置および物体検出方法 | |
JP6015257B2 (ja) | 偏光画像による車両位置検知方法及びシステム | |
JP6138861B2 (ja) | 距離算出装置 | |
US10354413B2 (en) | Detection system and picture filtering method thereof | |
JPWO2012004938A1 (ja) | 車両の周辺監視装置 | |
WO2014033936A1 (ja) | 画像処理装置、画像処理方法および画像処理プログラム | |
JP2009048629A (ja) | 検出方法 | |
JP6188592B2 (ja) | 物体検出装置、物体検出方法、および物体検出プログラム | |
JP2013186042A (ja) | 距離算出装置及び距離算出方法 | |
JP2007310706A (ja) | 車両周辺監視装置 | |
WO2019026513A1 (ja) | 画像監視装置、画像監視方法、画像監視プログラムおよび記録媒体 | |
JP6970911B2 (ja) | 汚れ検出装置の制御方法、および汚れ検出装置 | |
US10803625B2 (en) | Detection system and picturing filtering method thereof | |
JPH06247246A (ja) | 接近車監視装置 | |
JP2019176300A (ja) | 汚れ検出装置、カメラ、コンピュータプログラムおよび記録媒体 | |
US20160300114A1 (en) | Dynamic stixel estimation using a single moving camera | |
CN112435278B (zh) | 一种基于动态目标检测的视觉slam方法及装置 | |
JP6087240B2 (ja) | 車両周辺監視装置 | |
JP2011134119A (ja) | 車両周辺監視装置 | |
US9030560B2 (en) | Apparatus for monitoring surroundings of a vehicle | |
JP2018073049A (ja) | 画像認識装置、画像認識システム、及び画像認識方法 | |
CN107680118B (zh) | 一种影像辨识追踪方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20180417 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20200303 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20210302 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20210420 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20211005 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20211014 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 6970911 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |
|
S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313113 |
|
S531 | Written request for registration of change of domicile |
Free format text: JAPANESE INTERMEDIATE CODE: R313531 |
|
SZ03 | Written request for cancellation of trust registration |
Free format text: JAPANESE INTERMEDIATE CODE: R313Z03 |