JP2018049568A - 水滴検出装置、水滴検出方法および水滴検出プログラム - Google Patents
水滴検出装置、水滴検出方法および水滴検出プログラム Download PDFInfo
- Publication number
- JP2018049568A JP2018049568A JP2016186245A JP2016186245A JP2018049568A JP 2018049568 A JP2018049568 A JP 2018049568A JP 2016186245 A JP2016186245 A JP 2016186245A JP 2016186245 A JP2016186245 A JP 2016186245A JP 2018049568 A JP2018049568 A JP 2018049568A
- Authority
- JP
- Japan
- Prior art keywords
- water droplet
- candidate
- circle
- pixel
- pixels
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Substances O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 title claims abstract description 209
- 238000001514 detection method Methods 0.000 title claims abstract description 95
- 238000000605 extraction Methods 0.000 claims abstract description 145
- 239000000284 extract Substances 0.000 claims abstract description 30
- 238000003384 imaging method Methods 0.000 claims abstract description 19
- 238000000034 method Methods 0.000 claims description 41
- 230000002093 peripheral effect Effects 0.000 claims description 6
- 238000012545 processing Methods 0.000 abstract description 50
- 238000010586 diagram Methods 0.000 description 30
- 230000008569 process Effects 0.000 description 29
- 238000003708 edge detection Methods 0.000 description 9
- 230000006870 function Effects 0.000 description 3
- 230000005484 gravity Effects 0.000 description 3
- 230000006835 compression Effects 0.000 description 2
- 238000007906 compression Methods 0.000 description 2
- 238000002474 experimental method Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 238000012546 transfer Methods 0.000 description 2
- 230000008859 change Effects 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 230000007423 decrease Effects 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 239000005357 flat glass Substances 0.000 description 1
- 239000007788 liquid Substances 0.000 description 1
- 229910044991 metal oxide Inorganic materials 0.000 description 1
- 150000004706 metal oxides Chemical class 0.000 description 1
- 238000013508 migration Methods 0.000 description 1
- 230000005012 migration Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
Classifications
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60S—SERVICING, CLEANING, REPAIRING, SUPPORTING, LIFTING, OR MANOEUVRING OF VEHICLES, NOT OTHERWISE PROVIDED FOR
- B60S1/00—Cleaning of vehicles
- B60S1/02—Cleaning windscreens, windows or optical devices
- B60S1/04—Wipers or the like, e.g. scrapers
- B60S1/06—Wipers or the like, e.g. scrapers characterised by the drive
- B60S1/08—Wipers or the like, e.g. scrapers characterised by the drive electrically driven
- B60S1/0818—Wipers or the like, e.g. scrapers characterised by the drive electrically driven including control systems responsive to external conditions, e.g. by detection of moisture, dirt or the like
- B60S1/0822—Wipers or the like, e.g. scrapers characterised by the drive electrically driven including control systems responsive to external conditions, e.g. by detection of moisture, dirt or the like characterized by the arrangement or type of detection means
- B60S1/0833—Optical rain sensor
- B60S1/0844—Optical rain sensor including a camera
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
- G01N21/00—Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
- G01N21/84—Systems specially adapted for particular applications
- G01N21/88—Investigating the presence of flaws or contamination
- G01N21/95—Investigating the presence of flaws or contamination characterised by the material or shape of the object to be examined
- G01N21/958—Inspecting transparent materials or objects, e.g. windscreens
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/10—Segmentation; Edge detection
- G06T7/12—Edge-based segmentation
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Theoretical Computer Science (AREA)
- Analytical Chemistry (AREA)
- Life Sciences & Earth Sciences (AREA)
- Chemical & Material Sciences (AREA)
- Health & Medical Sciences (AREA)
- Biochemistry (AREA)
- General Health & Medical Sciences (AREA)
- Immunology (AREA)
- Pathology (AREA)
- Automation & Control Theory (AREA)
- Mechanical Engineering (AREA)
- Image Analysis (AREA)
- Investigating Or Analysing Materials By Optical Means (AREA)
Abstract
【解決手段】実施形態に係る水滴検出装置は、設定部と、第1抽出部と、第2抽出部と、判定部とを備える。設定部は、撮像部の撮像画像の任意の一点を中心とする同心円を設定する。第1抽出部は、設定部によって設定された同心円の各円周上の各画素の勾配に基づいて撮像部に付着した水滴を示すと推定される画素の候補である候補画素を抽出する。第2抽出部は、第1抽出部によって抽出された候補画素に基づいて水滴の形状を示す円の候補である候補円を抽出する。判定部は、第2抽出部の抽出結果に基づいて水滴が付着しているか否かを判定する。
【選択図】図2
Description
2 制御部
3 記憶部
10 カメラ
11 除去装置
12 通知装置
21 設定部
22 第1抽出部
23 第2抽出部
24 判定部
31 判定情報
50 円
60 画素
61 非候補画素
62 候補画素
70 中心
80 同心円
80a 候補円
80b 非候補円
100 撮像画像
101 拡張領域
Claims (23)
- 撮像部の撮像画像の任意の一点を中心とする同心円を設定する設定部と、
前記設定部によって設定された前記同心円の各円周上の各画素の勾配に基づいて前記撮像部に付着した水滴を示すと推定される画素の候補である候補画素を抽出する第1抽出部と、
前記第1抽出部によって抽出された前記候補画素に基づいて前記水滴の形状を示す円の候補である候補円を抽出する第2抽出部と、
前記第2抽出部の抽出結果に基づいて前記水滴が付着しているか否かを判定する判定部と
を備えることを特徴とする水滴検出装置。 - 前記第1抽出部は、
前記同心円の各円周上の各画素の前記勾配の強度、または、当該勾配の向きの前記同心円の中心に対する角度差のうちの少なくとも一方に基づいて前記候補画素を抽出すること
を特徴とする請求項1に記載の水滴検出装置。 - 前記設定部は、
前記撮像画像の中央領域に前記同心円の中心を優先的に設定すること
を特徴とする請求項1または2に記載の水滴検出装置。 - 前記設定部は、
前記撮像画像を外周側へ拡張した拡張領域を設け、前記同心円の中心を当該拡張領域へ設定可能であること
を特徴とする請求項1〜3のいずれか一つに記載の水滴検出装置。 - 前記設定部は、
前記同心円を移動させる場合に、該同心円の中心から少なくとも1画素以上の間隔をあけた位置を前記同心円の新たな中心とすること
を特徴とする請求項1〜4のいずれか一つに記載の水滴検出装置。 - 前記設定部は、
前記同心円の中心から所定半径内の領域については前記候補画素の抽出対象外となるように前記同心円の各円を設けないこと
を特徴とする請求項1〜5のいずれか一つに記載の水滴検出装置。 - 前記設定部は、
前記水滴の外周に対応すると推定される所定範囲内では、該所定範囲外に比べて前記同心円の各円周の間隔を短くすること
を特徴とする請求項1〜6のいずれか一つに記載の水滴検出装置。 - 前記第1抽出部は、
前記同心円の各円周上から所定の間隔で選択した複数の画素から前記候補画素を抽出すること
を特徴とする請求項1〜7のいずれか一つに記載の水滴検出装置。 - 前記第1抽出部は、
前記同心円の各円周の半径に応じて前記複数の画素を選択する間隔を可変にすること
を特徴とする請求項8に記載の水滴検出装置。 - 前記第1抽出部は、
前記同心円の中心から前記撮像画像の上下方向へ向かうほど、前記複数の画素を選択する間隔を短くすること
を特徴とする請求項8または9に記載の水滴検出装置。 - 前記第1抽出部は、
前記複数の画素のうち、前記勾配の強度、または、当該勾配の向きの前記同心円の中心に対する角度差のうちの少なくとも一方が予め定められた上限および下限の範囲内である画素を、前記候補画素として抽出すること
を特徴とする請求項8〜10のいずれか一つに記載の水滴検出装置。 - 前記第1抽出部は、
前記複数の画素のうち、隣接する画素に対する前記勾配の強度の差分、または、当該勾配の向きの前記同心円の中心に対する角度差の差分のうち少なくとも一方の差分が予め定められた上限および下限の範囲内である画素を、前記候補画素として抽出すること
を特徴とする請求項8〜11のいずれか一つに記載の水滴検出装置。 - 前記第2抽出部は、
前記同心円の各円のうち、所定数以上の前記候補画素が抽出された円を、前記候補円として抽出すること
を特徴とする請求項1〜12のいずれか一つに記載の水滴検出装置。 - 前記第2抽出部は、
前記同心円の各円のうち、前記候補画素が所定数以上連続する円を、前記候補円として抽出すること
を特徴とする請求項1〜13のいずれか一つに記載の水滴検出装置。 - 前記第2抽出部は、
前記同心円の各円周を所定角度で複数の弧に分割し、分割した各弧上での前記候補画素の分布に基づいて前記候補円を抽出すること
を特徴とする請求項1〜14のいずれか一つに記載の水滴検出装置。 - 前記第2抽出部は、
前記同心円の各円のうち、円周上の各画素の前記勾配の強度、または、当該勾配の向きの前記同心円の中心に対する角度差のうちの少なくとも一方のばらつきが所定の範囲内である円を、前記候補円として抽出すること
を特徴とする請求項1〜15のいずれか一つに記載の水滴検出装置。 - 前記判定部は、
前記候補円が所定数以上隣接する場合に、前記水滴が付着していると判定すること
を特徴とする請求項1〜16のいずれか一つに記載の水滴検出装置。 - 前記判定部は、
前記候補円の内周側および外周側に前記候補円ではない非候補円が隣接する場合に、前記水滴が付着していると判定すること
を特徴とする請求項1〜17のいずれか一つに記載の水滴検出装置。 - 前記第2抽出部は、
前記同心円の各円のうち、円周上に各画素の勾配の強度が所定の閾値以下である画素が所定数以上ある円を勾配の強度が弱い円として抽出し、
前記判定部は、
前記同心円の中心から所定距離内に前記勾配の強度が弱い円が所定数以上隣接する場合に、前記水滴が付着していると判定すること
を特徴とする請求項17または18に記載の水滴検出装置。 - 前記判定部は、
前記第1抽出部によって抽出された前記候補画素の分布が予め定められた前記候補画素の分布のパターンと一致する場合に、前記水滴が付着していると判定すること
を特徴とする請求項1〜19のいずれか一つに記載の水滴検出装置。 - 前記判定部は、
前記水滴が付着していると判定した場合に、当該水滴に対応する画像領域に対する所定範囲内の色および輝度を有する画素領域の面積比が所定値以上である場合に、前記水滴が付着していないと再判定すること
を特徴とする請求項1〜20のいずれか一つに記載の水滴検出装置。 - 撮像部の撮像画像の任意の一点を中心とする同心円を設定する設定工程と、
前記設定工程によって設定された前記同心円の各円周上の各画素の勾配に基づいて前記撮像部に付着した水滴を示すと推定される画素の候補である候補画素を抽出する第1抽出工程と、
前記第1抽出工程によって抽出された前記候補画素に基づいて前記水滴の形状を示す円の候補である候補円を抽出する第2抽出工程と、
前記第2抽出工程の抽出結果に基づいて前記水滴が付着しているか否かを判定する判定工程と
を含むことを特徴とする水滴検出方法。 - 撮像部の撮像画像の任意の一点を中心とする同心円を設定する設定手順と、
前記設定手順によって設定された前記同心円の各円周上の各画素の勾配に基づいて前記撮像部に付着した水滴を示すと推定される画素の候補である候補画素を抽出する第1抽出手順と、
前記第1抽出手順によって抽出された前記候補画素に基づいて前記水滴の形状を示す円の候補である候補円を抽出する第2抽出手順と、
前記第2抽出手順の抽出結果に基づいて前記水滴が付着しているか否かを判定する判定手順と
をコンピュータに実行させることを特徴とする水滴検出プログラム。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016186245A JP6832105B2 (ja) | 2016-09-23 | 2016-09-23 | 水滴検出装置、水滴検出方法および水滴検出プログラム |
US15/670,617 US10227062B2 (en) | 2016-09-23 | 2017-08-07 | Liquid-droplet detecting apparatus, liquid-droplet detecting method, and computer-readable recording medium |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016186245A JP6832105B2 (ja) | 2016-09-23 | 2016-09-23 | 水滴検出装置、水滴検出方法および水滴検出プログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2018049568A true JP2018049568A (ja) | 2018-03-29 |
JP6832105B2 JP6832105B2 (ja) | 2021-02-24 |
Family
ID=61688230
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2016186245A Active JP6832105B2 (ja) | 2016-09-23 | 2016-09-23 | 水滴検出装置、水滴検出方法および水滴検出プログラム |
Country Status (2)
Country | Link |
---|---|
US (1) | US10227062B2 (ja) |
JP (1) | JP6832105B2 (ja) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2020106484A (ja) * | 2018-12-28 | 2020-07-09 | 株式会社デンソーテン | 付着物検出装置および付着物検出方法 |
US10984273B2 (en) | 2018-12-28 | 2021-04-20 | Denso Ten Limited | Attachable matter detection apparatus |
JP2021158524A (ja) * | 2020-03-26 | 2021-10-07 | 株式会社デンソーテン | 液滴検出装置 |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6179410B2 (ja) * | 2013-07-29 | 2017-08-16 | 株式会社Jvcケンウッド | 撮像装置および撮像装置撮像窓の水滴付着判定方法 |
JP6772113B2 (ja) * | 2017-08-02 | 2020-10-21 | クラリオン株式会社 | 付着物検出装置、および、それを備えた車両システム |
JP7230507B2 (ja) * | 2018-12-28 | 2023-03-01 | 株式会社デンソーテン | 付着物検出装置 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2001067481A (ja) * | 1999-08-31 | 2001-03-16 | Matsushita Electric Ind Co Ltd | 画像検索装置、画像検索方法および記録媒体 |
JP2009130700A (ja) * | 2007-11-26 | 2009-06-11 | Panasonic Corp | 撮像装置 |
JP2013190416A (ja) * | 2012-02-13 | 2013-09-26 | Ricoh Co Ltd | 付着物検出装置及びこれを用いた車載機器制御装置 |
WO2014017523A1 (ja) * | 2012-07-27 | 2014-01-30 | 日産自動車株式会社 | 水滴検出装置及び水滴検出装置を用いた立体物検出装置 |
Family Cites Families (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2010014494A (ja) | 2008-07-02 | 2010-01-21 | Denso Corp | 異物検出装置、異物検出プログラム、異物除去装置、および車載通信装置 |
US8654427B1 (en) * | 2012-08-31 | 2014-02-18 | Rosemount Aerospace Inc. | Ruggedized two-axis optical beam steering device |
-
2016
- 2016-09-23 JP JP2016186245A patent/JP6832105B2/ja active Active
-
2017
- 2017-08-07 US US15/670,617 patent/US10227062B2/en active Active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2001067481A (ja) * | 1999-08-31 | 2001-03-16 | Matsushita Electric Ind Co Ltd | 画像検索装置、画像検索方法および記録媒体 |
JP2009130700A (ja) * | 2007-11-26 | 2009-06-11 | Panasonic Corp | 撮像装置 |
JP2013190416A (ja) * | 2012-02-13 | 2013-09-26 | Ricoh Co Ltd | 付着物検出装置及びこれを用いた車載機器制御装置 |
WO2014017523A1 (ja) * | 2012-07-27 | 2014-01-30 | 日産自動車株式会社 | 水滴検出装置及び水滴検出装置を用いた立体物検出装置 |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2020106484A (ja) * | 2018-12-28 | 2020-07-09 | 株式会社デンソーテン | 付着物検出装置および付着物検出方法 |
US10984273B2 (en) | 2018-12-28 | 2021-04-20 | Denso Ten Limited | Attachable matter detection apparatus |
JP7175188B2 (ja) | 2018-12-28 | 2022-11-18 | 株式会社デンソーテン | 付着物検出装置および付着物検出方法 |
JP2021158524A (ja) * | 2020-03-26 | 2021-10-07 | 株式会社デンソーテン | 液滴検出装置 |
JP7463159B2 (ja) | 2020-03-26 | 2024-04-08 | 株式会社デンソーテン | 液滴検出装置 |
Also Published As
Publication number | Publication date |
---|---|
JP6832105B2 (ja) | 2021-02-24 |
US10227062B2 (en) | 2019-03-12 |
US20180086309A1 (en) | 2018-03-29 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6832105B2 (ja) | 水滴検出装置、水滴検出方法および水滴検出プログラム | |
JP6274557B2 (ja) | 移動面情報検出装置、及びこれを用いた移動体機器制御システム並びに移動面情報検出用プログラム | |
JP5761349B2 (ja) | 立体物検出装置及び立体物検出方法 | |
JP6817104B2 (ja) | 付着物検出装置、付着物検出方法 | |
JP4760089B2 (ja) | 車載画像処理装置、および画像処理方法 | |
JP6188592B2 (ja) | 物体検出装置、物体検出方法、および物体検出プログラム | |
JP6753134B2 (ja) | 画像処理装置、撮像装置、移動体機器制御システム、画像処理方法、及び画像処理プログラム | |
JP7230507B2 (ja) | 付着物検出装置 | |
WO2016189777A1 (ja) | 路面標示検出装置、障害要素検出装置、車線検出装置、車線検出方法及びプログラム | |
CN103673872A (zh) | 液滴体积的测量方法和测量系统 | |
CN106022268A (zh) | 一种限速标识的识别方法和装置 | |
KR101236223B1 (ko) | 차선 검출 방법 | |
JP2019106644A (ja) | 付着物検出装置および付着物検出方法 | |
WO2015162910A1 (ja) | 車載用表示装置、車載用表示装置の制御方法、プログラム | |
JP2018142828A (ja) | 付着物検出装置および付着物検出方法 | |
JP5189556B2 (ja) | 車線検出装置 | |
EP3146462A1 (en) | Method for determining a respective boundary of at least one object, sensor device, driver assistance device and motor vehicle | |
US10997743B2 (en) | Attachable matter detection apparatus | |
JP7283081B2 (ja) | 付着物検出装置および付着物検出方法 | |
JP7203587B2 (ja) | 画像処理装置および画像処理方法 | |
US11138447B2 (en) | Method for detecting raised pavement markers, computer program product and camera system for a vehicle | |
JP2020166758A (ja) | 画像処理装置および画像処理方法 | |
JP2014182637A (ja) | 画像処理装置、画像処理方法および画像処理プログラム | |
JP7243546B2 (ja) | 付着物検出装置および付着物検出方法 | |
JP7359541B2 (ja) | 画像処理装置および画像処理方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20190829 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20201009 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20201020 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20201211 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20210105 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20210201 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6832105 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |