JP2020177340A - 画像処理装置 - Google Patents
画像処理装置 Download PDFInfo
- Publication number
- JP2020177340A JP2020177340A JP2019077812A JP2019077812A JP2020177340A JP 2020177340 A JP2020177340 A JP 2020177340A JP 2019077812 A JP2019077812 A JP 2019077812A JP 2019077812 A JP2019077812 A JP 2019077812A JP 2020177340 A JP2020177340 A JP 2020177340A
- Authority
- JP
- Japan
- Prior art keywords
- image processing
- image
- histogram
- unit
- peaks
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 230000008859 change Effects 0.000 claims abstract description 15
- 235000019557 luminance Nutrition 0.000 claims abstract description 14
- 230000009467 reduction Effects 0.000 claims description 8
- 238000003384 imaging method Methods 0.000 abstract 1
- 238000000034 method Methods 0.000 description 56
- 230000008569 process Effects 0.000 description 49
- 230000000694 effects Effects 0.000 description 16
- 230000006870 function Effects 0.000 description 9
- 238000005286 illumination Methods 0.000 description 3
- 238000004590 computer program Methods 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 239000004065 semiconductor Substances 0.000 description 2
- 230000007423 decrease Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000003672 processing method Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/50—Context or environment of the image
- G06V20/56—Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/20—Image preprocessing
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/20—Image preprocessing
- G06V10/28—Quantising the image, e.g. histogram thresholding for discrimination between background and foreground patterns
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/40—Extraction of image or video features
- G06V10/50—Extraction of image or video features by performing operations within image blocks; by using histograms, e.g. histogram of oriented gradients [HoG]; by summing image-intensity values; Projection analysis
- G06V10/507—Summing image-intensity values; Histogram projection analysis
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Multimedia (AREA)
- Theoretical Computer Science (AREA)
- Image Processing (AREA)
- Studio Devices (AREA)
- Traffic Control Systems (AREA)
- Facsimile Image Signal Circuits (AREA)
- Software Systems (AREA)
- Image Analysis (AREA)
Abstract
Description
<第1実施形態>
1.画像処理装置1の構成
画像処理装置1の構成を、図1、図2に基づき説明する。画像処理装置1は車両に搭載される。図1に示すように、画像処理装置1は、CPU3と、例えば、RAM又はROM等の半導体メモリ(以下、メモリ5とする)と、を有するマイクロコンピュータを備える。
画像処理装置1が所定時間ごとに繰り返し実行する処理を、図3〜図6に基づき説明する。図3のステップ1では、画像取得ユニット7が、車載カメラ21から画像を取得する。
また、条件1に代えて、以下の条件2、3のいずれかを使用してもよい。
ステップ15では、カウンタAが予め設定された閾値aより大きいか否かを状態設定ユニット15が判断する。閾値aは1以上の値である。閾値aは、2以上の値であることが好ましい。カウンタAが閾値aより大きい場合、本処理はステップ16に進む。カウンタAが閾値a以下である場合、本処理はステップ17に進む。
ステップ17では、状態設定ユニット15が、画像処理装置1の状態を、通常状態のままに維持する。
ステップ20では、状態設定ユニット15が、カウンタBを1だけ加算する。ステップ20の後、本処理はステップ21に進む。
ステップ23では、状態設定ユニット15が、画像処理装置1の状態を、特別状態から通常状態に復帰させる。
(1A)画像処理装置1は、ヒストグラムが2つの山を有するか否かを判断する。画像処理装置1は、ヒストグラムが2つの山を有すると判断した場合、通常状態から特別状態に移行する。通常状態において画像処理ユニット9が実行する通常処理と、特別状態において画像処理ユニット9が実行する特別処理とは異なる。すなわち、ヒストグラムが2つの山を有すると判断した場合、画像処理装置1は、画像処理ユニット9の制御を変更する。
夜間であって、雨等で路面が濡れている場合に通常処理を行うと、適切な画像処理を行えないおそれがある。画像処理装置1は、ヒストグラムが2つの山を有する場合に特別処理を行うことにより、適切な画像処理を行うことができる。
<第2実施形態>
1.第1実施形態との相違点
第2実施形態は、基本的な構成は第1実施形態と同様であるため、相違点について以下に説明する。なお、第1実施形態と同じ符号は、同一の構成を示すものであって、先行する説明を参照する。
2.画像処理装置1が奏する効果
以上詳述した第2実施形態によれば、前述した第1実施形態の効果(1A)、(1C)を奏し、さらに、以下の効果を奏する。
画像処理装置1は、ヒストグラムが2つの山を有すると判断した場合、通常状態から特別状態に移行し、特別処理のガンマ補正を行う。上述したように、ヒストグラムが2つの山を有する場合は、夜間であって、雨等で路面が濡れている場合である可能性が高い。よって、画像処理装置1は、夜間であって、雨等で路面が濡れている場合、通常状態から特別状態に移行し、特別処理のガンマ補正を行う。特別処理のガンマ補正を行うと、画像において低輝度の側に多くの階調が割り当てられる。その結果、画像処理装置1は、画像の中で暗い部分でも物標を認識することができる。
<第3実施形態>
1.第1実施形態との相違点
第3実施形態は、基本的な構成は第1実施形態と同様であるため、相違点について以下に説明する。なお、第1実施形態と同じ符号は、同一の構成を示すものであって、先行する説明を参照する。
以上詳述した第2実施形態によれば、前述した第1実施形態の効果(1A)、(1C)を奏し、さらに、以下の効果を奏する。
画像処理装置1は、ヒストグラムが2つの山を有すると判断した場合、通常状態から特別状態に移行し、ダイナミックレンジを拡大する。上述したように、ヒストグラムが2つの山を有する場合は、夜間であって、雨等で路面が濡れている場合である可能性が高い。よって、画像処理装置1は、夜間であって、雨等で路面が濡れている場合、通常状態から特別状態に移行し、ダイナミックレンジを拡大する。その結果、画像処理装置1は、画像の中で暗い部分でも物標を認識することができる。
<第4実施形態>
1.第1実施形態との相違点
第4実施形態は、基本的な構成は第1実施形態と同様であるため、相違点について以下に説明する。なお、第1実施形態と同じ符号は、同一の構成を示すものであって、先行する説明を参照する。
以上詳述した第4実施形態によれば、前述した第1実施形態の効果(1A)、(1C)を奏し、さらに、以下の効果を奏する。
画像処理装置1は、ヒストグラムが2つの山を有すると判断した場合、通常状態から特別状態に移行し、ノイズリダクション処理を強める。上述したように、ヒストグラムが2つの山を有する場合は、夜間であって、雨等で路面が濡れている場合である可能性が高い。よって、画像処理装置1は、夜間であって、雨等で路面が濡れている場合、通常状態から特別状態に移行し、ノイズリダクション処理を強める。その結果、画像処理装置1は、画像の中で暗い部分のノイズを抑制することができる。
<第5実施形態>
1.第1実施形態との相違点
第5実施形態は、基本的な構成は第1実施形態と同様であるため、相違点について以下に説明する。なお、第1実施形態と同じ符号は、同一の構成を示すものであって、先行する説明を参照する。
2.画像処理装置1が奏する効果
以上詳述した第5実施形態によれば、前述した第1実施形態の効果(1A)、(1C)を奏し、さらに、以下の効果を奏する。
画像処理装置1は、ヒストグラムが2つの山を有すると判断した場合、通常状態から特別状態に移行し、エッジ強調処理を弱める。上述したように、ヒストグラムが2つの山を有する場合は、夜間であって、雨等で路面が濡れている場合である可能性が高い。よって、画像処理装置1は、夜間であって、雨等で路面が濡れている場合、通常状態から特別状態に移行し、エッジ強調処理を弱める。その結果、画像処理装置1は、画像の中でテール反射等が過度にはっきりと現れることを抑制することができる。
<第6実施形態>
1.第1実施形態との相違点
第6実施形態は、基本的な構成は第1実施形態と同様であるため、相違点について以下に説明する。なお、第1実施形態と同じ符号は、同一の構成を示すものであって、先行する説明を参照する。
2.画像処理装置1が奏する効果
以上詳述した第6実施形態によれば、前述した第1実施形態の効果(1A)、(1C)を奏し、さらに、以下の効果を奏する。
画像処理装置1は、ヒストグラムが2つの山を有すると判断した場合、通常状態から特別状態に移行し、特別処理のガンマ補正を行う。上述したように、ヒストグラムが2つの山を有する場合は、夜間であって、雨等で路面が濡れている場合である可能性が高い。よって、画像処理装置1は、夜間であって、雨等で路面が濡れている場合、通常状態から特別状態に移行し、特別処理のガンマ補正を行う。特別処理のガンマ補正を行うと、画像において高輝度の側に多くの階調が割り当てられる。その結果、画像処理装置1は、画像の中で、水溜りの中の白線を認識することが容易になる。
<他の実施形態>
以上、本開示の実施形態について説明したが、本開示は上述の実施形態に限定されることなく、種々変形して実施することができる。
Claims (8)
- 車載カメラ(21)から画像を取得するように構成された画像取得ユニット(7)と、
前記画像取得ユニットが取得した前記画像に対し画像処理を行うように構成された画像処理ユニット(9)と、
前記画像取得ユニットが取得した前記画像のうち、路面を表す部分について、輝度ごとの画素の度数を表すヒストグラムを作成するように構成されたヒストグラム作成ユニット(11)と、
前記ヒストグラムが、輝度が離れた複数の山を有するか否かを判断するように構成されたヒストグラム判断ユニット(13)と、
前記ヒストグラムが、前記輝度が離れた複数の山を有すると判断した場合、前記画像処理ユニットの制御、又は前記画像の撮影条件を変更する変更ユニット(15)と、
を備える画像処理装置(1)。 - 請求項1に記載の画像処理装置であって、
前記画像処理はオートホワイトバランスであり、
前記変更ユニットは、前記ヒストグラムが、前記輝度が離れた複数の山を有すると判断した場合、オートホワイトバランスを停止する画像処理装置。 - 請求項1に記載の画像処理装置であって、
前記画像処理はガンマ補正であり、
前記変更ユニットは、前記ヒストグラムが、前記輝度が離れた複数の山を有すると判断した場合、ガンマ補正におけるガンマ値を増加させる画像処理装置。 - 請求項1に記載の画像処理装置であって、
前記変更ユニットは、前記ヒストグラムが、前記輝度が離れた複数の山を有すると判断した場合、前記画像の撮影時におけるダイナミックレンジを拡大する画像処理装置。 - 請求項1に記載の画像処理装置であって、
前記画像処理はノイズリダクション処理であり、
前記変更ユニットは、前記ヒストグラムが、前記輝度が離れた複数の山を有すると判断した場合、ノイズリダクション処理を強める画像処理装置。 - 請求項1に記載の画像処理装置であって、
前記画像処理はエッジ強調処理であり、
前記変更ユニットは、前記ヒストグラムが、前記輝度が離れた複数の山を有すると判断した場合、エッジ強調処理を弱める画像処理装置。 - 請求項1に記載の画像処理装置であって、
前記画像処理はガンマ補正であり、
前記変更ユニットは、前記ヒストグラムが、前記輝度が離れた複数の山を有すると判断した場合、ガンマ補正におけるガンマ値を減少させる画像処理装置。 - 請求項1〜7のいずれか1項に記載の画像処理装置であって、
前記変更ユニットが前記画像処理ユニットの制御、又は前記画像の撮影条件を変更した後に、所定数以上のフレームで連続して、前記ヒストグラムが、前記輝度が離れた複数の山を有さないと判断した場合、前記画像処理ユニットの制御、又は前記画像の撮影条件を、前記変更ユニットが変更する前の状態に戻す復帰ユニット(15)をさらに備える画像処理装置。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019077812A JP7230658B2 (ja) | 2019-04-16 | 2019-04-16 | 画像処理装置 |
US16/848,034 US11417083B2 (en) | 2019-04-16 | 2020-04-14 | Image processing apparatus |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019077812A JP7230658B2 (ja) | 2019-04-16 | 2019-04-16 | 画像処理装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2020177340A true JP2020177340A (ja) | 2020-10-29 |
JP7230658B2 JP7230658B2 (ja) | 2023-03-01 |
Family
ID=72832518
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019077812A Active JP7230658B2 (ja) | 2019-04-16 | 2019-04-16 | 画像処理装置 |
Country Status (2)
Country | Link |
---|---|
US (1) | US11417083B2 (ja) |
JP (1) | JP7230658B2 (ja) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
DE102018214959A1 (de) * | 2018-09-04 | 2020-03-05 | Robert Bosch Gmbh | Verfahren zur Auswertung von Sensordaten mit einer erweiterten Objekterkennung |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2002135648A (ja) * | 2000-10-26 | 2002-05-10 | Olympus Optical Co Ltd | 撮像装置 |
JP2015179482A (ja) * | 2014-03-20 | 2015-10-08 | クラリオン株式会社 | 車載用画像処理装置およびそれを用いた車両システム |
JP2018201156A (ja) * | 2017-05-29 | 2018-12-20 | キヤノン株式会社 | 画像処理装置および画像処理方法 |
JP2019033470A (ja) * | 2017-08-09 | 2019-02-28 | キヤノン株式会社 | 画像処理システム、撮像装置、画像処理装置、制御方法およびプログラム |
Family Cites Families (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6301386B1 (en) * | 1998-12-09 | 2001-10-09 | Ncr Corporation | Methods and apparatus for gray image based text identification |
JP3747056B2 (ja) * | 2002-12-13 | 2006-02-22 | 小糸工業株式会社 | 路面状態判別装置 |
US8406518B2 (en) * | 2009-01-20 | 2013-03-26 | Pixar | Smoothed local histogram filters for computer graphics |
JP5520038B2 (ja) * | 2009-12-25 | 2014-06-11 | キヤノン株式会社 | 映像処理装置及び映像処理方法 |
WO2011091079A1 (en) * | 2010-01-19 | 2011-07-28 | Pixar | Selective diffusion of filtered edges in images |
JP2012257080A (ja) * | 2011-06-09 | 2012-12-27 | Sony Corp | 画像処理装置および画像処理方法、並びにプログラム |
US10721448B2 (en) * | 2013-03-15 | 2020-07-21 | Edge 3 Technologies, Inc. | Method and apparatus for adaptive exposure bracketing, segmentation and scene organization |
US20170116731A1 (en) * | 2015-10-27 | 2017-04-27 | Konica Minolta, Inc. | Medical image system and computer readable recording medium |
-
2019
- 2019-04-16 JP JP2019077812A patent/JP7230658B2/ja active Active
-
2020
- 2020-04-14 US US16/848,034 patent/US11417083B2/en active Active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2002135648A (ja) * | 2000-10-26 | 2002-05-10 | Olympus Optical Co Ltd | 撮像装置 |
JP2015179482A (ja) * | 2014-03-20 | 2015-10-08 | クラリオン株式会社 | 車載用画像処理装置およびそれを用いた車両システム |
JP2018201156A (ja) * | 2017-05-29 | 2018-12-20 | キヤノン株式会社 | 画像処理装置および画像処理方法 |
JP2019033470A (ja) * | 2017-08-09 | 2019-02-28 | キヤノン株式会社 | 画像処理システム、撮像装置、画像処理装置、制御方法およびプログラム |
Non-Patent Citations (1)
Title |
---|
青木 靖: "自然の法則も解明する画像処理、画像処理による積雪センサの研究開発", 映像情報インダストリアル 第39巻 第3号 INDUSTRIAL, JPN6022030292, 1 March 2007 (2007-03-01), JP, pages 63 - 69, ISSN: 0004833944 * |
Also Published As
Publication number | Publication date |
---|---|
US11417083B2 (en) | 2022-08-16 |
US20200334488A1 (en) | 2020-10-22 |
JP7230658B2 (ja) | 2023-03-01 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4525812B2 (ja) | 露出設定装置、露出設定プログラム、および画像処理装置 | |
JP4853160B2 (ja) | 車両検出装置及びヘッドランプ制御装置 | |
US9639764B2 (en) | Image recognition system for vehicle for traffic sign board recognition | |
JP4544233B2 (ja) | 車両検出装置及びヘッドランプ制御装置 | |
EP2911110A2 (en) | Image signal processing apparatus, image signal processing method, and image capturing apparatus | |
JP2019205088A (ja) | 撮像装置、その制御方法、および制御プログラム | |
JP6740866B2 (ja) | 画像出力装置 | |
WO2013168744A1 (ja) | 車両の光源を検出する方法及び装置 | |
JP4400512B2 (ja) | 車載カメラ制御装置 | |
US9367749B2 (en) | Object detection apparatus | |
JP2020177340A (ja) | 画像処理装置 | |
JP2012088785A (ja) | 対象物識別装置及びプログラム | |
JP4506576B2 (ja) | 車載霧状態判定装置、およびオートフォグランプシステム | |
JP4679469B2 (ja) | 車載画像処理装置 | |
JP4818027B2 (ja) | 車載画像処理装置 | |
JP7279613B2 (ja) | 画像処理装置 | |
JP6894536B2 (ja) | 画像処理システム及び配光制御システム | |
JP6759995B2 (ja) | 画像処理装置 | |
JP2020101624A (ja) | 撮像装置、電子機器、撮像装置の制御方法およびプログラム | |
JP7009334B2 (ja) | 画像表示装置、画像表示システム | |
US20240070815A1 (en) | Method for highlighting a vehicle in an image being provided by a rearview camera, data processing apparatus, digital rearview system, vehicle, computer program and computer-readable storage medium | |
JP7009295B2 (ja) | 表示制御装置、表示制御方法及びカメラモニタリングシステム | |
JP4145967B2 (ja) | 駐車車両検出方法及びその装置 | |
JP2020162035A (ja) | 画像表示装置 | |
JP2006155483A (ja) | 物体検知装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20210720 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20220615 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20220726 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220926 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20230117 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20230130 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 7230658 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |