JP4584277B2 - 表示装置 - Google Patents
表示装置 Download PDFInfo
- Publication number
- JP4584277B2 JP4584277B2 JP2007071178A JP2007071178A JP4584277B2 JP 4584277 B2 JP4584277 B2 JP 4584277B2 JP 2007071178 A JP2007071178 A JP 2007071178A JP 2007071178 A JP2007071178 A JP 2007071178A JP 4584277 B2 JP4584277 B2 JP 4584277B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- visible
- infrared
- lane marking
- superimposed
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 238000003384 imaging method Methods 0.000 claims description 10
- 238000003331 infrared imaging Methods 0.000 claims description 5
- 230000000052 comparative effect Effects 0.000 description 4
- 238000001514 detection method Methods 0.000 description 4
- 230000005540 biological transmission Effects 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 238000001914 filtration Methods 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Images
Description
この発明は、表示装置に関する。
従来、例えば互いに同一位置を撮影する赤外線カメラと可視カメラとを備え、可視カメラの撮影により得られた可視画像にて走行路上の走行区分線（白線）が検出された場合には、この白線を、赤外線カメラの撮影により得られた赤外画像に重畳し、また、可視画像に対する視認性が相対的に悪い場合には、舵角および車速から推定される自車両の進行方向に沿って所定幅を有する進行路を設定して赤外画像に表示する表示装置が知られている（例えば、特許文献１参照）。
特開２００１−１０１５９６号公報
しかしながら、上記従来技術に係る表示装置においては、可視画像にて走行路上の走行区分線（白線）が検出されない場合には、舵角と車速から自車両の進行路を推定しているだけであり、進行路の推定精度を向上させることが困難であり、自車両の走行領域を精度良く表示させることができないという問題が生じる。
本発明は上記事情に鑑みてなされたもので、赤外線カメラおよび可視カメラの撮像により得られた各画像から自車両の走行領域を精度良く表示させることが可能な表示装置を提供することを目的としている。
本発明は上記事情に鑑みてなされたもので、赤外線カメラおよび可視カメラの撮像により得られた各画像から自車両の走行領域を精度良く表示させることが可能な表示装置を提供することを目的としている。
上記課題を解決して係る目的を達成するために、本発明の第１態様に係る表示装置は、可視画像を撮像する可視撮像手段（例えば、実施の形態での可視カメラ１１ａ）と、前記可視撮像手段にて撮像する領域の少なくとも一部を含む領域の赤外画像を撮像する赤外撮像手段（例えば、実施の形態で赤外カメラ１２ａ）と、前記可視撮像手段によって撮像された可視画像と前記赤外撮像手段によって撮像された赤外画像とを重畳させる重畳手段（例えば、実施の形態で重畳画像生成部２３）と、前記重畳手段にて重畳させた画像を表示する表示手段（例えば、実施の形態で表示部１４）と、走行区分線の有無を取得する走行区分線取得手段（例えば、実施の形態で走行区分線検知部２１）とを備え、前記重畳手段は、前記走行区分線取得手段にて走行区分線が存在することが取得された場合は、前記可視画像のコントラストを増大して、前記可視画像と前記赤外画像とを重畳し、前記走行区分線取得手段にて走行区分線が存在しないことが取得された場合は、前記赤外画像のコントラストを増大して、前記可視画像と前記赤外画像とを重畳させる。
さらに、本発明の第２態様に係る表示装置では、前記走行区分線取得手段は、前記可視画像中から走行区分線を検出する。
本発明の第１態様に係る表示装置によれば、走行区分線が取得された場合は、可視画像のコントラストを増大して、可視画像と赤外画像とを重畳することから、重畳画像上で可視画像に起因する走行区分線に対する視認性を向上させることができる。そして、走行区分線が取得されなかった場合は、赤外画像のコントラストを増大して、可視画像と赤外画像とを重畳させることから、重畳画像上で赤外画像に起因する道路端部に対する視認性を向上させることができる。これにより、自車両の運転者に対して重畳画像から自車両の走行領域を適切に認識させることができる。
本発明の第２態様に係る表示装置によれば、走行区分線取得手段は可視画像中から走行区分線を検出することから、可視画像の状態に応じて適切なコントラストを設定することができる。
本発明の第２態様に係る表示装置によれば、走行区分線取得手段は可視画像中から走行区分線を検出することから、可視画像の状態に応じて適切なコントラストを設定することができる。
以下、本発明の一実施形態に係る表示装置について添付図面を参照しながら説明する。
本実施の形態による表示装置１０は、例えば図１に示すように、可視外界センサ１１と、赤外外界センサ１２と、処理装置１３と、表示部１４とを備えて構成されている。
さらに、処理装置１３は、例えば走行区分線検知部２１と、コントラスト設定部２２と、重畳画像生成部２３とを備えて構成されている。
本実施の形態による表示装置１０は、例えば図１に示すように、可視外界センサ１１と、赤外外界センサ１２と、処理装置１３と、表示部１４とを備えて構成されている。
さらに、処理装置１３は、例えば走行区分線検知部２１と、コントラスト設定部２２と、重畳画像生成部２３とを備えて構成されている。
可視外界センサ１１は、例えば可視光領域にて撮像可能な可視カメラ１１ａおよび画像処理部１１ｂとを備えて構成されている。
また、赤外外界センサ１２は、例えば赤外線領域にて撮像可能な赤外カメラ１２ａおよび画像処理部１２ｂとを備えて構成され、赤外カメラ１２ａは可視カメラ１１ａにて撮像する領域の少なくとも一部を含む領域を撮像する。
そして、各画像処理部１１ｂ，１２ｂは、各カメラ１１ａ，１２ａにより撮影して得た自車両の進行方向の外界の各画像に対して、例えばフィルタリングや二値化処理等の所定の画像処理を行い、二次元配列の画素からなる各画像のデータを生成して処理装置１３へ出力する。
また、赤外外界センサ１２は、例えば赤外線領域にて撮像可能な赤外カメラ１２ａおよび画像処理部１２ｂとを備えて構成され、赤外カメラ１２ａは可視カメラ１１ａにて撮像する領域の少なくとも一部を含む領域を撮像する。
そして、各画像処理部１１ｂ，１２ｂは、各カメラ１１ａ，１２ａにより撮影して得た自車両の進行方向の外界の各画像に対して、例えばフィルタリングや二値化処理等の所定の画像処理を行い、二次元配列の画素からなる各画像のデータを生成して処理装置１３へ出力する。
処理装置１３の走行区分線検知部２１は、例えば可視外界センサ１１から出力される可視画像のデータに基づき、例えば可視画像を構成する画素の明暗に応じたエッジ抽出により走行区分線（例えば、白線等）の輪郭点列を抽出する。そして、Ｈｏｕｇｈ変換あるいはパターンマッチング等により輪郭点列を直線により認識して走行区分線を検知する。
また、走行区分線検知部２１は、例えばナビゲーション装置１５の地図データや外部の情報発信装置等から自車両の走行路面上に走行区分線（例えば、白線等）が存在するか否かの情報を取得する。
また、走行区分線検知部２１は、例えばナビゲーション装置１５の地図データや外部の情報発信装置等から自車両の走行路面上に走行区分線（例えば、白線等）が存在するか否かの情報を取得する。
コントラスト設定部２２は、走行区分線検知部２１にて走行区分線が検知または取得された場合には、可視外界センサ１１から出力される可視画像のコントラストを所定の程度だけ増大させる。一方、走行区分線検知部２１にて走行区分線が検知または取得されていない場合には、赤外外界センサ１２から出力される赤外画像のコントラストを所定の程度だけ増大させる。
重畳画像生成部２３は、走行区分線の有無に応じてコントラストが設定された可視画像と赤外画像とを重畳して、重畳画像を生成する。
そして、重畳画像生成部２３は、生成した重畳画像を、モニター等からなる表示部１４に出力する。
そして、重畳画像生成部２３は、生成した重畳画像を、モニター等からなる表示部１４に出力する。
これにより、自車両の走行路に走行区分線が存在する場合には、例えば図２に示す実施例での重畳画像のように、コントラストが増大した可視画像が赤外画像に重畳された重畳画像が生成され、例えば図３に示す比較例での重畳画像のように、コントラストが変更されていない可視画像が赤外画像に重畳された重畳画像に比べて、自車両の走行路の走行区分線に対する視認性が向上させられる。
また、自車両の走行路に走行区分線が存在しない場合には、例えば図４に示す実施例での重畳画像のように、コントラストが増大した赤外画像が可視画像に重畳された重畳画像が生成され、例えば図５に示す比較例での重畳画像のように、コントラストが変更されていない赤外画像が可視画像に重畳された重畳画像に比べて、自車両の走行路の道路端部に対する視認性が向上させられる。
また、自車両の走行路に走行区分線が存在しない場合には、例えば図４に示す実施例での重畳画像のように、コントラストが増大した赤外画像が可視画像に重畳された重畳画像が生成され、例えば図５に示す比較例での重畳画像のように、コントラストが変更されていない赤外画像が可視画像に重畳された重畳画像に比べて、自車両の走行路の道路端部に対する視認性が向上させられる。
本実施の形態による表示装置１０は上記構成を備えており、次に、この表示装置１０の動作について説明する。
先ず、図６に示すステップＳ０１においては、自車両の進行方向前方の外界領域の可視画像および赤外画像を取得する。
先ず、図６に示すステップＳ０１においては、自車両の進行方向前方の外界領域の可視画像および赤外画像を取得する。
次に、ステップＳ０２においては、自車両の走行路に走行区分線が存在するか否かを判定する。
この判定結果が「ＹＥＳ」の場合には、ステップＳ０３に進み、このステップＳ０３においては、可視画像のコントラストを所定の程度だけ増大させる。
一方、この判定結果が「ＮＯ」の場合には、ステップＳ０４に進み、このステップＳ０４においては、赤外画像のコントラストを所定の程度だけ増大させる。
そして、ステップＳ０５においては、可視画像と赤外画像とを重畳して、重畳画像を生成し、一連の処理を終了する。
この判定結果が「ＹＥＳ」の場合には、ステップＳ０３に進み、このステップＳ０３においては、可視画像のコントラストを所定の程度だけ増大させる。
一方、この判定結果が「ＮＯ」の場合には、ステップＳ０４に進み、このステップＳ０４においては、赤外画像のコントラストを所定の程度だけ増大させる。
そして、ステップＳ０５においては、可視画像と赤外画像とを重畳して、重畳画像を生成し、一連の処理を終了する。
上述したように、本実施の形態による表示装置１０によれば、自車両の走行路に走行区分線が存在する場合は、可視画像のコントラストを増大して、可視画像と赤外画像とを重畳することから、重畳画像上で可視画像に起因する走行区分線に対する視認性を向上させることができる。そして、自車両の走行路に走行区分線が存在しない場合は、赤外画像のコントラストを増大して、可視画像と赤外画像とを重畳させることから、重畳画像上で赤外画像に起因する道路端部に対する視認性を向上させることができる。これにより、自車両の運転者に対して重畳画像から自車両の走行領域を適切に認識させることができる。
１０ 表示装置
１１ａ 可視カメラ（可視撮像手段）
１２ａ 赤外カメラ（赤外撮像手段）
１４ 表示部（表示手段）
２１ 走行区分線検知部（走行区分線取得手段）
２３ 重畳画像生成部（重畳手段）
１１ａ 可視カメラ（可視撮像手段）
１２ａ 赤外カメラ（赤外撮像手段）
１４ 表示部（表示手段）
２１ 走行区分線検知部（走行区分線取得手段）
２３ 重畳画像生成部（重畳手段）
Claims (2)
- 可視画像を撮像する可視撮像手段と、
前記可視撮像手段にて撮像する領域の少なくとも一部を含む領域の赤外画像を撮像する赤外撮像手段と、
前記可視撮像手段によって撮像された可視画像と前記赤外撮像手段によって撮像された赤外画像とを重畳させる重畳手段と、
前記重畳手段にて重畳させた画像を表示する表示手段と、
走行区分線の有無を取得する走行区分線取得手段とを備え、
前記重畳手段は、前記走行区分線取得手段にて走行区分線が存在することが取得された場合は、前記可視画像のコントラストを増大して、前記可視画像と前記赤外画像とを重畳し、前記走行区分線取得手段にて走行区分線が存在しないことが取得された場合は、前記赤外画像のコントラストを増大して、前記可視画像と前記赤外画像とを重畳させることを特徴とする表示装置。 - 前記走行区分線取得手段は、前記可視画像中から走行区分線を検出することを特徴とする請求項１に記載の表示装置。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2007071178A JP4584277B2 (ja) | 2007-03-19 | 2007-03-19 | 表示装置 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2007071178A JP4584277B2 (ja) | 2007-03-19 | 2007-03-19 | 表示装置 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2008234178A JP2008234178A (ja) | 2008-10-02 |
| JP4584277B2 true JP4584277B2 (ja) | 2010-11-17 |
Family
ID=39906891
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2007071178A Expired - Fee Related JP4584277B2 (ja) | 2007-03-19 | 2007-03-19 | 表示装置 |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP4584277B2 (ja) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US10671859B2 (en) | 2015-09-11 | 2020-06-02 | Fujifilm Corporation | Travel assistance device and travel assistance method using travel assistance device |
Families Citing this family (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US11676403B2 (en) * | 2021-01-21 | 2023-06-13 | Hitachi Astemo, Ltd. | Combining visible light camera and thermal camera information |
Citations (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2001101596A (ja) * | 1999-09-27 | 2001-04-13 | Mazda Motor Corp | 車両の表示装置 |
| WO2005038743A1 (de) * | 2003-10-16 | 2005-04-28 | Bayerische Motoren Werke Aktiengesellschaft | Verfahren und vorrichtung zur sichtbarmachung einer fahrzeugumgebung |
-
2007
- 2007-03-19 JP JP2007071178A patent/JP4584277B2/ja not_active Expired - Fee Related
Patent Citations (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2001101596A (ja) * | 1999-09-27 | 2001-04-13 | Mazda Motor Corp | 車両の表示装置 |
| WO2005038743A1 (de) * | 2003-10-16 | 2005-04-28 | Bayerische Motoren Werke Aktiengesellschaft | Verfahren und vorrichtung zur sichtbarmachung einer fahrzeugumgebung |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US10671859B2 (en) | 2015-09-11 | 2020-06-02 | Fujifilm Corporation | Travel assistance device and travel assistance method using travel assistance device |
Also Published As
| Publication number | Publication date |
|---|---|
| JP2008234178A (ja) | 2008-10-02 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP6330908B2 (ja) | 車両用表示装置及び車両用表示方法 | |
| CN106470877B (zh) | 车辆用显示装置以及车辆用显示方法 | |
| WO2016002163A1 (ja) | 画像表示装置、画像表示方法 | |
| EP2414776B1 (en) | Vehicle handling assistant apparatus | |
| JP5401257B2 (ja) | 遠赤外線歩行者検知装置 | |
| JP2017520133A (ja) | 車両周辺イメージ生成装置および方法 | |
| JP2011100174A (ja) | 車線内車両検出装置及び車線内車両検出方法 | |
| JP5548212B2 (ja) | 横断歩道標示検出方法および横断歩道標示検出装置 | |
| JP3521859B2 (ja) | 車両周辺画像処理装置及び記録媒体 | |
| JP5521217B2 (ja) | 障害物検出装置、及び障害物検出方法 | |
| JP4932293B2 (ja) | 障害物認識装置 | |
| JP2012252501A (ja) | 走行路認識装置及び走行路認識用プログラム | |
| JP6375633B2 (ja) | 車両周辺画像表示装置、車両周辺画像表示方法 | |
| JP5155204B2 (ja) | 白線検出装置 | |
| JP4584277B2 (ja) | 表示装置 | |
| JP5541099B2 (ja) | 道路区画線認識装置 | |
| JP2012159470A (ja) | 車両用画像認識装置 | |
| JP6032141B2 (ja) | 走行路面標示検知装置および走行路面標示検知方法 | |
| JP2017182543A (ja) | 運転支援方法及び運転支援装置 | |
| WO2022009537A1 (ja) | 画像処理装置 | |
| US9030560B2 (en) | Apparatus for monitoring surroundings of a vehicle | |
| JP5245471B2 (ja) | 撮像装置、並びに、画像処理装置および方法 | |
| JP4685050B2 (ja) | 表示装置 | |
| JP4629638B2 (ja) | 車両の周辺監視装置 | |
| JP4598011B2 (ja) | 車両用表示装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20100601 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20100603 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20100728 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20100824 |
|
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20100901 |
|
| R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130910 Year of fee payment: 3 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20140910 Year of fee payment: 4 |
|
| LAPS | Cancellation because of no payment of annual fees |