JPH10255019A - 車両認識装置 - Google Patents

車両認識装置

Info

Publication number
JPH10255019A
JPH10255019A JP9053030A JP5303097A JPH10255019A JP H10255019 A JPH10255019 A JP H10255019A JP 9053030 A JP9053030 A JP 9053030A JP 5303097 A JP5303097 A JP 5303097A JP H10255019 A JPH10255019 A JP H10255019A
Authority
JP
Japan
Prior art keywords
image
vehicle
infrared
board
camera
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP9053030A
Other languages
English (en)
Inventor
Koji Taguchi
康治 田口
Toshihiko Suzuki
敏彦 鈴木
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Toyota Motor Corp
Original Assignee
Toyota Motor Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Toyota Motor Corp filed Critical Toyota Motor Corp
Priority to JP9053030A priority Critical patent/JPH10255019A/ja
Publication of JPH10255019A publication Critical patent/JPH10255019A/ja
Pending legal-status Critical Current

Links

Landscapes

  • Image Processing (AREA)
  • Image Analysis (AREA)

Abstract

(57)【要約】 【課題】 夜間において自車の周囲に存在する車両を確
実に検出する。 【解決手段】 CCDカメラ10で車両前方の可視画像
を取得し、画像キャプチャボード14で2値化した後、
画像認識ボード18に出力する。また、赤外線カメラ1
2で得られた赤外画像も画像認識ボード18に供給され
る。画像認識ボード18は、赤外画像の内、2値化され
た可視画像の高輝度部分(テールランプ等)に対応する
部分の温度情報に基づいて赤外画像の2値化用しきい値
を決定する。決定されたしきい値は画像キャプチャボー
ド16に供給され、画像キャプチャボード16は供給さ
れたしきい値を用いて赤外画像を2値化する。画像認識
ボード18は、2値化された赤外画像に基づいて車両を
認識する。

Description

【発明の詳細な説明】
【0001】
【発明の属する技術分野】本発明は車両認識装置、特に
可視光カメラと赤外線カメラを用いて車両を認識する装
置に関する。
【0002】
【従来の技術】従来より、車載カメラを用いて周囲の車
両の存在を検知し、検出結果に基づいて自車の走行を制
御するシステムが提案されている。このようなシステム
においては、周囲環境状況によらずいかに確実に得られ
た画像から車両を抽出するかが重要であり、特に夜間に
おける認識率の向上を図って可視光カメラと赤外線カメ
ラを用いる技術が検討されている。
【0003】例えば、特開平4−137016号公報に
は、夜間の認識率向上を図るべく可視光カメラと赤外線
カメラを搭載し、夜間における車両前方の同一画像を取
得し、所定のしきい値で2値化した後そのAND演算を
行って前方車両のテールランプを検出する構成が開示さ
れている。
【0004】
【発明が解決しようとする課題】しかしながら、テール
ランプ(あるいはヘッドライト等)は点灯直後は比較的
低温であるため、赤外線カメラで得られた画像を所定の
しきい値で2値化した場合には、テールランプ部分を抽
出することができず、可視光画像とのAND演算を行っ
てもテールランプ部分を認識できない問題があった。
【0005】本発明は、上記従来技術の有する課題に鑑
みなされたものであり、その目的は、可視光カメラと赤
外線カメラを用いて周囲車両をより確実に検出できる車
両認識装置を提供することにある。
【0006】
【課題を解決するための手段】上記目的を達成するため
に、本発明は、車両の走行領域を撮影する赤外線カメラ
と、前記赤外線カメラの撮影領域と重複する領域を撮影
する可視光カメラと、前記可視光カメラで得られた画像
から車両のライト部を抽出する第1処理手段と、前記赤
外線カメラで得られた画像のうち、前記ライト部に対応
する領域近傍の温度情報に基づいて温度しきい値を算出
する演算手段と、前記温度しきい値に基づいて前記赤外
線カメラで得られた画像から車両外形を抽出する第2処
理手段とを有することを特徴とする。
【0007】
【発明の実施の形態】以下、図面に基づき本発明の実施
形態について説明する。
【0008】図1には本実施形態の構成ブロック図が示
されている。可視光カメラとしてのCCDカメラ10及
び赤外線(遠赤外線)カメラ12が車両の所定位置、例
えば車両のルームミラー裏面等に配置され、車両前方の
同一画像を撮影する。CCDカメラ10及び赤外線カメ
ラ12で得られた画像はそれぞれ画像キャプチャボード
14、16に供給される。画像キャプチャボード14、
16はA/Dコンバータ及びVRAMを有しており、入
力した画像をデジタルに変換して順次VRAMに蓄積
し、適当なタイミングで画像認識ボード18に出力す
る。画像キャプチャボード14内の2値化用しきい値は
所定値であるが、画像キャプチャボード16内のA/D
の2値化用しきい値は所定ではなく、適宜調整される動
的なしきい値である。この点については後述する。画像
認識ボード18はCPUやメモリを有して構成され、本
実施形態における第1、第2処理手段及び演算手段とし
て機能して自車前方の車両を認識する。
【0009】図2には、本実施形態の処理フローチャー
トが示されている。まず、可視光カメラ10で可視画像
を入力し(S101)、これを画像キャプチャボード1
4で2値化する(S102)。この2値化は、前方車両
の高輝度部分(テールランプやヘッドライト)を抽出す
るために必要な所定のしきい値に設定される。2値化さ
れた画像は画像認識ボード18に供給される。
【0010】図3には、可視画像及びその2値化画像が
模式的に示されている。(A)が可視画像であり、前方
に車両100が写っている。(B)は適当なしきい値で
2値化した画像であり、図中斜線部分が高輝度部分(自
車前方の車両100のテールランプ部分や対向車のヘッ
ドライト部分)である。
【0011】S102で可視画像を2値化した後、次に
赤外線カメラで赤外画像を入力する(S103)。そし
て、これを2値化することなく画像認識ボード18に供
給する。画像認識ボード18では、入力した赤外画像の
うち、S102で供給された2値化可視画像の高輝度部
分(図3(B)参照)近傍、つまりライト近傍の領域を
抽出し、その領域における温度情報から赤外用しきい値
を算出する(S104)。具体的には、ライト近傍の温
度のヒストグラムを算出し、その分布状況からしきい値
を決定する。
【0012】図4には、赤外用しきい値の決定方法が模
式的に示されている。図において、横軸は温度、縦軸は
その温度の頻度(画素数)が示されている。(A)にお
いては、温度T1で高温画素の頻度が上昇しており、こ
の温度T1がしきい値(しきい値1)に設定される。一
方、(B)においてはT1よりも低い温度T2で高温画
素の頻度が上昇しており、この場合には温度T2をしき
い値(しきい値2)に設定する。仮に、しきい値1を固
定のしきい値とした場合、(B)の例では2値化の際に
高温部分が周囲温度と同一として2値化されてしまうと
ころ、本実施形態では適切に2値化できることが理解で
きよう。以上のようにして2値化のしきい値を決定する
と、画像認識ボード18のCPUはそのしきい値を画像
キャプチャボード14に供給し、画像キャプチャボード
16では、供給されたしきい値に基づいて赤外画像を2
値化する(S105)。
【0013】図5には、赤外画像及びその2値化画像が
模式的に示されている。(A)は赤外画像であり、図中
200はCPUが抽出するライト近傍の領域である。そ
して、(B)が(A)の赤外画像を2値化した画像であ
り、図中斜線部分が周囲よりも高温の車両部分である。
2値化された赤外画像は画像認識ボード18に供給さ
れ、画像認識ボード18は図5(B)の斜線部分のみを
抽出して車両と認識する。
【0014】このように、本実施形態では、赤外画像を
2値化する際に、固定しきい値ではなく、可視画像で得
られた高輝度部分の温度分布に基づいた動的しきい値を
用いているので、たとえライト部分が比較的低温であっ
ても、しきい値がそれに応じて下方(低い方)に自動調
整されるので、確実に車両のみを抽出することができ
る。
【0015】また、得られた画像内に温度の異なる複数
の車両が存在する場合でも、それぞれの領域においてし
きい値が設定されるので、複数の車両を確実に認識でき
る。すなわち、例えば可視画像の位置aと位置bに車両
が存在するため高輝度部分となっている場合、位置aに
ついてはしきい値Thaが設定され、位置bについては
しきい値Thbが設定されて赤外画像の2値化が行われ
るので、たとえ位置aと位置bに存在する車両の温度が
異なっていても、これらを確実に抽出することができ
る。
【0016】さらに、本実施形態では、温度分布に基づ
いてしきい値を設定しているため、テールランプやヘッ
ドライトのみならず、周囲温度よりも高温である車両の
外形全体を認識することも可能である。なお、本実施形
態においてはライト近傍領域200の大きさについては
特に言及していないが、ある値に設定して種々の距離に
位置する種々の大きさの車両を認識し、その認識結果を
フィードバックさせて最適の大きさに設定すればよい。
【0017】また、本実施形態では自車前方の車両を認
識する場合について示したが、自車後方の車両について
も同様に認識できることは言うまでもない。
【0018】
【発明の効果】以上説明したように、本発明の車両認識
装置によれば、可視光カメラと赤外線カメラを用いて、
夜間において周囲の車両を確実に認識することができ
る。
【図面の簡単な説明】
【図1】 本発明の実施形態の構成ブロック図である。
【図2】 同実施形態の処理フローチャートである。
【図3】 可視画像とその2値化画像の説明図である。
【図4】 しきい値設定の一例を示すグラフ図である。
【図5】 赤外画像とその2値化画像の説明図である。
【符号の説明】
10 CCDカメラ、12 赤外線カメラ、14,16
画像キャプチャボード、18 画像認識ボード、10
0 車両、200 ライト近傍領域。

Claims (1)

    【特許請求の範囲】
  1. 【請求項1】 車両の走行領域を撮影する赤外線カメラ
    と、 前記赤外線カメラの撮影領域と重複する領域を撮影する
    可視光カメラと、 前記可視光カメラで得られた画像から車両のライト部を
    抽出する第1処理手段と、 前記赤外線カメラで得られた画像のうち、前記ライト部
    に対応する領域近傍の温度情報に基づいて温度しきい値
    を算出する演算手段と、 前記温度しきい値に基づいて前記赤外線カメラで得られ
    た画像から車両外形を抽出する第2処理手段と、 を有することを特徴とする車両認識装置。
JP9053030A 1997-03-07 1997-03-07 車両認識装置 Pending JPH10255019A (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP9053030A JPH10255019A (ja) 1997-03-07 1997-03-07 車両認識装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP9053030A JPH10255019A (ja) 1997-03-07 1997-03-07 車両認識装置

Publications (1)

Publication Number Publication Date
JPH10255019A true JPH10255019A (ja) 1998-09-25

Family

ID=12931503

Family Applications (1)

Application Number Title Priority Date Filing Date
JP9053030A Pending JPH10255019A (ja) 1997-03-07 1997-03-07 車両認識装置

Country Status (1)

Country Link
JP (1) JPH10255019A (ja)

Cited By (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2001021438A1 (de) * 1999-09-23 2001-03-29 Bayerische Motoren Werke Aktiengesellschaft Kraftfahrzeugsensoranordnung zur umgebungserfassung
JP2005100193A (ja) * 2003-09-26 2005-04-14 King Tsushin Kogyo Kk 侵入監視装置
DE10355104A1 (de) * 2003-11-24 2005-06-02 Volkswagen Ag Anzeigevorrichtung zur Unterstützung eines Kraftfahrzeugführers
JP2007515853A (ja) * 2003-10-16 2007-06-14 バイエリッシェ モートーレン ウエルケ アクチエンゲゼルシャフト 車両周辺部を可視化するための方法及び装置
US7385680B2 (en) 2004-06-03 2008-06-10 Matsushita Electric Industrial Co., Ltd. Camera module
US7561720B2 (en) 2004-04-30 2009-07-14 Visteon Global Technologies, Inc. Single camera system and method for range and lateral position measurement of a preceding vehicle
US7561721B2 (en) 2005-02-02 2009-07-14 Visteon Global Technologies, Inc. System and method for range measurement of a preceding vehicle
US7623681B2 (en) 2005-12-07 2009-11-24 Visteon Global Technologies, Inc. System and method for range measurement of a preceding vehicle
JP2010097410A (ja) * 2008-10-16 2010-04-30 Toyota Motor Corp 車両検出装置
US8233047B2 (en) 2007-10-17 2012-07-31 Hitachi Kokusai Electric Inc. Object detection system
JP2013020417A (ja) * 2011-07-11 2013-01-31 Clarion Co Ltd 車両用外界認識装置及びそれを用いた車両制御システム
US10207411B2 (en) 2017-02-01 2019-02-19 Toyota Research Institute, Inc. Systems and methods for servicing a vehicle
US10611378B2 (en) 2017-02-01 2020-04-07 Toyota Research Institute, Inc. Systems and methods for operating a vehicle on a roadway

Cited By (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2001021438A1 (de) * 1999-09-23 2001-03-29 Bayerische Motoren Werke Aktiengesellschaft Kraftfahrzeugsensoranordnung zur umgebungserfassung
US6840342B1 (en) 1999-09-23 2005-01-11 Bayerische Motoren Werke Aktiengesellschaft Sensor device for a motor vehicle used for detecting environmental parameters
JP2005100193A (ja) * 2003-09-26 2005-04-14 King Tsushin Kogyo Kk 侵入監視装置
JP2007515853A (ja) * 2003-10-16 2007-06-14 バイエリッシェ モートーレン ウエルケ アクチエンゲゼルシャフト 車両周辺部を可視化するための方法及び装置
DE10355104A1 (de) * 2003-11-24 2005-06-02 Volkswagen Ag Anzeigevorrichtung zur Unterstützung eines Kraftfahrzeugführers
US7561720B2 (en) 2004-04-30 2009-07-14 Visteon Global Technologies, Inc. Single camera system and method for range and lateral position measurement of a preceding vehicle
US7385680B2 (en) 2004-06-03 2008-06-10 Matsushita Electric Industrial Co., Ltd. Camera module
US7561721B2 (en) 2005-02-02 2009-07-14 Visteon Global Technologies, Inc. System and method for range measurement of a preceding vehicle
US7623681B2 (en) 2005-12-07 2009-11-24 Visteon Global Technologies, Inc. System and method for range measurement of a preceding vehicle
US8233047B2 (en) 2007-10-17 2012-07-31 Hitachi Kokusai Electric Inc. Object detection system
JP2010097410A (ja) * 2008-10-16 2010-04-30 Toyota Motor Corp 車両検出装置
JP2013020417A (ja) * 2011-07-11 2013-01-31 Clarion Co Ltd 車両用外界認識装置及びそれを用いた車両制御システム
US8903603B2 (en) 2011-07-11 2014-12-02 Clarion Co., Ltd. Environment recognizing device for a vehicle and vehicle control system using the same
US10207411B2 (en) 2017-02-01 2019-02-19 Toyota Research Institute, Inc. Systems and methods for servicing a vehicle
US10611378B2 (en) 2017-02-01 2020-04-07 Toyota Research Institute, Inc. Systems and methods for operating a vehicle on a roadway

Similar Documents

Publication Publication Date Title
JP4496964B2 (ja) 車両用トンネル検出装置および車両用ライト制御装置
EP1962226B1 (en) Image recognition device for vehicle and vehicle head lamp controller and method of controlling head lamps
JP5658131B2 (ja) 物体検知システム
EP2784745A1 (en) Image processing apparatus
JPH10255019A (ja) 車両認識装置
KR20120057446A (ko) 차량내 운전자 실제 얼굴 인증 방법
JP2000030197A (ja) 温体検出装置
CN104008518B (zh) 对象检测设备
JP5353531B2 (ja) 車両灯火認識装置及びプログラム
JPH11203446A (ja) 撮影対象認識装置
JP5166933B2 (ja) 車両認識装置、及び車両
JP2007193702A (ja) 画像処理装置及び画像処理方法
KR100801989B1 (ko) 번호판 인식 시스템,전처리 장치 및 방법
JPH07114689A (ja) 車両登録番号認識方法
JPH11215487A (ja) 歩行者検出警報装置
JP4457077B2 (ja) 障害物検出システム、及び障害物検出方法
JP2008028478A (ja) 障害物検出システム、及び障害物検出方法
KR101299104B1 (ko) 보행자 검출 장치 및 그 방법
JP7201706B2 (ja) 画像処理装置
JP2007257242A (ja) 白線認識装置
JP3638028B2 (ja) 車両ナンバー認識装置
JPH11219493A (ja) 交通情報処理方法
US11167687B2 (en) Object detection system
JPH07114688A (ja) 車両登録番号認識方法
JP4577301B2 (ja) 顔向き検知装置