JP2002074595A - 車両の安全運転支援システム - Google Patents

車両の安全運転支援システム

Info

Publication number
JP2002074595A
JP2002074595A JP2000259506A JP2000259506A JP2002074595A JP 2002074595 A JP2002074595 A JP 2002074595A JP 2000259506 A JP2000259506 A JP 2000259506A JP 2000259506 A JP2000259506 A JP 2000259506A JP 2002074595 A JP2002074595 A JP 2002074595A
Authority
JP
Japan
Prior art keywords
pedestrian
vehicle
detected
temperature difference
candidate
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2000259506A
Other languages
English (en)
Other versions
JP3574780B2 (ja
Inventor
Masaaki Fukuhara
雅明 福原
Tatsuhiko Moji
竜彦 門司
Isao Furusawa
勲 古沢
Mitsuru Koni
満 紺井
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hitachi Ltd
Hitachi Automotive Systems Engineering Co Ltd
Original Assignee
Hitachi Ltd
Hitachi Car Engineering Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hitachi Ltd, Hitachi Car Engineering Co Ltd filed Critical Hitachi Ltd
Priority to JP2000259506A priority Critical patent/JP3574780B2/ja
Publication of JP2002074595A publication Critical patent/JP2002074595A/ja
Application granted granted Critical
Publication of JP3574780B2 publication Critical patent/JP3574780B2/ja
Anticipated expiration legal-status Critical
Expired - Lifetime legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/103Static body considered as a whole, e.g. static pedestrian or occupant recognition
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/56Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Image Processing (AREA)
  • Traffic Control Systems (AREA)
  • Image Analysis (AREA)
  • Image Input (AREA)

Abstract

(57)【要約】 【課題】歩行者周辺の温度条件に影響されることなく、
より正確に歩行者を検出できる車両の安全運転支援シス
テムを提供する。 【解決手段】車両の安全運転支援システムを、可視光画
像センサ1から取り込んだ可視画像データを基に歩行者
検出領域を設定する検出領域設定部604と、熱画像セ
ンサ2から取り込んだ熱画像データを基に歩行者検出領
域内の各物体の温度差を検出する領域内温度差検出部6
05と、検出した温度差が歩行者の体温が検出できる温
度差であるとき、温度差に基づいて各物体の中から歩行
者候補を検出する第1の検出部と、検出した温度差が歩
行者の体温が検出できない温度差であるとき、各物体の
影の形状から歩行者候補を検出する第2の検出部と、検
出した歩行者候補に移動ベクトルがあれば歩行者候補を
歩行者と判定する判定部とで構成する。

Description

【発明の詳細な説明】
【0001】
【発明の属する技術分野】本発明は、車両の安全運転支
援システム、特に自車両走行方向の歩行者を検出し、車
両走行を安全制御するシステムに関するものである。
【0002】
【従来の技術】現在では、自動車事故を未然に防ぐため
の車間距離制御装置や車線逸脱制御装置などの開発、製
品化が進められているが、高速道路での使用が前提であ
り、一般道路で使用可能とするためには歩行者の検知が
必須になる。歩行者を検知するためには、車両前方の障
害物を前方車や標識、植栽などと区別する必要があり、
熱画像センサが有効になる。歩行者の体温は、外気の温
度にかかわらず一定であるためである。
【0003】1996年から市場に出回るようになった冷却
不要のサーモグラフィを用いることにより、昼間も熱画
像を得ることが可能になった。昼夜に問わず可視光画像
センサと熱画像センサとを起動させ、熱画像と可視光画
像のデータを重ね合せて認識することにより、歩行者の
検知精度を向上させることができる。近年、熱画像セン
サと可視光画像センサとを組み合わせて歩行者を検出す
る発明が種々提案されている。
【0004】例えば、特開2000―30197号公報
記載の検出装置は、可視光画像センサと熱画像センサの
データを重ね合せて、車両の走行方向の他車両までの距
離及び方向を車両検出部で検出し、画像処理ユニットで
他車両までの距離と方向を除去し、かつ可視光画像、熱
画像から他車両までの存在領域を除去し、除去処理結果
の熱画像データに基づいて歩行者の存在を検出するもの
である。
【0005】
【発明が解決しようとする課題】しかしながら、上記検
出装置は、他車両の存在領域を除去し、除去処理結果か
ら歩行者の存在を抽出する際、路面温度と歩行者の温度
に差異があることが前提となっており、例えば真夏の日
の当たる路面など歩行者と同じ位の温度になる場合もあ
り、正確な歩行者検出ができないという問題があった。
【0006】本発明の目的は、歩行者周辺の温度条件に
影響されることなく、より正確に歩行者を検出できる車
両の安全運転支援システムを提供することにある。
【0007】
【課題を解決するための手段】上記目的を達成するため
に、本発明における車両の安全運転支援システムの特徴
とするところは、車両の安全運転支援システムを、可視
光画像センサから取り込んだ可視画像データを基に歩行
者検出領域を設定する検出領域設定部と、熱画像センサ
から取り込んだ熱画像データを基に歩行者検出領域内の
各物体の温度差を検出する領域内温度差検出部と、検出
した温度差が、歩行者の体温が検出できる温度差である
ときは、温度差に基づいて各物体の中から歩行者候補を
検出する第1の検出部と、歩行者の体温が検出できない
温度差であるときは、各物体の影の形状から歩行者候補
を検出する第2の検出部と、検出した歩行者候補に移動
ベクトルがあれば、歩行者候補を歩行者と判定する判定
部とで構成することにある。
【0008】具体的には本発明は次に掲げるシステムを
提供する。
【0009】本発明は、車両の走行方向の歩行者を検出
し、該検出した歩行者の状態に応じて前記車両の走行を
制御する車両の安全運転支援システムにおいて、前記車
両の走行方向の可視画像データを取り込む可視光画像セ
ンサと、前記車両の走行方向の熱画像データを取り込む
熱画像センサと、前記取り込んだ可視画像データを基に
歩行者検出領域を設定する検出領域設定部と、前記取り
込んだ熱画像データを基に前記歩行者検出領域内の各物
体の温度差を検出する領域内温度差検出部と、前記検出
した温度差が前記歩行者の体温が検出できる温度差であ
るとき、前記温度差に基づいて前記各物体の中から前記
歩行者候補を検出する第1の検出部と、前記検出した温
度差が前記歩行者の体温が検出できない温度差であると
き、前記各物体の影の形状から前記歩行者候補を検出す
る第2の検出部と、前記第1の検出部あるいは前記第2
の検出部で検出した前記歩行者候補に移動ベクトルがあ
るか否かを検出し、前記移動ベクトルがあれば前記歩行
者候補を前記歩行者と判定する判定部とを有することを
特徴とする車両の安全運転支援システムを提供する。
【0010】また、本発明は、車両の走行方向の歩行者
を検出し、該検出した歩行者の状態に応じて前記車両の
走行を制御する車両の安全運転支援システムにおいて、
前記車両の走行方向の可視画像データを取り込む可視光
画像センサと、前記車両の走行方向の熱画像データを取
り込む熱画像センサと、前記取り込んだ可視画像データ
を基に歩行者検出領域を設定する検出領域設定部と、前
記取り込んだ熱画像データを基に前記歩行者検出領域内
の各物体の温度差を検出する領域内温度差検出部と、前
記検出した温度差が前記歩行者の体温が検出できる温度
差であるとき、前記歩行者検出領域内の歩行者体温付近
の温度データを検出し、前記温度データをもつ物体を第
1次歩行者候補として絞り込む歩行者候補絞込み部と、
前記第1次歩行者候補として絞り込まれた物体の大きさ
を前記歩行者検出領域の座標から推測する歩行者候補大
きさ推測部と、前記検出した温度差が前記歩行者の体温
が検出できない温度差であるとき、前記可視画像データ
に基づき、前記歩行者検出領域内の物体の影の長さを検
出する領域内影検出部と、前記検出された影の長さから
影を作り出している物体の大きさを推測する物体の大き
さ推測部と、前記歩行者候補大きさ推測部あるいは前記
物体の大きさ推測部で推測した物体の大きさが人物大の
大きさであれば前記物体を第2次歩行者候補として選出
する歩行者候補選出部と、前記選出した第2次歩行者候
補に移動ベクトルがあるか否かを検出する歩行者候補移
動ベクトル検出部と、前記第2次歩行者候補に移動ベク
トルがあれば、歩行者と判定する歩行者判定部と、前記
判定した歩行者に前記車両が衝突または接触する危険の
度合いを検出する危険度検出部とを有することを特徴と
する車両の安全運転支援システムを提供する。
【0011】好ましくは、前記物体の大きさ推測部は、
前記検出された影の長さと、前記車両に備えられた方位
センサから入力された方位と、リアルタイムクロックか
ら取込んだ日時及び時刻データと、前記歩行者検出領域
の座標とに基づいて、前記影を作り出している物体の大
きさを推測する。
【0012】好ましくは、前記危険度検出部は、前記車
両の車速度と前記判定した歩行者の座標とに基づいて前
記車両が前記歩行者に衝突または接触する危険の度合い
を検出し、該検出した危険度に応じて、前記車両の走行
を制御する。
【0013】
【発明の実施の形態】以下、本発明の一実施の形態例に
係る車両の安全運転支援システムを、図を用いて説明す
る。
【0014】図1は、本発明の一実施の形態例に係る車
両の安全運転支援システムの全体構成を示す。車両の安
全走行支援システムは、可視光画像センサ1と、熱画像
センサ2と、ナビゲーションシステム3と、車間距離セ
ンサ4と、車速センサ5と、処理装置6と、ブレーキ制
御装置7と、アクセル制御装置8と、警報器9と、イン
ジケータ10とで構成される。
【0015】処理装置6は、AD変換器601,602
と、インターフェース回路603と、検出領域設定部6
04と、領域内温度差検出部605と、歩行者候補絞込
み部606と、歩行者候補大きさ推測部607と、領域
内影検出部608と、物体の大きさ推測部609と、歩
行者候補選出部610と、移動ベクトル検出部611
と、歩行者判定部612と、危険度検出部613と、リ
アルタイムクロック614とで構成される。
【0016】可視光画像センサ1は、CCDセンサやC
MOSセンサ等の画像センサであり、車両前方の可視光
における道路上に描かれた白線、道路上の障害物及び影
などの画像データを取込む。取込んだ画像データは、A
D変換器601でデジタル化され、検出領域設定部60
4或いは領域内影検出部608に入力される。
【0017】熱画像センサ2は、車両前方における物体
の温度に応じた電磁波の赤外線強度を検出し、温度に換
算して、歩行者の体温等の熱画像データを取込む。取込
んだ熱画像データは、AD変換器602でデジタル化さ
れ、領域内温度差検出部605に入力される。
【0018】検出領域設定部604は、可視光画像セン
サ1から入力された道路の画像データに基づいて歩行者
検出領域を設定する。歩行者検出領域を設定するのは、
画像処理速度の面から自車両前方の画像すべてから歩行
者の検出を行うと処理装置6の負荷が大きくなるからで
ある。そのため、予め道路の白線を認識しておき、白線
内の領域で歩行者の検出を行うようにする。
【0019】領域内温度差検出部605は、熱画像セン
サ2から入力された熱画像データに基づいて、設定され
た歩行者検出領域内の各物体の温度差を検出する。
【0020】歩行者候補絞込み部606は、領域内温度
差検出部605で検出した温度差が歩行者の体温が検出
できる温度差であるとき、歩行者の体温付近の温度デー
タを検出し、その温度データをもつ物体を第1次歩行者
候補として絞り込む。
【0021】歩行者候補大きさ推測部607は、歩行者
候補絞込み部606で第1次歩行者候補として絞り込ま
れた物体の大きさを歩行者検出領域の座標から推測す
る。
【0022】領域内影検出部608は、領域内温度差検
出部605で検出した温度差が歩行者の体温が検出でき
ない温度差であるとき、可視光画像センサ1から入力さ
れた画像データに基づき、歩行者検出領域内の物体の影
及び影の長さを検出する。
【0023】影を検出する方法としては、可視光画像検
出センサ1から得られるデータにあるしきい値を設け、
影とその他のデータとを区別する方法がある。可視光画
像データから得られるデータを0から255の8bit
でデジタル変換し、数値の大きい方を明るい画像データ
とすると影は限りなく黒に近いため0に近いしきい値を
設け、他の画像情報と区別する。
【0024】ナビゲーションシステム3で、自車両の走
行する方位を検出し、検出した方位を、インターフェー
ス回路603を経由して物体の大きさ推測部609に入
力する。また、別の方位検出手段、例えば自車両に方位
センサを備え、それを用いても良い。
【0025】物体の大きさ推測部609は、ナビゲーシ
ョンシステム3から入力された方位と、リアルタイムク
ロック614から取込んだ日時及び時刻データと、領域
内影検出部608で検出された影の長さと、歩行者検出
領域の座標とから影を作り出している物体の大きさを推
測する。
【0026】歩行者候補選出部110は、歩行者候補大
きさ推測部607あるいは物体の大きさ推測部609で
推測した物体の大きさが人物大の大きさであればその物
体を第2次歩行者候補として選出する。
【0027】移動ベクトル検出部611は、選出した第
2次歩行者候補に移動ベクトルがあるか否かを検出す
る。歩行者の影と人物の大きさに近い標識や植栽などの
影とを区別する場合には、標識や植栽などは動くことが
ないので、最初に歩行者らしき影を検出した画像と、次
以降に検出した影の画像を重ね合せ、影の移動した方向
を移動ベクトルと定義し、この移動ベクトルが発生した
場合に歩行者と判定する。ただし、この時、自車両は走
行中であるので、当然標識や植栽などの静止物も手前に
向かって移動するように見えるので考慮しなければなら
ない。
【0028】歩行者判定部612は、第2次歩行者候補
に移動ベクトルがあれば、第2次歩行者候補を歩行者と
判定する。ただし、ミリ波レーダ或いはレーザレーダを
用いて自車両前方の車両を検出する車間距離センサ4が
前方車両が任意の車間距離で走行していると検知した場
合には、前方車両と歩行者とを区別するために、歩行者
判定部612は機能しないように構成されている。
【0029】危険度検出部613は、車速センサ5から
の自車両の車速度と、歩行者判定部612で判定した歩
行者の座標とに基づいて、自車両が歩行者に衝突するま
での時間を計測し、自車両が安全に停止できるかどうか
の算出を行い、衝突または接触する危険の度合いを検出
する。そして、検出した危険度に応じて、ブレーキ制御
装置7やアクセル制御装置8を制御することにより車両
走行を制御し、或いは警告器9が発する警告音やインジ
ケータ10によってドライバーに危険を警告する。
【0030】検出領域設定部604、領域内温度差検出
部605、歩行者候補絞込み部606、歩行者候補大き
さ推測部607、領域内影検出部608、物体の大きさ
推測部609、歩行者候補選出部610、移動ベクトル
検出部611、歩行者判定部612、危険度検出部61
3は、各々メモリに記録されたプログラムとプロセッサ
を有する処理装置6内蔵のコンピュータで実現できる。
【0031】次に、図2、図5を用いて、歩行者検出の
具体例を、以下説明する。
【0032】図2は、図1の車両の安全運転支援システ
ムの処理動作のフローチャートを示し、図5は、可視光
画像センサ1による車両前方画像例である。
【0033】本処理動作は、検出物を前方車両と歩行者
その他と区別するために、車間距離センサ4において相
対速度を持つ物体を前方車両とみなし、その前方車両と
の車間距離が一定以上あった場合、或いは前方車両を検
出しない場合を、トリガとして起動する。
【0034】始めにステップS1で、可視光画像センサ
1からの画像データを取込み、自車両前方の道路上の所
定領域を歩行者検出領域に設定する、例えば、図5に示
すように、自車が走行中の車線から中央側と路肩側の白
線20とを検出し、両白線内を歩行者検出領域21(図
5の斜線部)と設定する。
【0035】次に、車速データを車速センサ5から取込
み(ステップS2)、熱画像データを熱画像センサ2か
ら取込む(ステップS3)。
【0036】次に、ステップS4で熱画像データによる
歩行者検知領域21内の温度が歩行者の体温を検出でき
ないような温度範囲、すなわち歩行者の体温とほぼ同じ
温度であれば、影検出ルーチンへ移行する(ステップS
5)。それ以外は通常検出ルーチンへ移行する(ステッ
プS6)。
【0037】次に、ステップS7において、ステップS
5またはステップS6のルーチンで歩行者検出のフラグ
を立てていれば、危険度算出処理に移行する(ステップ
S8)。危険度算出処理では、ステップS4で取込んだ
車速データおよび歩行者データの画像上の座標と、前画
面や前々画面等から得られる歩行者の移動ベクトルの情
報とから、歩行者と自車両の衝突または接触する危険度
を算出する。
【0038】次に、ステップS8で算出した危険度に応
じて、車両へのフィードバック処理を行い、警告音9ま
たはインジケータ10によってドライバーに注意を促し
たり、ブレーキ制御装置7やアクセル制御装置8を動作
させることにより、車両走行を制御する(ステップS
9)。
【0039】ステップS10では、IGN OFF或い
は上位システムでの終了コマンドが入力されなければ、
ステップS1に戻ってプログラムを繰り返す。
【0040】図3と図5を用いて、通常検出ルーチンに
ついて、説明する。
【0041】図3は、図2の通常検出ルーチンの処理動
作のフローチャートを示す。
【0042】図2のステップS4で歩行者の体温が検出
できる温度範囲であれば、ステップS21で、熱画像デ
ータから得られる温度分布にて歩行者の体温付近の温度
データを検出し、第1次歩行者候補の絞り込みを行う。
次に可視光画像センサ1から可視光画像データの取込み
を行う(ステップS22)。次に歩行者検出領域21内
のエッジを抽出する(ステップS23)。エッジとは予
め設定してある画素間同士の濃度差である。
【0043】次に、ステップS21で得られた第1次歩
行者候補とステップS23で得られたエッジの重ね合わ
せを行う(ステップS24)。エッジが温度を有しない
ものであれば、第1次歩行者候補から外す。横断歩道2
2などの道路標示や建物の影23は第1次歩行者候補か
ら外れることになる。
【0044】次に、温度を有する物体(第1次歩行者候
補)の大きさを歩行者検出領域21の座標から推測して
人物大の大きさであれば第2次歩行者候補とする(ステ
ップS25)。
【0045】次に、一つ前の画像と比較を行い(ステッ
プS26)、この第2次歩行者候補に移動ベクトル24
を認識した場合(ステップS27)、歩行者と判定し、
歩行者検出フラグをセットする(ステップS28)。次
に、取り込んだ画像及び検出結果をメモリへ転送し、メ
インルーチンへ戻る(ステップS29)。
【0046】図4と図5を用いて、影検出ルーチンにつ
いて、説明する。
【0047】図4は、図2の影検出ルーチンの処理動作
のフローチャートを示す。
【0048】図2のステップS4で歩行者の体温が検出
できないような温度範囲であれば、ステップS41で可
視光画像検出センサ1から画像データを取り込み、歩行
者検出領域21内の黒レベルから影を検出する(ステッ
プS42)。
【0049】次にナビゲーションシステム3から方位を
(ステップS43)、かつリアルタイムクロック614
から日時、時刻データを取込んで(ステップS44)、
歩行者候補の画像上の座標と影の長さから物体の大きさ
を推測し(ステップS45)、人物大であれば歩行者候
補とする。
【0050】次に、一つ前の画像と比較を行い(ステッ
プS46)、この歩行者候補に移動ベクトル24を認識
した場合(ステップS47)、歩行者と判定し、歩行者
検出フラグをセットする(ステップS48)。次に取り
込んだ画像、検出結果をメモリへ転送し、メインルーチ
ンへ戻る(ステップS49)。
【0051】本実施の形態例によれば、路面温度と歩行
者の温度に差異があるときだけでなく、例えば真夏の日
の当たる路面など、路面温度が歩行者と同じ位の温度に
なるときでも、歩行者をより高精度に検出することがで
きる。
【0052】また、検出した歩行者に車両が衝突または
接触する危険の度合いを検出し、該検出した危険度に応
じて、車両の走行を制御することができる。
【0053】
【発明の効果】本発明によれば、歩行者周辺の温度条件
に影響されることなく、より正確に歩行者を検出できる
ので、車両走行の安全性の向上に寄与することができ
る。
【図面の簡単な説明】
【図1】本発明の一実施の形態例に係る車両の安全運転
支援システムの全体構成ブロック図である。
【図2】図1の車両の安全運転支援システムの処理動作
のフローチャート図である。
【図3】図2の通常検出ルーチンの処理動作のフローチ
ャート図である。
【図4】図2の影検出ルーチンの処理動作のフローチャ
ート図である。
【図5】可視光画像センサによる車両前方画像例であ
る。
【符号の説明】
1…可視光画像センサ、2…熱画像センサ、3…ナビゲ
ーションシステム、4…車間距離センサ、5…車速セン
サ、6…処理装置、7…ブレーキ制御装置、8…アクセ
ル制御装置、9…警報機、10…インジケータ、20…
白線、21…歩行者検出領域、22…横断歩道、23…
影、24…移動ベクトル、601,602…AD変換
器、603…インターフェース回路、604…検出領域
設定部、605…領域内温度差検出部、606…歩行者
候補絞込み部、607…歩行者候補大きさ推測部、60
8…領域内影検出部、609…物体の大きさ推測部、6
10…歩行者候補選出部、611…移動ベクトル検出
部、612…歩行者判定部、613…危険度検出部、6
14…リアルタイムクロック
───────────────────────────────────────────────────── フロントページの続き (51)Int.Cl.7 識別記号 FI テーマコート゛(参考) B60R 21/00 624 B60R 21/00 624Z 626 626B 626D 627 627 G06T 1/00 330 G06T 1/00 330B 450 450B (72)発明者 門司 竜彦 茨城県ひたちなか市大字高場2520番地 株 式会社日立製作所自動車機器グループ内 (72)発明者 古沢 勲 茨城県ひたちなか市大字高場2520番地 株 式会社日立製作所自動車機器グループ内 (72)発明者 紺井 満 茨城県ひたちなか市高場2477番地 株式会 社日立カーエンジニアリング内 Fターム(参考) 5B047 AA07 AA19 BB06 CB03 CB09 CB12 CB22 DC09 5B057 AA16 BA02 BA08 CB12 CC03 DA02 DA15 DA16 DB03 DC36 5H180 AA01 AA21 BB15 CC02 CC03 CC04 CC14 FF03 LL01 LL07 LL08 LL09

Claims (4)

    【特許請求の範囲】
  1. 【請求項1】車両の走行方向の歩行者を検出し、該検出
    した歩行者の状態に応じて前記車両の走行を制御する車
    両の安全運転支援システムにおいて、 前記車両の走行方向の可視画像データを取り込む可視光
    画像センサと、前記車両の走行方向の熱画像データを取
    り込む熱画像センサと、前記取り込んだ可視画像データ
    を基に歩行者検出領域を設定する検出領域設定部と、前
    記取り込んだ熱画像データを基に前記歩行者検出領域内
    の各物体の温度差を検出する領域内温度差検出部と、前
    記検出した温度差が前記歩行者の体温が検出できる温度
    差であるとき、前記温度差に基づいて前記各物体の中か
    ら前記歩行者候補を検出する第1の検出部と、前記検出
    した温度差が前記歩行者の体温が検出できない温度差で
    あるとき、前記各物体の影の形状から前記歩行者候補を
    検出する第2の検出部と、前記第1の検出部あるいは前
    記第2の検出部で検出した前記歩行者候補に移動ベクト
    ルがあるか否かを検出し、前記移動ベクトルがあれば前
    記歩行者候補を前記歩行者と判定する判定部とを有する
    ことを特徴とする車両の安全運転支援システム。
  2. 【請求項2】車両の走行方向の歩行者を検出し、該検出
    した歩行者の状態に応じて前記車両の走行を制御する車
    両の安全運転支援システムにおいて、 前記車両の走行方向の可視画像データを取り込む可視光
    画像センサと、前記車両の走行方向の熱画像データを取
    り込む熱画像センサと、前記取り込んだ可視画像データ
    を基に歩行者検出領域を設定する検出領域設定部と、前
    記取り込んだ熱画像データを基に前記歩行者検出領域内
    の各物体の温度差を検出する領域内温度差検出部と、前
    記検出した温度差が前記歩行者の体温が検出できる温度
    差であるとき、前記歩行者検出領域内の歩行者体温付近
    の温度データを検出し、前記温度データをもつ物体を第
    1次歩行者候補として絞り込む歩行者候補絞込み部と、
    前記第1次歩行者候補として絞り込まれた物体の大きさ
    を前記歩行者検出領域の座標から推測する歩行者候補大
    きさ推測部と、前記検出した温度差が前記歩行者の体温
    が検出できない温度差であるとき、前記可視画像データ
    に基づき、前記歩行者検出領域内の物体の影の長さを検
    出する領域内影検出部と、前記検出された影の長さから
    影を作り出している物体の大きさを推測する物体の大き
    さ推測部と、前記歩行者候補大きさ推測部あるいは前記
    物体の大きさ推測部で推測した物体の大きさが人物大の
    大きさであれば前記物体を第2次歩行者候補として選出
    する歩行者候補選出部と、前記選出した第2次歩行者候
    補に移動ベクトルがあるか否かを検出する移動ベクトル
    検出部と、前記第2次歩行者候補に移動ベクトルがあれ
    ば、歩行者と判定する歩行者判定部と、前記判定した歩
    行者に前記車両が衝突または接触する危険の度合いを検
    出する危険度検出部とを有することを特徴とする車両の
    安全運転支援システム。
  3. 【請求項3】請求項2において、前記物体の大きさ推測
    部は、前記検出された影の長さと、前記車両に備えられ
    た方位センサから入力された方位と、リアルタイムクロ
    ックから取込んだ日時及び時刻データと、前記歩行者検
    出領域の座標とに基づいて、前記影を作り出している物
    体の大きさを推測することを特徴とする車両の安全運転
    支援システム。
  4. 【請求項4】請求項2において、前記危険度検出部は、
    前記車両の車速度と前記判定した歩行者の座標とに基づ
    いて前記車両が前記歩行者に衝突または接触する危険の
    度合いを検出し、該検出した危険度に応じて、前記車両
    の走行を制御することを特徴とする車両の安全運転支援
    システム。
JP2000259506A 2000-08-29 2000-08-29 車両の安全運転支援システム Expired - Lifetime JP3574780B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2000259506A JP3574780B2 (ja) 2000-08-29 2000-08-29 車両の安全運転支援システム

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2000259506A JP3574780B2 (ja) 2000-08-29 2000-08-29 車両の安全運転支援システム

Publications (2)

Publication Number Publication Date
JP2002074595A true JP2002074595A (ja) 2002-03-15
JP3574780B2 JP3574780B2 (ja) 2004-10-06

Family

ID=18747680

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2000259506A Expired - Lifetime JP3574780B2 (ja) 2000-08-29 2000-08-29 車両の安全運転支援システム

Country Status (1)

Country Link
JP (1) JP3574780B2 (ja)

Cited By (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004257924A (ja) * 2003-02-27 2004-09-16 Nissan Motor Co Ltd 対象物検出装置
JP2005212609A (ja) * 2004-01-29 2005-08-11 Denso Corp 運転支援装置
JP2005234694A (ja) * 2004-02-17 2005-09-02 Fuji Heavy Ind Ltd 車外監視装置
JP2006315482A (ja) * 2005-05-11 2006-11-24 Mazda Motor Corp 車両用移動物体検出装置
JP2007264732A (ja) * 2006-03-27 2007-10-11 Mazda Motor Corp 車両用方向者検出装置
JP2007295043A (ja) * 2006-04-20 2007-11-08 Matsushita Electric Ind Co Ltd 車両周囲監視装置
WO2010029592A1 (ja) * 2008-09-09 2010-03-18 三菱電機株式会社 車両周囲監視装置
EP2333742A1 (en) 2009-12-10 2011-06-15 Hitachi, Ltd. Vehicle support systems for pedestrians to cross roads and support methods for pedestrians to cross roads
JP2012141740A (ja) * 2010-12-28 2012-07-26 Clarion Co Ltd 車両用外界認識装置およびそれを用いた車両システム
US8538902B2 (en) 2007-08-27 2013-09-17 Toyota Jidosha Kabushiki Kaisha Behavior predicting device that predicts the behavior of an object based on characteristic values of the object
JP2013184498A (ja) * 2012-03-06 2013-09-19 Nissan Motor Co Ltd 車両走行支援装置
JP2014028555A (ja) * 2012-07-31 2014-02-13 Nissan Motor Co Ltd 車両走行支援装置及び車両走行支援方法
KR101736472B1 (ko) * 2012-08-27 2017-05-16 한화테크윈 주식회사 영상 감시 장치 및 방법
JP2018005793A (ja) * 2016-07-07 2018-01-11 株式会社デンソー 歩行者検出装置、歩行者検出方法
CN108082107A (zh) * 2017-12-19 2018-05-29 奇瑞汽车股份有限公司 信息提醒方法、装置及计算机可读存储介质
JP2019500695A (ja) * 2015-12-16 2019-01-10 ヴァレオ・シャルター・ウント・ゼンゾーレン・ゲーエムベーハー 自動車両の周囲領域内の物体を識別する方法、運転者支援システム、及び自動車両
US11320830B2 (en) 2019-10-28 2022-05-03 Deere & Company Probabilistic decision support for obstacle detection and classification in a working area
WO2023053355A1 (ja) * 2021-09-30 2023-04-06 株式会社Subaru 運転支援装置及び車両並びにコンピュータプログラムを記録した記録媒体

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4775277B2 (ja) * 2007-02-07 2011-09-21 株式会社デンソー 画像処理装置及び画像処理方法
JP5077017B2 (ja) * 2008-03-28 2012-11-21 株式会社豊田中央研究所 運転支援装置及び歩行者検出装置

Cited By (27)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004257924A (ja) * 2003-02-27 2004-09-16 Nissan Motor Co Ltd 対象物検出装置
JP2005212609A (ja) * 2004-01-29 2005-08-11 Denso Corp 運転支援装置
JP2005234694A (ja) * 2004-02-17 2005-09-02 Fuji Heavy Ind Ltd 車外監視装置
US7567687B2 (en) 2004-02-17 2009-07-28 Fuji Jukogyo Kabushiki Kaisha Outside-vehicle monitoring system
JP2006315482A (ja) * 2005-05-11 2006-11-24 Mazda Motor Corp 車両用移動物体検出装置
JP4661339B2 (ja) * 2005-05-11 2011-03-30 マツダ株式会社 車両用移動物体検出装置
JP2007264732A (ja) * 2006-03-27 2007-10-11 Mazda Motor Corp 車両用方向者検出装置
JP2007295043A (ja) * 2006-04-20 2007-11-08 Matsushita Electric Ind Co Ltd 車両周囲監視装置
US8538902B2 (en) 2007-08-27 2013-09-17 Toyota Jidosha Kabushiki Kaisha Behavior predicting device that predicts the behavior of an object based on characteristic values of the object
JP5295254B2 (ja) * 2008-09-09 2013-09-18 三菱電機株式会社 車両周囲監視装置
WO2010029592A1 (ja) * 2008-09-09 2010-03-18 三菱電機株式会社 車両周囲監視装置
EP2333742A1 (en) 2009-12-10 2011-06-15 Hitachi, Ltd. Vehicle support systems for pedestrians to cross roads and support methods for pedestrians to cross roads
US8749401B2 (en) 2009-12-10 2014-06-10 Hitcha, Ltd. Vehicle support systems for pedestrians to cross roads and support methods for pedestrians to cross roads
US8957789B2 (en) 2009-12-10 2015-02-17 Hitachi, Ltd. Vehicle support systems for pedestrians to cross roads and support methods for pedestrians to cross roads
JP2012141740A (ja) * 2010-12-28 2012-07-26 Clarion Co Ltd 車両用外界認識装置およびそれを用いた車両システム
JP2013184498A (ja) * 2012-03-06 2013-09-19 Nissan Motor Co Ltd 車両走行支援装置
JP2014028555A (ja) * 2012-07-31 2014-02-13 Nissan Motor Co Ltd 車両走行支援装置及び車両走行支援方法
KR101736472B1 (ko) * 2012-08-27 2017-05-16 한화테크윈 주식회사 영상 감시 장치 및 방법
JP2019500695A (ja) * 2015-12-16 2019-01-10 ヴァレオ・シャルター・ウント・ゼンゾーレン・ゲーエムベーハー 自動車両の周囲領域内の物体を識別する方法、運転者支援システム、及び自動車両
US10635896B2 (en) 2015-12-16 2020-04-28 Valeo Schalter Und Sensoren Gmbh Method for identifying an object in a surrounding region of a motor vehicle, driver assistance system and motor vehicle
JP2018005793A (ja) * 2016-07-07 2018-01-11 株式会社デンソー 歩行者検出装置、歩行者検出方法
WO2018008314A1 (ja) * 2016-07-07 2018-01-11 株式会社デンソー 歩行者検出装置、歩行者検出方法
US11011062B2 (en) 2016-07-07 2021-05-18 Denso Corporation Pedestrian detection apparatus and pedestrian detection method
CN108082107A (zh) * 2017-12-19 2018-05-29 奇瑞汽车股份有限公司 信息提醒方法、装置及计算机可读存储介质
CN108082107B (zh) * 2017-12-19 2019-07-09 奇瑞汽车股份有限公司 信息提醒方法、装置及计算机可读存储介质
US11320830B2 (en) 2019-10-28 2022-05-03 Deere & Company Probabilistic decision support for obstacle detection and classification in a working area
WO2023053355A1 (ja) * 2021-09-30 2023-04-06 株式会社Subaru 運転支援装置及び車両並びにコンピュータプログラムを記録した記録媒体

Also Published As

Publication number Publication date
JP3574780B2 (ja) 2004-10-06

Similar Documents

Publication Publication Date Title
JP3574780B2 (ja) 車両の安全運転支援システム
US8175331B2 (en) Vehicle surroundings monitoring apparatus, method, and program
JP5971341B2 (ja) 物体検出装置及び運転支援装置
EP2463843B1 (en) Method and system for forward collision warning
JP3463858B2 (ja) 周辺監視装置及び方法
JP3766909B2 (ja) 走行環境認識方法および装置
JP3580475B2 (ja) 周辺監視装置
US8615109B2 (en) Moving object trajectory estimating device
EP3477614B1 (en) Vehicle control method and vehicle control device
JP3450189B2 (ja) 歩行者検知システム及びその制御方法
US10525873B2 (en) Turn by turn activation of turn signals
US20150338516A1 (en) Object recognition apparatus and vehicle
CN113264047B (zh) 车辆控制装置及存储车辆控制用程序的非易失性存储介质
JP4764278B2 (ja) 衝突危険度判定装置、衝突危険度判定方法及び歩行者識別方法
CN105128836A (zh) 自主紧急制动系统及其中识别行人的方法
JP2004531424A (ja) 車用の感知装置
KR101103526B1 (ko) 스테레오 카메라를 이용한 충돌회피 방법
US8214087B2 (en) Object specifying device for a vehicle
JP6129268B2 (ja) 車両用運転支援システムおよび運転支援方法
JP6970547B2 (ja) 車両制御装置及び車両制御方法
JP2004268829A (ja) 車両用歩行者衝突危険判定装置
CN112389392B (zh) 车辆主动制动方法、装置、设备及存储介质
KR20190102827A (ko) 교차로에서의 차량 자동 긴급 제동 시스템 및 방법
JP5593217B2 (ja) 車両用外界認識装置およびそれを用いた車両システム
JP4235090B2 (ja) 車両走行支援装置

Legal Events

Date Code Title Description
A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20040217

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20040415

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20040608

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20040705

R150 Certificate of patent or registration of utility model

Ref document number: 3574780

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20070709

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20080709

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20080709

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20090709

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20090709

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100709

Year of fee payment: 6

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100709

Year of fee payment: 6

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110709

Year of fee payment: 7

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110709

Year of fee payment: 7

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120709

Year of fee payment: 8

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130709

Year of fee payment: 9

EXPY Cancellation because of completion of term