JP2003162710A - 移動物体の認識装置及び認識方法 - Google Patents

移動物体の認識装置及び認識方法

Info

Publication number
JP2003162710A
JP2003162710A JP2001360252A JP2001360252A JP2003162710A JP 2003162710 A JP2003162710 A JP 2003162710A JP 2001360252 A JP2001360252 A JP 2001360252A JP 2001360252 A JP2001360252 A JP 2001360252A JP 2003162710 A JP2003162710 A JP 2003162710A
Authority
JP
Japan
Prior art keywords
edge
image
guardrail
unit
moving object
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2001360252A
Other languages
English (en)
Other versions
JP4070448B2 (ja
Inventor
Hitoomi Takizawa
仁臣 滝澤
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Daihatsu Motor Co Ltd
Original Assignee
Daihatsu Motor Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Daihatsu Motor Co Ltd filed Critical Daihatsu Motor Co Ltd
Priority to JP2001360252A priority Critical patent/JP4070448B2/ja
Publication of JP2003162710A publication Critical patent/JP2003162710A/ja
Application granted granted Critical
Publication of JP4070448B2 publication Critical patent/JP4070448B2/ja
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Landscapes

  • Image Processing (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Traffic Control Systems (AREA)
  • Image Analysis (AREA)

Abstract

(57)【要約】 【課題】エイリアシングによる移動物体の誤認識を防止
できるようにする。 【解決手段】エッジ間隔一定のガードレール候補として
のエッジ列が検出されると(S1のYES)、ωs−2
×ωg>0(但し、ωsは画像のサンプリング周期、ω
gはエッジの出現周期)の式が成立してエイリアシング
が起きないときには(S4のYES)、拡大焦点を通る
探索ラインをプラス(+)、マイナス(−)の両方向に
探索され(S5)、上記し式が成立せずにエイリアシン
グが起きるときには(S4のNO)、探索ラインをマイ
ナス(−)方向にのみ探索される(S8)。そして、探
索方向でエッジの大多数の3次元座標における移動後の
位置が一致するときには(S6のYES、S9のYE
S)、ガードレール候補としてのエッジ列がガードレー
ルと認識されて移動物体としての検出対象から除外され
る(S7)。

Description

【発明の詳細な説明】
【0001】
【発明の属する技術分野】この発明は、走行中に自車に
搭載した撮像手段により自車後方を撮像し、得られた画
像を処理して自車後側方の移動物体を認識する移動物体
の認識装置及び認識方法に関する。
【0002】
【従来の技術】従来、自車の走行中に、自車に搭載した
撮像手段により後方を撮像して得られる画像を処理し、
あるフレーム画像とその所定時間後のフレーム画像の変
化から同一点の動きを表わすオプティカルフローを導出
し、このオプティカルフローから自車の後側方における
移動物体を識別して車両か路側構造物かを認識すること
が行われている。このとき、オプティカルフローの計算
手法として、勾配法や相関演算法があり、ハードウェア
化が容易である点から後者の相関演算法がよく利用され
ている。
【0003】この相関演算法は、テンプレートマッチン
グ法とも呼ばれ、画像中に対象物の動きベクトル、つま
りオプティカルフローを計算するのに利用される手法で
あり、例えば図3に示すように、所定時間相前後した2
つのフレーム画像(時刻tと時刻t+1のフレーム画
像)に対して、 D(u,v)=Σx,y∈R|I(x,y)−If+1(x+u,y+v)| …(1) で定義される各画素毎の輝度差の和、つまり残差D
(u,v)が最小となるかどうかを探索し、最小となれ
ばそのときの移動ベクトル(u,v)をもって、その座
標位置(x,y)での対象物の動き量とするものであ
る。
【0004】尚、上記(1) 式において、fはフレーム、
Rは参照画像領域、I(x,y)はフレームfでの画
像上での座標(x,y)での輝度、If+1(x+u,
y+v)はフレームf+1での画像上での座標(x+
u,y+v)での輝度である。
【0005】
【発明が解決しようとする課題】ところで、このような
相関演算法の場合、その原理的な特性から、サンプリン
グ点からもとの信号を正しく再現できなくなる現象、つ
まりエイリアシングが生じる。
【0006】例えば、図4に示すように、撮像手段によ
る撮像画像中にガードレールが存在するときに、そのガ
ードレールを構成する各ポールは等間隔で並んでおり、
ガードレールは、自車速と同じ大きさの速度で自車とは
逆方向に相対的に移動するにも拘わらず、実際の相対速
度とは異なる相対速度で移動するものと判断してしま
い、ガードレールを移動物体と誤認識することがあると
いう問題があった。
【0007】具体例で説明すると、撮像手段による画像
のサンプリング周期をωs[Hz](10〜30H
z)、自車速V[m/s]及びガードレールのポール間
隔Dg[m]で決まる画像上でのガードレールの移動周
期をωg[Hz](=V/Dg)とすると、この移動周
期ωgが、 ωs−2×ωg>0…(2) の関係を満たさないときには、画像処理におけるテンプ
レートマッチングでミスマッチングが生じる。例えば、
自車速Vが60[km/h]でガードレールのポール間
隔Dgが1[m]のとき、移動周期ωgは16.7[H
z]となり、サンプリングレートωsが30[Hz]で
あっても、上記した(2) 式を満たさずにエイリアシング
が起きる。
【0008】そして、図5(a)に示すように時刻tに
おけるガードレールのポールの各エッジのオプティカル
フローは、本来同図(b)に示すように、次の時刻t+
1において拡大焦点(Focus of Expansion)Fに向かうべ
き(図5(b)中の太線矢印)であるのに対し、追い越
し車両と同様、拡大焦点Fから離れる方向に向かう(図
5(b)中の細線矢印)と誤認され、そのオプティカル
フローに対応する物体が、追い越し車両と同様、拡大焦
点Fから離れる方向に移動する移動物体と誤って判断さ
れるという現象が生じるのである。
【0009】そこで、本発明は、エイリアシングによる
移動物体の誤認識を防止可能な、信頼性の高い移動物体
の認識装置及びその方法を提供することを目的とする。
【0010】
【課題を解決するための手段】上記した目的を達成する
ために、本発明にかかる移動物体の認識装置は、走行中
に自車に搭載した撮像手段により自車後方を撮像し、得
られた画像を処理して自車後側方の移動物体を認識する
移動物体の認識装置において、前記撮像手段による原画
像の全画素の濃度を微分処理して得られた全画素につい
ての濃度微分値を2値化しエッジパターンから成る微分
2値化画像を形成する2値化部と、前記2値化部による
前記微分2値化画像中に、撮像方向を示す1点に対応す
る拡大焦点からの放射ライン上に並ぶエッジ列のうち、
エッジ間隔が一定のエッジ列があればそのエッジ列をガ
ードレール候補として検出する検出部と、前記検出部に
より前記ガードレール候補として検出される前記エッジ
列の各エッジの出現周期を求め、前記撮像手段による画
像のサンプリング周期と前記出現周期の2倍との差がゼ
ロより大きいかどうか比較する比較部と、前記比較部よ
り前記差がゼロより大きいと判断されると、前記拡大焦
点から離れるプラス方向及び前記拡大焦点に向かうマイ
ナス方向の両方向に探索を行い、前記エッジ列における
大多数のエッジの3次元座標における移動後の位置が前
記両方向のいずれかで一致するかどうか判定し、前記差
がゼロより小さいと判断されると、前記マイナス方向に
のみ探索を行い、前記エッジ列における大多数のエッジ
の3次元移動量が前記マイナス方向で一致するかどうか
判定する判定部と、前記判定部により一致すると判定さ
れれば、前記ガードレール候補としての前記エッジ列を
ガードレールと判断して移動物体としての検出対象から
除外する処理部とを備えていることを特徴としている。
【0011】このような構成によれば、検出部により、
エッジ間隔が一定のエッジ列がガードレール候補として
検出されると、比較部により、画像のサンプリング周期
と、ガードレール候補のエッジ列におけるエッジの出現
周期の2倍との差がゼロより大きいかどうかの比較がな
される。
【0012】そして、この差がゼロより大きければ、判
定部により、プラス方向及びマイナス方向の両方向に探
索が行われて、ガードレール候補としてのエッジ列にお
ける大多数のエッジの3次元座標における移動後の位置
が両方向のいずれかで一致するかどうか判定される一
方、差がゼロより小さければ、判定部により、マイナス
方向にのみ探索を行い、エッジ列における大多数のエッ
ジの3次元移動量がマイナス方向で一致するかどうか判
定され、その結果一致すると判定されるときには、処理
部により、ガードレール候補としてのエッジ列がガード
レールと判断されて移動物体としての検出対象から除外
される。
【0013】そのため、エイリアシングが起きるおそれ
のあるガードレールを移動物体としての検出対象から確
実に除外することができ、エイリアシングによる移動物
体の誤認識を未然に防止することができる。
【0014】また、本発明にかかる移動物体の認識装置
は、前記検出部が、2次元の前記微分2値化画像中を3
次元座標に変換し、地面上に逆投影したときの各エッジ
の間隔を導出し、導出した間隔が一定かどうかによって
前記ガードレール候補としての前記エッジ列を検出する
ことを特徴としている。
【0015】このような構成によれば、ガードレール候
補のエッジ列におけるエッジ間隔が一定かどうか判断す
る際に、微分2値化画像を3次元変換して地面上に逆投
影したときの各エッジの間隔が一定かどうか判断するた
め、エッジ間隔が一定のガードレール候補としてのエッ
ジ列を的確に検出することができる。
【0016】また、本発明にかかる移動物体の認識装置
は、自車の車速を検出する車速検出部を備え、前記比較
部が、前記検出部によるエッジ間隔と前記車速検出部に
よる自車速とから前記出現周期を求めることを特徴とし
ている。
【0017】このような構成によれば、ガードレールか
どうかを判断する根拠となるためのエッジの出現周期
を、エッジ間隔と車速検出部による自車速とから求める
ため、ガードレール候補としてのエッジ列を精度よく検
出することができる。
【0018】また、本発明にかかる移動物体の認識装置
は、前記処理部により、ガードレールと認識された前記
エッジ列が検出対象から除外されている旨、または前記
撮像手段による画像中にガードレールと認識したものが
存在する旨を報知する報知部を備えていることを特徴と
している。
【0019】このような構成によれば、ガードレールと
判断されたエッジ列が除外された旨、または画像中にガ
ードレールと判断したものが存在する旨が報知部により
報知されるため、この報知から、ユーザは少なくとも撮
像手段による画像中にガードレールが含まれていること
を知ることができる。
【0020】また、本発明にかかる移動物体の認識方法
は、前記撮像手段による原画像の全画素の濃度を微分処
理して得られた全画素についての濃度微分値を2値化し
エッジパターンから成る微分2値化画像を形成する2値
化工程と、前記2値化部による前記微分2値化画像中
に、撮像方向を示す1点に対応する拡大焦点からの放射
ライン上に並ぶエッジ列のうち、エッジ間隔が一定のエ
ッジ列があればそのエッジ列をガードレール候補として
検出する検出工程と、前記検出工程により前記ガードレ
ール候補として検出される前記エッジ列の各エッジの出
現周期を求め、前記撮像手段による画像のサンプリング
周期と前記出現周期の2倍との差がゼロより大きいかど
うか比較する比較工程と、前記差がゼロより大きいとき
に、前記拡大焦点から離れるプラス方向及び前記拡大焦
点に向かうマイナス方向の両方向に探索を行い、前記エ
ッジ列における大多数のエッジの3次元座標における移
動後の位置が前記両方向のいずれかで一致するかどうか
判定し、前記差がゼロより小さいときに、前記マイナス
方向にのみ探索を行い、前記エッジ列における大多数の
エッジの3次元移動量が前記マイナス方向で一致するか
どうか判定する判定工程と、前記判定工程により一致す
ると判定されれば、前記ガードレール候補としての前記
エッジ列をガードレールと判断して移動物体としての検
出対象から除外する処理工程とを含むことを特徴として
いる。
【0021】このような構成によれば、エッジ間隔が一
定のエッジ列がガードレール候補として検出されると、
画像のサンプリング周期と、ガードレール候補のエッジ
列におけるエッジの出現周期の2倍との差がゼロより大
きいかどうかの比較がなされ、この差がゼロより大きけ
れば、プラス方向及びマイナス方向の両方向への探索に
より、ガードレール候補としてのエッジ列における大多
数のエッジの3次元座標における移動後の位置が両方向
のいずれかで一致するかどうか判定される一方、差がゼ
ロより小さければマイナス方向のみの探索により、エッ
ジ列における大多数のエッジの3次元移動量がマイナス
方向で一致するかどうか判定され、その結果一致すると
判定されるときには、ガードレール候補としてのエッジ
列がガードレールと判断されて移動物体としての検出対
象から除外される。
【0022】そのため、エイリアシングが起きるおそれ
のあるガードレールを移動物体としての検出対象から確
実に除外することができ、エイリアシングによる移動物
体の誤認識を未然に防止することができる。
【0023】
【発明の実施の形態】この発明の一実施形態について図
1及び図2を参照して説明する。但し、図1はブロック
図、図2は動作説明図である。
【0024】図1に示すように、自車に撮像手段として
の単眼CCDカメラ1が搭載され、このCCDカメラ1
により自車の後方及び後側方が撮像され、得られた各時
刻毎のフレーム画像がCPU2によりRAM等から成る
メモリ3に保存される。そして、CPU2はサンプリン
グ周期毎に得られるフレーム画像を処理して画像中の対
象物のオプティカルフローを計算してその移動量を求
め、その対象物が車両かどうか認識する。尚、4は自車
の車速を検出する車速検出部としての車輪速センサ、5
はCPU2の制御により所定の報知を行う報知部であ
り、例えばブザーや表示ランプ、ディスプレイまたは音
声合成装置等により構成される。
【0025】即ち、CPU2により、各フレーム画像に
ついて、走行中の自車から撮像方向を示す1点に対応す
る拡大焦点(例えば、図5中のFを参照)を通り放射状
に複数の探索ラインが設定されて、これら各探索ライン
上にそれぞれ複数の計算点が定められる。
【0026】このとき、CPU2により、CCDカメラ
1によるフレーム画像の全画素の濃度が微分処理され、
得られた全画素についての濃度微分値が2値化されてエ
ッジパターンから成る微分2値化画像が形成される。こ
のようなCPU2による2値化処理が2値化部に相当す
る。
【0027】そして、CPU2の2値化処理による微分
2値化画像中に、拡大焦点からの放射状の探索ライン上
に並ぶエッジ列が存在するときに、それらエッジ列のエ
ッジ間隔が導出され、一定間隔のエッジ列があるときに
は、そのエッジ列がガードレール候補として検出され
る。その際、2次元の微分2値化画像中が、周知の2次
元−3次元変換の手法により3次元座標に変換され、地
面上に逆投影したときの各エッジの間隔Dg[m]が導
出され、導出された間隔Dgが一定かどうかが判断され
るようになっている。このようなCPU2によるガード
レール候補の検出処理が検出部に相当する。
【0028】更に、CPU2により、ガードレール候補
としてのエッジ列が検出されると、そのときに導出され
たエッジ間隔Dgと車輪速センサ4による自車速V[m
/s]とから、そのガードレール候補としてのエッジ列
の各エッジの出現周期ωg[Hz](=V/Dg)が求
められ、CCDカメラ1による画像のサンプリング周期
ωs[Hz]と出現周期ωgの2倍との差Δω(=ωs
−2×ωg)がゼロより大きいかどうか、つまり、上記
した(2) 式の関係を満たすかどうかの比較がなされる。
このようなCPU2による比較処理が比較部に相当す
る。
【0029】また、CPU2より、上記した差Δω(=
ωs−2×ωg)がゼロより大きい、つまり(2) 式の関
係を満たすと判断されると、エイリアシングが起きるお
それはなく、CPU2より、拡大焦点を通る探索ライン
上を拡大焦点から離れるプラス(+)方向及び拡大焦点
に向かうマイナス(−)方向の両方向に探索が行われ、
ガードレール候補としてのエッジ列における大多数のエ
ッジの3次元座標における移動後の位置が、プラス
(+)方向及びマイナス(−)方向の両方向のいずれか
で一致するかどうか判定される。このとき、両方向に探
索するのは、画像中にガードレールとこれに重なる追い
越し車両とが存在することがあると、一方向だけではこ
れらを検出することができず、ガードレールとこれに重
なる追い越し車両を確実に検出するために両方向に探索
を行うのである。
【0030】一方、上記した差Δω(=ωs−2×ω
g)がゼロより小さい、つまり(2) 式の関係を満たさな
いと判断されると、エイリアシングが起きる可能性が高
いため、CPU2より、拡大焦点を通る探索ライン上を
拡大焦点に向かうマイナス(−)方向にのみ探索が行わ
れ、ガードレール候補としてのエッジ列における大多数
のエッジの3次元移動量がマイナス(−)方向で一致す
るかどうか判定される。このとき、拡大焦点に近づくに
連れて、画像上の距離で探索範囲は小さくなっていく。
【0031】ここで、エイリアシングが起きるときに
は、図5で説明したように、拡大焦点から離れるプラス
(+)方向へのオプティカルフローは正常なものではな
く、プラス(+)方向に探索する必要はないことから、
拡大焦点に向かうマイナス(−)にのみ探索すればよ
く、探索に要する処理時間の短縮も図れることになる。
【0032】更に、CPU2による判定処理の結果、一
致するとの判定がなされると、ガードレール候補として
のエッジ列がガードレールであると認識され、ガードレ
ールと認識されたエッジ列が移動物体としての検出対象
から除外される。このようなCPU2による判定処理が
判定部に相当し、CPU2による除外処理が処理部に相
当する。
【0033】また、CPU2により報知部5が制御さ
れ、ガードレールと認識されたエッジ列が検出対象から
除外されている旨、またはCCDカメラ1によるフレー
ム画像中にガードレールと認識したものが存在する旨が
報知される。ここで、報知部5がランプ或いはブザーの
場合には、このランプが点灯し、或いはブザーが鳴動す
ることで、ドライバにこのような現状を報知し、報知部
5がディスプレイや音声合成装置の場合には、現状をメ
ッセージとして表示或いは音声出力すればよい。
【0034】ところで、検出対象から除外されるものが
ない場合には、CPU2により次のようにして通常の相
関演算法による画像処理が行われる。
【0035】即ち、現在より所定時間であるΔt時間前
の時刻tにおける前フレーム画像中のある計算点に、所
定の大きさの参照画像領域が設定されると共に、前フレ
ーム画像から所定時間であるΔt時間後の時刻t+1に
おける現在フレーム画像に、同一の探索ライン上を移動
した位置に参照画像領域が設定され、前フレーム画像の
参照画像領域、及び、現在フレーム画像の参照画像領域
について、上記した(1) 式で定義される各画素毎の輝度
差の和である残差D(u,v)が最小となるかどうか探
索され、最小となればそのときの移動ベクトル(u,
v)をもって、その座標位置(x,y)での対象物の動
き量、つまりその対象物のオプティカルフローとされ
る。
【0036】そして、自車を後方から追い越す追い越し
車両の場合には、拡大焦点から発散する方向のオプティ
カルフロー(u,v)を有し、道路構造物や静止物体等
の場合には拡大焦点に収束する方向のオプティカルフロ
ー(u,v)を有することから、計算により得られたオ
プティカルフロー(u,v)の方向が拡大焦点に収束す
るのか拡大焦点から発散するのかを判断することで、道
路構造物や静止物体であるか追い越し車両であるか大き
く区別することができる。
【0037】更に、オプティカルフロー(u,v)の大
きさが自車速に相当するか自車との相対速度に相当する
かを判断することにより、そのオプティカルフロー
(u,v)に対応する物体が、道路構造物等の静止物体
または自車よりも遅い車両であるか、或いは、自車より
も速い追い越し車両であるか識別することができる。
【0038】次に、一連の画像処理ルーチンについて図
2にフローチャートを参照して説明する。いま、図2に
示すように、CPU2により、フレーム画像の全画素の
濃度が微分処理され、得られた全画素についての濃度微
分値が2値化されてエッジパターンから成る微分2値化
画像を形成され、その微分2値化画像中に、探索ライン
上に並ぶエッジが一定間隔で並ぶエッジ列が存在するか
否かの判定がなされ(S1)、この判定結果がNOであ
れば、上記した通常の相関演算法による画像処理が実行
され(S2)、その後ルーチンは終了する。
【0039】一方、ステップS1の判定結果がYESで
あれば、そのエッジ間隔一定のエッジ列がガードレール
候補として検出されると共に、エッジ間隔Dgと車輪速
センサ4による自車速Vとから、そのエッジ列のエッジ
の出現周期ωgが求められ(S3)、CCDカメラ1に
よるフレーム画像のサンプリング周期ωs[Hz]と出
現周期ωgの2倍との差Δωがゼロより大きいか否か、
つまり上記した(2) 式(ωs−2×ωg>0)が成立す
るか否かの判定がなされる(S4)。
【0040】このステップS4の判定結果がYESであ
れば、そのガードレール候補としてのエッジ列について
はエイリアシングの起きる可能性がないと判断できるこ
とから、CPU2より、拡大焦点から離れるプラス
(+)方向及び拡大焦点に向かうマイナス(−)方向の
両方向に探索が行われ(S5)、そのエッジ列における
大多数のエッジの3次元座標における移動後の位置がプ
ラス(+)及びマイナス(−)方向の両方向のいずれか
で一致するかどうかの判定がなされる(S6)。
【0041】このステップS6の判定結果がNOであれ
ば、そのガードレール候補としてのエッジ列はガードレ
ールではないと判断できるため、上記したステップS2
に移行して通常の相関演算法による画像処理が実行され
(S2)、判定結果がYESであれば、ガードレール候
補としてのエッジ列はガードレールであると判断され、
ガードレールと判断されたエッジ列が移動物体としての
検出対象から除外され(S7)、その後ルーチンは終了
する。
【0042】ところで、上記したステップS4の判定結
果がNO、つまり上記した(2) 式が成立せず、そのガー
ドレール候補としてのエッジ列についてはエイリアシン
グの起きる可能性があると判断できるため、CPU2よ
り、拡大焦点に向かうマイナス(−)方向にのみ探索が
行われ(S8)、ガードレール候補としてののエッジ列
における大多数のエッジの3次元移動量がマイナス
(−)方向で一致するかどうかの判定がなされ(S
9)、この判定結果がYESであれば上記したステップ
S7に移行し、ガードレール候補としてのエッジ列はガ
ードレールであると判断されて移動物体としての検出対
象から除外される(S7)。
【0043】一方、ステップS9の判定結果がNOであ
れば、そのガードレール候補としてのエッジ列はガード
レールではないと判断できるため、上記したステップS
2に移行して通常の相関演算法による画像処理が実行さ
れる(S2)。
【0044】このように、CPU2によりエッジ間隔が
一定のエッジ列がガードレール候補として検出される
と、エイリアシングの起きるるかどうかについて、上記
(2) 式が成立するかどうかの判断が行われ、CPU2に
より、(2) 式が成立してエイリアシングが起きないと判
断されると、拡大焦点を通る放射状の探索ラインをプラ
ス(+)方向及びマイナス(−)方向の両方向に探索さ
れ、ガードレール候補としてのエッジ列における大多数
のエッジの3次元座標における移動後の位置が両方向の
いずれかで一致するかどうか判定される。
【0045】一方、CPU2により、上記(2) 式が成立
せずエイリアシングが起きると判断されると、探索ライ
ンをマイナス(−)方向にのみ探索され、エッジ列にお
ける大多数のエッジの3次元移動量がマイナス(−)式
方向で一致するかどうか判定される。
【0046】その結果、探索した方向でその対象となっ
ているエッジ列の大多数のエッジの3次元移動量が一致
すると判定されるときには、ガードレール候補としての
エッジ列がガードレールと認識されて移動物体としての
検出対象から除外され、エイリアシングによる移動物体
の誤認識の防止が図られる。
【0047】従って、上記した実施形態によれば、エイ
リアシングが起きるおそれのあるガードレールを移動物
体としての検出対象から確実に除外することができ、従
来の相関演算法では防止しきれなかったエイリアシング
による移動物体の誤認識を未然に防止することができ、
移動物体の検出における信頼性を向上することができ
る。
【0048】また、ガードレール候補のエッジ列におけ
るエッジ間隔Dgが一定かどうか判断する際に、微分2
値化画像を3次元変換して地面上に逆投影したときの各
エッジの間隔が一定かどうかで判断するため、エッジ間
隔Dgが一定のガードレール候補としてのエッジ列を的
確に検出することができる。
【0049】なお、上記した実施形態では、報知部5を
備えた例について説明したが、この報知部5は常に必要
なものではなく、移動物体の認識装置として特に報知部
はなくても構わない。
【0050】更に、上記した実施形態では、撮像手段と
して単眼のCCDカメラ1を用いた場合について説明し
たが、撮像手段は上記したCCDカメラに限定されるも
のでないのはいうまでもない。
【0051】また、本発明は上記した実施形態に限定さ
れるものではなく、その趣旨を逸脱しない限りにおいて
上述したもの以外に種々の変更を行うことが可能であ
る。
【0052】
【発明の効果】以上のように、請求項1、5に記載の発
明によれば、エッジ間隔が一定のエッジ列がガードレー
ル候補として検出されると、画像のサンプリング周期
と、ガードレール候補のエッジ列におけるエッジの出現
周期の2倍との差がゼロより大きいかどうかの比較がな
され、この差がゼロより大きければ、プラス方向及びマ
イナス方向の両方向への探索により、ガードレール候補
としてのエッジ列における大多数のエッジの3次元座標
における移動後の位置が両方向のいずれかで一致するか
どうか判定される一方、差がゼロより小さければマイナ
ス方向のみの探索により、エッジ列における大多数のエ
ッジの3次元移動量がマイナス方向で一致するかどうか
判定され、その結果一致すると判定されるときには、ガ
ードレール候補としてのエッジ列がガードレールと判断
されて移動物体としての検出対象から除外されるため、
エイリアシングが起きるおそれのあるガードレールを移
動物体としての検出対象から確実に除外することがで
き、従来防止しきれなかったエイリアシングによる移動
物体の誤認識を未然に防止することが可能になり、安全
走行の補助として信頼性の優れた装置及び方法を提供す
ることができる。
【0053】また、請求項2に記載の発明によれば、ガ
ードレール候補のエッジ列におけるエッジ間隔が一定か
どうか判断する際に、微分2値化画像を3次元変換して
地面上に逆投影したときの各エッジの間隔が一定かどう
かで判断するため、エッジ間隔が一定のガードレール候
補としてのエッジ列を的確に検出することが可能にな
る。
【0054】また、請求項3に記載の発明によれば、ガ
ードレールかどうかを判断するための根拠となるエッジ
の出現周期を、エッジ間隔と車速検出部による自車速と
から求めるため、ガードレール候補としてのエッジ列を
精度よく検出することが可能になる。
【0055】また、請求項4に記載の発明によれば、ガ
ードレールと判断されたエッジ列が除外された旨、また
は画像中にガードレールと判断したものが存在する旨が
報知部により報知されるため、この報知から、ユーザは
少なくとも撮像手段による画像中にガードレールが含ま
れていることを知ることが可能になる。
【図面の簡単な説明】
【図1】この発明の一実施形態のブロック図である。
【図2】この発明の一実施形態の動作説明図である。
【図3】従来例の動作説明図である。
【図4】従来例の動作説明図である。
【図5】従来例の動作説明図である。
【符号の説明】
1 CCDカメラ(撮像手段) 2 CPU(2値化部、検出部、比較部、判定部、処
理部) 3 メモリ 4 車輪速センサ(車速検出部) 5 報知部
───────────────────────────────────────────────────── フロントページの続き (51)Int.Cl.7 識別記号 FI テーマコート゛(参考) B60R 21/00 B60R 21/00 626D 626G G06T 5/00 200 G06T 5/00 200Z 7/20 7/20 B 7/40 7/40 A 7/60 300 7/60 300A G08G 1/16 G08G 1/16 C H04N 7/18 H04N 7/18 J K Fターム(参考) 5B057 AA16 BA29 CA08 CA12 CA16 CB06 CB13 CB16 CD14 CH01 CH11 DB02 DB09 DC08 DC16 DC22 5C054 FC05 FC12 FF06 HA30 5H180 AA01 CC04 LL02 LL07 LL08 5L096 AA06 BA04 CA02 EA43 FA06 FA14 FA67 HA04

Claims (5)

    【特許請求の範囲】
  1. 【請求項1】 走行中に自車に搭載した撮像手段により
    自車後方を撮像し、得られた画像を処理して自車後側方
    の移動物体を認識する移動物体の認識装置において、 前記撮像手段による原画像の全画素の濃度を微分処理し
    て得られた全画素についての濃度微分値を2値化しエッ
    ジパターンから成る微分2値化画像を形成する2値化部
    と、 前記2値化部による前記微分2値化画像中に、撮像方向
    を示す1点に対応する拡大焦点からの放射ライン上に並
    ぶエッジ列のうち、エッジ間隔が一定のエッジ列があれ
    ばそのエッジ列をガードレール候補として検出する検出
    部と、 前記検出部により前記ガードレール候補として検出され
    る前記エッジ列の各エッジの出現周期を求め、前記撮像
    手段による画像のサンプリング周期と前記出現周期の2
    倍との差がゼロより大きいかどうか比較する比較部と、 前記比較部より前記差がゼロより大きいと判断される
    と、前記拡大焦点から離れるプラス方向及び前記拡大焦
    点に向かうマイナス方向の両方向に探索を行い、前記エ
    ッジ列における大多数のエッジの3次元座標における移
    動後の位置が前記両方向のいずれかで一致するかどうか
    判定し、前記差がゼロより小さいと判断されると、前記
    マイナス方向にのみ探索を行い、前記エッジ列における
    大多数のエッジの3次元移動量が前記マイナス方向で一
    致するかどうか判定する判定部と、 前記判定部により一致すると判定されれば、前記ガード
    レール候補としての前記エッジ列をガードレールと判断
    して移動物体としての検出対象から除外する処理部とを
    備えていることを特徴とする移動物体の認識装置。
  2. 【請求項2】 前記検出部が、2次元の前記微分2値化
    画像中を3次元座標に変換し、地面上に逆投影したとき
    の各エッジの間隔を導出し、導出した前記間隔が一定か
    どうかによって前記ガードレール候補としての前記エッ
    ジ列を検出することを特徴とする請求項1記載の移動物
    体の認識装置。
  3. 【請求項3】 自車の車速を検出する車速検出部を備
    え、前記比較部が、前記検出部によるエッジ間隔と前記
    車速検出部による自車速とから前記出現周期を求めるこ
    とを特徴とする請求項1または2に記載の移動物体の認
    識装置。
  4. 【請求項4】 前記処理部により、ガードレールと認識
    された前記エッジ列が検出対象から除外されている旨、
    または前記撮像手段による画像中にガードレールと認識
    したものが存在する旨を報知する報知部を備えているこ
    とを特徴とする請求項1ないし3のいずれかに記載の移
    動物体の認識装置。
  5. 【請求項5】 走行中に自車に搭載した撮像手段により
    自車後方を撮像し、得られた画像を処理して自車後側方
    の移動物体を認識する移動物体の認識方法において、 前記撮像手段による原画像の全画素の濃度を微分処理し
    て得られた全画素についての濃度微分値を2値化しエッ
    ジパターンから成る微分2値化画像を形成する2値化工
    程と、 前記2値化部による前記微分2値化画像中に、撮像方向
    を示す1点に対応する拡大焦点からの放射ライン上に並
    ぶエッジ列のうち、エッジ間隔が一定のエッジ列があれ
    ばそのエッジ列をガードレール候補として検出する検出
    工程と、 前記検出工程により前記ガードレール候補として検出さ
    れる前記エッジ列の各エッジの出現周期を求め、前記撮
    像手段による画像のサンプリング周期と前記出現周期の
    2倍との差がゼロより大きいかどうか比較する比較工程
    と、 前記差がゼロより大きいときに、前記拡大焦点から離れ
    るプラス方向及び前記拡大焦点に向かうマイナス方向の
    両方向に探索を行い、前記エッジ列における大多数のエ
    ッジの3次元座標における移動後の位置が前記両方向の
    いずれかで一致するかどうか判定し、前記差がゼロより
    小さいときに、前記マイナス方向にのみ探索を行い、前
    記エッジ列における大多数のエッジの3次元移動量が前
    記マイナス方向で一致するかどうか判定する判定工程
    と、 前記判定工程により一致すると判定されれば、前記ガー
    ドレール候補としての前記エッジ列をガードレールと判
    断して移動物体としての検出対象から除外する処理工程
    とを含むことを特徴とする移動物体の認識方法。
JP2001360252A 2001-11-27 2001-11-27 移動物体の認識装置及び認識方法 Expired - Fee Related JP4070448B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2001360252A JP4070448B2 (ja) 2001-11-27 2001-11-27 移動物体の認識装置及び認識方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2001360252A JP4070448B2 (ja) 2001-11-27 2001-11-27 移動物体の認識装置及び認識方法

Publications (2)

Publication Number Publication Date
JP2003162710A true JP2003162710A (ja) 2003-06-06
JP4070448B2 JP4070448B2 (ja) 2008-04-02

Family

ID=19171102

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2001360252A Expired - Fee Related JP4070448B2 (ja) 2001-11-27 2001-11-27 移動物体の認識装置及び認識方法

Country Status (1)

Country Link
JP (1) JP4070448B2 (ja)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006185406A (ja) * 2004-11-30 2006-07-13 Nissan Motor Co Ltd 物体検出装置、および方法
JP2007013773A (ja) * 2005-07-01 2007-01-18 Toyota Central Res & Dev Lab Inc 対象物探索装置
JP2007072987A (ja) * 2005-09-09 2007-03-22 Denso Corp 環境認識装置
JP2007183912A (ja) * 2005-12-06 2007-07-19 Nissan Motor Co Ltd 走路境界線検出装置、および走路境界線検出方法
JP2011243154A (ja) * 2010-05-21 2011-12-01 Mitsubishi Electric Corp 車両検出装置及び車両検出方法
US8897497B2 (en) 2009-05-19 2014-11-25 Toyota Jidosha Kabushiki Kaisha Object detecting device

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006185406A (ja) * 2004-11-30 2006-07-13 Nissan Motor Co Ltd 物体検出装置、および方法
JP4650079B2 (ja) * 2004-11-30 2011-03-16 日産自動車株式会社 物体検出装置、および方法
JP2007013773A (ja) * 2005-07-01 2007-01-18 Toyota Central Res & Dev Lab Inc 対象物探索装置
JP4710437B2 (ja) * 2005-07-01 2011-06-29 トヨタ自動車株式会社 対象物探索装置
JP2007072987A (ja) * 2005-09-09 2007-03-22 Denso Corp 環境認識装置
JP4595759B2 (ja) * 2005-09-09 2010-12-08 株式会社デンソー 環境認識装置
JP2007183912A (ja) * 2005-12-06 2007-07-19 Nissan Motor Co Ltd 走路境界線検出装置、および走路境界線検出方法
US8897497B2 (en) 2009-05-19 2014-11-25 Toyota Jidosha Kabushiki Kaisha Object detecting device
JP2011243154A (ja) * 2010-05-21 2011-12-01 Mitsubishi Electric Corp 車両検出装置及び車両検出方法

Also Published As

Publication number Publication date
JP4070448B2 (ja) 2008-04-02

Similar Documents

Publication Publication Date Title
US9836657B2 (en) System and method for periodic lane marker identification and tracking
JP4203512B2 (ja) 車両周辺監視装置
JP5407898B2 (ja) 対象物検出装置及びプログラム
JP3367170B2 (ja) 障害物検出装置
JP2003284057A (ja) 車両周辺監視装置
JP2002373332A (ja) 画像認識装置および画像認識方法
EP1641653A4 (en) METHOD AND DEVICE FOR DETECTING PEDESTRANS
JP2003216937A (ja) ナイトビジョンシステム
US20140002658A1 (en) Overtaking vehicle warning system and overtaking vehicle warning method
JP2003084064A (ja) 前方車両の認識装置及び認識方法
JP4102885B2 (ja) 駐車車両検知方法及び駐車車両検知システム
JP2002024986A (ja) 歩行者検出装置
JP2003099762A (ja) 前方車両認識装置及び認識方法
JPH09226490A (ja) 横断物の検出装置
JP2003044859A (ja) 動き追跡装置及び人物追跡方法
JP2001351107A (ja) 交通監視装置および交通監視方法
JP4067340B2 (ja) 対象物認識装置および対象物認識方法
JPH11257931A (ja) 物体認識装置
JP2003028635A (ja) 画像測距装置
JPH10300494A (ja) 車輌位置検出装置および方法ならびに経路案内装置および方法
JP2003162710A (ja) 移動物体の認識装置及び認識方法
JP2000306097A (ja) 道路領域判定装置
JP2002367077A (ja) 交通渋滞判定装置及び交通渋滞判定方法
JPH07244717A (ja) 車両用走行環境認識装置
JP2003230134A (ja) ナイトビジョンシステム

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20040913

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20070913

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20071023

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20071127

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20080115

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20080115

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110125

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110125

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130125

Year of fee payment: 5

LAPS Cancellation because of no payment of annual fees