JPH11316840A - 道路領域検出方法及びシステム - Google Patents

道路領域検出方法及びシステム

Info

Publication number
JPH11316840A
JPH11316840A JP10137691A JP13769198A JPH11316840A JP H11316840 A JPH11316840 A JP H11316840A JP 10137691 A JP10137691 A JP 10137691A JP 13769198 A JP13769198 A JP 13769198A JP H11316840 A JPH11316840 A JP H11316840A
Authority
JP
Japan
Prior art keywords
road
image
value
function
area
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP10137691A
Other languages
English (en)
Other versions
JP3219053B2 (ja
Inventor
Kazuyuki Sakurai
和之 櫻井
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
NEC Corp
Original Assignee
NEC Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by NEC Corp filed Critical NEC Corp
Priority to JP13769198A priority Critical patent/JP3219053B2/ja
Priority to US09/302,451 priority patent/US6549642B1/en
Priority to DE19921095A priority patent/DE19921095B4/de
Publication of JPH11316840A publication Critical patent/JPH11316840A/ja
Application granted granted Critical
Publication of JP3219053B2 publication Critical patent/JP3219053B2/ja
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/40Extraction of image or video features
    • G06V10/44Local feature extraction by analysis of parts of the pattern, e.g. by detecting edges, contours, loops, corners, strokes or intersections; Connectivity analysis, e.g. of connected components
    • G06V10/457Local feature extraction by analysis of parts of the pattern, e.g. by detecting edges, contours, loops, corners, strokes or intersections; Connectivity analysis, e.g. of connected components by analysing connectivity, e.g. edge linking, connected component analysis or slices

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Image Analysis (AREA)
  • Traffic Control Systems (AREA)
  • Image Processing (AREA)

Abstract

(57)【要約】 【課題】画像にて車両周囲の環境を認識するシステムに
おいて、道路領域上部を含む道路領域全域において精度
を落とすことなく道路領域を検出するシステム及び方法
の提供。 【解決手段】プログラム制御により動作するコンピュー
タ100と、画像入力装置110と、道路領域データ出
力手段120とから構成され、コンピュータ100は、
水平ライン毎統計量算出手段101と、統計量の関数当
てはめ手段102と、道路画像閾値処理手段103と、
道路領域検出手段104とを含む。

Description

【発明の詳細な説明】
【0001】
【発明の属する技術分野】本発明は、道路領域検出方法
及びシステムに関し、特に画像処理にて車両周囲の環境
を認識するシステムに関する。
【0002】
【従来の技術】画像処理にて車両周囲の環境を認識する
従来の道路領域検出システムとして、例えば特開平3―
118615号公報には、外部環境の画像を入力しこの
画像から環境を認識する移動車の環境認識装置におい
て、車両進行方向をラスタスキャン方式の実質的な主走
査方向とし、車両前方の画像をシリアルの画像信号とし
て入力する画像入力手段と、シリアルの画像信号に対し
て濃度変化検出による路端検出を行う路端検出手段を備
えた環境認識装置が提案されている。図5に、その構成
を示す。この環境認識装置は、CCDカメラよりなる画
像入力装置501と、初期値メモリ502と、比較器5
03と、カウンタ504とから構成されている。
【0003】図5に示した従来の環境認識装置は、次のよう
に動作する。
【0004】すなわち、画像入力装置501から入力された
道路画像について画像下部の道路領域上のある点での輝
度を初期値メモリ502にて初期値として記憶する。次
に、道路画像中の他の点での輝度を比較部503にて上
記初期値と比較し、その差がある閾値以下である点を道
路領域上の点とし、カウンタ504に出力する。
【0005】
【発明が解決しようとする課題】しかしながら、図5を
参照して説明した上記従来の方式は、道路領域上部での
検出精度が落ちる、という問題点を有している。
【0006】その理由は、従来方式では、道路領域内では輝
度がほぼ一定であることを仮定していたが、実際には、
道路領域内の輝度は、移動車との距離、すなわち画像に
おける縦座標値により変化するためである。
【0007】したがって本発明は、上記問題点に鑑みてなさ
れたものであって、その目的は、道路領域全域において
精度を落とすことなく道路領域を検出可能とした道路領
域検出方法及びシステムを提供することにある。
【0008】
【課題を解決するための手段】前記目的を達成するた
め、本発明の道路領域検出システムは、画像入力手段
と、水平ライン毎統計値算出手段と、統計量の関数当て
はめ手段と、道路画像閾値処理手段と、道路領域検出手
段と、を備え、水平ライン毎の統計量算出手段により算
出された統計値に基づき、道路領域内の輝度の縦座標値
に関する変化に追従した道路領域検出を行うようにした
ものである。
【0009】
【発明の実施の形態】次に、本発明の実施の形態につい
て図面を参照して詳細に説明する。
【0010】図1は、本発明の一実施の形態の構成を示す図
である。図1を参照すると、本発明の一実施の形態は、
プログラム制御により動作するデータ処理装置(コンピ
ュータ、プロセッサ)100と、CCDカメラ等よりな
る画像入力装置110と、道路領域データ出力手段12
0と、を備えて構成されている。
【0011】データ処理装置100は、水平ライン毎統計値
算出手段101と、統計値の関数当てはめ手段102
と、道路画像閾値処理手段103と、道路領域検出手段
104と、を含む。
【0012】これらの手段は、データ処理装置100で実行
されるプログラムによってその機能が実現され、それぞ
れ概略つぎのように動作する。
【0013】水平ライン毎統計値算出手段101は、入力道
路画像のある領域について水平ライン毎に画像特徴量の
統計値を算出する。
【0014】統計値の関数当てはめ手段102は、上記統計
量を画像縦座標についての関数に当てはめる。
【0015】道路画像閾値処理手段103は、上記関数に基
づき道路画像を閾値処理する。
【0016】道路領域検出手段104は、閾値処理された道
路画像から道路領域を検出する。
【0017】図2は、本発明の一実施の形態の処理フローを
示す流れ図である。図1及び図2のフローチャートを参
照して、本発明の一実施の形態の全体の動作について詳
細に説明する。
【0018】まず、画像入力装置110により道路画像を入
力する(図2のステップA1)。
【0019】次に、水平ライン毎統計値算出手段101によ
り道路画像中の予め定めた処理領域、たとえば画像内で
道路領域が支配的な面積を占めると考えられる画像下部
(図3の302参照)において、特徴値(例えば輝度値
の統計量、例えば平均値、ヒストグラムをとった場合の
ピーク値等)を水平ライン毎に算出する(ステップA
2)。
【0020】さらに、上記の水平ライン毎の統計量に画像の
縦座標、すなわち図3においては、y座標についての予
め与えられたモデル関数を当てはめ、この関数により各
水平ライン毎の特徴値を近似する(ステップA3)。
【0021】次に、道路画像の各画素について、その特徴値
と当該y座標におけるモデル関数の値との差を計算する
(ステップA4)。
【0022】さらに、このモデル関数値との差を、画像上の
位置に基づき道路領域である確率が高い画素については
値が小さくなるように修正する(ステップA5)。
【0023】そして、修正された差の値の画像全体での統計
値を計算し(ステップA6)、その統計量を基に、差の
値についての閾値を設定する(ステップA7)。
【0024】次に、差の値を上記の閾値を基に2値化し(ス
テップA8)、最後に、2値化された差の値から画像下
部にある領域を道路領域として切り出す(ステップA
9)。
【0025】次に、本発明の一実施の形態の作用効果につい
て説明する。
【0026】本発明の一実施の形態においては、道路領域の
特徴値を各水平ライン毎に求め、その値をy座標(縦座
標)に関するモデル関数により近似するように構成され
ているため、道路領域の特徴値のy座標についての変化
を考慮した道路領域の特徴値の推定が行われており、従
って、道路領域上部を含めた道路領域全域において、精
度を落とすことなく道路領域を検出することができる。
【0027】
【実施例】次に、本発明の実施の形態についてさらに詳
細に説明すべく具体的な実施例を用いて動作を説明す
る。図4は、本発明の一実施例の処理フローを説明する
ための流れ図である。
【0028】まず、画像入力装置110により道路画像を入
力する(図4のステップB1)。
【0029】次に、水平ライン毎統計値算出手段101によ
り道路画像内で道路領域が支配的な面積を占めると考え
られる画像下部、例えば画像の下3分の1で左右両端を
カットした領域(図3の302)について、水平ライン
毎に、その特徴値として、輝度値のヒストグラムを作成
し(ステップB2)、そのヒストグラムを基に、各水平
ライン毎にヒストグラムのピークでの輝度値(「ピーク
値」と呼ぶ)を計算する(ステップB3)。
【0030】さらに、上記の水平ライン毎のピーク値につい
て、図3におけるy座標についての反比例関数をモデル
関数として当てはめる(ステップB4)。
【0031】この当てはめは、例えば各ピーク値とモデル関
数値との最小2乗法によって行うことができる。さら
に、この最小2乗法での当てはめは、各ピーク値の、ヒ
ストグラムでの度数を重みとした重み付き最小2乗法と
することにより、より頑健性(Robustness)を増す事が
できる。そして、この関数により各水平ライン毎の輝度
値を近似する。
【0032】次に、道路画像の各画素について、その輝度値
と当該y座標におけるモデル関数の値との差を計算する
(ステップB5)。
【0033】さらに、このモデル関数値との差を、画像上の
位置に基づき道路領域である確率が高い画素については
値が小さくなるように修正する(ステップB6)。
【0034】この修正は例えば、図3の各定数K、H、M、
N、及び階調の上限値Lを用い、座標値(x、y)をも
つ各画素でのモデル関数値との差を、次のような変数B
(x、y)で割ることによって行われる。
【0035】
【数1】
【0036】そして、修正された差の値の画像(差分画像)
についての空間微分画像を作成し、その画素値の平均値
を計算する(ステップB7)。
【0037】その平均画素値の線形関数として差分画像を2
値化するための閾値を設定する(ステップB8)。その
際、微分画像の平均画素値が小さいほど閾値が大きくな
るように設定する。
【0038】次に、差分画像を上記の閾値を基に2値化し
(ステップB9)、最後に、2値化された差分画像から
画像下部にある連結領域を道路領域として切り出す(ス
テップB10)。
【0039】
【発明の効果】以上説明したように、本発明によれば、
道路領域全域において精度を落とすことなく道路領域を
検出できる、という効果を奏する。
【0040】その理由は、本発明においては、水平ライン毎
に算出された統計値に基づき、道路領域内の輝度の縦座
標値に関する変化に追従した道路領域検出を行うように
したためである。
【図面の簡単な説明】
【図1】本発明の一実施の形態の構成を示すブロック図
である。
【図2】本発明の実施の形態の処理フローを示す流れ図
である。
【図3】本発明の実施の形態を説明する為の図であり、
道路画像を模式的に示す図である。
【図4】本発明の一実施例の処理フローを示す流れ図で
ある。
【図5】従来の装置の構成を示す図である。
【符号の説明】
100 コンピュータ(中央処理装置;プロセッサ;デ
ータ処理装置) 101 水平ライン毎統計量算出手段 102 統計量の関数当てはめ手段 103 道路画像閾値処理手段 103 道路領域検出手段 110 画像入力装置 103 道路領域データ出力手段 301 道路領域 302 処理領域手段 501 画像入力装置 502 初期値メモリ 503 比較器 504 カウンタ 505 データ出力

Claims (12)

    【特許請求の範囲】
  1. 【請求項1】画像による車両周囲の環境認識を行うシス
    テムにおいて、 画像入力手段より入力された道路画像の水平ライン毎の
    統計量の算出する統計値算出手段と、 前記統計量を関数に当てはめる関数当てはめ手段と、 前記関数値を用い前記道路画像の閾値を処理する道路閾
    値処理手段と、 前記閾値処理された道路画像から道路領域を検出する道
    路領域検出手段と、 を備えたことを特徴とする道路領域検出システム。
  2. 【請求項2】前記道路閾値処理手段が、道路画像上の位
    置に基づき閾値処理前の画像を修正する手段を含むこと
    を特徴とする請求項1に記載の道路領域検出システム。
  3. 【請求項3】前記道路閾値処理手段が、閾値処理前の画
    像の統計量に基づき閾値を設定する手段を含むことを特
    徴とする請求項1又は2に記載の道路領域検出システ
    ム。
  4. 【請求項4】前記統計量算出手段が、統計量として、各
    水平ライン毎のヒストグラムのピークでの輝度値を用い
    る、ことを特徴とする請求項1乃至3のいずれか一に記
    載の道路領域検出システム。
  5. 【請求項5】前記関数当てはめ手段が、関数として画像
    縦座標に関する反比例関数を用いる、ことを特徴とする
    請求項1乃至4のいずれか一に記載の道路領域検出シス
    テム。
  6. 【請求項6】前記閾値処理前の画像の統計量に基づき閾
    値を設定する手段において、閾値処理前の画像の空間微
    分をとり、その統計量を用いる、ことを特徴とする請求
    項3乃至5のいずれか記載の道路領域検出システム。
  7. 【請求項7】前記閾値処理前の画像の統計量に基づき閾
    値を設定する手段において、閾値処理前の画像の空間微
    分をとり、その画素値の平均値の線形関数として閾値を
    設定することを特徴とする請求項6に記載の道路領域検
    出システム。
  8. 【請求項8】画像入力手段より入力した道路画像中の所
    定の領域について水平ライン毎に算出された統計値に基
    づき道路領域内の輝度の縦座標値に関する変化に追従し
    た道路領域の検出を行う、ことを特徴とする道路領域検
    出方法。
  9. 【請求項9】(a)画像入力手段より入力された道路画
    像の水平ライン毎の統計量の算出し、 (b)前記水平ライン毎の統計量に、画像の縦座標につ
    いて予め定められた所定のモデル関数に当てはめ、 (c)前記関数を用いて各水平ライン毎の統計量を近似
    し前記道路画像の各画素についてその特徴値と前記縦座
    標におけるモデル関数の値との差に基づき、前記道路画
    像の閾値を処理し、 (d)前記閾値処理された道路画像から道路領域を検出
    する、ことを特徴とする道路領域検出方法。
  10. 【請求項10】(a)画像入力手段より道路画像を入力す
    るステップ、 (b)画像中で道路領域が支配的な面積を占める下部領
    域など予め定めた領域について、特徴値として輝度値の
    統計量を水平ライン毎に算出するステップ、 (c)前記水平ライン毎の統計量に道路画像の縦座標に
    ついての予め与えられたモデル関数を当てはめ、この関
    数により前記道路画像の各水平ライン毎の特徴値を近似
    するステップ、 (d)前記道路画像の各画素について、その特徴値と、
    前記縦座標におけるモデル関数の値との差を計算するス
    テップ、 (e)このモデル関数値との差を、画像上の位置に基づ
    き道路領域である確率が高い画素については値が小さく
    なるように修正するステップ、 (f)前記修正された前記モデル関数との差の値の、前
    記道路画像全体での統計値を計算するステップ、 (g)該統計量を基に、前記差の値についての閾値を設
    定するステップ、 (h)各画素での前記関数値との差を、前記閾値を基に
    2値化するステップ、及び、 (i)2値化された差の値から道路画像下部側にある領
    域を道路領域として切り出すステップ、 を含むことを特徴とする道路領域検出方法。
  11. 【請求項11】画像による車両周囲の環境認識を行うシス
    テムにおいて、 (a)画像入力手段より入力された道路画像の水平ライ
    ン毎の統計量の算出する手段、 (b)前記統計量を関数に当てはめる手段、 (c)前記関数値を用い前記道路画像の閾値を処理する
    手段及び、 (d)前記閾値処理された道路画像から道路領域を検出
    する手段、 の上記(a)〜(d)の各手段をコンピュータで機能さ
    せるためのプログラムを記録した記録媒体。
  12. 【請求項12】(a)画像入力手段より道路画像を入力す
    る処理、 (b)画像中で道路領域が支配的な面積を占める下部領
    域など予め定めた領域について、特徴値として輝度値の
    統計量を水平ライン毎に算出する処理、 (c)前記水平ライン毎の統計量に道路画像の縦座標に
    ついての予め与えられたモデル関数を当てはめ、この関
    数により前記道路画像の各水平ライン毎の特徴値を近似
    する処理、 (d)前記道路画像の各画素について、その特徴値と、
    前記縦座標におけるモデル関数の値との差を計算する処
    理、 (e)このモデル関数値との差を、画像上の位置に基づ
    き道路領域である確率が高い画素については値が小さく
    なるように修正する処理、 (f)前記修正された前記モデル関数との差の値の、前
    記道路画像全体での統計値を計算する処理、 (g)該統計量を基に、前記差の値についての閾値を設
    定する処理、 (h)各画素での前記関数値との差を、前記閾値を基に
    2値化する処理、及び、 (i)2値化された差の値から道路画像下部側にある領
    域を道路領域として切り出す処理、 の上記(a)〜(i)の各処理をコンピュータで実行さ
    せるためのプログラムを記録した記録媒体。
JP13769198A 1998-05-01 1998-05-01 道路領域検出方法及びシステム Expired - Fee Related JP3219053B2 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
JP13769198A JP3219053B2 (ja) 1998-05-01 1998-05-01 道路領域検出方法及びシステム
US09/302,451 US6549642B1 (en) 1998-05-01 1999-04-30 Method and system for detecting road area
DE19921095A DE19921095B4 (de) 1998-05-01 1999-04-30 Verfahren und System zur Erfassung von Straßenbereichen

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP13769198A JP3219053B2 (ja) 1998-05-01 1998-05-01 道路領域検出方法及びシステム

Publications (2)

Publication Number Publication Date
JPH11316840A true JPH11316840A (ja) 1999-11-16
JP3219053B2 JP3219053B2 (ja) 2001-10-15

Family

ID=15204560

Family Applications (1)

Application Number Title Priority Date Filing Date
JP13769198A Expired - Fee Related JP3219053B2 (ja) 1998-05-01 1998-05-01 道路領域検出方法及びシステム

Country Status (3)

Country Link
US (1) US6549642B1 (ja)
JP (1) JP3219053B2 (ja)
DE (1) DE19921095B4 (ja)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3575346B2 (ja) * 1999-09-03 2004-10-13 日本電気株式会社 道路白線検出システム、道路白線検出方法および道路白線検出用プログラムを記録した記録媒体
KR100391442B1 (ko) * 2000-12-27 2003-07-12 현대자동차주식회사 차선 이탈 방지용 영상 처리방법
JP4374211B2 (ja) * 2002-08-27 2009-12-02 クラリオン株式会社 レーンマーカー位置検出方法及びレーンマーカー位置検出装置並びに車線逸脱警報装置
US7639841B2 (en) * 2004-12-20 2009-12-29 Siemens Corporation System and method for on-road detection of a vehicle using knowledge fusion

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS6279599A (ja) 1985-10-03 1987-04-11 日本信号株式会社 車両検知システムにおける基準輝度レベルの自動決定法
JPS62127999A (ja) 1985-11-28 1987-06-10 日本信号株式会社 車両と路面を区別する閾値の自動決定法
JPH0824350B2 (ja) 1987-02-07 1996-03-06 日本電信電話株式会社 背景画像抽出方法
JP2570315B2 (ja) * 1987-09-01 1997-01-08 アイシン精機株式会社 車上距離検出装置
JPH01158579A (ja) * 1987-09-09 1989-06-21 Aisin Seiki Co Ltd 像認識装置
JP2848407B2 (ja) 1989-09-29 1999-01-20 マツダ株式会社 移動車の環境認識装置
JP3118615B2 (ja) 1991-11-29 2000-12-18 株式会社日立製作所 核融合装置
JP3083918B2 (ja) 1992-06-26 2000-09-04 本田技研工業株式会社 画像処理装置
JPH0686068A (ja) 1992-08-31 1994-03-25 Riso Kagaku Corp 画像処理装置
JP3169483B2 (ja) * 1993-06-25 2001-05-28 富士通株式会社 道路環境認識装置
WO1996034363A1 (fr) * 1995-04-26 1996-10-31 Hitachi, Ltd. Processeur d'images pour vehicule
JPH10208047A (ja) * 1997-01-23 1998-08-07 Nissan Motor Co Ltd 車載用走行環境認識装置

Also Published As

Publication number Publication date
US6549642B1 (en) 2003-04-15
DE19921095B4 (de) 2006-02-09
JP3219053B2 (ja) 2001-10-15
DE19921095A1 (de) 2000-01-27

Similar Documents

Publication Publication Date Title
CN109242853B (zh) 一种基于图像处理的pcb缺陷智能检测方法
US6571002B1 (en) Eye open/close detection through correlation
US8902053B2 (en) Method and system for lane departure warning
KR20110046904A (ko) 검색 영역을 제한한 이미지 복원 장치 및 방법
US6925206B2 (en) White line detection apparatus and white line detection method
JP2002208007A (ja) スキャンした文書の自動式検出
EP2068569A1 (en) Method of and apparatus for detecting and adjusting colour values of skin tone pixels
WO2009026857A1 (en) Video image motion processing method introducing global feature classification and implementation device thereof
CN115298638A (zh) 用于基于手势控制设备的方法和系统
JP2003050211A (ja) 明度補正方法及び選択的欠陥検出方法及びこれらを記録した記録媒体
CN111080665B (zh) 图像边框识别方法、装置、设备和计算机存储介质
JP2002522830A (ja) 色フレームイメージシーケンスで移動体を検出する装置及び方法
US20080056597A1 (en) Directional interpolation method using frequency information and related device
JP3219053B2 (ja) 道路領域検出方法及びシステム
JPH07249128A (ja) 車両用画像処理装置
Xie et al. Robust vehicles extraction in a video-based intelligent transportation systems
CN116580182A (zh) 一种自动调整的目标检测的方法、系统、设备及存储介质
CN110580706A (zh) 一种视频背景模型的提取方法及装置
CN106780646B (zh) 一种适用多场景的无参数背景建模方法
JP2001222683A (ja) 画像処理方法、画像処理装置、文字認識方法、文字認識装置及び記憶媒体
JP4622141B2 (ja) 画像処理装置および画像処理方法、記録媒体、並びにプログラム
JP2002042131A (ja) 標識検出装置、標識検出方法および記録媒体
JP2002281299A (ja) 線分検出器
JP4253265B2 (ja) 影検出装置、影検出方法及び影検出プログラム、影検出装置を用いた画像処理装置、影検出方法を用いた画像処理方法及び影検出プログラムを用いた画像処理プログラム
JP2006134339A (ja) 識別方法、識別装置、及び交通制御システム

Legal Events

Date Code Title Description
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20010710

LAPS Cancellation because of no payment of annual fees