JP4761156B2 - 地物位置認識装置及び地物位置認識方法 - Google Patents

地物位置認識装置及び地物位置認識方法 Download PDF

Info

Publication number
JP4761156B2
JP4761156B2 JP2006353069A JP2006353069A JP4761156B2 JP 4761156 B2 JP4761156 B2 JP 4761156B2 JP 2006353069 A JP2006353069 A JP 2006353069A JP 2006353069 A JP2006353069 A JP 2006353069A JP 4761156 B2 JP4761156 B2 JP 4761156B2
Authority
JP
Japan
Prior art keywords
feature
information
recognition
measurement point
confidence
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2006353069A
Other languages
English (en)
Other versions
JP2008164384A (ja
Inventor
正樹 中村
基揮 勘場
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Aisin AW Co Ltd
Original Assignee
Aisin AW Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Aisin AW Co Ltd filed Critical Aisin AW Co Ltd
Priority to JP2006353069A priority Critical patent/JP4761156B2/ja
Publication of JP2008164384A publication Critical patent/JP2008164384A/ja
Application granted granted Critical
Publication of JP4761156B2 publication Critical patent/JP4761156B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Traffic Control Systems (AREA)
  • Navigation (AREA)

Description

本発明は、外界検出装置により検出された外界情報を用いて地物位置の認識を行う地物位置認識装置及び地物位置認識方法に関する。
外界検出装置として車載カメラを用い、自車両の位置の修正を行うために地物位置を認識する技術の一例が、例えば下記に出典を示す特許文献1に記載されている。ここでは、以下のような車載用ナビゲーション装置に適用する技術として開示されている。このナビゲーション装置は、車載カメラにより撮影された車両前方の走行道路に沿った風景画像より交差点シンボルを識別して交差点を検出し、車両位置から交差点(交差点シンボル)までの距離を求める交差点検出部を有している。また、地図データから得られる前記交差点位置から前記距離だけ離れた走行道路上のポイントに車両位置を修正する車両位置修正手段を備えている。
交差点検出部は、車載カメラにより交差点シンボル(信号機、横断歩道、中央分離帯用白線等)を識別して交差点を検出し、その後、車両位置から交差点までの距離を求める。車両位置から交差点までの距離は、識別された交差点シンボルが所在するカメラ画素を用いて画素・距離対応テーブルを参照することにより求められる。
特開平9−243389号公報(第2−5頁、第1−2図等参照)
特許文献1には、認識した交差点シンボルの中のどの位置を基準に交差点までの距離を求めるかについては明らかにされていない。しかし、自車両から交差点シンボル等の地物までの距離の検出精度を高めるためには、当該認識対象となる地物に所定の基準位置を設定し、当該基準位置と自車両との間で距離の算出を行う必要がある。一方、上記所定の基準位置を地物の中の所定の点や狭い領域として設定すると、地物の状態や天候等によって認識が困難になり認識率が低下する場合がある。また、低い認識率で特定された基準位置に基づいた距離の検出精度も低下してしまう可能性がある。そして、このような距離検出結果を用いるナビゲーション装置などでは、車両位置の補正効果が低下する。
本発明は、上記課題に鑑みて創案されたもので、地物位置を認識するための基準位置の認識精度に応じて地物位置を認識することが可能な地物位置認識装置及び地物位置認識方法を提供することを目的とする。
上記目的を達成するための本発明に係る地物位置認識装置の特徴構成は、
外界検出装置による検出対象となる対象地物と自車両との位置関係を演算するための地物位置認識装置であって、
前記外界検出装置により検出された外界情報を取得する外界情報取得手段と、
前記自車両の現在位置を示す自車位置情報を取得する自車位置情報取得手段と、
前記自車位置情報に基づいて、前記対象地物について、地物種別に応じて予め定められた特徴量及び測定点の情報を含む地物情報を取得する地物情報取得手段と、
前記地物情報に基づいて、前記外界情報に含まれる前記対象地物の前記特徴量及び前記測定点の認識処理を行う認識手段と、
記認識手段による認識結果の確実性を表し、全ての前記地物種別に共通する定量的な値として定義される自信度を、前記特徴量及び前記測定点の認識結果に応じて前記対象地物ごとに判定する自信度判定手段と、
前記自信度に応じて演算実行の要否を判定し、演算が必要と判定された場合に、前記認識手段による前記測定点の認識結果に基づいて、前記対象地物と前記自車両との前記位置関係を演算する位置関係演算手段と、を備える点にある。
また、上記目的を達成するための本発明に係る地物位置認識装置の別の特徴構成は、
前記外界検出装置により検出された外界情報を取得する外界情報取得手段と、
前記自車両の現在位置を示す自車位置情報を取得する自車位置情報取得手段と、
前記自車位置情報に基づいて、前記対象地物について、地物種別に応じて予め定められた特徴量及び測定点の情報を含む地物情報を取得する地物情報取得手段と、
前記地物情報に基づいて、前記外界情報に含まれる前記対象地物の前記特徴量及び前記測定点の認識処理を行う認識手段と、
前記認識手段による前記測定点の認識結果に基づいて、前記対象地物と前記自車両との前記位置関係を演算する位置関係演算手段と、
前記認識手段による認識結果の確実性を表し、全ての前記地物種別に共通する定量的な値として定義される自信度を、前記特徴量及び前記測定点の認識結果に応じて前記対象地物ごとに判定する自信度判定手段と、を備え、
前記位置関係と前記自信度とを合わせて出力する点にある。
これらの特徴構成によれば、地物位置を認識するための基準位置としての測定点の認識結果に応じて自信度が判定される。従って、当該地物位置認識装置は、少なくとも位置関係演算手段が演算した自車両と地物との位置関係を自信度と共に示すことができる。従って、当該地物位置認識装置の認識結果を利用する他の装置は、測定点の認識精度に応じた地物位置の認識結果を用いることができる。
この自信度は、全ての地物種別に共通する定量的な値として定義されるので、どの地物に対しても共通する評価指標を得ることができ、地物位置認識装置の認識結果を利用する際の汎用性が高くなる。また、自信度は、定量的な値を用いた上で、地物種別に応じて予め定められた地物情報に基づいて対象地物ごとに判定される。従って、地物種別の特性に応じて適切に自信度を判定することが可能となる。
尚、本願発明における「測定点」は、点には限定されず、地物種別に応じて前記測定点の位置を自車両の進行方向に略直交する方向に延長した線として設定してもよい。例えば自車両の進行方向に対する前後の位置関係だけを認識する場合には、進行方向に直交する方向の位置は問題とならないからである。
また、本発明に係る地物認識装置は、全ての前記地物種別に共通に定義される前記自信度が、前記認識手段による前記特徴量の認識結果に応じた複数段階の内、少なくとも1つ以上の段階において、前記認識手段による前記測定点の認識結果に応じてさらに複数段階に分けられたデータ構造を有することを特徴とする。
この特徴によれば、同じような特徴量を有する場合でも、測定点の認識結果に応じて自信度が異なる。地物と自車両との位置関係の精度には、測定点の認識精度が密接に関係する。従って、適切に自信度を定義することが可能となる。
また、本発明に係る地物認識装置は、全ての前記地物種別に共通に定義される前記自信度が、以下のデータ構造を有することを特徴とする。
前記認識手段による前記特徴量の認識結果に応じた複数段階の内、前記認識手段により前記特徴量の全てが認識されない場合の段階が、前記自信度の値域の何れか一方の極限値とされる。また、他の全ての段階が、前記認識手段により前記測定点が所定の条件で認識されるか否かに応じ、前記測定点が認識されない場合を前記一方の極限値に近い値とする複数段階の値に分けられる。
地物と自車両との位置関係の精度には、測定点の認識精度が密接に関係する。この特徴によれば、測定点が所定の条件で認識できない場合に、特徴量の認識結果が悪い側に近い値とされる。従って、適切に自信度を定義することが可能となる。
また、自信度の値は、特徴量の全てが認識されない場合の段階が極限値とされ、他の段階は複数段階に分けられる。従って、特徴量が認識される場合には全ての段階が測定点の認識結果に基づいてさらに分けられるので、従って、詳細且つ適切に自信度を定義することが可能となる。
また、本発明に係る地物位置認識装置は、前記自信度判定手段が、全ての前記地物種別に共通に定義される複数段階の内、前記対象地物ごとに予め定められた一部又は全ての段階を用いて判定することを特徴とする。
自信度は、全ての地物種別に共通する定量的な値として定義される。従って、どの地物を認識する場合でも同じ程度の認識結果の場合には同じ値の評価結果を得ることができる。しかし、地物には様々な種類があり、特徴量の多いものや少ないものなど、千差万別である。従って、全ての地物種別に対して全ての段階を設定すると、却って地物位置認識装置の安定感を欠く可能性がある。
本特徴によれば、自信度は、定量的な値を用いた上で、地物種別に応じて予め定められた一部又は全ての段階を用いて判定される。従って、地物種別の特性に応じて適切に自信度を定義することができる。
また、本発明に係る地物認識装置は、前記自信度判定手段が、前記自信度として、前記認識手段により前記特徴量の全てが認識されない場合の最低値、前記特徴量の全てが認識されると共に前記測定点が正確に認識される最高値、及び1つ以上の中間段階の中間値を、全ての前記対象地物に対して共通に用いて判定することを特徴とする。
本特徴によれば、地物種別に応じて予め定められた一部又は全ての段階を用いて自信度が判定される場合であっても、少なくとも3つの共通の段階の値を用いて判定される。従って、当該地物位置認識装置は、全ての地物種別に亘って、共通な指標で自信度を定義することができる。
また、本発明に係る地物位置認識装置は、前記外界検出装置が撮像装置であり、前記外界情報が画像情報であり、前記外界情報取得手段が画像情報取得手段であり、前記認識手段が画像認識手段であることを特徴とする。
撮像装置は車両への搭載性が良く、画像情報を用いた地物の認識は蓄積技術も多く、地物の認識に好適である。
本発明に係る自車位置認識装置の特徴構成は、本発明に係る地物位置認識装置と、前記位置関係演算手段により演算された前記位置関係に基づいて前記自車位置情報を補正する自車位置情報補正手段と、を備える点にある。
当該地物位置認識装置は、対象地物と自車両との位置関係とその自信度の認識が可能である。従って、当該地物位置認識装置の認識結果を利用する当該自車位置補正手段は、自信度に応じて位置関係の認識結果を用いることができる。その結果、自車位置補正を適切に行うことができる。
本発明に係るナビゲーション装置の特徴構成は、本発明に係る自車位置認識装置と、前記地物情報を含む地図情報が格納された地図情報格納手段と、前記地図情報を参照して動作するアプリケーションプログラムと、前記アプリケーションプログラムに従って動作して案内情報を出力する案内情報出力手段と、を備える点にある。
この特徴構成によれば、自信度と共に得られる自車両と対象地物との位置関係を用いた補正後の自車位置情報に基づいて自車位置の案内等を行うことができる。従って、例えば自車位置の詳細な表示や、詳細に認識される自位置の情報に基づいて最適な経路案内を行うこと等が可能となる。
本発明に係る地物位置認識方法の特徴構成は、
外界検出装置による検出対象となる対象地物と自車両との位置関係を演算するための地物位置認識方法であって、
前記外界検出装置により検出された外界情報を取得する外界情報取得工程と、
前記自車両の現在位置を示す自車位置情報を取得する自車位置情報取得工程と、
前記自車位置情報に基づいて、前記対象地物について、地物種別に応じて予め定められた特徴量及び測定点の情報を含む地物情報を取得する地物情報取得工程と、
前記地物情報に基づいて、前記外界情報に含まれる前記対象地物の前記特徴量及び前記測定点の認識処理を行う認識工程と、
記認識工程による認識結果の確実性を表し、全ての前記地物種別に共通する定量的な値として定義される自信度を、前記特徴量及び前記測定点の認識結果に応じて前記対象地物ごとに判定する自信度判定工程と、
前記自信度に応じて演算実行の要否を判定し、演算が必要と判定された場合に、前記認識工程による前記測定点の認識結果に基づいて、前記対象地物と前記自車両との前記位置関係を演算する位置関係演算工程と、を備える点にある。
また、本発明に係る地物位置認識方法の別の特徴構成は、
外界検出装置による検出対象となる対象地物と自車両との位置関係を演算するための地物位置認識装置であって、
前記外界検出装置により検出された外界情報を取得する外界情報取得工程と、
前記自車両の現在位置を示す自車位置情報を取得する自車位置情報取得工程と、
前記自車位置情報に基づいて、前記対象地物について、地物種別に応じて予め定められた特徴量及び測定点の情報を含む地物情報を取得する地物情報取得工程と、
前記地物情報に基づいて、前記外界情報に含まれる前記対象地物の前記特徴量及び前記測定点の認識処理を行う認識工程と、
前記認識工程による前記測定点の認識結果に基づいて、前記対象地物と前記自車両との前記位置関係を演算する位置関係演算工程と、
前記認識工程による認識結果の確実性を表し、全ての前記地物種別に共通する定量的な値として定義される自信度を、前記特徴量及び前記測定点の認識結果に応じて前記対象地物ごとに判定する自信度判定工程と、を備え、
前記位置関係と前記自信度とを合わせて出力する点にある。
これらの特徴構成によれば、地物位置を認識するための基準位置としての測定点の認識結果に応じて自信度が判定される。従って、当該地物位置認識方法によれば、少なくとも位置関係演算工程において演算された自車両と地物との位置関係が自信度と共に示される。勿論、位置関係演算工程において自信度を加味して位置関係を演算することもできる。その結果、当該地物位置認識方法によれば、測定点の認識精度に応じて地物位置を認識することが可能となる。従って、当該地物位置認識方法による認識結果を利用する場合には、測定点の認識精度に応じた地物位置の認識結果を用いることができる。
この自信度は、全ての地物種別に共通する定量的な値として定義されるので、どの地物を認識する場合でも同じ評価結果を得ることができ、地物位置の認識結果が安定する。また、自信度は、定量的な値を用いた上で、地物種別に応じて予め定められた地物情報に基づいて対象地物ごとに判定される。従って、地物種別の特性に応じて正確な自信度が判定される。
また、本発明に係る地物位置認識方法は、前記自信度判定工程が、前記認識手段による前記特徴量の認識結果に応じて複数段階の一次自信度を判定し、前記一次自信度の各段階の少なくとも1つ以上を、前記認識手段による前記測定点の認識結果に応じてさらに複数段階に分ける二次判定を行うことによって、複数段階の前記自信度を判定することを特徴とする。
この特徴によれば、同じような特徴量を有する場合でも、測定点の認識結果に応じて自信度が異なる。地物と自車両との位置関係の精度には、測定点の認識精度が密接に関係する。従って、正確な自信度の判定が可能となる。
また、本発明に係る地物位置認識方法は、前記自信度判定工程が、前記認識手段により前記特徴量の全てが認識されない場合の前記一次自信度を除く全ての前記一次自信度のそれぞれについて前記二次判定を行うことを特徴とする。
この特徴によれば、特徴量が認識される場合には全ての段階が測定点の認識結果に基づいてさらに分けられるので、精度の良い自信度を得ることができる。
尚、これら本発明に係る方法は、上述した装置に関する作用効果、及び全ての追加的特徴とその作用効果を備えることができるものである。
〔第一実施形態〕
以下、本発明の第一実施形態を図面に基づいて説明する。
図1は、本実施形態に係る地物位置認識装置1の構成を模式的に示すブロック図である。図2は、図1に示される地物形態データベースDB1、地物配置データベースDB2、測定点形態データベースDB3、及び測定点状態データベースDB4のそれぞれに格納される情報の内容を示す説明図である。本実施形態においては、取り扱う対象とする対象地物を、道路面上に配置されたいわゆる道路ペイント等の平面的な地物とし、特に横断歩道や停止線等の道路標示とする場合を例として説明する。また、図1に示すように、本実施形態では、外界検出装置として撮像装置14を用い、外界情報として画像情報Gを扱う場合を例として説明する。
図1に示すように、地物位置認識装置は、特徴量情報生成部3、測定点情報生成部4、自車位置演算部5、画像情報取得部6、画像認識部7、位置関係演算部8の機能部を有している。各機能部は、入力されたデータに対して種々の処理を行う。これら各機能部は、CPU等の演算処理装置を中核部材として、ハードウェア又はソフトウェア(プログラム)或いはその両方により実装されて構成されている。従って、各機能部は機能としての分担を示すものであり、必ずしも物理的に独立したものを示すものではない。各機能部は、共通のハードウェアや兼用可能なソフトウェアを用いて構成されていてもよい。
各データベースDB1、DB2、DB3、DB4、及びDBmは、情報を記憶可能な記録媒体とその駆動手段とを有する装置をハードウェア構成として備えている。例えば、ハードディスクドライブ、DVD−ROMを備えたDVDドライブ、CD−ROMを備えたCDドライブ等である。又は、大規模なメモリによって構成される。
以下、各機能部及びデータベースの構成について詳細に説明する。
〔データベース構成〕
まず、図2を参照し、各データベースの構成について説明する。
(1)地物形態データベースDB1
地物形態データベースDB1(地物形態情報格納手段)には、一つの地物種別の地物が備える形態を規定した地物形態情報Faが、地物種別ごとに複数格納されている。各地物種別についての地物形態情報Faは、地物種別を表す地物種別コードCfに関連付けられてそれぞれデータベースに格納されている。地物形態情報Faは、対象地物としての道路標示の形態を示す情報であり、各地物種別の地物の輪郭形状を示す輪郭情報を有して構成されている。
図3(a)〜(d)は、複数の地物種別の地物の輪郭形状及び代表点Rの位置の例を示している。即ち、(a)は「横断歩道」、(b)は「停止線」、(c)は「横断歩道予告(横断歩道あり)」、(d)は「進行方向別通行区分」である。
このような各道路標示名に対応して地物種別コードCfが設定されている。この図3(a)〜(d)に示されるような輪郭形状の情報が各道路標示を示す地物種別コードCfと関連付けられた状態で地物形態情報Faとして格納されている。尚、当然ながら図3に示す地物種別は対象地物の中の一部の例であり、この図に示す以外の地物種別の地物(例えば、「転回禁止」や「最高速度」等)も対象地物となり得る。
地物の輪郭形状には、法令によって規定されている寸法と、配置場所によって変化する寸法とがある。例えば、図3(a)の「横断歩道」の場合であれば、各線の幅L1及び線間隔L2は法令によって規定されているが、各線の長さ(横断歩道の幅)L3及び横断歩道全体の長さL4は配置場所によって当然に変化する。停止線の道路幅方向の長さ等も同様である。一方、図3(d)の「進行方向別通行区分」の場合は各部の全ての寸法が法令によって規定されている。
従って、各地物種別の地物の輪郭形状に関連付けて、各部の寸法のうち、法令によって規定されていて変化しない箇所に関する情報も地物形態情報Faとして格納されている。
(2)地物配置データベースDB2
図2に示すように、地物配置データベースDB2(地物配置情報格納手段)には、複数の地物について、地物種別情報Fbと地物配置情報Fcとが、地物識別符号IDfに関連付けられて格納されている。地物種別情報Fbは、各地物の属する地物種別を示す情報であり、地物配置情報Fcは、各地物の位置及び方向を示す情報である。地物識別符号IDfは、各地物に重複することなく付される固有の符号である。
尚、地物種別情報Fbは、本例では、各地物の属する地物種別を表す地物種別コードCfである。
地物配置情報Fcは、各地物の位置及び方向を示す情報である。本例では、図3に示すように、地物配置情報Fcは、各地物の外形上に配置された複数個の代表点Rの位置情報により構成されている。本例では、代表点Rは、図3(a)〜(d)に示されるように各地物の輪郭線上における最外部に位置するように設定される。代表点Rの個数は地物種別によって適切に設定されている。例えば図3(a)の「横断歩道」のように、幅L3及び長さL4が配置場所によって変化する地物の場合には4箇所に設定されている。一方、例えば図3(d)の「進行方向別通行区分」の場合は各部の全ての寸法が法令によって規定されており、2箇所に設定しておけば道路上における地物の配置が定まる。
地物配置情報Fcを構成する代表点Rの位置情報は、各代表点Rの緯度及び経度で表現可能な地図上の位置を示す情報である。図1に示すように、本例では、地物配置データベースDB2は、地図データベースDBmの一部として構成されている。そして、代表点Rの位置情報は、地図データベースDBmに格納されている地図上の位置を示す情報とされている。そこで、以下に地図データベースDBmの構成について説明する。
(3)地図データベースDBm
地図データベースDBm(地図情報格納手段)は、地図情報Eを格納したデータベースである。図4は、地図データベースDBmに格納されている地図情報Eの内容を示す説明図である。この図に示すように、本実施形態に係る地図データベースDBmには、地図情報Eとして、道路ネットワークレイヤX1、道路形状レイヤX2、地物レイヤX3が格納されている。そして、本例では、この地物レイヤX3が、上述の地物配置データベースDB2を構成する。
道路ネットワークレイヤX1は、道路間の接続情報を示すレイヤである。具体的には、緯度及び経度で表現された地図上の位置情報を有する多数のノードNの情報と、2つのノードNを連結して道路を構成する多数のリンクLの情報とを有して構成されている。また、各リンクLは、そのリンク情報として、道路の種別(高速道路、有料道路、国道、県道等の種別)やリンク長さ等の情報を有している。
道路形状レイヤX2は、道路ネットワークレイヤX1に関連付けられて格納され、道路の形状を示すレイヤである。具体的には、2つのノードNの間(リンクL上)に配置されて緯度及び経度で表現された地図上の位置情報を有する多数の道路形状補完点Qの情報と、各道路形状補完点Qにおける道路幅Wの情報とを有して構成されている。
地物レイヤX3は、道路ネットワークレイヤX1及び道路形状レイヤX2に関連付けられて格納され、道路上及び道路の周辺に設けられた各種地物の情報を示すレイヤである。ここでは、対象地物に関して、地物識別符号IDfに関連付けて地物種別情報Fb及び地物配置情報Fcが格納されている(図2参照)。地物配置情報Fcは、図3に示されているように、各地物の代表点Rの地図上の位置を示す位置情報とされている。各代表点Rの位置情報は、ここでは、道路ネットワークレイヤX1及び道路形状レイヤX2に格納されているノードN又は道路形状補完点Qの位置情報を基準として、そこからのオフセット量により表されている。また、地物レイヤX3には、対象地物以外の区画線等の道路標示以外の道路ペイントや標識及び信号機等の立体物等に関する情報も格納されている。この各地物の代表点Rの位置情報を示す地物配置情報Fcに基づいて、後述する測定点情報生成部4において、各地物の測定点Pの位置情報が演算され導出される。
(4)測定点形態データベースDB3
図2に示すように、測定点形態データベースDB3(測定点形態情報格納手段)には、各地物種別の地物についての複数箇所の測定点P(図5参照)のそれぞれの形態を規定した測定点形態情報Maが格納されている。ここでは、各地物種別の地物にそれぞれ複数箇所の測定点Pが設定されている場合を例示している。勿論、各地物種別の地物に単一の測定点Pが設定されていてもよい。
本例では、複数箇所の測定点Pが設定されているので、各地物種別の地物に設定された複数の測定点Pのそれぞれに重複しない測定点番号Mn(=1、2、・・・)が設定されている。そして、各地物種別コードCfに関連付けられて当該地物種別に設定された複数箇所の測定点Pの測定点番号Mnと、各測定点番号Mnの測定点Pについての測定点形態情報Maとが格納されている。
尚、各地物種別の地物に単一の測定点Pが設定される場合において、単一の測定点番号Mn(=1)を設定しても構わない。
測定点Pは、対象地物上に設定された特定の位置である。この測定点Pが、後述する画像認識部7(画像認識手段、認識手段)における画像認識の対象となるとともに、位置関係演算部8(位置関係演算手段)における自車両Cと対象地物との位置関係の演算の際の基準となる。測定点形態情報Maは、地物の全体形態の中での測定点Pの配置を規定する情報である。
図5の(a)〜(d)は、複数の地物種別についての測定点Pの配置の例を示している。ここでは、一つの地物種別の地物について少なくとも2箇所以上に測定点Pが設定される場合を例示している。図5における括弧内の番号は、各測定点Pの測定点番号Mnを示すものである。
図5において、(a)は「横断歩道」、(b)は「停止線」、(c)は「横断歩道予告(横断歩道あり)」、(d)は「進行方向別通行区分」の各種別についての測定点Pの配置(測定点形態情報Ma)を示している。各測定点Pは、各地物種別の地物の輪郭形状に応じて、主として自車両Cの進行方向dに略直交する輪郭線上、又は輪郭形状が角部を有する場合には当該角部上に設定されている。また、測定点Pは、文字どおりの点には限定されず、測定点Pの位置を自車両Cの進行方向dに略直交する方向に延長した線としても設定される。本例では、後述するように自車両Cの進行方向dに対する前後の位置関係だけを認識するので、進行方向に直交する方向の位置は問題とならないことによるものである。
尚、各測定点Pの測定点番号Mnは、各測定点Pの優先度として用いることができる。ここで、優先度とは、一つの対象地物から複数箇所の測定点Pが認識された場合に、自車との位置関係を求める基準として用いる優先順位のことである。例えば、測定点番号Mnの値を測定点Pの優先順位として用いることができる。図5に示した例では、測定点番号Mnは、自車両Cの進行方向dの最前方に位置する測定点Pから順に1、2、3・・・と設定されている。つまり、本例では一つの対象地物についての複数箇所の測定点Pに関して、優先順位は自車両Cの進行方向dの最前方に位置する測定点Pから順に1、2、3・・・となる。
後述するように、測定点Pの認識に際しては、自信度が判定される。自信度とは、少なくとも画像情報Gに含まれる地物の画像がそのとき対象としている対象地物であることの確実性を表す尺度である。この判定は、後述する自信度判定部16により判定される。詳細は後述するが、この自信度は、自車両Cの進行に従って当該地物が画像認識可能な状態で撮像された画像情報Gのフレーム数が増えるに従って高まることになる。本例では、撮像装置14として、自車両Cの後方の道路面を撮像するバックカメラを用いている。従って、自車両Cの進行方向dの前方に位置する測定点Pの優先度を高く設定することにより、自信度の高い状態で認識された測定点Pがより優先されることになる。
尚、図5(b)の「停止線」のように、自車両Cの進行方向dに小さい対象地物については、進行方向dの後方に位置する測定点Pの優先度を高く設定してもよい。
次に、図5の(a)〜(d)に示す各地物種別の地物についての測定点Pの配置の具体例について順に説明する。これらの図において、測定点Pは黒点又は太い破線で示している。上述したように、測定点Pは1つの地物に対して1箇所でもよいが、ここでは、図示された2箇所分について説明する。
図5(a)の「横断歩道」の場合、測定点Pは、自車両Cの進行方向dに長い複数の平行な帯状の輪郭線のそれぞれの前方及び後方の短辺をつないだ直線状の2箇所に設定されている。
図5(b)の「停止線」の場合、測定点Pは、自車両Cの進行方向dに直交する前方及び後方の長辺上に配置された直線状の2箇所に設定されている。
図5(c)の「横断歩道予告(横断歩道あり)」の場合、測定点Pは、外周側及び内周側のそれぞれの菱形における、自車両Cの進行方向dの最前方側の角部にそれぞれ点状の2箇所に設定されている。
図5(d)の「進行方向別通行区分」の場合、測定点Pは、直進方向を示す矢印の最前方側の角部に点状の1箇所、及び当該矢印の首部の自車両Cの進行方向dに直交する線上に配置された直線状の1箇所の合計2箇所に設定されている。
以上のような各地物種別の地物についての測定点Pの配置の情報が、測定点形態情報Maとなる。尚、これらの各測定点Pは、走行中の自車両Cからの画像認識によりエッジを認識し易く、自車両Cと測定点Pとの距離の認識が比較的容易な位置に設定されている。尚、上記のように設定された各測定点Pのうち、直線状に設定された各測定点Pは、当該線上の中央等のいずれか一点の点状に設定しても好適である。また、点状に設定された各測定点Pは、進行方向dに略直交する直線状に設定しても好適である。
(5)測定点状態データベースDB4
図2に示すように、測定点状態データベースDB4(測定点状態情報格納手段)には、複数の地物の各測定点Pについて、画像認識の困難性に関する状態を示す測定点状態情報Mbが格納されている。
上述したように各地物に地物種別に応じて複数箇所の測定点Pが設定されている場合には、各測定点Pに測定点番号Mn(=1、2、・・・)が設定されている。測定点状態データベースDB4には、測定点形態データベースDB3に格納されている情報に従い、各地物に固有の地物識別符号IDfに関連付けられて、各測定点番号Mnの測定点Pについての測定点状態情報Mbが格納されている。
尚、この地物識別符号IDfは、地物配置データベースDB2と共通の符号である。また、各地物に複数箇所の測定点Pが設定されていない場合には、当該単一の測定点Pについての測定点状態情報Mbが格納される。単一の測定点Pに測定点Pに対して単一の測定点番号Mn(=1)が設定されていれば、測定点番号Mnの測定点Pについての測定点状態情報Mbが格納される。
測定点状態情報Mbは、後述する画像認識部7による画像認識の困難性に関する状態を示す情報である。従って、測定点状態情報Mbには、例えば、対象地物における各測定点Pの周辺のかすれや汚れの情報等、測定点Pの画像認識に影響を与える各種の情報が含まれる。
一例として、測定点状態情報Mbは、各測定点Pの周辺のかすれや汚れ等を考慮して画像認識の困難性を予め判断した結果を、以下のように表す情報とすることができる。つまり、画像認識が可能であることを示す「OK」又は画像認識が困難であることを示す「NG」のいずれかで表す情報とすることができる。あるいは、「良好に認識可能(=5)」から「認識不可能(=0)」までの難易度を複数段階の数値(5〜0)によって示す情報とすることもできる。
このような測定点状態情報Mbを用いれば、画像認識部7において、対象地物のかすれや汚れの程度等を考慮して測定点Pの画像認識を行うことが可能となる。従って、無駄な画像認識処理を省いて演算負荷を軽減できるとともに、測定点Pの位置の誤認識が生じることを抑制できる。
〔各機能部の構成〕
再び図1を参照し、以下各機能部の構成について説明する。
(1)自車位置演算部5
自車位置演算部5(自車位置情報取得手段)は、自車両Cの現在位置を示す自車位置情報Sを取得する。また、自車位置演算部5は、後述する特徴量情報生成部3(地物情報取得手段)に対して指定位置を入力する位置入力手段としても機能する。本例では、自車位置演算部5は、GPS受信機11、方位センサ12、及び距離センサ13と接続されている。
GPS受信機11は、GPS(Global Positioning System)衛星からのGPS信号を受信する装置である。このGPS信号は、通常1秒おきに受信され、自車位置演算部5へ出力される。自車位置演算部5では、GPS受信機11で受信されたGPS衛星からの信号を解析し、自車の位置(緯度及び経度)、進行方位、移動速度等の情報を取得することができる。
方位センサ12は、自車両Cの進行方位又はその進行方位の変化を検出するセンサである。この方位センサ12は、例えば、ジャイロセンサ、地磁気センサ、ハンドルの回転部に取り付けた光学的な回転センサや回転型の抵抗ボリューム、車輪部に取り付ける角度センサ等により構成される。そして、方位センサ12は、その検出結果を自車位置演算部5へ出力する。
距離センサ13は、自車両Cの移動距離や車速を検出するセンサである。この距離センサ13は、例えば、車両のドライブシャフトやホイール等が一定量回転するごとにパルス信号を出力する車速パルスセンサにより構成される。あるいは、自車両Cの加速度を検知するヨー・Gセンサ及び検知された加速度を2回積分する回路等を用いて構成されてもよい。そして、距離センサ13は、その検出結果を自車位置演算部5へ出力する。
自車位置演算部5は、これらのGPS受信機11、方位センサ12及び距離センサ13からの出力に基づいて、公知の方法により自車両Cの現在位置を特定する演算を行う。また、自車位置演算部5は、地図データベースDBmから自車位置周辺の地図情報Eを取得し、それに基づいて公知のマップマッチングを行うことにより自車両Cの現在位置を地図情報Eに示される道路上とする補正も行う。そして、自車位置演算部5は、演算結果である自車両Cの現在位置の情報を自車位置情報Sとして特徴量情報生成部3へ出力する。この際、自車位置情報Sは、例えば、緯度及び経度で表された位置の情報として表される。
尚、自車位置演算部5により演算された自車位置情報Sの精度は、方位センサ12、車速センサ13及びGPS受信機11により受信したGPS信号の精度に大きく影響を受ける。このため、自車位置情報は数メートルから数十メートル程度の誤差を含んでいる可能性がある。
(2)特徴量情報生成部3
特徴量情報生成部3は、特徴量の情報F(以下、適宜「特徴量情報F」と略称する。)を生成する特徴量情報生成手段(地物情報生成手段)、及び特徴量情報Fを取得する特徴量情報取得手段(地物情報取得手段)として機能する。特徴量情報Fは、地物情報の一部である。地物情報には、地物種別に応じて予め定められた特徴量の情報及び測定点の情報が含まれる。特徴量情報生成部3において生成され、取得される地物情報は、主として特徴量情報Fに応じた地物情報である。
図1に示すように、特徴量情報生成部3は、自車位置演算部5から取得した自車位置情報Sを指定位置とし、その位置近傍の地物の地物配置情報Fc及び地物種別情報Fbを地物配置データベースDB2から取得する。また、特徴量情報生成部3は、取得された地物種別情報Fbに従って当該地物種別の地物形態情報Faを地物形態データベースDB1から取得する。そして、これらの地物配置情報Fc及び地物形態情報Faに基づいて、自車位置情報Sに示される位置近傍の地物の道路面上における配置及び形態を示す特徴量情報Fを生成して取得する。この特徴量情報生成部3により生成された特徴量情報Fは、図1に示すように、測定点情報生成部4(地物情報取得手段)及び画像認識部7(認識手段、画像認識手段)に出力される。
本例では、特徴量情報生成部3は、自車位置情報Sに基づいて、撮像装置14により撮像される対象地物についての特徴量情報Fを生成して取得する。この対象地物は、自車両Cの進行方向dに沿った所定距離内に存在し、車両Cが進行することにより撮像装置14により撮像されることになる一つの地物である。本例では、特徴量情報生成部3は、当該対象地物についての特徴量情報F(地物情報)を、撮像装置14により撮像される前に先行的に生成して取得する。具体的には、特徴量情報生成部3は、自車位置情報S及び地物配置情報Fcに基づいて、一つの対象地物を地物配置データベースDB2から抽出する。
ここで、自車両Cからの所定距離は、自車位置情報Sの誤差や画像処理に要する時間、画像処理の容易性などを考慮して設定される。例えば、50メートルや100メートル等に設定することができる。地物配置データベースDB2からは、まず、自車位置情報Sに基づいて、地物配置情報Fcが抽出される。図2に示すように地物配置情報Fcは、地物識別符号IDfを介して地物種別情報Fbに関連付けられている。地物種別情報Fbは、地物形態データベースDB1の地物種別コードCfである。地物形態データベースDB1では、地物種別コードCfに地物形態情報Faが関連付けられている。このようにして、特徴量情報生成部3は、取得された地物種別情報Fbに従って当該地物種別の地物形態情報Faを地物形態データベースDB1から取得する。
以上のようにして、本例では、抽出された対象地物の同じ地物識別符号IDfに、これらの地物形態情報Fa、地物種別情報Fb及び地物配置情報Fcを組み合わせて一つの特徴量情報F(地物情報)を生成する。ここで、地物配置情報Fcは、図4を参照して上述したように複数個の代表点Rの地図上の位置情報である。特徴量情報F(地物情報)に含まれる地物形態情報Faは、対象地物の輪郭形状を表す輪郭情報とすることができる。この輪郭情報は、法令によって規定されていない箇所の寸法を変化させることにより、対象地物の輪郭形状を、複数個の代表点Rの地図上の配置に合わせて変形させて調整される。
(3)測定点情報生成部4
測定点情報生成部4は、測定点情報M(地物情報)を生成する測定点情報生成手段(地物情報生成手段)、及び測定点情報を取得する測定点情報取得手段(地物情報取得手段)として機能する。図1に示すように、測定点情報生成部4は、特徴量情報生成部3から出力された特徴量情報F(地物情報)に基づいて、当該特徴量情報Fに示される対象地物の測定点Pについて、その形態情報及び位置情報を含む測定点情報Mを生成して取得する。
測定点情報生成部4は、まず、特徴量情報Fに含まれる地物種別情報Fb(=Cf、図2参照)に示される地物種別に対応する測定点形態情報Maを、測定点形態データベースDB3から取得する。また、測定点情報生成部4は、取得した測定点形態情報Maと、特徴量情報Fとに基づいて測定点Pの位置情報を導出する。そして、測定点情報生成部4は、特徴量情報Fに示される対象地物の複数箇所の測定点Pの形態情報及び位置情報を含む測定点情報Mを生成して取得する。この測定点情報生成部4により生成された測定点情報Mは、図1に示すように、画像認識部7(画像認識手段、認識手段)及び位置関係演算部8(位置関係演算手段)に出力される。
測定点情報Mを構成する測定点Pの位置情報は、測定点形態データベースDB3から取得した測定点形態情報Maと、特徴量情報生成部3から出力された特徴量情報Fとに基づいて導出する。
上述したように、特徴量情報Fには、当該特徴量情報Fに係る対象地物の複数の代表点Rの地図上の位置や、当該対象地物の輪郭形状が表されている。また、測定点形態情報Maは、地物の全体形態の中での測定点Pの配置として規定されている。特徴量情報生成部3は、これらの情報を組み合わせ、特徴量情報Fに係る対象地物の地図上の配置を基準として測定点形態情報Maに示される測定点Pの位置を導出する。測定点Pが複数個設定されている場合には、それぞれの測定点Pの位置を導出する。このようにして、地図上における測定点Pの位置を示す位置情報(測定点情報M)を取得する。
尚、演算した結果、測定点Pの位置が、代表点Rの位置と一致し、又は代表点Rをつなぐ線上に一致する場合もあり得る。一方、測定点情報Mを構成する測定点Pの形態情報は、測定点形態データベースDB3から取得した測定点形態情報Maの内容と同一とすることができる。
また、本例では、測定点情報生成部4は、特徴量情報Fに含まれる地物識別符号IDfに基づいて、同じ地物識別符号IDfの測定点状態情報Mbを測定点状態データベースDB4から抽出して取得する(図1、図2参照)。よって、測定点情報生成部4は、測定点状態情報を取得する測定点状態情報取得手段としても機能する。測定点状態情報Mbは、上述したように、個々の測定点Pについての画像認識の困難性に関する状態を示す情報である。測定点情報生成部4は、地物識別符号IDfに、測定点Pの位置情報及び形態情報、並びに測定点状態情報Mbを組み合わせて一つの測定点情報M(地物情報)を生成する。
以上のとおり、地物形態データベースDB1、地物配置データベースDB2、特徴量情報生成部3、測定点形態データベースDB3、測定点状態データベースDB4、及び測定点情報生成部4を加えた構成が、地物情報(特徴量情報F及び測定点情報M)を生成して出力する地物情報出力手段となる。また、特徴量情報生成部3及び測定点情報生成部4は、地物情報(特徴量情報F及び測定点情報M)を取得する地物情報取得手段2に相当する(図1参照)。
(4)画像情報取得部6
画像情報取得部6は、自車両Cに搭載された撮像装置14(外界情報検出装置)により撮像した画像情報Gを取得する画像情報取得手段(外界情報取得手段)として機能する。撮像装置14は、例えばCCDセンサやCMOSセンサ等の撮像素子と、この撮像素子に光を導くための光学系を構成するレンズ等を有して構成される。この撮像装置14は、自車両Cの前方や後方に向けて搭載され、少なくとも自車両Cが走行する道路の路面が撮影されるように設けられる。このような撮像装置14としては、自車両Cの前方や後方の映像を撮像するために既に設けられている車載カメラが好適に用いられる。
画像情報取得部6は、撮像装置14により撮像したアナログの撮像情報を所定の時間間隔で取り込み、デジタル信号の画像情報Gに変換して画像メモリ15に格納する。この際の画像情報Gの取り込みの時間間隔は、例えば、10〜50ms程度とすることができる。これにより、画像情報取得部6は、自車両Cが走行中の道路面を撮像した複数フレームの画像情報Gをほぼ連続的に取得することができる。一旦画像メモリ15に格納された画像情報Gは、画像認識部7へ出力される。
(5)画像認識部7
画像認識部7は、画像情報Gに含まれている対象地物について、その特徴量及び測定点Pに関する画像認識を行う画像認識手段(認識手段)として機能する。特徴量及び測定点Pの認識対象は、上述した特徴量情報F及び測定点情報Mに示されている。
画像認識部7は、後述する位置関係演算部8において自車両Cと対象地物との間の位置関係を演算するために、測定点Pを認識することを最大の目的とする。本例においては、画像認識部7は、特徴量情報Fに含まれる対象地物の輪郭情報を利用して一次認識を行い、さらに測定点情報Mを利用して二次認識を行う。つまり、輪郭情報に基づいて対象地物の大まかな認識を行い、さらに詳細な認識を行って測定点Pを認識する。
上述したように、特徴量情報生成部3は、自車両Cの進行方向dに存在し、自車両Cが進行することにより撮像装置14により撮像されることになる一つの対象地物についての特徴量情報Fを先行的に生成して取得する。そこで、画像認識部7は、特徴量情報生成部3から特徴量情報Fが出力された後に画像情報取得部6によりほぼ連続的に取得される複数フレームの画像情報Gに対して、画像認識を行う。
具体的には、画像認識部7は、まず、画像情報Gに対する二値化処理やエッジ抽出処理等により、特徴量情報Fに示される対象地物の特徴量(輪郭形状)を抽出する。その後、測定点情報生成部4から出力された当該対象地物についての測定点情報Mに含まれる形態情報に基づいて、パターン認識処理により、画像情報Gの中に含まれる複数箇所の測定点Pの画像認識を行う。
ここで、画像認識部7は、測定点情報Mに含まれる測定点状態情報Mbに基づいて、画像認識が困難とされた測定点Pについて画像認識を行わないようにしてもよい。上述したように、測定点状態情報Mbは、各測定点Pの周辺のかすれや汚れ等を考慮して画像認識の困難性を予め判断した結果を示す情報である。これにより、かすれや汚れ等により画像認識が困難な状態となっている測定点Pの画像認識処理を省くことができるので、画像認識部7による演算負荷を軽減できるとともに、測定点Pの位置の誤認識が生じることを抑制できる。また、一つの対象地物に対して複数箇所の測定点Pが設定されている場合には、画像認識部7は、対象地物の複数箇所の測定点Pの中から画像処理が可能であると示された測定点Pのみを対象として画像認識を実行するようにしてもよい。
(6)自信度判定部16
図1に示すように、画像認識部7は、自信度判定手段としての自信度判定部16を備えている。自信度判定部16は、少なくとも画像情報Gに含まれている地物の画像が地物情報(特徴量情報F及び測定点情報M)が示す対象地物の画像であることの確実性を表す自信度Jを判定する。換言すれば、画像認識部7による対象地物の輪郭形状及び測定点Pの認識結果の確実性を表す自信度Jを判定する。画像認識部7による測定点Pの認識率を表す尺度ともいえる。
例えば、後述する位置関係演算部8は、この自信度Jに基づいて自車両Cと対象地物(測定点P)との位置関係を演算することができる。例えば、判定された自信度Jが所定のしきい値以上のときに、位置関係演算部8において当該対象地物についての測定点Pの画像認識結果を用いて位置関係を演算することができる。その結果、自信度Jが低い、即ち低い認識率が想定される測定点Pに基づく位置関係の演算が行われないので、無駄な処理を抑制することができる。或いは、位置関係演算部8は、自信度Jに拘らず位置関係を演算し、当該地物位置認識装置が、位置関係の演算結果(距離情報I)と自信度Jとを合わせて出力するようにしてもよい。この場合は、この出力を受けた他の装置やアプリケーションなどが、自信度Jを勘案して、演算された距離情報Iの採用又は不採用を決定することができる。
自身度Jは、全ての地物種別に共通する定量的な値として定義されている。また、共通に定義された自信度Jは、画像認識部7による認識結果に応じて複数段階に分けられて定義されている。画像認識部7は、地物種別ごとに異なる特徴量及び測定点に対して認識を行う。従って、定義された全ての段階が常に自信度Jの判定に用いられる訳ではなく、地物種別ごとに設定された段階が当該地物の認識の際に用いられる。用いる段階は地物種別ごとに異なるが、それぞれの段階に与えられた値は、全ての地物種別において共通である。従って、異なる対象地物に対する自信度Jであっても、定量的な比較が可能である。
自信度Jのデータ構造は、データテーブルDT(図1に示す)に格納されている。または、地物形態データベースDB1及び測定点形態データベースDB3に地物種別コードCfに関連付けて格納され、地物情報として抽出されるような形態であってもよい。本例では、自信度Jのデータ構造の説明を容易にするため、データテーブルDTを有する構成を例として説明する。
図6は、全ての地物種別に共通する定量的な値としての自信度Jのデータ構造を示す説明図である。自信度Jは、特徴量の認識結果に応じて複数段階定義され、その1つ以上の段階は測定点Pの認識結果に応じてさらに複数段階に分けられている。本例では、自信度Jの値域として、0〜10の11段階に亘る整数値を採用している。特徴量の認識結果に応じた自信度Jは、本例では6段階設けられている。図6に示すように、特徴量が全く認識できない場合は自信度「0」とされ、特徴量が認識できる場合は特徴量の認識レベルに応じて、「最高」、「高」、「中」、「やや低」、「低」の5段階に区切られている。自信度「0」を除く各段階は、測定点Pの認識結果に応じて、「最高」の認識レベルの場合には自信度「10又は9」とされ、「高」の場合には自信度「8又は7」とされ、「中」の場合には自信度「6又は5」とされ、「やや低」の場合には自信度「4又は3」とされ、「低」の場合には自信度「2又は1」とされる。
このように、特徴量が全く認識できない場合(自信度「0」)を除く、少なくとも1つ以上の段階は、さらに複数の段階に区切られている。本例では、自信度「0」除く全ての段階がさらに2つの段階に区切られ、全部で11段階を有している。図6に示すように、特徴量の認識結果に基づく段階のそれぞれは、測定点Pが正確に認識できた場合には相対的に高い段階の値が与えられる。例えば、特徴量の認識結果が「最高」の認識レベルの場合、測定点の認識結果に応じて自信度「10又は9」とされるが、測定点が正確に認識できた場合には相対的に高い段階である自信度「10」とされる。
尚、本例では、自信度Jが高いほど大きな値としたが、自信度が高い方を0としてもよい。また、整数値に限らず、小数値などを用いてもよい。
自信度Jは全ての地物種別に共通して定量的に定義されるが、それぞれの地物種別においては、その一部又は全ての段階が用いられる。但し、図6にアスターマーク(*)を付けて示した自信度は、地物種別に拘らず全ての地物種別の判定に用いられる。即ち、特徴量の全てが認識されない場合の最低値(本例では自信度「0」)、特徴量の全てが認識されると共に測定点が正確に認識される最高値(本例では自信度「10」)、及び中間段階の中間値(本例では自信度「6」)である。
以下、図3及び図5(a)〜(d)に示した各地物種別に関する自信度Jの判定について説明する。ここでは理解を容易にするため、各地物種別が単一の測定点P(図5に示された(1)の測定点Pのみ)を設定されているものとして説明する。
図7は、地物種別が「横断歩道」である場合の判定に用いられる自信度Jを示している。ここでは、縞模様を全く認識できなかった場合には最低値の自信度「0」と判定される。一方、縞模様を3つ以上認識できた場合には、特徴量の認識結果は「最高」と判定される。さらに測定点が認識できた場合には最高値の自信度「10」と判定され、測定点がおおよそ認識できた場合には自信度「9」と判定される。
また、縞模様がある程度認識できた場合には、特徴量の認識結果は「中」と判定される。ここで測定点Pが認識できた場合には中間値の自信度「6」と判定され、測定点Pがおおよそ認識できた場合には自信度「5」と判定される。
図8及び図9は、地物種別が横断歩道である場合の特徴量(縞模様)及び測定点Pの認識と自信度Jの関係について示す説明図である。
図8に示した例では、横断歩道を構成する5つのラインT1〜T5の内、T3が非常にかすれた場合を示している。その結果、ラインT1とT2とによる縞模様S1と、ラインT4とT5とによる縞模様S2との2つの縞模様しか認識できていない。このような場合、特徴量の認識結果は「中」と判定される。しかし、ラインT1、T2、T4、T5の輪郭が明確な場合には、これらの端部を結ぶことで、測定点Pがはっきりと認識可能である。このような場合には、上述したように中間値の自信度「6」と判定される。
一方、縞模様が多く認識されても、ラインT1〜T5の輪郭が明確ではない場合がある。例えば、夜間で照明が暗い、濡れた路面の反射の影響などである。図9に示した例では、縞模様は全て認識できており、特徴量の認識結果は「最高」となる。しかし、測定点Pの認識に関しては、3つのラインT2、T3、T5からの推定であるので、「おおよそ認識」と判定される。その結果、最高値の自信度「10」とはならず、自信度「9」と判定される。
図10は、地物種別が「停止線」である場合の判定に用いられる自信度Jを示している。ここでは、ラインのペイントを全く認識できなかった場合には自信度は最低値の「0」と判定される。一方、ラインを完全に認識できた場合には、特徴量の認識結果は「最高」と判定される。停止線の場合には、特徴量と測定点Pとがほぼ一致するので、この場合には測定点Pも認識できたとされ、自信度は最高値の「10」と判定される。
また、ラインがある程度認識できた場合には、特徴量の認識結果は「中」と判定される。同様に特徴量と測定点Pとがほぼ一致するので、測定点Pも認識でき、自信度は中間値の「6」と判定される。
図10から明らかなように、地物種別が「停止線」の場合には、全ての地物種別に共通に用いられる自信度のみによって判定される。
図11は、地物種別が「横断歩道予告(横断歩道あり)」である場合の判定に用いられる自信度Jを示している。
ここでは、菱型形状が認識できなかった場合には、自信度は最低値の「0」と判定される。一方、菱形形状が正確に認識できた場合には、特徴量の認識結果は「最高」と判定され、さらに測定点Pが認識できた場合には自信度は最高値の「10」と判定される。測定点Pがおおよそ認識できた場合には、自信度は「9」と判定される。
一方、菱形形状をある程度認識でき、且つ測定点Pが含まれる先端部の形状(図12の符号Aで示す領域)が認識できた場合には、特徴量の認識結果は「高」と判定される。さらに測定点Pが認識できた場合には、自信度は「8」と判定され、測定点Pがおおよそ認識できた場合には、自信度は「7」と判定される。
また、菱形形状はある程度認識できたが、測定点Pが含まれる先端部の形状が認識できない場合には特徴量の認識結果は「中」と判定される。ここで測定点Pが認識できた場合には、自信度は中間値の「6」と判定される。測定点Pがおおよそ認識できた場合には、自信度は「5」と判定される。
また、特徴量として菱形形状を認識する場合、以下のような方法を用いることができる。菱形形状の外側及び内側の8つの頂点部分(図13に示す領域B)の形状を特徴量とし、その内のいくつを認識できるかによって特徴量の認識結果を判定するようにしてもよい。
図14は、地物種別が「進行方向別通行区分」である場合の判定に用いられる自信度Jを示している。
矢印の形状を全く認識できなかった場合、自信度は最低値の「0」と判定される。一方、矢印の形状が正確に認識できた場合には、特徴量の認識結果は「最高」と判定される。さらに測定点Pが認識できた場合には、自信度は最高値の「10」と判定される。測定点Pがおおよそ認識できた場合には、自信度は「9と」判定される。
一方、矢印の形状をある程度認識でき、且つ測定点が含まれる先端部の形状(図15に符号Aで示す領域)が認識できた場合には、特徴量の認識結果は「高」と判定される。さらに測定点Pが認識できた場合には、自信度は「8」と判定され、測定点Pがおおよそ認識できた場合には、自信度は「7」と判定される。
矢印の形状が有る程度認識される場合の程度は、図14に示すように「高」、「中」、「やや低」の3パターンある。それぞれの場合において、測定点Pが認識できる場合には、偶数値が、測定点が認識できない場合はそれぞれの遇数値よりも小さい奇数値の判定値となる。
特徴量として矢印形状を認識する場合、上述した「横断歩道予告(横断歩道あり)」の場合と同様に、以下のような方法を用いることができる。矢印の外形形状の外側及び内側の角部分(図15に示す領域B)の形状を特徴量とし、その内のいくつを認識できるかによって特徴量の認識結果を判定するようにしてもよい。
上述したような自信度Jの違いは、地物全体が撮像された場合だけでなく、車両の移動に伴っても発生する。以下、図16を用いて対象地物に対する自車両Cの各位置での自信度Jの変化と画像認識の実行の可否の具体例について説明する。
図16は、「進行方向別通行区分」の道路標示が対象地物である場合における自車両Cの対象地物に対する各位置での画像情報Gの例を示す図である。図16の(a)と(d)、(b)と(e)、(c)と(f)はそれぞれ対応している。(d)〜(f)は、(a)〜(c)に示される自車両Cの各位置における画像情報Gの例をそれぞれ示している。この例では、撮像装置14として、自車両Cの後方の道路面を撮像するバックカメラを用いている。
図16の(d)〜(f)に示すように、「進行方向別通行区分」の道路標示は、1フレームの画像情報G中に全体が納まらない。このような場合には、自車両Cの進行に伴って所得される複数フレームの画像情報Gを用いることにより、対象地物の特徴量及び測定点Pが認識される。後述するように、自信度は、自車両Cの進行に従って当該地物が画像認識可能な状態で撮像された画像情報Gのフレーム数が増えるに従って高まる。従って、より確実な状態で認識された測定点Pの情報を用いて、位置関係を求めることができる。
図16(a)に示される自車位置での画像情報Gには、(d)に示されるように対象地物の特徴的な形状の部分がほとんど含まれていない。また、ここまでの画像情報Gの各フレームにも当然に対象地物の特徴的な形状の部分は含まれていない。更に、この対象地物について設定された測定点Pの画像も含まれておらず、測定点Pの画像認識もできていない。従って、図14に示した自信度Jの判定条件に基づけば、例えば自信度「3」と判定される。
図16(b)に示される自車位置での画像情報Gには、(e)に示されるように対象地物の特徴的な形状部分が多く含まれている。また、ここまでの画像情報Gの相当数のフレームにも対象地物の特徴的な部分は含まれている。しかし、測定点Pはまだ画像情報Gに含まれていない。従って、図14に示した自信度の判定条件に基づけば、例えば自信度「7」と判定される。
尚、図5に示したように、一つの地物種別に対して優先度を設けて複数の測定点Pが設定されている場合には、測定点ごとに自信度を判定してもよい。また、複数の測定点Pの優先度も考慮して、対象地物ごとに自信度を判定してもよい。
図16の例で複数の測定点Pが設定されている場合には、(e)に示される画像情報Gに優先度が「2」の測定点Pが含まれている(図5(d)参照)。自信度が測定点ごとに判定される場合、この優先度「2」の測定点Pに関しては、自信度「8」と判定される。従って、当該優先度「2」の測定点Pの自信度Jは、優先度「1」の測定点Pの自信度J(=7)よりも高く判定される。
このため、例えば、この時点において、自車両Cと対象地物との位置関係を求める場合には、優先度「2」の測定点Pが利用される。
図16(c)に示される自車位置での画像情報Gには、(f)に示されるように対象地物の特徴的な形状部分(領域A)が含まれる。つまり、測定点Pが画像情報Gに含まれている。また、ここまでの画像情報Gの相当数のフレームにも対象地物の全体の特徴的な部分(領域B)が含まれている。従って、図14に示した自信度の判定条件に基づけば、例えば自信度「10」と判定される。
この測定点Pは、図5に例示したように複数の測定点Pが設定される場合の優先度「1」の測定点Pである。複数の測定点Pが設定されている場合、優先度「2」の測定点Pもこの時点において、自信度「10」と判定される。2つの測定点Pの自信度Jは共に「10」であるが、この時点において、自車両Cと対象地物との位置関係を求める場合には、優先度に基づき、優先度「1」の測定点Pが利用される。
尚、複数の測定点Pが設定される場合、優先度に基づく選択は、後段の位置関係演算部8に選択手段(例えば、図1に示す測定点選択部17)を設けることによって行ってもよい。
(7)位置関係演算部8
位置関係演算部8は、画像認識部7により認識された測定点Pの画像認識結果に基づいて自車両Cと当該測定点Pとの位置関係を演算する。一つの対象地物に対して複数の測定点Pが設定され、複数の測定点Pが認識された場合、位置関係演算部8に測定点Pを選択する測定点選択部17を設け、優先度や自信度によって選択してもよい。
位置関係演算部8は、測定点Pの画像認識結果に基づいて自車両Cと当該測定点Pとの位置関係を演算する。即ち、撮像装置14の自車両Cへの搭載位置及び撮像方向に基づいて、画像情報Gの一つのフレームを構成する画像中の各位置と自車両Cとの位置関係は定まる。従って、位置関係演算部8は、画像認識部7による測定点Pの画像認識結果(測定点Pの配置)に基づいて、当該フレームに係る画像情報Gの撮像時の自車両Cと測定点Pとの位置関係を導出する。この「位置関係」は、一例として、自車両Cと測定点Pとの「距離情報I」として算出される。
また、距離センサ13等により当該フレームに係る画像情報Gの撮像時から現在時点までの自車両Cの移動距離を導出する。そして、これらに基づいて、位置関係演算部8は、現在の自車両Cと選択測定点Pとの位置関係を演算して導出する。
尚、この位置関係演算部8による演算処理は、上記自信度判定部16による自信度の判定結果が所定のしきい値以上(例えば「6」以上)のときに行われるようにしてもよい。
〔地物位置認識手順〕
以下、本実施形態に係る地物位置認識装置1における自車位置認識手順の具体例について、図17に示すフローチャートを利用して説明する。
まず、自車位置演算部5において、自車両の現在位置を示す自車位置情報Sを取得する(#1;自車位置情報取得工程)。
次に、地物情報生成部3において、自車位置情報Sに基づいて、自車両Cの進行方向dの所定距離内に存在する対象地物を抽出する。具体的には、地物配置情報Fcを対象として地物配置データベースDB2内を検索する(#2)。そして、自車両Cの進行方向dの所定距離内に対象地物が存在するか否かを判定する(#3)。対象地物が存在しない場合には、自車位置情報取得工程(#1)へ戻り、新たな自車位置情報Sを取得する。対象地物が存在する場合には、特徴量情報生成部3において、当該対象地物についての特徴量情報F(地物情報)を生成して取得する(#4)。次に、測定点情報生成部4において、対象地物の測定点Pについての測定点情報M(地物情報)を生成して取得する(#5)。以上、処理#2〜処理#5は、本発明の地物情報取得工程に相当する。
次に、画像情報取得部6において、撮像装置14により撮像した画像情報Gを取得する(#6;外界情報取得工程、画像情報取得工程)。ここで取得された画像情報Gは画像認識部7へ送られる。そして、画像認識部7において、画像情報Gに含まれている対象地物の測定点Pの画像認識が行われる(#7、#9;認識工程、画像認識工程)。また、この画像認識の際、画像認識部7の自信度判定部16は、測定点Pの認識に関する自信度Jを判定する(#8、#10〜#12)。尚、処理#7〜処理#12を広義の認識工程とし、自信度判定工程を認識工程の一部としてもよい。
画像認識部7は、取得された画像情報Gから特徴量を認識する(#7)。そして、特徴量の認識結果に応じて図6などに基づいて上述したように、一次自信度Kを判定する。本例では、特徴量の認識度合いに応じて、5段階(K=1〜5)の一次自信度Kを判定する(#8)。尚、特徴量が認識されない場合には、一次自信度K=0と判定する(#12)。この場合の一次自信度Kは、自信度Jと一致する。
次に、画像認識部7は、取得された画像情報Gから測定点Pを認識する(#9)。そして、測定点Pの認識結果に応じて、自信度判定部16によってさらに二次判定が実施される。二次判定では、一次自信度Kが複数段階、本例では2段階に分割される。具体的には、測定点Pが正確に認識された場合には、一次自信度Kを2倍した値を自信度Jとする(#10)。測定点Pが正確に認識されない場合には、一次自信度の2倍から1を減じた値を自信度Jとする(#11)。
次に、位置関係演算部8において、自信度Jの値が判定される(#13)。自信度Jが所定のしきい値(例えば「6」)未満である場合には、画像情報取得工程(#6)へ戻る。即ち、この時点では以後の工程へは進まず、次のフレームの画像情報Gを更に取得する。自信度Jが所定のしきい値以上である場合には、位置関係演算部8において、測定点Pの認識結果に基づいて、自車両Cと当該測定点Pとの位置関係(距離情報I)を演算する(#14)。以上、処理#13及び#14は、本発明の位置関係演算工程に相当する。
そして、演算された距離情報I及び自信度Jは、当該地物位置認識装置1から出力される(#15;出力工程)。尚、位置関係演算工程において、自信度が「1」以上の時に位置関係を演算するようにしてもよい。距離情報Iと、自信度Jとの双方が出力されるので、これらの情報を取得した後段の装置や機能部において、自信度Jに応じて算出された距離情報Iを利用するか否かを決定してもよい。
〔第二実施形態〕
次に、本発明の第二実施形態について説明する。図18は、本実施形態に係るナビゲーション装置30及び自車位置認識装置20の両方を兼ねる装置の概略構成を示すブロック図である。
図に示すように、この装置は、上記第一実施形態に係る地物位置認識装置1に加えて、地図情報取得部21と、走行制御部22と、ナビゲーション用演算部23と、自車位置情報補正部29とを備えている。地図情報取得部21は、地図情報格納手段としての地図データベースDBmから地図情報Eを取得する。走行制御部22は、自車両Cの走行制御を行う。ナビゲーション用演算部23は、自車両Cの進路案内のための各種演算処理を行う。また更に、任意の情報を表示可能な表示手段としてのモニタ24と、任意の音声情報を出力可能な音声出力手段としてのスピーカ25とを備えている。
地図情報取得部21は、地物位置認識装置1の自車位置演算部5から出力される自車位置情報Sに基づいて、自車両Cの進行方向dを含む周辺の地図情報Eを地図データベースDBmから取得する。自車位置情報補正部29は、自車位置情報S、自信度J、距離情報I、測定点情報Mに基づいて自車位置情報Sを補正し、補正後の自車位置情報S’を出力する。地図情報取得部21により取得された地図情報E、自車位置情報補正部29から出力された補正後の自車位置情報S’は、走行制御部22及びナビゲーション用演算部23へ出力される。
上述したように、位置関係演算部8による演算結果から、現在の自車両Cと測定点Pとの位置関係が定まる。この位置関係は、本例では、測定点P(対象地物)と自車両Cとの距離情報Iとして与えられる。また、測定点Pについての測定点情報Mに含まれる位置情報は、測定点Pの地図上の正確な位置(緯度及び経度)を示している。従って、自車位置情報補正部29は、これらの情報に基づいて、測定点Pの地図上の正確な位置を基準とする自車両Cの詳細位置を演算して導出することができる。そして、自車位置情報補正部29は、この自車両Cの詳細位置の演算結果に基づいて、自車位置演算部5から出力された現在の自車位置情報Sを補正する。このようにして、自車両Cの位置は高精度に特定される。
上述したように、自車位置認識装置20からは、自車位置情報補正部29による補正後の自車位置情報S´が、走行制御部22及びナビゲーション用演算部23へ出力される。走行制御部22は、この自車位置情報S´と、自車両Cの進行方向dの地図情報Eとに基づいて、自車両Cの走行制御のための演算処理を行い、車両各部に対する制御命令を出力する。具体的には、走行制御部22は、自車両Cの進行方向dの地図情報Eに含まれる道路形状、或いは停止線や信号機等の各種地物の情報等に基づいて、自車両Cの走行制御を行う。ここで、走行制御とは、例えばレーンキープ、衝突防止、事故防止等のための操舵や加減速等である。
ナビゲーション用演算部23は、自車両Cの周辺の地図情報Eと、補正後の自車位置情報S´とに基づいて、自車両Cの進路案内のための各種演算処理を行う。そして、モニタ24及びスピーカ25の一方又は双方に対する制御命令を出力する。具体的には、ナビゲーション用演算部23は、自車両Cの周辺の地図情報Eに基づいて生成される地図画像上に、補正後の自車位置情報S´に基づく詳細な自車位置を示す画像を重ねてモニタ24に表示する。また、自車両Cの進行方向dの地図情報Eに含まれる道路形状等と、補正後の詳細な自車位置情報S´とに基づいて、正確なタイミングで進路案内のための運転者への報知を行う。この報知は、モニタ24及びスピーカ25の一方又は双方を用いて行われる。
〔その他の実施形態〕
(1)上記の実施形態では、地物形態データベースDB1に格納する地物形態情報Faに、地物の輪郭形状を示す輪郭情報と、法令によって規定されており寸法が変化しない箇所に関する情報とが含まれる場合について説明した。しかし、地物形態情報Faとして格納する情報はこれらに限定されない。したがって、例えば各地物種別の地物の色彩情報や模様情報等を備える構成としても好適である。
(2)上記の実施形態では、地物配置データベースDB2に格納される地物配置情報Fcを、各地物の外形上に配置された複数個の代表点Rの位置情報により構成する場合について説明した。しかし、各地物の位置及び方向を示す地物配置情報Fcの構成は、これに限定されない。すなわち、各地物の位置及び方向を表すことが可能な情報であればよく、例えば、各地物の重心の位置情報と方向を示す単位ベクトルとにより構成することも好適な実施形態の一つである。
(3)上記の実施形態では、以下のようなタイミングで地物情報(特徴量情報F及び測定点情報M)を取得する場合を例として説明した。つまり、上記例では、地物情報取得手段が、自車両Cの進行方向dに存在する対象地物についての地物情報を、撮像装置14により撮像される前に先行的に生成して取得した。そして、画像認識部7は、当該特徴量情報F及び当該測定点情報Mを用いて測定点Pの画像認識を行った。しかし、特徴量情報F及び測定点情報Mを取得するタイミングはこれに限定されない。すなわち、例えば、各フレームの画像情報Gが取得されるのと同時に、当該画像情報Gに係る撮像領域内に含まれる対象地物についての特徴量情報F及び測定点情報Mを生成して取得してもよい。そして、それらを用いて当該画像情報Gに対する測定点Pの画像認識を行う構成とすることも好適な実施形態の一つである。
(4)上記の実施形態では、一つの対象地物について複数箇所の測定点Pが設定される場合、その優先度が地物種別毎に予め定められた優先順位としての測定点番号Mnによって定まる場合を例として説明した。しかし、各測定点Pの優先度の決定方法はこれに限定されない。したがって、例えば、優先度を、画像認識の状態や自車両Cの走行状態等に応じて、条件の良い測定点の優先度が高くなるように、その都度演算して優先度を決定する構成とすることも好適な実施形態の一つである。
(5)上記の実施形態では、測定点情報Mを構成する測定点Pの位置情報を、測定点形態情報Maと特徴量情報Fとに基づいて演算して導出する場合について説明した。しかし、測定点Pの位置情報を取得する方法はこれに限定されない。すなわち、例えば、測定点配置データベースを更に備え、複数の地物の各測定点Pについてその位置情報を格納する構成とすることも本発明の好適な実施形態の一つである。この場合、各地物に固有の地物識別符号IDfに関連付けられて、当該地物に設定された複数箇所の測定点Pの測定点番号Mnと、各測定点番号Mnの測定点Pについての位置情報とが格納された構成とすると好適である。
(6)上記の実施形態では、一つの対象地物に対して複数の測定点Pが設定される場合、画像認識部7により認識された測定点Pの中の1つの測定点Pの情報を用いて詳細な自車位置を演算する場合について説明した。しかし、2個以上の測定点Pの情報を用いて詳細な自車位置を演算して自車位置情報Sを補正する構成とすることも本発明の好適な実施形態の一つである。この場合、例えば、複数の測定点Pのそれぞれについて上記実施形態と同様に詳細な自車位置を演算し、複数の詳細な自車位置の平均を最終的な詳細自車位置とする構成とすると好適である。
(7)上記の実施形態では、外界検出装置が撮像装置である場合を例として説明した。しかし、これに限らず、レーザーレーダやソナーなどを用いて外界情報を取得してもよい。
以上説明したように、本発明によって、地物位置を認識するための基準位置の認識精度に応じて地物位置を認識することが可能な地物位置認識装置及び地物位置認識方法を提供することができる。また、本発明の地物位置認識装置及び方法は、定量的な自信度と共に地物位置を詳細に認識することができるので、ナビゲーション装置や自車位置認識装置に適用することができる。
本発明の第一実施形態に係る地物位置認識装置の構成を模式的に示すブロック図 図1に示される各データベースに格納される情報の内容を示す説明図 複数の地物種別の地物の輪郭形状及び代表点の位置の例を示す図 地図データベースに格納されている地図情報の内容を示す説明図 複数の地物種別についての測定点の配置の例を示す図 全ての地物種別に共通する定量的な値としての自信度のデータ構造を示す説明図 地物種別が横断歩道である場合の自信度のデータ構造を示す説明図 地物種別が横断歩道である場合の特徴量(縞模様)及び測定点の認識と自信度との関係について示す説明図(1) 地物種別が横断歩道である場合の特徴量(縞模様)及び測定点の認識と自信度との関係について示す説明図(2) 地物種別が停止線である場合の自信度のデータ構造を示す説明図 地物種別が横断歩道予告(横断歩道あり)である場合の自信度のデータ構造を示す説明図 地物種別が横断歩道予告(横断歩道あり)である場合の特徴量(菱形形状)及び測定点の認識と自信度との関係について示す説明図(1) 地物種別が横断歩道予告(横断歩道あり)である場合の特徴量(菱形形状)及び測定点の認識と自信度との関係について示す説明図(2) 地物種別が進行方向別通行区分である場合の自信度のデータ構造を示す説明図 地物種別が進行方向別通行区分である場合の特徴量(矢印形状)及び測定点の認識と自信度との関係について示す説明図 自車両の対象地物に対する各位置での画像情報の例を示す図 本発明の第一実施形態に係る地物位置認識の手順を示すフローチャート 本発明の第二実施形態に係るナビゲーション装置及び車両位置認識装置の両方を兼ねる装置の概略構成を示すブロック図
符号の説明
1:地物位置認識装置
2:地物情報取得手段
3:特徴量情報生成部(地物情報取得手段)
4:測定点情報生成部(地物情報取得手段)
5:自車位置演算部(自車位置情報取得手段)
6:画像情報取得部(画像情報取得手段、外界情報取得手段)
7:画像認識部(画像認識手段、認識手段)
8:位置関係演算部(位置関係演算手段)
14:撮像装置(外界検出装置)
16:自信度判定部(自信度判定手段)
20:自車位置認識装置
29:自車位置情報補正部(自車位置情報補正手段)
30:ナビゲーション装置
DB1:地物形態データベース
DB2:地物配置データベース
DB3:測定点形態データベース(測定点形態情報格納手段)
DB4:測定点状態データベース
DBm:地図データベース(地図情報格納手段)
E:地図情報
F:特徴量情報(地物情報)
M:測定点情報(地物情報)
S:自車位置情報
G:画像情報(外界情報)
C:自車両

Claims (13)

  1. 外界検出装置による検出対象となる対象地物と自車両との位置関係を演算するための地物位置認識装置であって、
    前記外界検出装置により検出された外界情報を取得する外界情報取得手段と、
    前記自車両の現在位置を示す自車位置情報を取得する自車位置情報取得手段と、
    前記自車位置情報に基づいて、前記対象地物について、地物種別に応じて予め定められた特徴量及び測定点の情報を含む地物情報を取得する地物情報取得手段と、
    前記地物情報に基づいて、前記外界情報に含まれる前記対象地物の前記特徴量及び前記測定点の認識処理を行う認識手段と、
    記認識手段による認識結果の確実性を表し、全ての前記地物種別に共通する定量的な値として定義される自信度を、前記特徴量及び前記測定点の認識結果に応じて前記対象地物ごとに判定する自信度判定手段と、
    前記自信度に応じて演算実行の要否を判定し、演算が必要と判定された場合に、前記認識手段による前記測定点の認識結果に基づいて、前記対象地物と前記自車両との前記位置関係を演算する位置関係演算手段と、を備える地物位置認識装置。
  2. 外界検出装置による検出対象となる対象地物と自車両との位置関係を演算するための地物位置認識装置であって、
    前記外界検出装置により検出された外界情報を取得する外界情報取得手段と、
    前記自車両の現在位置を示す自車位置情報を取得する自車位置情報取得手段と、
    前記自車位置情報に基づいて、前記対象地物について、地物種別に応じて予め定められた特徴量及び測定点の情報を含む地物情報を取得する地物情報取得手段と、
    前記地物情報に基づいて、前記外界情報に含まれる前記対象地物の前記特徴量及び前記測定点の認識処理を行う認識手段と、
    前記認識手段による前記測定点の認識結果に基づいて、前記対象地物と前記自車両との前記位置関係を演算する位置関係演算手段と、
    前記認識手段による認識結果の確実性を表し、全ての前記地物種別に共通する定量的な値として定義される自信度を、前記特徴量及び前記測定点の認識結果に応じて前記対象地物ごとに判定する自信度判定手段と、を備え
    前記位置関係と前記自信度とを合わせて出力する地物位置認識装置。
  3. 全ての前記地物種別に共通に定義される前記自信度は、
    前記認識手段による前記特徴量の認識結果に応じた複数段階の内、少なくとも1つ以上の段階が、前記認識手段による前記測定点の認識結果に応じてさらに複数段階に分けられたデータ構造を有する請求項1又は2に記載の地物位置認識装置。
  4. 全ての前記地物種別に共通に定義される前記自信度は、
    前記認識手段による前記特徴量の認識結果に応じた複数段階の内、前記認識手段により前記特徴量の全てが認識されない場合の段階が、前記自信度の値域の何れか一方の極限値とされると共に、
    他の全ての段階が、前記認識手段により前記測定点が所定の条件で認識されるか否かに応じ、前記測定点が認識されない場合を前記一方の極限値に近い値とする2段階の値に分けられたデータ構造を有する請求項1又は2に記載の地物位置認識装置。
  5. 前記自信度判定手段は、全ての前記地物種別に共通に定義される複数段階の内、前記対象地物ごとに予め定められた一部又は全ての段階を用いて判定する請求項2から4の何れか一項に記載の地物位置認識装置。
  6. 前記自信度判定手段は、前記自信度として、前記認識手段により前記特徴量の全てが認識されない場合の最低値、前記特徴量の全てが認識されると共に前記測定点が正確に認識される最高値、及び1つ以上の中間段階の中間値を、全ての前記対象地物に対して共通に用いて判定する請求項5に記載の地物位置認識装置。
  7. 前記外界検出装置は撮像装置であり、前記外界情報は画像情報であり、前記外界情報取得手段は画像情報取得手段であり、前記認識手段は画像認識手段である請求項1から6の何れか一項に記載の地物位置認識装置。
  8. 請求項1から7の何れか一項に記載の地物位置認識装置と、前記位置関係演算手段により演算された前記位置関係に基づいて前記自車位置情報を補正する自車位置情報補正手段と、を備える自車位置認識装置。
  9. 請求項に記載の自車位置認識装置と、前記地物情報を含む地図情報が格納された地図情報格納手段と、前記地図情報を参照して動作するアプリケーションプログラムと、前記アプリケーションプログラムに従って動作して案内情報を出力する案内情報出力手段と、を備えるナビゲーション装置。
  10. 外界検出装置による検出対象となる対象地物と自車両との位置関係を演算するための地物位置認識方法であって、
    前記外界検出装置により検出された外界情報を取得する外界情報取得工程と、
    前記自車両の現在位置を示す自車位置情報を取得する自車位置情報取得工程と、
    前記自車位置情報に基づいて、前記対象地物について、地物種別に応じて予め定められた特徴量及び測定点の情報を含む地物情報を取得する地物情報取得工程と、
    前記地物情報に基づいて、前記外界情報に含まれる前記対象地物の前記特徴量及び前記測定点の認識処理を行う認識工程と、
    記認識工程による認識結果の確実性を表し、全ての前記地物種別に共通する定量的な値として定義される自信度を、前記特徴量及び前記測定点の認識結果に応じて前記対象地物ごとに判定する自信度判定工程と、
    前記自信度に応じて演算実行の要否を判定し、演算が必要と判定された場合に、前記認識工程による前記測定点の認識結果に基づいて、前記対象地物と前記自車両との前記位置関係を演算する位置関係演算工程と、を備える地物位置認識方法。
  11. 外界検出装置による検出対象となる対象地物と自車両との位置関係を演算するための地物位置認識装置であって、
    前記外界検出装置により検出された外界情報を取得する外界情報取得工程と、
    前記自車両の現在位置を示す自車位置情報を取得する自車位置情報取得工程と、
    前記自車位置情報に基づいて、前記対象地物について、地物種別に応じて予め定められた特徴量及び測定点の情報を含む地物情報を取得する地物情報取得工程と、
    前記地物情報に基づいて、前記外界情報に含まれる前記対象地物の前記特徴量及び前記測定点の認識処理を行う認識工程と、
    前記認識工程による前記測定点の認識結果に基づいて、前記対象地物と前記自車両との前記位置関係を演算する位置関係演算工程と、
    前記認識工程による認識結果の確実性を表し、全ての前記地物種別に共通する定量的な値として定義される自信度を、前記特徴量及び前記測定点の認識結果に応じて前記対象地物ごとに判定する自信度判定工程と、を備え
    前記位置関係と前記自信度とを合わせて出力する地物位置認識方法。
  12. 前記自信度判定工程は、前記認識手段による前記特徴量の認識結果に応じて複数段階の一次自信度を判定し、前記一次自信度の各段階の少なくとも1つ以上を、前記認識手段による前記測定点の認識結果に応じてさらに複数段階に分ける二次判定を行うことによって、複数段階の前記自信度を判定する請求項10又は11に記載の地物位置認識方法。
  13. 前記自信度判定工程は、前記認識手段により前記特徴量の全てが認識されない場合の前記一次自信度を除く全ての前記一次自信度のそれぞれについて前記二次判定を行う請求項12に記載の地物位置認識方法。
JP2006353069A 2006-12-27 2006-12-27 地物位置認識装置及び地物位置認識方法 Expired - Fee Related JP4761156B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2006353069A JP4761156B2 (ja) 2006-12-27 2006-12-27 地物位置認識装置及び地物位置認識方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2006353069A JP4761156B2 (ja) 2006-12-27 2006-12-27 地物位置認識装置及び地物位置認識方法

Publications (2)

Publication Number Publication Date
JP2008164384A JP2008164384A (ja) 2008-07-17
JP4761156B2 true JP4761156B2 (ja) 2011-08-31

Family

ID=39694093

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2006353069A Expired - Fee Related JP4761156B2 (ja) 2006-12-27 2006-12-27 地物位置認識装置及び地物位置認識方法

Country Status (1)

Country Link
JP (1) JP4761156B2 (ja)

Families Citing this family (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5097681B2 (ja) * 2008-10-31 2012-12-12 日立オートモティブシステムズ株式会社 地物位置認識装置
JP5469148B2 (ja) * 2011-10-13 2014-04-09 本田技研工業株式会社 車両の制御装置
KR101933583B1 (ko) * 2012-02-01 2018-12-28 현대엠엔소프트 주식회사 라이다 데이터의 포인트 클라우드를 활용한 표면정보 추출 장치
JP5915480B2 (ja) * 2012-09-26 2016-05-11 トヨタ自動車株式会社 自車位置校正装置および自車位置校正方法
US10753757B2 (en) 2015-09-30 2020-08-25 Sony Corporation Information processing apparatus and information processing method
JP2017116363A (ja) * 2015-12-24 2017-06-29 アイシン・エィ・ダブリュ株式会社 車両位置推定システム、方法およびプログラム
WO2018212290A1 (ja) * 2017-05-19 2018-11-22 パイオニア株式会社 情報処理装置、制御方法、プログラム及び記憶媒体
JP6747405B2 (ja) 2017-08-25 2020-08-26 トヨタ自動車株式会社 自車位置自信度演算装置
JP6881369B2 (ja) * 2018-03-26 2021-06-02 トヨタ自動車株式会社 自車位置推定装置
WO2019239477A1 (ja) * 2018-06-12 2019-12-19 三菱電機株式会社 地図生成装置および地図生成システム

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006208223A (ja) * 2005-01-28 2006-08-10 Aisin Aw Co Ltd 車両位置認識装置及び車両位置認識方法

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006208223A (ja) * 2005-01-28 2006-08-10 Aisin Aw Co Ltd 車両位置認識装置及び車両位置認識方法

Also Published As

Publication number Publication date
JP2008164384A (ja) 2008-07-17

Similar Documents

Publication Publication Date Title
JP4761156B2 (ja) 地物位置認識装置及び地物位置認識方法
JP7461720B2 (ja) 車両位置決定方法及び車両位置決定装置
JP4321821B2 (ja) 画像認識装置及び画像認識方法
JP4366664B2 (ja) 自車位置認識装置及び自車位置認識プログラム
JP5168601B2 (ja) 自車位置認識システム
US8379923B2 (en) Image recognition processing device, method, and program for processing of image information obtained by imaging the surrounding area of a vehicle
JP4950858B2 (ja) 画像認識装置及び画像認識プログラム
US8452103B2 (en) Scene matching reference data generation system and position measurement system
US8112222B2 (en) Lane determining device, method, and program
JP2006208223A (ja) 車両位置認識装置及び車両位置認識方法
JP4973736B2 (ja) 路面標示認識装置,路面標示認識方法及び路面標示認識プログラム
US20100121569A1 (en) Lane determining device, lane determining method and navigation apparatus using the same
JP2017161501A (ja) 走行位置検出装置、走行位置検出方法
JP4596566B2 (ja) 自車情報認識装置及び自車情報認識方法
JP5141969B2 (ja) 画像認識装置及び画像認識プログラム、並びにそれを用いた地点情報収集装置及びナビゲーション装置
JP4953012B2 (ja) 画像認識装置と画像認識装置のためのプログラム、及びこれを用いたナビゲーション装置とナビゲーション装置のためのプログラム
JP6520740B2 (ja) 物体検出方法、物体検出装置、およびプログラム
JP4775658B2 (ja) 地物認識装置・自車位置認識装置・ナビゲーション装置・地物認識方法
JP4731380B2 (ja) 自車位置認識装置及び自車位置認識方法
JP2008298699A (ja) 自車位置認識装置及び自車位置認識方法
JP4831433B2 (ja) 自車位置認識装置及び自車位置認識プログラム、並びにナビゲーション装置
JP4953015B2 (ja) 自車位置認識装置と自車位置認識プログラム、及びこれを用いたナビゲーション装置
JP5010844B2 (ja) 地物情報出力装置、画像認識装置、及び自車位置認識装置
JP4817019B2 (ja) 自車位置認識装置及び自車位置認識プログラム
JP4497424B2 (ja) 地物認識装置及び地物認識方法、並びにそれを用いたレーン判定装置及びレーン判定方法

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20090312

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20110127

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20110224

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20110418

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20110512

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20110525

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140617

Year of fee payment: 3

R150 Certificate of patent or registration of utility model

Ref document number: 4761156

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

LAPS Cancellation because of no payment of annual fees