JP2014157469A - 道路端検出システム、方法およびプログラム - Google Patents

道路端検出システム、方法およびプログラム Download PDF

Info

Publication number
JP2014157469A
JP2014157469A JP2013027723A JP2013027723A JP2014157469A JP 2014157469 A JP2014157469 A JP 2014157469A JP 2013027723 A JP2013027723 A JP 2013027723A JP 2013027723 A JP2013027723 A JP 2013027723A JP 2014157469 A JP2014157469 A JP 2014157469A
Authority
JP
Japan
Prior art keywords
road
line
edge
region
vertical edge
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2013027723A
Other languages
English (en)
Other versions
JP5974923B2 (ja
Inventor
Yoshito Kondo
良人 近藤
Atsushi Iwata
淳 岩田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Aisin AW Co Ltd
Original Assignee
Aisin AW Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Aisin AW Co Ltd filed Critical Aisin AW Co Ltd
Priority to JP2013027723A priority Critical patent/JP5974923B2/ja
Publication of JP2014157469A publication Critical patent/JP2014157469A/ja
Application granted granted Critical
Publication of JP5974923B2 publication Critical patent/JP5974923B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • Closed-Circuit Television Systems (AREA)
  • Traffic Control Systems (AREA)
  • Image Analysis (AREA)
  • Control Of Driving Devices And Active Controlling Of Vehicle (AREA)
  • Image Processing (AREA)

Abstract

【課題】単一の画像に基づいて道路の端を正確に検出できる技術の提供。
【解決手段】本発明の道路端検出システムは、カメラで撮影した画像内における道路の幅方向の端に対応する線である道路端線を検出し、画像において道路端線の候補となる候補線を認識し、候補線よりも道路の幅方向の中央側の領域である内側領域と、候補線よりも道路の幅方向の中央の反対側の領域である外側領域とを、画像において設定し、道路の路面に対して垂直な垂直エッジを、内側領域と外側領域とのそれぞれにおいて検出し、内側領域における垂直エッジの検出結果と、外側領域における垂直エッジの検出結果とに基づいて、候補線が道路端線であるか否かを判定する。
【選択図】図4

Description

本発明は、道路の端を検出する道路端検出システム、方法およびプログラムに関する。
車体前方をカメラによって撮影した画像のなかから道路面を表す道路領域を検出する技術が知られている(特許文献1、参照。)。特許文献1においては、時間をずらして撮影した2枚の画像に基づいて、車両進行方向に沿った線によって分割された領域が道路領域であるか路肩であるかを判定する。
また、車両の前方を撮影した画像において消失点から延びる2本の直線を生成し、当該2本の直線間の領域における特徴点の分布状態に基づいて道路と路側の境界面を特定する技術が知られている(特許文献2、参照。)。特許文献2においては、2本の直線の方向を変えながら、当該2本の直線間の領域内におけるエッジ点数とエッジ点密度とに基づいて評価値を導出する。そして、評価値が最大となった2本の直線間の領域を道路と路側との境界面として特定する。なお、境界面を挟む2本の直線のうち下方の直線が道路の端に相当する。
特開2009−53818号公報 特許第5012522号公報
しかしながら、特許文献1においては、時間をずらして2枚の画像を撮影しなければならないため、後の画像が撮影されるまで道路の端が検出できないという問題があった。一方、特許文献2において、エッジの下端が正確に検出できない場合、消失点から延びる2本の直線のうち下方の直線の方向が不正確となり、道路の端を正確に検出できないという問題があった。
本発明は、前記課題にかんがみてなされたもので、単一の画像に基づいて道路の端を正確に検出できる技術を提供することを目的とする。
前記の目的を達成するため、本発明において、候補線認識手段は、カメラで撮影した画像において道路の幅方向の端に対応する道路端線の候補となる候補線を認識する。領域設定手段は、候補線よりも道路の幅方向の中央側の領域である内側領域と、候補線よりも道路の幅方向の中央の反対側の領域である外側領域とを、画像において設定する。垂直エッジ検出手段は、道路の路面に対して垂直な垂直エッジを、内側領域と外側領域とのそれぞれにおいて検出する。そして、判定手段は、内側領域における垂直エッジの検出結果と、外側領域における垂直エッジの検出結果とに基づいて、候補線が道路端線であるか否かを判定する。
前記の構成において、まず候補線認識手段が画像において候補線を認識するとともに、垂直エッジの検出結果に基づいて判定手段が候補線ごとに当該候補線が真に道路端線であるか否かを判定する。具体的に、判定手段は、候補線よりも道路の中央側の内側領域における垂直エッジの検出結果と、候補線よりも道路の中央の反対側の外側領域における垂直エッジの検出結果とに基づいて、候補線が真に道路端線であるか否かを判定する。候補線が真に道路端線であるのであれば、内側領域は道路の像であり、外側領域は道路外の部分の像となる。従って、内側領域では道路の像における垂直エッジの検出結果として適正な垂直エッジの検出結果が得られ、外側領域では道路外の部分の像における垂直エッジの検出結果として適正な垂直エッジの検出結果が得られることとなる。そのため、内側領域における垂直エッジの検出結果と、外側領域における垂直エッジの検出結果とに基づいて、候補線が真に道路端線であるか否かを判定できる。
本発明において、垂直エッジの検出結果は、候補線が真に道路端線であるか否かを判定するために用いられる。すなわち、道路端線の位置は、垂直エッジの検出位置ではなく、あくまでも画像において認識した候補線の位置によって定まる。従って、画像上のノイズの影響を受けやすい垂直エッジの検出位置によって、不正確な位置にて道路端線が検出されることを防止できる。画像における線(候補線)の認識においては、画像上に存在する複数の特徴点を通過するもっともらしい線を認識する手法が採られるため、画像上のノイズの影響を抑制しつつ正確に候補線を認識できる。さらに、候補線の認識と、垂直エッジの検出とは、単一の画像において行うことができる。従って、単一の画像に基づいて道路の端を正確に検出できる。
候補線認識手段は、線状の候補線を認識すればよく、候補線は直線であってもよいし、曲線であってもよい。道路の幅方向の端が空中に存在することはないため、候補線認識手段は、地平線よりも低い位置に存在する線を候補線として認識してもよい。ここで、道路の幅方向の端の線は、道路の方向に平行な線となる。従って、候補線認識手段は、画像上の線のうち、道路の方向に平行な線に対応する線を候補線として認識してもよい。道路の方向に平行な複数の線は共通の消失点にて交差するため、候補線認識手段は、消失点を通過する線を候補線として認識してもよい。また、道路端線は、レーンと路側帯とを区画するレーンの区画線の像であってもよいし、車両が走行できるように舗装された路面の端であってもよい。また、道路の端とは、道路の路肩側の端であってもよいし、対向道路が併設されている道路の中央分離帯側の端であってもよい。
領域設定手段は、候補線ごとに内側領域と外側領域とを設定すればよく、1個の候補線に関して2個の領域(内側領域,外側領域)を設定する。車両は道路上を走行するため、候補線が真に道路端線であれば、当該候補線よりも道路の中央側にて車両が走行することとなる。従って、候補線よりも道路の幅方向の中央側とは、候補線よりも車両に近い側を意味する。反対に、候補線よりも道路の幅方向の中央の反対側とは、候補線よりも車両から遠い側を意味する。また、車両に搭載されたカメラによって撮影した画像においては、画像の横方向の中央が車両の位置に対応する。従って、領域設定手段は、候補線が画像の横方向の中央よりも右側に存在する場合に、候補線よりも左側に内側領域を設定し、候補線よりも右側に外側領域を設定すればよい。反対に、領域設定手段は、候補線が画像の横方向の中央よりも左側に存在する場合に、候補線よりも右側に内側領域を設定し、候補線よりも左側に外側領域を設定すればよい。なお、画像は、車両の前方をカメラにて撮影した画像であってもよいし、車両の後方をカメラにて撮影した画像であってもよい。
垂直エッジ検出手段は、道路の路面に対して垂直な垂直エッジを検出すればよく、線状のエッジのうち所定の角度範囲内のエッジを垂直エッジとして検出すればよい。なお、垂直エッジの角度範囲は、画像を撮影したカメラの歪曲特性等に基づいて画像内の位置ごとに設定されてもよい。また、垂直エッジの角度範囲は、画像全体で同一の範囲に設定されてもよく、例えば画像の縦方向から誤差角度以内の範囲に設定されてもよい。さらに、垂直エッジ検出手段は、道路の路面に対して垂直なエッジのうち、他の車両の輪郭線を構成するエッジを垂直エッジとして検出しないようにしてもよい。
判定手段は、内側領域における垂直エッジの検出結果と、外側領域における垂直エッジの検出結果との双方を、候補線が道路端線であるか否かの判定に利用すればよい。垂直エッジの検出結果とは、検出された垂直エッジの量を評価する指標であってもよいし、検出された垂直エッジの形状を評価する指標であってもよいし、検出された垂直エッジの分布位置を評価する指標であってもよい。より具体的に、垂直エッジの検出結果とは、検出された垂直エッジの本数であってもよいし、検出された垂直エッジの長さであってもよいし、検出された垂直エッジの密度であってもよいし、検出された垂直エッジの周期性であってもよいし、これらの組み合わせであってもよい。また、判定手段は、内側領域における垂直エッジの検出結果と、外側領域における垂直エッジの検出結果との少なくとも一方が条件を満足する場合に、候補線が道路端線であると判定してもよい。さらに、判定手段は、内側領域における垂直エッジの検出結果と、外側領域における垂直エッジの検出結果との双方に基づいて判定値を導出し、当該判定値が所定の範囲内である場合に候補線が道路端線であると判定してもよい。
さらに、判定手段は、内側領域における垂直エッジの検出結果が所定の内側条件を満足し、かつ、外側領域における垂直エッジの検出結果が所定の外側条件を満足する場合に、候補線が道路端線であると判定してもよい。すなわち、判定手段は、内側領域における垂直エッジの検出結果が道路の像における垂直エッジの検出結果として適正であり、かつ、外側領域における垂直エッジの検出結果が道路外の部分の像における垂直エッジの検出結果として適正である場合に、候補線が真に道路端線であると判定してもよい。これにより、内側領域と外側領域の一方のみの垂直エッジの検出結果が適正である場合に候補線が道路端線であると判定するよりも、道路端線の信頼性を向上させることができる。
さらに、判定手段は、内側領域における垂直エッジの検出結果が、内側領域に立体物の像が存在しないことを示す場合に、内側条件を満足すると判定してもよい。道路上には車両の走行を妨げる立体物が存在する可能性が低いため、内側領域における垂直エッジの検出結果が内側領域に立体物の像が存在しないことを示す場合に、内側領域における垂直エッジの検出結果が道路の像における垂直エッジの検出結果として適正であると判定できる。反対に、判定手段は、外側領域における垂直エッジの検出結果が、外側領域に立体物の像が存在することを示す場合に、外側条件を満足すると判定してもよい。道路外の部分には車両の走行を妨げる立体物が存在する可能性が高いため、外側領域における垂直エッジの検出結果が外側領域に立体物の像が存在することを示す場合に、外側領域における垂直エッジの検出結果が道路外の部分の像における垂直エッジの検出結果として適正であると判定できる。ここで、立体物とは、道路外の部分に設けられる物体であり、車両の走行を妨げ得る高さ(地面からの高さまたは深さ)で地面に対して設けられている物体である。
また、判定手段は、内側領域にて検出された垂直エッジの長さと本数とに基づいて、内側領域における垂直エッジの検出結果が、内側条件を満足するか否かを判定してもよい。同様に、判定手段は、外側領域にて検出された垂直エッジの長さと本数とに基づいて、外側領域における垂直エッジの検出結果が、外側条件を満足するか否かを判定してもよい。ここで、垂直エッジの本数は地面に対して高さが急激に変化している箇所の個数を意味し、垂直エッジの長さは地面に対する高さの変化量を意味する。従って、垂直エッジの本数と垂直エッジの長さとがそれぞれ大きいほど、車両の走行が妨げられる可能性が高く、道路の像である内側領域における垂直エッジの検出結果として適正でないと判定できる。反対に、垂直エッジの本数と垂直エッジの長さとがそれぞれ大きいほど、道路外の部分の像である外側領域における垂直エッジの検出結果として適正である判定できる。ただし、垂直エッジの本数が少なくても、車両が乗り越えられない程度の高さに対応する長さの垂直エッジが検出されれば、車両の走行が妨げられる可能性が高いと言える。反対に、長い垂直エッジが検出されなくても、多数の垂直エッジが検出されれば、車両の走行が妨げられる可能性が高いと言える。すなわち、垂直エッジの本数と垂直エッジの長さとのいずれか一方のみを考慮するだけでは、内側条件および外側条件を満足するか否かを正確に判定できなくなる場合がある。これに対して、垂直エッジの長さと本数との組み合わせに基づいて内側条件を判定することにより、内側領域と外側条件のそれぞれにおける垂直エッジの検出結果が適正であるか否かを正確に判定できる。
さらに、判定手段は、内側領域における垂直エッジの長さごとに設定された判定値を取得し、内側領域にて検出されたいずれかの長さの垂直エッジの本数が当該判定値以上である場合に、内側領域における垂直エッジの検出結果が内側条件を満足しないと判定してもよい。これにより、判定手段は、内側領域に存在する垂直エッジとして過剰な本数の垂直エッジが存在しているか否かを、垂直エッジの長さごとに判定できる。地面に対する高さの変化量が大きい箇所は、個数が少なくても車両の走行の妨げとなるため、判定手段は、垂直エッジの長さが大きいほど小さい判定値を取得してもよい。また、判定手段は、道路外の部分に設けられる典型的な立体物の高さ(例えば、ガードレールの支柱の高さや側溝の深さ等)に対応する垂直エッジの長さについて、他の垂直エッジの長さよりも小さい判定値を取得してもよい。さらに、判定手段は、道路上に形成されるペイントの像上に表れ得る垂直エッジの長さについて、他の垂直エッジの長さよりも大きい判定値を取得してもよい。
また、判定手段は、内側領域にて検出された垂直エッジが、画像において周期的に存在する場合に、内側領域における垂直エッジの検出結果が内側条件を満足しないと判定してもよい。例えば、判定手段は、内側領域にて検出された垂直エッジが、道路上に存在し得ない物体に固有の周期に対応した周期で存在する場合に、内側領域における垂直エッジの検出結果が内側条件を満足しないと判定してもよい。また、内側領域において垂直エッジが存在している周期の大きさを問わず、垂直エッジが周期性を持って存在している場合に、内側領域における垂直エッジの検出結果が内側条件を満足しないと判定してもよい。人工の立体物は周期構造を有している可能性が高いため、内側領域にて検出された垂直エッジがいずれかの大きさの周期で存在する場合に、内側領域に人工の立体物の像が存在している可能性が高いと判定できる。一方、周期的でない垂直エッジは、例えば道路上に形成された汚れや水たまり等に対応すると考えられ、周期的でない垂直エッジが存在する場合でも、内側領域における垂直エッジの検出結果が内側条件を満足すると判定できる。垂直エッジが画像において周期的に存在するとは、画像内における垂直エッジの位置が周期的であることであってもよいし、画像内における垂直エッジの位置に対応する実空間内の位置が周期的であることであってもよい。
さらに、判定手段は、外側領域における垂直エッジの長さごとに設定された判定値を取得し、外側領域にて検出されたいずれかの長さの垂直エッジの本数が当該判定値以上である場合に、外側領域における垂直エッジの検出結果が外側条件を満足すると判定してもよい。これにより、判定手段は、外側領域に存在する垂直エッジとして適正な本数の垂直エッジが存在しているか否かを、垂直エッジの長さごとに判定できる。なお、外側領域における垂直エッジの長さごとに設定された判定値は、内側領域における垂直エッジの長さごとに設定された判定値と同一であってもよいし、異なってもよい。
判定手段は、外側領域にて検出された垂直エッジが、画像において周期的に存在する場合に、外側領域における垂直エッジの検出結果が外側条件を満足すると判定してもよい。すなわち、画像における垂直エッジの周期性に基づいて、外側領域に道路外に存在する物体の像が存在すると判定できる場合に、外側領域における垂直エッジの検出結果が外側条件を満足すると判定してもよい。
さらに、領域設定手段は、候補線よりも道路の幅方向の中央側に存在する1レーン分の領域を内側領域として設定し、候補線よりも道路の幅方向の中央の反対側に存在する1レーン分の領域を外側領域として設定してもよい。これにより、垂直エッジの検出結果が適正であるか否かを判定する領域を1レーン分の大きさで正規化することができる。すなわち、内側領域と外側領域における垂直エッジの検出結果が、内側領域と外側領域の大きさに依存することを防止し、垂直エッジの検出結果が内側条件と外側条件とを満足するか否かを正確に判定できる。1レーン分の領域とは、1レーン分の幅を有する実空間内の領域に対応する画像内の領域を意味する。
また、領域設定手段は、画像において認識したレーンの像であって、候補線を道路の幅方向の中央の反対側の境界線として有する領域を内側領域として設定してもよい。すなわち、道路の幅方向の端の線よりも道路の幅方向の中央側には道路上のレーンが存在するため、現実に認識したレーンの像を内側領域として設定することにより、正確に1レーン分の領域を内側領域として設定できる。例えば、候補線としてレーンの区画線の像を認識する場合には、隣り合う候補線によって挟まれた領域をレーンの像として認識できる。一方、領域設定手段は、1レーン分の幅を有する仮想の領域であって、候補線を道路の幅方向の中央側の境界線として有する領域を外側領域として設定してもよい。道路の幅方向の端の線よりも道路の幅方向の中央の反対側には道路上のレーンが存在しない。従って、候補線が真に道路端線であれば、候補線よりも道路の幅方向の中央の反対側においてレーンの像を認識することはできない。これに対して、領域設定手段は、1レーン分の幅を有する仮想の領域を外側領域として設定することにより、候補線が真に道路端線である場合でも、1レーン分の領域を外側領域として設定できる。領域設定手段は、候補線よりも道路の幅方向の中央の反対側に仮想線を生成し、当該仮想線と候補線とによって挟まれた領域を外側領域として特定してもよい。領域設定手段は、候補線に対応する実空間内の線と、仮想線に対応する実空間内の線とが、1レーン分の幅だけ離れて互いに平行となるように、仮想線を生成すればよい。
さらに、判定手段は、内側領域における垂直エッジの検出結果が内側条件を満足し、かつ、外側領域における垂直エッジの検出結果が外側条件を満足する候補線が、道路の幅方向の中央よりも左側または右側の一方に複数存在する場合、当該複数存在する候補線のうち道路の幅方向の中央に最も近い候補線が道路端線であると判定してもよい。これにより、道路の幅方向の中央よりも左側または右側において道路端線を一意に特定できる。また、道路の幅方向の中央に最も近い候補線が道路端線であると判定することにより、現実の道路の幅方向の端よりも外側に存在する線を道路端線として誤検出することを防止できる。
さらに、本発明のように候補線が道路端線であるか否かを内側領域と外側領域とにおける垂直エッジの検出結果に基づいて判定する手法は、プログラムや方法としても適用可能である。また、以上のようなシステム、プログラム、方法は、単独の装置として実現される場合や、複数の装置によって実現される場合、車両に備えられる各部と共有の部品を利用して実現される場合が想定可能であり、各種の態様を含むものである。例えば、以上のような装置にて検出した道路端線を利用して各種処理を行うナビゲーションシステムや車両制御システムや方法、プログラムを提供することが可能である。また、一部がソフトウェアであり一部がハードウェアであったりするなど、適宜、変更可能である。さらに、システムを制御するプログラムの記録媒体としても発明は成立する。むろん、そのソフトウェアの記録媒体は、磁気記録媒体であってもよいし光磁気記録媒体であってもよいし、今後開発されるいかなる記録媒体においても全く同様に考えることができる。
ナビゲーション装置のブロック図である。 図2Aは前方画像を示す図、図2Bは輝度のグラフ、図2Cは前方画像上の特徴点を示す図である。 (3A)は内側領域と外側領域とを示す図、(3B)は仮想線を説明する平面図である。 道路端検出処理のフローチャートである。 垂直エッジの長さと判定値との関係を示すグラフである。
ここでは、下記の順序に従って本発明の実施の形態について説明する。
(1)ナビゲーション装置の構成:
(2)道路端検出処理:
(3)他の実施形態:
(1)ナビゲーション装置の構成:
図1は、本発明の一実施形態にかかる道路端検出システムを含むナビゲーション装置10の構成を示すブロック図である。ナビゲーション装置10は、車両に備えられている。ナビゲーション装置10は、制御部20と記録媒体30とを備えている。制御部20は、CPUとRAMとROM等を備え、記録媒体30やROMに記憶されたプログラムを実行する。記録媒体30は、地図情報30aと位置変換テーブル30bと判定値データ30cとを記録する。
地図情報30aは、道路上に設定されたノードの位置等を示すノードデータと、ノード同士を接続する道路に対応するリンクについての情報を示すリンクデータと、ノード同士を接続する道路の幅方向の中央線上に設定された形状補間点の位置等を示す形状補間点データとを含んでいる。3本以上のリンクが接続するノードは交差点に対応する。リンクデータは、道路の幅を示す情報と、道路上に形成された各レーンの本数および幅を示す情報とを含む。
位置変換テーブル30bは、車両の前方の投影空間内の位置と、前方画像内の位置との対応関係を規定したテーブルである。投影空間とは、車両の前方の実空間のうち、カメラ44が車両の前方の風景を撮影する際の視野内の空間である。前方画像とは、カメラ44が車両の前方の風景を撮影することによって生成される画像である。位置変換テーブル30bは、カメラ44の光学的な仕様(画角、光軸方向、光学倍率等)に基づいて作成され、予め記録媒体30に記録されている。制御部20は、位置変換テーブル30bによって投影空間内の任意の位置を変換することにより、当該任意の位置に存在する物体の像が前方画像内において投影される位置を取得する。反対に、制御部20は、位置変換テーブル30bによって前方画像内の任意の位置を変換することにより、当該任意の位置に像が投影される物体の投影空間内の位置を取得する。
車両は、GPS受信部41と車速センサ42とジャイロセンサ43とカメラ44とディスプレイ45とを備える。GPS受信部41は、GPS衛星からの電波を受信し、車両の位置を算出するための信号を制御部20に出力する。車速センサ42は、車両が備える車輪の回転速度に対応した信号を制御部20に出力する。ジャイロセンサ43は、車両に作用する角加速度に対応した信号を制御部20に出力する。
カメラ44は、前方画像を生成するイメージセンサである。カメラ44が生成した前方画像は、制御部20に出力される。カメラ44は、水平方向において光軸に関して対称な光学系を有する。カメラ44は、車両の幅方向の中央位置に備えられており、光軸が車両の進行方向と一致する。
図2Aは前方画像を示す図である。前方画像における横方向(前方画像の水平方向)は道路およびレーンの幅方向に対応し、前方画像の下辺の中点Pが車両の現在位置(カメラ44の位置)に対応する。また、カメラ44の光軸の方向は水平方向となっており、無限遠の水平面を撮影した場合に、地平線は前方画像の縦方向の二等分線上に表れる。カメラ44の光軸よりも低い位置に存在する物体の像は、地平線よりも下方に表れ、車両から前方に遠い位置に存在する物体の像ほど、前方画像の縦方向(前方画像の垂直方向)の上方に位置する。カメラ44の光軸よりも高い位置に存在する物体の像は、地平線よりも上方に表れ、車両から前方に遠い位置に存在する物体の像ほど、前方画像の縦方向の下方に位置する。実空間において水平な道路面に対して垂直な線の像は、前方画像の縦方向の線として表れる。本実施形態では、車両が現在走行している直線状の走行道路上に4本のレーンが形成されており、左から2番目のレーン上を車両が走行していることとする。なお、走行道路の右側には対向道路が存在する。走行道路と対向道路とは、車両の走行方向が互いに反対となる道路であり、互いに平行となるように設けられた道路である。
制御部20は、GPS受信部41、車速センサ42、及びジャイロセンサ43等から出力された信号や地図情報30aに基づいて、公知のマップマッチングを行う。これにより、制御部20は、走行道路の幅方向の中央線上において車両の現在位置を特定する。さらに、制御部20は、ジャイロセンサ43からの出力信号等に基づいて車両の進行方向を特定する。
ディスプレイ45は、制御部20から出力された映像信号に基づいて各種運転支援を行うためのナビゲーション画像を出力する映像出力装置である。
制御部20は、道路端検出プログラム21とナビゲーションプログラム22とを実行する。道路端検出プログラム21は、候補線認識部21aと領域設定部21bと垂直エッジ検出部21cと判定部21dとを含む。
候補線認識部21aは、前方画像において道路端線の候補となる候補線を認識する機能を制御部20に実行させるモジュールである。候補線認識部21aの機能により制御部20は、前方画像において特徴点を検出し、前方画像上に存在する複数の特徴点を通過するもっともらしい線を候補線として認識する。まず、制御部20は、前方画像のうち下辺から所定高さHまでの範囲において一定の間隔Yごとに横方向の補助直線Sを生成する。そして、制御部20は、補助直線S上の各画素の輝度を取得し、当該輝度の傾きの絶対値が所定の閾値以上の箇所を特徴点として検出する。所定高さHは、例えば縦方向における前方画像の二等分線(地平線)よりも下方に設定される。これにより、道路面に対応する前方画像内の領域にて特徴点を検出できる。輝度の傾きとは、前方画像の横方向における単位距離あたりの輝度の変化量を意味する。
図2Bは、図2Aにおいて最も下方に生成された補助直線S上の各画素の輝度を示すグラフである。図2Bにおいて、縦軸は輝度を示し、横軸は前方画像の横方向における画素の位置を示す。候補線認識部21aの機能により制御部20は、補助直線Sのそれぞれについて、輝度の傾きの絶対値が閾値以上となっている箇所を特徴点として検出する。
図2Cは、前方画像における特徴点K(黒丸)の分布を示す図である。輝度の傾きの絶対値が閾値以上となる箇所は、道路上に形成されたレーンの区画線の像Dの輪郭線上の位置となる。なお、本実施形態において、輝度の傾きの絶対値の閾値は、レーンの区画線の像D(白色または黄色の画素領域)と路面(黒色の画素領域)との輪郭線を判定できる値に設定されていることとする。従って、特徴点Kは、理想的にレーンの区画線の像Dの輪郭線上に表れる。ここで、走行道路上のレーンの区画線には、レーン同士を区画する区画線のほかに、レーンと路側帯とを区画する区画線とが含まれる。本実施形態において、レーンと路側帯とを区画する走行道路上の区画線は、走行道路の幅方向の端の線に相当する。すなわち、走行道路においてレーンと路側帯とを区画する区画線の像Dは、道路端線に相当する。
候補線認識部21aの機能により制御部20は、各補助直線S上にて検出した複数の特徴点Kからの距離を最小とする近似直線を候補線C(実線)として認識する。制御部20は、最小自乗法等の公知の近似線算出手法によって近似直線を算出する。以上の構成において、区画線の像Dの輪郭線上に表れた特徴点Kの近傍を通過する線、すなわち区画線の像D上の線が候補線Cとして認識される。図2A,2Cの例では、走行道路のレーンの区画線の像D上に候補線C(4本)が認識され、さらに対向道路のレーンの区画線の像D上にも候補線C(1本)が認識されている。
なお、候補線認識部21aの機能により制御部20は、形状補間点データに基づいて走行道路の形状を特定し、走行道路が湾曲している場合には、複数の特徴点Kについての近似直線ではなく近似曲線を候補線Cとして認識してもよい。候補線Cは複数の特徴点Kを近似した線であるため、ノイズ上に特徴点Kが検出された場合でも、ノイズ上の特徴点Kの影響が少ない候補線Cを認識できる。なお、本実施形態では、区画線ごとに候補線Cが認識できればよい。従って、区画線の幅に対応する横方向の範囲内に複数の特徴点Kが検出された場合に、制御部20は、当該範囲内の複数の特徴点Kの平均位置に単一の特徴点Kを検出してもよい。候補線認識部21aの機能により制御部20は、他の手法によって候補線Cを認識してもよく、ハフ変換等の公知の線認識手法によって候補線Cを認識してもよい。
領域設定部21bは、候補線Cよりも道路の幅方向の中央側の領域である内側領域Iと、候補線Cよりも道路の幅方向の中央の反対側の領域である外側領域Oとを、前方画像において設定する機能を制御部20に実行させるモジュールである。図3Aは、前方画像において設定された内側領域I(右肩上がりハッチング)と外側領域O(右肩下がりハッチング)とを示す図である。領域設定部21bの機能により制御部20は、処理対象の候補線Cを1個ずつ選択していき、候補線Cごとに2個の領域(内側領域I,外側領域O)を設定する。なお、走行道路上を走行する車両(カメラ44)は、走行道路の幅方向の端よりも走行道路の中央側を走行するため、前方画像の横方向の中央側が道路の幅方向の中央側であると見なすことができる。従って、制御部20は、処理対象の候補線Cが前方画像の横方向の中央よりも左側に存在している場合、当該候補線Cの右側に内側領域Iを設定し、当該候補線Cの左側に外側領域Oを設定する。反対に、制御部20は、処理対象の候補線Cが前方画像の横方向の中央よりも右側に存在している場合、当該候補線Cの左側に内側領域Iを設定し、当該候補線Cの右側に外側領域Oを設定する。なお、制御部20は、前方画像の下辺の中点Pよりも左側にて候補線Cが当該下辺に交差している場合、候補線Cが前方画像の横方向の中央よりも左側に存在していると判定し、下辺の中点Pよりも右側にて候補線Cが当該下辺に交差している場合、候補線Cが前方画像の横方向の中央よりも右側に存在していると判定する。
領域設定部21bの機能により制御部20は、候補線Cよりも道路の幅方向の中央側に存在する1レーン分の領域を内側領域Iとして設定する。具体的に、領域設定部21bの機能により制御部20は、前方画像おいて認識したレーンの像であって、候補線Cを道路の幅方向の中央の反対側の境界線として有する領域を内側領域Iとして設定する。本実施形態において、候補線Cはレーンの区画線の像Dであるため、前方画像において隣り合う2本の候補線Cによって挟まれた領域が、前方画像において認識したレーンの像を構成する。従って、制御部20は、処理対象の候補線Cが前方画像の横方向の中央よりも左側に存在している場合、右側において処理対象の候補線Cに隣り合う他の候補線Cを特定し、処理対象の候補線Cと当該他の候補線Cとによって挟まれた領域を内側領域Iとして設定する。反対に、制御部20は、処理対象の候補線Cが前方画像の横方向の中央よりも右側に存在している場合、左側において処理対象の候補線Cに隣り合う他の候補線Cを特定し、処理対象の候補線Cと当該他の候補線Cとによって挟まれた領域を内側領域Iとして設定する。
図3Aにおいては、最も左側の候補線C、および、右から3番目の候補線Cがそれぞれ処理対象として選択された場合に設定される内側領域Iが示されている。最も左側の候補線Cは前方画像の下辺の中点Pよりも左側に存在するため、最も左側の候補線Cと当該候補線Cに対して右側に隣り合う候補線Cとによって挟まれた領域が、最も左側の候補線Cが処理対象である場合の内側領域Iとして設定される。右から3番目の候補線Cは前方画像の下辺の中点Pよりも右側に存在するため、右から3番目の候補線Cと当該候補線Cに対して左側に隣り合う候補線Cとによって挟まれた領域が、右から3番目の候補線Cが処理対象である場合の内側領域Iとして設定される。
一方、領域設定部21bの機能により制御部20は、候補線Cよりも道路の幅方向の中央の反対側に存在する1レーン分の領域を外側領域Oとして設定する。具体的に、領域設定部21bの機能により制御部20は、1レーン分の幅を有する仮想の領域であって、候補線Cを道路の幅方向の中央側の境界線として有する領域を外側領域Oとして設定する。本実施形態において、制御部20は、処理対象の候補線Cよりも道路の幅方向の中央の反対側に仮想線V(破線)を生成し、当該仮想線Vと処理対象の候補線Cとによって挟まれた領域を外側領域Oとして特定する。制御部20は、処理対象の候補線Cに対応する区画線と仮想線Vに対応する線とが実空間において1レーン分の幅だけ離れて互いに平行となるように、仮想線Vを生成する。すなわち、制御部20は、位置変換テーブル30bに基づいて処理対象の候補線Cと仮想線Vとをそれぞれ実空間内における線に変換した場合に、変換後の2本の線が1レーン分の幅だけ離れて互いに平行となるように、前方画像にて仮想線Vを生成する。また、処理対象の候補線Cが前方画像の横方向の中央よりも左側に存在している場合、制御部20は、処理対象の候補線Cよりも左側に仮想線Vを生成する。反対に、処理対象の候補線Cが前方画像の横方向の中央よりも右側に存在している場合、制御部20は、処理対象の候補線Cよりも右側に仮想線Vを生成する。なお、1レーン分の幅とは、走行道路上に形成されたレーンの幅であり、地図情報30aのリンクデータに基づいて取得できる。
図3Bは、仮想線Vと候補線Cとに対応する実空間内の線を示す道路の平面図である。同図において、最も左側の候補線C、および、右から3番目の候補線Cがそれぞれ処理対象として選択された場合に、仮想線Vを生成する様子を示す。最も左側の候補線Cは前方画像の下辺の中点Pよりも左側に存在するため、最も左側の候補線Cが処理対象の場合、最も左側の候補線Cよりも左側において当該候補線Cと仮想線Vとがリンクデータに基づくレーンの幅Wだけ隔てて平行となるように仮想線Vが生成される。右から3番目の候補線Cは前方画像の下辺の中点Pよりも右側に存在するため、右から3番目の候補線Cが処理対象の場合、右から3番目の候補線Cよりも右側において当該候補線Cと仮想線Vとがレーンの幅Wだけ隔てて平行となるように仮想線Vが生成される。
なお、領域設定部21bの機能により制御部20は、車両(カメラ44)の前方の無限遠の範囲に対応するように内側領域Iと外側領域Oとを設定してもよい。すなわち、制御部20は、内側領域Iや外側領域Oの横方向の境界線を構成する候補線Cや仮想線Vの消失点Zの高さまで内側領域Iと外側領域Oとを設定してもよい。また、車両(カメラ44)の前方所定距離以内の範囲に対応するように内側領域Iと外側領域Oとを設定してもよい。制御部20は、前方画像における消失点Zよりも低い高さに設けられた上限線X(一点鎖線)を上辺とするように内側領域Iと外側領域Oとを設定してもよい。
垂直エッジ検出部21cは、道路の路面に対して垂直な垂直エッジを、内側領域Iと外側領域Oとのそれぞれにおいて検出する機能を制御部20に実行させるモジュールである。垂直エッジ検出部21cの機能により制御部20は、公知のエッジ検出手法(Sobel,LaplacIn,Canny等)によって、前方画像においてエッジを検出する。制御部20は、前方画像に存在する線状のエッジのうち、所定の角度範囲内のエッジを垂直エッジとして検出する。本実施形態において、垂直エッジの角度範囲は、前方画像の縦方向から所定の誤差角度(例えば5度)以内の範囲である。なお、前方画像の歪曲特性等に基づいて、前方画像内の位置ごとに垂直エッジの角度範囲を設定してもよい。垂直エッジ検出部21cの機能により制御部20は、車両の前方を走行する他車両の像を構成するエッジを垂直エッジEとして検出しないようにしてもよい。例えば、制御部20は、複数の車種の車両のそれぞれを背面から撮影した画像にて検出したエッジの分布を示すテンプレートデータを記録媒体30に記録しておき、当該テンプレートデータが示すエッジとマッチするるエッジについては、垂直エッジEとして検出するエッジから除外してもよい。
また、制御部20は、横方向における画像の変化点をエッジとして検出するフィルタを用いて垂直エッジを検出してもよい。本実施形態において、垂直エッジ検出部21cの機能により制御部20は、内側領域Iと外側領域Oとが設定され得る前方画像の全体において垂直エッジEを検出しておく。
判定部21dは、内側領域Iにおける垂直エッジEの検出結果と、外側領域Oにおける垂直エッジEの検出結果とに基づいて、候補線Cが道路端線であるか否かを判定する機能を制御部20に実行させるモジュールである。すなわち、判定部21dの機能により制御部20は、処理対象の候補線Cに関して設定された内側領域Iにおける垂直エッジEの検出結果と、当該処理対象の候補線Cに関して設定された外側領域Oにおける垂直エッジEの検出結果とに基づいて、当該処理対象の候補線Cが真に道路端線であるか否かを判定する。本実施形態において、制御部20は、内側領域Iと外側領域Oとのそれぞれにおいて検出された垂直エッジEの本数を垂直エッジEの検出結果として取得する。
具体的に、判定部21dの機能により制御部20は、内側領域Iにおける垂直エッジEの検出結果が所定の内側条件を満足し、かつ、外側領域Oにおける垂直エッジEの検出結果が所定の外側条件を満足する場合に、候補線Cが走行道路の道路端線であると判定する。すなわち、制御部20は、処理対象の候補線Cに関して設定された内側領域Iにおける垂直エッジEの検出結果が道路の像における垂直エッジEの検出結果として適正であり、かつ、当該処理対象の候補線Cに関して設定された外側領域Oにおける垂直エッジEの検出結果が道路外の部分の像における垂直エッジEの検出結果として適正である場合に、当該処理対象の候補線Cが真に走行道路の道路端線であると判定する。本実施形態において、候補線Cが真に道路端線であるとは、候補線Cが走行道路上のレーンと路側帯とを区画する区画線の像Dであることを意味する。
具体的に、判定部21dの機能により制御部20は、処理対象の候補線Cに関して設定された内側領域Iにおいて検出された垂直エッジEの本数が内側判定値(例えば1本)未満である場合に、内側領域Iにおける垂直エッジEの検出結果が適正であり、内側条件を満足すると判定する。なお、内側領域Iにおいて検出された垂直エッジEとは、内側領域Iに下端が存在する垂直エッジEである。一方、判定部21dの機能により制御部20は、処理対象の候補線Cに関して設定された外側領域Oにおいて検出された垂直エッジEの本数が外側判定値(例えば2本)以上である場合に、外側領域Oにおける垂直エッジEの検出結果が適正であり、外側条件を満足すると判定する。なお、外側領域Oにおいて検出された垂直エッジEとは、外側領域Oに下端が存在する垂直エッジEである。内側判定値と外側判定値とは判定値データ30cに記録されており、制御部20は、判定値データ30cから内側判定値と外側判定値とを取得する。
本実施形態において、道路端線が既知の前方画像における1レーン分のレーンの像内に存在する垂直エッジEの本数を多数のレーンについて調査し、当該調査した垂直エッジEの本数が内側判定値未満となる確率が閾値(例えば、95%)以上となるように内側判定値が設定されている。内側領域Iにおける垂直エッジEの本数が内側判定値未満であることは、内側領域Iにおける垂直エッジEの検出結果が確率的に適正であると言える。一方、道路端線が既知の前方画像おいて当該既知の道路端線に関して外側領域Oを設定し、当該外側領域O内に存在する垂直エッジEの本数を多数調査し、当該調査した垂直エッジEの本数が外側判定値以上となる確率が閾値(例えば、95%)以上となるように外側判定値が設定されている。外側領域Oにおける垂直エッジEの本数が外側判定値以上であることは、外側領域Oにおける垂直エッジEの検出結果が確率的に適正であると言える。
制御部20は、以上のように処理対象の候補線Cを順に選択することにより、処理対象の候補線Cが真に道路端線であるか否かを判定する処理を各候補線Cについて実行する。
これにより、走行道路上のレーンと左側の路側帯とを区画する区画線の像Dを処理対象の候補線Cとして選択した場合、および、走行道路上のレーンと右側の路側帯とを区画する区画線の像Dを処理対象の候補線Cとして選択した場合、処理対象の候補線Cが真に走行道路の道路端線であると判定できる。
図3Aに示すように、最も左側の候補線Cが処理対象の場合、外側領域Oにおける垂直エッジの本数が外側判定値(例えば2本)以上と判定され、内側領域Iにおける垂直エッジの本数が内側判定値(例えば1本)未満と判定されるため、外側条件と内側条件の双方を満足することとなる。従って、制御部20は、最も左側の候補線Cが真に走行道路の道路端線であると判定する。一方、右から3番目の候補線Cが処理対象の場合、外側領域Oにおける垂直エッジの本数が外側判定値以上と判定されず、外側条件を満足しないこととなる。従って、制御部20は、右から3番目の候補線Cが真に走行道路の道路端線であると判定しない。なお、最も右の候補線Cが処理対象の場合、最も右の候補線Cと右から2番目の候補線Cとによって挟まれた内側領域Oにおける垂直エッジ(木の像の輪郭線)の本数が内側判定値未満と判定されず、内側条件を満足しないこととなる。従って、対向道路上の区画線の像Dを走行道路の道路端線として誤検出することを防止できる。
ナビゲーションプログラム22は、前方画像にて検出された道路端線を利用して運転支援を行う機能を制御部20に実行させるプログラムである。ナビゲーションプログラム22の機能により制御部20は、前方画像の下辺上における中点Pと道路端線との距離に基づいて、道路の幅方向の端から車両までの距離を算出し、当該距離と地図情報30aのリンクデータが示す走行道路とレーンの幅とに基づいて車両が走行している走行レーンを特定する。そして、制御部20は、走行レーンに基づいて運転支援を行う。例えば、制御部20は、公知の経路探索手法によって探索した走行予定経路と走行レーンとに基づいて、走行予定経路を走行するためにレーン変更が必要か否かを判定し、レーン変更が必要である場合にはレーン変更の必要性を案内してもよい。
以上説明した本実施形態において、制御部20は、まず前方画像において候補線Cを認識するとともに、当該認識した候補線Cが真に道路端線であるか否かを判定する。候補線が真に走行道路の道路端線であるのであれば、内側領域Iは道路の像であり、外側領域Oは道路外の部分の像となる。従って、内側領域Iでは道路の像における垂直エッジEの検出結果として適正な垂直エッジEの検出結果が得られ、外側領域Oでは道路外の部分の像における垂直エッジEの検出結果として適正な垂直エッジEの検出結果が得られることとなる。そのため、内側領域Iにおける垂直エッジEの検出結果と、外側領域Oにおける垂直エッジEの検出結果とに基づいて、候補線Cが真に道路端線であるか否かを判定できる。
また、道路端線の位置は、垂直エッジEの検出位置ではなく、あくまでも画像において認識した候補線Cの位置によって定まる。従って、前方画像上のノイズの影響を受けやすい垂直エッジEの検出位置によって、不正確な位置にて道路端線が検出されることを防止できる。画像における線(候補線C)の認識においては、画像上に存在する複数の特徴点Kの近似直線を認識する手法が採られるため、前方画像上のノイズの影響を抑制しつつ正確に候補線Cを認識できる。さらに、候補線Cの認識と、垂直エッジEの検出とは、単一の前方画像において行うことができる。従って、単一の前方画像に基づいて道路の端を正確に検出できる。
さらに、制御部20は、内側領域Iにおける垂直エッジEの検出結果が所定の内側条件を満足し、かつ、外側領域Oにおける垂直エッジEの検出結果が所定の外側条件を満足する場合に、候補線Cが走行道路の道路端線であると判定している。これにより、内側領域Iと外側領域Oの一方のみの垂直エッジEの検出結果が適正である場合に候補線Cが真に走行道路の道路端線であると判定するよりも、道路端線の信頼性を向上させることができる。
領域設定部21bの機能により制御部20は、候補線Cよりも道路の幅方向の中央側に存在する1レーン分の領域を内側領域Iとして設定し、候補線Cよりも道路の幅方向の中央の反対側に存在する1レーン分の領域を外側領域Oとして設定している。これにより、垂直エッジEの検出結果が適正であるか否かを判定する領域を1レーン分の大きさで正規化することができる。すなわち、内側領域Iと外側領域Oにおける垂直エッジEの検出結果が、内側領域と外側領域の大きさに依存することを防止し、垂直エッジEの検出結果が内側条件と外側条件とを満足するか否かを正確に判定できる。
具体的に、領域設定部21bの機能により制御部20は、前方画像おいて認識したレーンの像であって、候補線Cを道路の幅方向の中央の反対側の境界線として有する領域を内側領域Iとして設定している。道路の幅方向の端の線よりも道路の幅方向の中央側には道路上のレーンが存在するため、現実に認識した区画線の像D(候補線C)によって挟まれたレーンの像を内側領域Iとして設定することにより、正確に1レーン分の領域を内側領域Iとして設定できる。一方、道路の幅方向の端の線よりも道路の幅方向の中央の反対側には道路上のレーンが存在しない。従って、候補線Cが真に道路端線であれば、候補線Cよりも道路の幅方向の中央の反対側においてレーンの像を認識することはできない。これに対して、制御部20は、1レーン分の幅を有する仮想の領域を外側領域Oとして設定することにより、候補線Cが真に道路端線である場合でも1レーン分の領域を外側領域Oとして設定できる。
(2)道路端検出処理:
図4は、道路端検出処理のフローチャートである。道路端検出処理は、前方画像の撮影周期ごとに実行される処理である。ナビゲーション装置10は、1枚の前方画像の撮影されるごとに、当該1枚の前方画像において道路端線を検出する。まず、候補線認識部21aの機能により制御部20は、カメラ44にて撮影された前方画像を取得する(ステップS100)。
次に、候補線認識部21aの機能により制御部20は、前方画像において道路端線の候補となる候補線Cを認識する(ステップS105)。具体的に、制御部20は、前方画像のうち下辺から所定高さHまでの範囲において一定の間隔Yごとに生成した横方向の補助直線S(破線)上において、輝度の傾き(横方向における単位距離あたりの輝度の変化量)が閾値以上となる特徴点Kを検出する。そして、制御部20は、検出した複数の特徴点Kの近似直線を候補線Cとして認識する。本実施形態では、輝度の傾きの閾値がレーンの区画線の輪郭線を判定する値に設定されているため、レーンの区画線の像Dが候補線Cとして認識される。
次に、候補線認識部21aの機能により制御部20は、候補線Cが1本でも認識できたか否かを判定する(ステップS110)。候補線Cが1本も認識できなかったと判定した場合(ステップS110:N)、候補線認識部21aの機能により制御部20は、現在の前方画像にて道路端線を検出することができないとして、道路端検出処理を終了させ、次に前方画像が撮影されるまで待機する。
一方、候補線Cが1本でも認識できたと判定した場合(ステップS110:Y)、垂直エッジ検出部21cの機能により制御部20は、公知のエッジ検出手法によって、前方画像において垂直エッジEを検出する(ステップS115)。すなわち、垂直エッジ検出部21cの機能により制御部20は、内側領域Iと外側領域Oとが設定され得る前方画像の全体において、線状のエッジであって前方画像の縦方向から所定の誤差角度以内のエッジを予め垂直エッジEとして検出しておく。次に、領域設定部21bの機能により制御部20は、公知のマップマッチングにより車両が現在走行している走行道路と現在位置とを取得する(ステップS120)。さらに、領域設定部21bの機能により制御部20は、処理対象の候補線Cを選択する(ステップS125)。例えば、制御部20は、前方画像の左から順に処理対象の候補線Cを選択してもよい。
次に、領域設定部21bの機能により制御部20は、処理対象の候補線Cに関して外側領域Oを設定する(ステップS130)。具体的に、領域設定部21bの機能により制御部20は、処理対象の候補線Cよりも道路の幅方向の中央の反対側に仮想線Vを生成し、当該仮想線Vと処理対象の候補線Cとによって挟まれた領域を外側領域Oとして特定する。処理対象の候補線Cに対応する区画線と、仮想線Vに対応する線とは、実空間において1レーン分の幅だけ離れて互いに平行となる。なお、制御部20は、候補線Cが前方画像の横方向の中央よりも右側に存在している場合、候補線Cの右側に仮想線Vを生成し、候補線Cが前方画像の横方向の中央よりも左側に存在している場合、候補線Cの左側に仮想線Vを生成する。
次に、判定部21dの機能により制御部20は、外側領域Oにおける垂直エッジEの検出結果が所定の外側条件を満足するか否かを判定する(ステップS135)。具体的に、制御部20は、前方画像の全体において検出された垂直エッジEのうち処理対象の候補線Cに関して設定された外側領域Oにて下端が検出された垂直エッジEの本数を取得するとともに、記録媒体30の判定値データ30cから外側判定値を取得する。そして、制御部20は、外側領域Oにて検出された垂直エッジEの本数が外側判定値以上である場合に、外側領域Oにおける垂直エッジEの検出結果が外側条件を満足すると判定する。
外側領域Oにおける垂直エッジEの検出結果が所定の外側条件を満足すると判定した場合(ステップS135:Y)、領域設定部21bの機能により制御部20は、処理対象の候補線Cに関して内側領域Iを設定する(ステップS140)。具体的に、領域設定部21bの機能により制御部20は、前方画像おいて認識したレーンの像であって、処理対象の候補線Cを道路の幅方向の中央の反対側の境界線として有する領域を内側領域Iとして設定する。制御部20は、処理対象の候補線Cが前方画像の横方向の中央よりも左側に存在している場合、右側において処理対象の候補線Cに隣り合う他の候補線Cを特定し、処理対象の候補線Cと当該他の候補線Cとによって挟まれた領域を内側領域Iとして設定する。反対に、制御部20は、処理対象の候補線Cが前方画像の横方向の中央よりも右側に存在している場合、左側において処理対象の候補線Cに隣り合う他の候補線Cを特定し、処理対象の候補線Cと当該他の候補線Cとによって挟まれた領域を内側領域Iとして設定する。
次に、判定部21dの機能により制御部20は、内側領域Iにおける垂直エッジEの検出結果が所定の内側条件を満足するか否かを判定する(ステップS145)。具体的に、制御部20は、前方画像の全体において下端が検出された垂直エッジEのうち処理対象の候補線Cに関して設定された内側領域Iにて検出された垂直エッジEの本数を取得するとともに、記録媒体30の判定値データ30cから内側判定値を取得する。そして、制御部20は、内側領域Iにて検出された垂直エッジEの本数が内側判定値未満である場合に、内側領域Iにおける垂直エッジEの検出結果が内側条件を満足すると判定する。
内側領域Iにおける垂直エッジEの検出結果が所定の内側条件を満足すると判定した場合(ステップS145:Y)、判定部21dの機能により制御部20は、処理対象の候補線Cが真に走行道路の道路端線であると判定する(ステップS150)。すなわち、制御部20は、内側領域Iにおける垂直エッジEの検出結果が所定の内側条件を満足し(ステップS145:Y)、かつ、外側領域Oにおける垂直エッジEの検出結果が所定の外側条件を満足する場合に(ステップS135:Y)、候補線Cが走行道路の道路端線であると判定する。
一方、制御部20は、内側領域Iにおける垂直エッジEの検出結果が所定の内側条件を満足しない場合(ステップS145:N)、または、外側領域Oにおける垂直エッジEの検出結果が所定の外側条件を満足しない場合に(ステップS135:N)、候補線Cが走行道路の道路端線でないと判定する。すなわち、制御部20は、処理対象の候補線Cがレーン同士を区画する区画線に対応する線であると判定する。
次に、領域設定部21bの機能により制御部20は、認識された候補線Cのすべてを処理対象の候補線Cとして選択したか否かを判定する(ステップS155)。そして、認識された候補線Cのすべてを処理対象の候補線Cとして選択したと判定しなかった場合(ステップS155:N)、制御部20は、他の候補線Cを、次の処理対象の候補線Cとして選択する(ステップS125)。一方、認識された候補線Cのすべてを処理対象の候補線Cとして選択したと判定した場合(ステップS155:Y)、制御部20は、道路端線検出処理を終了させる。
(3)他の実施形態:
前記実施形態においては、内側領域Iにて検出された垂直エッジEの本数が内側判定値未満であることを内側条件とし、外側領域Oにて検出された垂直エッジEの本数が外側判定値以上であることを外側条件としたが、他の条件を採用してもよい。例えば、判定部21dの機能により制御部20は、内側領域Iにて検出された垂直エッジEの長さと本数とに基づいて、内側領域Iにおける垂直エッジEの検出結果が、内側条件を満足するか否かを判定してもよい。同様に、制御部20は、外側領域Oにて検出された垂直エッジEの長さと本数とに基づいて、外側領域Oにおける垂直エッジEの検出結果が、外側条件を満足するか否かを判定してもよい。
具体的に、判定部21dの機能により制御部20は、記録媒体30に予め記録された判定値データ30cを参照することにより、内側領域Iにおける垂直エッジEの長さの区分ごとに設定された判定値を取得し、内側領域Iにて検出されたいずれかの長さの区分の垂直エッジEの本数が当該判定値以上である場合に、内側領域Iにおける垂直エッジEの検出結果が内側条件を満足しないと判定してもよい。同様に、判定部21dの機能により制御部20は、判定値データ30cを参照することにより、外側領域Oにおける垂直エッジEの長さごとに設定された判定値を取得し、外側領域Oにて検出されたいずれかの長さの垂直エッジEの本数が当該判定値以上である場合に、外側領域Oにおける垂直エッジEの検出結果が外側条件を満足すると判定してもよい。
図5は、本実施形態にかかる判定値データ30cを示すグラフである。同図において、横軸は垂直エッジEの長さを示し、縦軸は判定値を示す。同図に示すように、判定値データ30cにおいて、垂直エッジEの長さの区分ごとに判定値が記録されている。本実施形態において、判定部21dの機能により制御部20は、内側領域Iまたは外側領域Oにて検出された垂直エッジEを長さの区分ごとに分類し、垂直エッジEの長さの区分ごとに垂直エッジEの本数を取得する。そして、判定部21dの機能により制御部20は、垂直エッジEの長さの区分ごとに取得した垂直エッジEの本数が判定値以上であるか否かを判定する。以上の構成により、制御部20は、内側領域に存在する垂直エッジEとして過剰な本数の垂直エッジEが存在しているか否かを、垂直エッジEの長さごとに判定できる。
また、制御部20は、外側領域に存在する垂直エッジEとして適正な本数の垂直エッジEが存在しているか否かを、垂直エッジEの長さごとに判定できる。
垂直エッジEの本数は地面に対して高さが急激に変化している箇所の個数を意味し、垂直エッジEの長さは地面に対する高さの変化量を意味する。従って、垂直エッジEの本数と垂直エッジEの長さとがそれぞれ大きいほど、車両の走行が妨げられる可能性が高く、道路の像である内側領域における垂直エッジEの検出結果として適正でないと判定できる。反対に、垂直エッジEの本数と垂直エッジEの長さとがそれぞれ大きいほど、道路外の部分の像である外側領域における垂直エッジEの検出結果として適正である判定できる。ただし、垂直エッジEの本数が少なくても、車両が乗り越えられない程度の高さに対応する長さの垂直エッジEが検出されれば、車両の走行が妨げられる可能性が高いと言える。反対に、長い垂直エッジEが検出されなくても、車両の走行が困難な程度の本数の垂直エッジEが検出されれば、車両の走行が妨げられる可能性が極めて高いと言える。すなわち、垂直エッジEの本数と垂直エッジEの長さとのいずれか一方のみを考慮するだけでは、内側条件および外側条件を満足するか否かを正確に判定できなくなる場合がある。これに対して、垂直エッジEの長さと本数との組み合わせに基づいて内側条件を判定することにより、内側領域における垂直エッジEの検出結果が適正であるか否かを正確に判定できる。
例えば、図5において実線で示すように、所定の基準長さF以上の垂直エッジEの長さの区分については、基準長さF未満の垂直エッジEの長さよりも小さい判定値が記録されてもよい。基準長さFは、車両が乗り越えられる地面からの高さの上限値に対応する垂直エッジEの長さである。従って、内側領域Iにおいて車両が乗り越えられない程度の高さに対応する長さの垂直エッジEが検出された場合、当該長さの垂直エッジEの本数が小さくても、垂直エッジEの検出結果が内側条件を満足しないと判定できる。反対に、外側領域Oにおいて車両が乗り越えられない程度の高さに対応する長さの垂直エッジEが検出された場合、当該長さの垂直エッジEの本数が小さくても、垂直エッジEの検出結果が外側条件を満足すると判定できる。
また、地面に対する高さの変化量が大きい箇所は、個数が少なくても車両の走行の妨げとなるため、制御部20は、垂直エッジEの長さが大きいほど小さい判定値を取得してもよい。図5において破線で示すように、垂直エッジEの長さが長くなるほど小さい判定値が判定値データ30cに記録されてもよい。なお、外側領域Oにおける垂直エッジEの長さごとに設定された判定値は、内側領域Iにおける垂直エッジEの長さごとに設定された判定値と同一であってもよいし、異なってもよい。
さらに、制御部20は、内側領域Iまたは外側領域Oにて検出された垂直エッジEの長さを、垂直エッジEの下端の位置とカメラ44の光学条件とに基づいて実空間における垂直線の長さに変換し、当該実空間における垂直線の長さの区分ごとに垂直エッジEの本数を取得してもよい。そして、制御部20は、実空間における垂直線の長さの区分ごとに、垂直エッジEの本数が判定値以上であるか否かを判定してもよい。この場合、判定値データ30cにおいては、前方画像における垂直エッジEの長さの区分ごとに判定値を記録するのではなく、実空間における垂直線の長さの区分ごとに判定値を記録しておけばよい。
ところで、図5にて実線で示す判定値を用いて内側条件または外側条件を判定することは、車両が乗り越えられない高さの立体物が内側領域Iまたは外側領域Oに存在するか否かを判定することを意味する。すなわち、判定部21dの機能により制御部20は、内側領域Iにおける垂直エッジEの検出結果が、内側領域Iに立体物の像が存在しないことを示す場合に、内側条件を満足すると判定してもよい。道路上には車両の走行を妨げる立体物が存在する可能性が低いため、内側領域Iにおける垂直エッジEの検出結果が内側領域Iに立体物の像が存在しないことを示す場合に、内側領域Iにおける垂直エッジEの検出結果が道路の像における垂直エッジEの検出結果として適正であると判定できる。反対に、判定部21dの機能により制御部20は、外側領域Oにおける垂直エッジEの検出結果が、外側領域Oに立体物の像が存在することを示す場合に、外側条件を満足すると判定してもよい。道路外の部分には車両の走行を妨げる立体物が存在する可能性が高いため、外側領域Oにおける垂直エッジEの検出結果が外側領域Oに立体物の像が存在することを示す場合に、外側領域Oにおける垂直エッジEの検出結果が道路外の部分の像における垂直エッジEの検出結果として適正であると判定できる。
本実施形態においては、図5において一点鎖線で示すように、道路外の部分に設けられる立体物の高さに対応する垂直エッジEの長さの区分については、他の区分よりも小さい判定値が記録されている。例えば、道路外の部分に設けられるガードレールの支柱の高さに対応する垂直エッジEの長さの区分Gについては、他の区分よりも小さい判定値が記録されている。これにより、内側領域Iに立体物としてのガードレールの像が存在しない場合に、内側条件を満足すると判定できる。反対に、内側領域Iに立体物としてのガードレールの像が存在する場合に、外側条件を満足すると判定できる。さらに、制御部20は、道路上に形成される矢印標識等のペイントの像上に表れ得る垂直エッジEの長さについて、他の垂直エッジEの長さよりも大きい判定値を取得してもよい。
さらに、判定部21dの機能により制御部20は、内側領域Iにて検出された垂直エッジEが、前方画像において周期的に存在する場合に、内側領域Iにおける垂直エッジEの検出結果が内側条件を満足しないと判定してもよい。すなわち、制御部20は、内側領域Iにて検出された垂直エッジEが、道路に存在し得ない物体の固有周期に対応した周期で存在する場合には、内側領域Iにおける垂直エッジEの検出結果が内側条件を満足しないと判定する。固有周期とは、道路外の部分に設けられる立体物に固有の空間周期であり、例えばガードレールの支柱の設置周期に対応する前方画像内の周期であってもよい。これにより、内側領域Iにガードレール等の立体物の像が存在する場合に、内側領域Iにおける垂直エッジEの検出結果が内側条件を満足しないと判定できる。また、判定部21dの機能により制御部20は、外側領域Oにて検出された垂直エッジEが、前方画像において周期的に存在する場合に、外側領域Oにおける垂直エッジEの検出結果が外側条件を満足すると判定してもよい。すなわち、制御部20は、外側領域Oにて検出された垂直エッジEが、ガードレール等の固有周期に対応した周期で場合には、外側領域Oにおける垂直エッジEの検出結果が外側条件を満足すると判定してもよい。これにより、外側領域Oにガードレール等の立体物の像が存在する場合に、外側領域Oにおける垂直エッジEの検出結果が外側条件を満足すると判定できる。
また、制御部20は、内側領域Iにおいて垂直エッジEが存在している周期の大きさを問わず、垂直エッジEがいずれかの大きさの周期を持って存在している場合に、内側領域Iにおける垂直エッジEの検出結果が内側条件を満足しないと判定してもよい。人工の立体物は周期構造を有している可能性が高いため、内側領域Iにて検出された垂直エッジEがいずれかの大きさの周期で存在する場合に、内側領域Iに人工の立体物が存在している可能性が高いと判定できる。同様に、制御部20は、外側領域Oにおいて垂直エッジEが存在している周期の大きさを問わず、垂直エッジEがいずれかの大きさの周期を持って存在している場合に、外側領域Oにおける垂直エッジEの検出結果が外側条件を満足すると判定してもよい。一方、周期的でない垂直エッジEは、例えば道路上に形成された汚れや水たまり等に対応すると考えられ、周期的でない垂直エッジEが存在する場合でも、内側領域Iにおける垂直エッジEの検出結果が内側条件を満足すると判定できる。
ここで、垂直エッジEが画像において周期的に存在するとは、画像内における垂直エッジEの位置に対応する実空間内の位置が周期的であることであってもよい。例えば、制御部20は、垂直エッジEの下端の位置を位置変換テーブル30bに基づいて実空間内の位置に変換し、当該実空間内における下端の位置が走行道路の方向に沿った周期性を有するか否かを判定してもよい。以上においては、垂直エッジEの本数と長さと周期性に基づいて候補線Cが道路端線であるか否かを判定する例を挙げたが、これら以外の垂直エッジの検出結果の指標に基づいて候補線Cが道路端線であるか否かを判定してもよい。例えば、垂直エッジの検出結果とは、検出された垂直エッジの量(密度等)を評価する指標であってもよいし、検出された垂直エッジの形状を評価する指標であってもよいし、検出された垂直エッジの分布位置を評価する指標であってもよい。
さらに、判定部21dの機能により制御部20は、内側領域Iにおける垂直エッジEの検出結果が内側条件を満足し、かつ、外側領域Oにおける垂直エッジEの検出結果が外側条件を満足する候補線Cが、道路の幅方向の中央よりも左側または右側の一方に複数存在する場合、当該複数存在する候補線Cのうち道路の幅方向の中央に最も近い候補線Cが道路端線であると判定してもよい。すなわち、制御部20は、図4のステップS150において真に走行道路の道路端線であると判定された2本以上の候補線Cが、前方画像の下辺の中点Pの右側または左側の一方にて下辺に交差する場合、下辺の中点Pの右側または左側の一方にて下辺に交差する候補線Cのうち、最も下辺の中点Pに近い位置にて下辺に交差する候補線Cが真に走行道路の道路端線であると判定してもよい。これにより、走行道路の幅方向の中央よりも左側または右側において道路端線を一意に特定できる。また、道路の幅方向の中央に最も近い候補線Cが道路端線であると判定することにより、現実の道路の幅方向の端よりも外側に存在する線を道路端線として誤検出することを防止できる。
候補線認識部21aの機能により制御部20は、前方画像上の線のうち、道路の方向に平行な線に対応する線を候補線Cとして認識してもよい。道路上には道路の方向に平行なレーンの区画線が複数形成されるため、制御部20は、レーンの区画線の像Dが消失する消失点Z(図2C)に向かって伸びる線を候補線Cとして認識してもよい。すなわち、制御部20は、少なくとも他の2本の候補線Cが交差している点(消失点Z)を通過する線を候補線Cとして認識してもよい。さらに、候補線認識部21aの機能により制御部20は、地図情報30aの形状補間点データに基づいて走行道路の形状を特定し、当該走行道路の形状にマッチする形状の候補線Cを認識してもよい。
さらに、道路端線および候補線Cは、必ずしも区画線に対応する線でなくてもよい。例えば、候補線認識部21aの機能により制御部20は、特徴点Kにおける輝度の傾きの絶対値の閾値を小さく設定することにより、路面と縁石との境界線や、路面と中央分離帯との境界線のようにコントラストが小さい線に対応する候補線Cを認識してもよい。すなわち、制御部20は、車両が走行できるように舗装された路面の端に対応する候補線Cを認識してもよい。このように区画線に対応する線以外の候補線Cを認識した場合、2個の候補線Cによって挟まれた領域が必ずしも1レーン分のレーンの像とならなくなる。従って、領域設定部21bの機能により制御部20は、処理対象の候補線Cよりも前方画像の中央側においても仮想線Vを生成し、当該処理対象の候補線Cと仮想線Vとによって挟まれた領域を内側領域Iとして設定してもよい。さらに、内側領域Iと外側領域Oは、必ずしも1レーン分の領域でなくてもよく、前方画像における一定面積の領域であってもよい。
判定部21dの機能により制御部20は、内側領域Oにおける垂直エッジの検出結果と、外側領域Oにおける垂直エッジの検出結果との双方に基づいて判定を行えばよく、内側領域Iにおける垂直エッジの検出結果と、外側領域Oにおける垂直エッジの検出結果の少なくとも一方が条件を満足する場合に、候補線Cが道路端線であると判定してもよい。さらに、制御部20は、内側領域Iにおける垂直エッジの検出結果と、外側領域Oにおける垂直エッジの検出結果との双方に基づいて判定値を導出し、当該判定値が所定の範囲内である場合に候補線Cが道路端線であると判定してもよい。例えば、制御部20は、内側領域Iにおける垂直エッジの本数を外側領域Oにおける垂直エッジの本数で除算した判定値が閾値以下である場合に、候補線Cが道路端線であると判定してもよい。
さらに、検出した道路端線は、種々の運転支援に利用することができる。例えば、検出した道路端線を利用して車両のステアリングやブレーキ等の制御を行うようにしてもよい。また、道路端検出システムは、ステアリングやブレーキ等の車両制御を行う車両ECUにて実現されてもよい。
10…ナビゲーション装置、20…制御部、21a…道路端検出プログラム、21a…候補線認識部、21b…領域設定部、21c…垂直エッジ検出部、21d…判定部、21b…ナビゲーションプログラム、30…記録媒体、30a…地図情報、30b…位置変換テーブル、30c…判定値データ、41…GPS受信部、42…車速センサ、43…ジャイロセンサ、44…カメラ、45…ディスプレイ、C…候補線、E…垂直エッジ、I…内側領域、O…外側領域、V…仮想線。

Claims (13)

  1. カメラで撮影した画像内における道路の幅方向の端に対応する線である道路端線を検出する道路端検出システムであって、
    前記画像において前記道路端線の候補となる候補線を認識する候補線認識手段と、
    前記候補線よりも前記道路の幅方向の中央側の領域である内側領域と、前記候補線よりも前記道路の幅方向の中央の反対側の領域である外側領域とを、前記画像において設定する領域設定手段と、
    前記道路の路面に対して垂直な垂直エッジを、前記内側領域と前記外側領域とのそれぞれにおいて検出する垂直エッジ検出手段と、
    前記内側領域における前記垂直エッジの検出結果と、前記外側領域における前記垂直エッジの検出結果とに基づいて、前記候補線が前記道路端線であるか否かを判定する判定手段と、
    を備える道路端検出システム。
  2. 前記判定手段は、前記内側領域における前記垂直エッジの検出結果が所定の内側条件を満足し、かつ、前記外側領域における前記垂直エッジの検出結果が所定の外側条件を満足する場合に、前記候補線が前記道路端線であると判定する、
    請求項1に記載の道路端検出システム。
  3. 前記判定手段は、
    前記内側領域における前記垂直エッジの検出結果が、前記内側領域に立体物の像が存在しないことを示す場合に、前記内側条件を満足すると判定し、
    前記外側領域における前記垂直エッジの検出結果が、前記外側領域に立体物の像が存在することを示す場合に、前記外側条件を満足すると判定する、
    請求項2に記載の道路端検出システム。
  4. 前記判定手段は、
    前記内側領域にて検出された前記垂直エッジの長さと本数とに基づいて、前記内側領域における前記垂直エッジの検出結果が、前記内側条件を満足するか否かを判定し、
    前記外側領域にて検出された前記垂直エッジの長さと本数とに基づいて、前記外側領域における前記垂直エッジの検出結果が、前記外側条件を満足するか否かを判定する、
    請求項2または請求項3のいずれかに記載の道路端検出システム。
  5. 前記判定手段は、前記内側領域における前記垂直エッジの長さごとに設定された判定値を取得し、前記内側領域にて検出されたいずれかの長さの前記垂直エッジの本数が当該判定値以上である場合に、前記内側領域における前記垂直エッジの検出結果が前記内側条件を満足しないと判定する、
    請求項4に記載の道路端検出システム。
  6. 前記判定手段は、前記内側領域にて検出された前記垂直エッジが、前記画像において周期的に存在する場合に、前記内側領域における前記垂直エッジの検出結果が前記内側条件を満足しないと判定する、
    請求項4または請求項5のいずれかに記載の道路端検出システム。
  7. 前記判定手段は、前記外側領域における前記垂直エッジの長さごとに設定された判定値を取得し、前記外側領域にて検出されたいずれかの長さの前記垂直エッジの本数が当該判定値以上である場合に、前記外側領域における前記垂直エッジの検出結果が前記外側条件を満足すると判定する、
    請求項4から請求項6のいずれか一項に記載の道路端検出システム。
  8. 前記判定手段は、前記外側領域にて検出された前記垂直エッジが、前記画像において周期的に存在する場合に、前記外側領域における前記垂直エッジの検出結果が前記外側条件を満足すると判定する、
    請求項4から請求項7のいずれか一項に記載の道路端検出システム。
  9. 前記領域設定手段は、前記候補線よりも前記道路の幅方向の中央側に存在する1レーン分の領域を前記内側領域として設定し、前記候補線よりも前記道路の幅方向の中央の反対側に存在する1レーン分の領域を前記外側領域として設定する、
    請求項1から請求項8のいずれか一項に記載の道路端検出システム。
  10. 前記領域設定手段は、
    前記画像おいて認識したレーンの像であって、前記候補線を前記道路の幅方向の中央の反対側の境界線として有する領域を前記内側領域として設定するとともに、
    1レーン分の幅を有する仮想の領域であって、前記候補線を前記道路の幅方向の中央側の境界線として有する領域を前記外側領域として設定する、
    請求項9に記載の道路端検出システム。
  11. 前記判定手段は、前記内側領域における前記垂直エッジの検出結果が前記内側条件を満足し、かつ、前記外側領域における前記垂直エッジの検出結果が前記外側条件を満足する前記候補線が、前記道路の幅方向の中央よりも左側または右側の一方に複数存在する場合、当該複数存在する前記候補線のうち最も前記道路の幅方向の中央に近い前記候補線が前記道路端線であると判定する、
    請求項2から請求項10のいずれか一項に記載の道路端検出システム。
  12. カメラで撮影した画像内における道路の幅方向の端に対応する線である道路端線を検出する道路端検出方法であって、
    前記画像において前記道路端線の候補となる候補線を認識する候補線認識工程と、
    前記候補線よりも前記道路の幅方向の中央側の領域である内側領域と、前記候補線よりも前記道路の幅方向の中央の反対側の領域である外側領域とを、前記画像において設定する領域設定工程と、
    前記道路の路面に対して垂直な垂直エッジを、前記内側領域と前記外側領域とのそれぞれにおいて検出する垂直エッジ検出工程と、
    前記内側領域における前記垂直エッジの検出結果と、前記外側領域における前記垂直エッジの検出結果とに基づいて、前記候補線が前記道路端線であるか否かを判定する判定工程と、
    を含む道路端検出方法。
  13. カメラで撮影した画像内における道路の幅方向の端に対応する線である道路端線を検出する機能をコンピュータに実行させる道路端検出プログラムであって、
    前記画像において前記道路端線の候補となる候補線を認識する候補線認識機能と、
    前記候補線よりも前記道路の幅方向の中央側の領域である内側領域と、前記候補線よりも前記道路の幅方向の中央の反対側の領域である外側領域とを、前記画像において設定する領域設定機能と、
    前記道路の路面に対して垂直な垂直エッジを、前記内側領域と前記外側領域とのそれぞれにおいて検出する垂直エッジ検出機能と、
    前記内側領域における前記垂直エッジの検出結果と、前記外側領域における前記垂直エッジの検出結果とに基づいて、前記候補線が前記道路端線であるか否かを判定する判定機能と、
    をコンピュータに実行させる道路端検出プログラム。
JP2013027723A 2013-02-15 2013-02-15 道路端検出システム、方法およびプログラム Expired - Fee Related JP5974923B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2013027723A JP5974923B2 (ja) 2013-02-15 2013-02-15 道路端検出システム、方法およびプログラム

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2013027723A JP5974923B2 (ja) 2013-02-15 2013-02-15 道路端検出システム、方法およびプログラム

Publications (2)

Publication Number Publication Date
JP2014157469A true JP2014157469A (ja) 2014-08-28
JP5974923B2 JP5974923B2 (ja) 2016-08-23

Family

ID=51578313

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2013027723A Expired - Fee Related JP5974923B2 (ja) 2013-02-15 2013-02-15 道路端検出システム、方法およびプログラム

Country Status (1)

Country Link
JP (1) JP5974923B2 (ja)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2019040390A (ja) * 2017-08-25 2019-03-14 株式会社デンソー 車両制御装置
CN110261866A (zh) * 2019-06-12 2019-09-20 重庆交通大学 一种基于路沿光阵的道路宽度几何检测方法和系统
JP2020123154A (ja) * 2019-01-30 2020-08-13 クラリオン株式会社 演算装置
JP2022024740A (ja) * 2020-07-28 2022-02-09 株式会社Soken 車両用位置推定装置及び車両用位置推定方法

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110525439B (zh) * 2018-10-31 2020-10-30 浙江金果知识产权有限公司 前方道路宽度预判系统

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008003941A (ja) * 2006-06-23 2008-01-10 Nissan Motor Co Ltd 道路端認識装置、自動車、及び道路端認識方法
JP2011118889A (ja) * 2009-11-04 2011-06-16 Valeo Schalter & Sensoren Gmbh ビデオ画像に基づく道路特性分析、車線検出、および車線逸脱防止方法および装置

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008003941A (ja) * 2006-06-23 2008-01-10 Nissan Motor Co Ltd 道路端認識装置、自動車、及び道路端認識方法
JP2011118889A (ja) * 2009-11-04 2011-06-16 Valeo Schalter & Sensoren Gmbh ビデオ画像に基づく道路特性分析、車線検出、および車線逸脱防止方法および装置

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2019040390A (ja) * 2017-08-25 2019-03-14 株式会社デンソー 車両制御装置
JP7013727B2 (ja) 2017-08-25 2022-02-01 株式会社デンソー 車両制御装置
JP2020123154A (ja) * 2019-01-30 2020-08-13 クラリオン株式会社 演算装置
JP7281289B2 (ja) 2019-01-30 2023-05-25 フォルシアクラリオン・エレクトロニクス株式会社 演算装置
CN110261866A (zh) * 2019-06-12 2019-09-20 重庆交通大学 一种基于路沿光阵的道路宽度几何检测方法和系统
JP2022024740A (ja) * 2020-07-28 2022-02-09 株式会社Soken 車両用位置推定装置及び車両用位置推定方法
JP7347358B2 (ja) 2020-07-28 2023-09-20 株式会社Soken 車両用位置推定装置及び車両用位置推定方法

Also Published As

Publication number Publication date
JP5974923B2 (ja) 2016-08-23

Similar Documents

Publication Publication Date Title
KR102558055B1 (ko) 차선의 추정 방법
US9569673B2 (en) Method and device for detecting a position of a vehicle on a lane
JP4676373B2 (ja) 周辺認識装置、周辺認識方法、プログラム
US8670592B2 (en) Clear path detection using segmentation-based method
JP4162618B2 (ja) 車線境界判定装置
JP4577655B2 (ja) 地物認識装置
US20050169501A1 (en) Method and apparatus for determining driving lane of vehicle, and computer product
JP5974923B2 (ja) 道路端検出システム、方法およびプログラム
JP2006209511A (ja) 画像認識装置及び画像認識方法、並びにそれを用いた位置特定装置、車両制御装置及びナビゲーション装置
JP7077910B2 (ja) 区画線検出装置及び区画線検出方法
WO2017038134A1 (ja) ランドマーク認識装置及び認識方法
CN108573611A (zh) 一种限速标识融合方法以及限速标识融合系统
WO2015186294A1 (ja) 車載画像処理装置
US10846546B2 (en) Traffic signal recognition device
JP4940177B2 (ja) 交通流計測装置
JP5888275B2 (ja) 道路端検出システム、方法およびプログラム
JP4775658B2 (ja) 地物認識装置・自車位置認識装置・ナビゲーション装置・地物認識方法
JP7095559B2 (ja) 区画線検出装置及び区画線検出方法
JP2018048949A (ja) 物体識別装置
JP7342807B2 (ja) 走行予定経路設定装置及び走行予定経路設定方法
JP2007264712A (ja) 車線検出装置
JP5355209B2 (ja) ナビゲーション装置、自車の走行車線の判定方法および判定プログラム
KR102003387B1 (ko) 조감도 이미지를 이용한 교통 장애물의 검출 및 거리 측정 방법, 교통 장애물을 검출하고 거리를 측정하는 프로그램을 저장한 컴퓨터 판독가능 기록매체
JP7191671B2 (ja) キャリブレーション装置、キャリブレーション方法
JP2018084987A (ja) 物体認識装置

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20150320

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20151224

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20160209

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20160406

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20160621

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20160704

R150 Certificate of patent or registration of utility model

Ref document number: 5974923

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

LAPS Cancellation because of no payment of annual fees