JP7486556B2 - 区画線認識装置 - Google Patents
区画線認識装置 Download PDFInfo
- Publication number
- JP7486556B2 JP7486556B2 JP2022140010A JP2022140010A JP7486556B2 JP 7486556 B2 JP7486556 B2 JP 7486556B2 JP 2022140010 A JP2022140010 A JP 2022140010A JP 2022140010 A JP2022140010 A JP 2022140010A JP 7486556 B2 JP7486556 B2 JP 7486556B2
- Authority
- JP
- Japan
- Prior art keywords
- road
- vehicle
- recognition device
- area
- lane marking
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000001514 detection method Methods 0.000 claims description 158
- 238000005259 measurement Methods 0.000 claims description 30
- 238000013507 mapping Methods 0.000 claims description 21
- 230000001678 irradiating effect Effects 0.000 claims description 5
- 238000000034 method Methods 0.000 description 31
- 238000005286 illumination Methods 0.000 description 28
- 230000008569 process Effects 0.000 description 23
- 238000010586 diagram Methods 0.000 description 18
- 238000012545 processing Methods 0.000 description 9
- 238000006243 chemical reaction Methods 0.000 description 6
- 238000004891 communication Methods 0.000 description 6
- 230000004048 modification Effects 0.000 description 5
- 238000012986 modification Methods 0.000 description 5
- 230000001133 acceleration Effects 0.000 description 4
- 230000006870 function Effects 0.000 description 3
- 230000004044 response Effects 0.000 description 3
- 238000000926 separation method Methods 0.000 description 3
- 239000003086 colorant Substances 0.000 description 2
- 238000003384 imaging method Methods 0.000 description 2
- 230000009467 reduction Effects 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000002485 combustion reaction Methods 0.000 description 1
- 230000003247 decreasing effect Effects 0.000 description 1
- 230000002542 deteriorative effect Effects 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 238000001914 filtration Methods 0.000 description 1
- 230000005484 gravity Effects 0.000 description 1
- 230000001771 impaired effect Effects 0.000 description 1
- 238000009434 installation Methods 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S7/00—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
- G01S7/48—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S17/00
- G01S7/4802—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S17/00 using analysis of echo signal for target characterisation; Target signature; Target cross-section
-
- G—PHYSICS
- G08—SIGNALLING
- G08G—TRAFFIC CONTROL SYSTEMS
- G08G1/00—Traffic control systems for road vehicles
- G08G1/16—Anti-collision systems
- G08G1/167—Driving aids for lane monitoring, lane changing, e.g. blind spot detection
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W60/00—Drive control systems specially adapted for autonomous road vehicles
- B60W60/001—Planning or execution of driving tasks
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
- G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
- G01C21/38—Electronic maps specially adapted for navigation; Updating thereof
- G01C21/3804—Creation or updating of map data
- G01C21/3807—Creation or updating of map data characterised by the type of data
- G01C21/3815—Road data
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S17/00—Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
- G01S17/88—Lidar systems specially adapted for specific applications
- G01S17/89—Lidar systems specially adapted for specific applications for mapping or imaging
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S17/00—Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
- G01S17/88—Lidar systems specially adapted for specific applications
- G01S17/93—Lidar systems specially adapted for specific applications for anti-collision purposes
- G01S17/931—Lidar systems specially adapted for specific applications for anti-collision purposes of land vehicles
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W2420/00—Indexing codes relating to the type of sensors based on the principle of their operation
- B60W2420/40—Photo, light or radio wave sensitive means, e.g. infrared sensors
- B60W2420/408—Radar; Laser, e.g. lidar
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W2520/00—Input parameters relating to overall vehicle dynamics
- B60W2520/06—Direction of travel
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W2520/00—Input parameters relating to overall vehicle dynamics
- B60W2520/10—Longitudinal speed
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W2552/00—Input parameters relating to infrastructure
- B60W2552/53—Road markings, e.g. lane marker or crosswalk
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Radar, Positioning & Navigation (AREA)
- Remote Sensing (AREA)
- General Physics & Mathematics (AREA)
- Computer Networks & Wireless Communication (AREA)
- Automation & Control Theory (AREA)
- Electromagnetism (AREA)
- Human Computer Interaction (AREA)
- Transportation (AREA)
- Mechanical Engineering (AREA)
- Traffic Control Systems (AREA)
- Optical Radar Systems And Details Thereof (AREA)
Description
発明の実施の形態に係る区画線認識装置は、自動運転機能を有する車両、すなわち自動運転車両に適用することができる。なお、本実施の形態に係る区画線認識装置が適用される車両を、他車両と区別して自車両と呼ぶことがある。自車両は、内燃機関(エンジン)を走行駆動源として有するエンジン車両、走行モータを走行駆動源として有する電気自動車、エンジンと走行モータとを走行駆動源として有するハイブリッド車両のいずれであってもよい。自車両は、ドライバによる運転操作が不要な自動運転モードでの走行だけでなく、ドライバの運転操作による手動運転モードでの走行も可能である。
実施の形態に係る区画線認識装置は、道路RDを走行する自車両101のライダ5から自車両101の進行方向に照射光(電磁波の一種)を間欠的に照射し、道路RD上の異なる位置で離散的に点群データを取得する。ライダ5から照射する照射光の照射範囲は、前回の照射光に基づいてライダ5で取得された点群データと、今回の照射光に基づいてライダ5で取得される点群データとが、道路RDの進行方向に切れ目なくつながるように、進行方向と交差する道路幅方向に長い帯状にする。
より具体的には、自車両101から自車両101の車速(走行速度)に基づく所定距離(後述する奥行距離に対応)離れた道路RD上の位置に、上述した道路幅方向に長い帯状の第1領域を照射範囲として設定するとともに、この第1領域に対して所定の照射点密度を設定する。そして、第1領域以外の他の領域に対する照射点密度を第1領域に対する照射点密度よりも低く設定する、または、他の領域に対する照射を止める等により、ライダ5から照射される照射点の総数を抑制する。つまり、点群データに基づいて認識する物体等(区画線を含む)の位置(自車両101からの距離)や大きさの認識精度を低下させることなく、ライダ5の照射点の数を低減することが可能になる。
このような区画線認識装置について、さらに詳細に説明する。
図2は、区画線認識装置を含む車両制御装置100の要部構成を示すブロック図である。この車両制御装置100は、コントローラ10と、通信ユニット1と、測位ユニット2と、内部センサ群3と、カメラ4と、ライダ5と、走行用のアクチュエータACとを有する。また、車両制御装置100は、車両制御装置100の一部を構成する区画線認識装置としての外界認識装置50を有する。外界認識装置50は、カメラ4やライダ5等の車載検出器の検出データに基づいて、車両周囲の外界状況(区画線を含む)を認識する。
区画線認識装置としての外界認識装置50は、ライダ5に対して検出領域を設定する。図3Aおよび図3Bは、進行方向の道路RD上の立体物等を検出する場合のライダ5の検出領域を説明する図である。実施の形態では、路面の凹凸、段差、うねり等を含む路面形状と、道路RD上に位置する立体物(道路RDに関連する設備等(信号機、標識、溝、壁、柵、ガードレール等))と、道路RD上の物体(他車両および路面の障害物を含む)と、路面に設けられた区画線と、を含めて立体物等と呼ぶ。区画線は、白線(黄色等の色違いの線を含む)、縁石線、道路鋲等を含むものとし、レーンマーク(Lane mark)と呼んでもよい。また、立体物等のうちあらかじめ検出対象として設定されたものを検出対象と呼ぶ。ライダ5は、照射光に対する散乱光を受信するので、照射光の照射範囲として設定された第1領域が検出領域となる。つまり、実施の形態の第1領域は、照射範囲であり検出領域である。
図3Aに示す領域RSは、自車両101が図1Aの道路RDを走行中に、後述する認識部111により認識された道路セグメントである。実施の形態では、道路RDの境界線RL、RBで挟まれた道路RDに対応する領域を道路セグメントと呼ぶ。
検出領域BXは、自動運転モードでの走行時に注視されるべき領域を含むように設定される。一例として、検出領域BXの道路幅方向の中心位置が、道路セグメントの道路幅方向の中心位置に重なるように設定してもよい。また、検出領域BXの横幅(道路幅方向の長さ)は、奥行距離Lにおける道路幅よりも長くなるように設定する。さらにまた、検出領域BXの奥行幅(検出領域BXを構成する帯状領域の上下方向の幅)は、自車両101の車速に基づいて所定の長さに設定する。
図4Bは、図4Aの各検出領域を二次元マップ上に示した図である。図4Bにおいて、ライダ5の視点から見てより小さな検出領域ほど、二次元マップ上で表すと面積がより広い。この理由は、自車両101からの奥行距離Lが遠い検出領域BXほど、奥行幅Dを広く設定するからである。より詳しく説明すると、実施の形態では自車両101の車速が速いほど奥行距離が遠い位置に第1領域としての検出領域BXを設定する点は上述した通りである。車速が速いとライダ5の測定インターバルにおける自車両101の移動距離が長くなることから、点群データに空白区間が生じないように(換言すると、進行方向に切れ目が生じないように)、第1領域としての検出領域BXの奥行幅を広げることによって一測定当たりの点群データの取得区間を広げている。
図5Aは、ライダ5の投光角度θ0(水平方向に対する照射光の角度)を説明する模式図である。外界認識装置50は、投光角度θ0を変化させることにより、照射光の照射方向を上下に変化させて、照射光が照射される道路RD上の奥行距離を調整する。
図5Aにおいて、奥行距離L2が10mの地点の道路RD上に照射光が照射される場合は入射角θ2で路面が照射される。また、奥行距離L1が100mの地点の道路RD上に照射光が照射される場合は入射角θ1で路面が照射される。さらに、奥行距離Lが180mの地点の道路RD上に照射光が照射される場合は入射角θで路面が照射される。
L=1/tanθ0×H …(1)
ただし、符号Hは路面の高さを表す。
外界認識装置50は、上記のように設定した検出領域BX1内に、ライダ5の照射光を照射する照射点を算出する。より具体的には、外界認識装置50は、あらかじめ指定された検出対象の最小サイズ(例えば縦、横ともに15cm)と、奥行距離(例えばL1(100m))と、に基づいて算出される角度分解能に応じて照射点を算出する。この場合の角度分解能は、後述する格子点の上下方向(垂直方向と呼んでもよい)および左右方向(道路幅方向と呼んでもよい)にそれぞれ0.05度が必要である。なお、15cmよりも小さなサイズの検出対象を検出する場合、および、L1(100m)よりも長い奥行距離に検出領域を設定する場合には、検出領域内の照射点数を増やして角度分解能を上げてもよい。
外界認識装置50は、例えば、検出領域BX1内に格子状に配列した照射点を算出し、格子点の上下方向および左右方向の間隔を角度分解能に対応させる。上下方向の角度分解能を上げる場合は、検出領域BX1を角度分解能に基づく数で上下方向に分割し、上下方向の格子間隔を狭くして照射点の数を増やす。反対に、上下方向の角度分解能を下げる場合は、検出領域BX1を角度分解能に基づく数で上下方向に分割し、上下方向の格子間隔を広くして照射点の数を減らす。左右方向についても同様とする。
外界認識装置50は、角度分解能に応じて算出した照射点の位置を示す情報(以下、照射点情報と呼ぶ)を生成し、自車両101の現在の走行位置を示す位置情報に対応付けて記憶部12に記憶する。
なお、ライダ5の照射光は、ラスタ走査方式で照射されてもよいし、検出領域内に格子状に配列した照射点にのみ照射光が照射されるように断続的に照射光が照射されてもよいし、その他の態様で照射されてもよいものとする。
区画線認識装置としての外界認識装置50の詳細について説明する。
上述したように、外界認識装置50は、認識部111、画定部112、設定部113、およびマッピング部114と、ライダ5を含む。
<認識部>
認識部111は、カメラ4で撮像された画像情報またはライダ5で測定された検出データに基づいて、自車両101が走行する道路RDの進行方向の道路構造と、進行方向の道路RD上の検出対象とを認識する。道路構造は、例えば直線路、カーブ路、分岐路、トンネルの出入口等をいう。
また、認識部111は、例えば平坦な路面を示すデータに対して輝度フィルタリング処理等を施すことによって区画線を検知する。この場合において、認識部111は、輝度が所定の閾値を超えている路面の高さが、超えていない路面の高さと略同じである場合に、区画線であると判定する。
認識部111は、ライダ5により検出領域BX1において検出される時系列の検出データ(計測点)を用いて3次元の点群データを生成するとともに、ライダ5により検出領域BY1および検出領域BZ1においてそれぞれ検出される時系列の検出データ(計測点)を用いて3次元の点群データを生成する。
なお、ライダ5から検出領域BX1のみに照射光を照射して検出データを取得する場合には、検出領域BY1および検出領域BZ1おける3次元の点群データの生成は不要である。
認識部111による道路構造の認識について、さらに詳しく説明する。認識部111は、検出領域BX1に基づいて生成した点群データに含まれる、進行方向である前方の道路RDの縁石、壁、溝、ガードレールまたは区画線を道路RDの境界線RL、RBとして認識する。その上で、境界線RL、RBで示される進行方向の道路構造を認識する。上述したように、区画線は白線(色違いの線を含む)、縁石線、道路鋲等を含み、これら区画線による標示によって道路RDの走行レーンが規定される。実施の形態では、上記標示によって規定される道路RDの境界線RL、RBに対応する線を、区画線と呼ぶ。
また、認識部111は、検出領域BX1に基づいて生成した点群データに含まれる、進行方向である前方の道路セグメントにおける道路RDの立体物等のうち、例えば15cmを超える凹凸、段差、うねり等の路面形状と、例えば縦横15cmを超える物体とを検出対象として認識する。
認識部111による検出対象の認識について、さらに詳しく説明する。後述する画定部112で第2領域および第3領域が画定され、検出領域BX1に加えて、第2領域に対応する検出領域BY1および第3領域に対応する検出領域BZ1にもライダ5から照射光が照射される場合、認識部111は、検出領域BY1および検出領域BZ1に基づいて生成した点群データに含まれる、進行方向である前方の道路セグメントにおける道路RDの立体物等のうち、例えば100cm程度の路面形状と、例えば縦横100cm程度の物体とを検出対象として認識する。
なお、ライダ5により検出領域BX1のみに照射光を照射して検出データを取得する場合には、認識部111は、検出領域BX1に基づいて生成した点群データに基づいて、進行方向前方の道路セグメントにおける道路RDの路面形状と検出対象とを認識してよい。
画定部112は、ライダ5が照射光を照射する照射範囲として、上述した第1領域を画定する。より具体的には、画定部112は、図4Bに例示するように自車両101から進行方向に所定距離(例えば奥行距離L1)離れた道路RD上の位置に所定の奥行幅D1を有する帯状の第1領域を画定する。
上述したように、画定部112は、自車両101の現在位置から第1領域までの奥行距離L1と、第1領域の奥行幅(第1領域を構成する帯状領域の幅)D1とを、内部センサ群3の車速センサにより検出された自車両101の車速に基づいて算出する。自車両101の現在位置から第1領域までの奥行距離L2と第1領域の奥行幅D2、および、自車両101の現在位置から第1領域までの奥行距離Lと第1領域の奥行幅Dについても同様である。
このように構成したので、道路RD上を移動する自車両101からライダ5が第1領域に対応する検出領域BX1へ照射光を間欠的に照射した場合に、前回の照射光に基づいてライダ5で検出された点群データと、今回の照射光に基づいてライダ5で検出される点群データとが、進行方向に切れ目なくつながるように第1領域を画定することが可能になる。これにより、進行方向に切れ目のないライダ5の検出データを取得することが可能になる。
このように構成することにより、ライダ5の検出データに道路RDの左右端(境界線RL、RB)が含まれるようになる。
設定部113は、画定部112で画定された第1領域に基づいて、ライダ5に対して第1領域に対応する検出領域BX1を設定する。上述したように、実施の形態では、検出領域BX1が照射光の照射範囲に対応する。
また、設定部113は、画定部112で第2領域および第3領域が画定された場合には、第2領域および第3領域に基づいて、ライダ5に対して第2領域に対応する検出領域BY1および第3領域に対応する検出領域BZ1をそれぞれ設定する。実施の形態では、検出領域BY1およびBZ1も照射光の照射範囲に対応する。
設定部113は、ライダ5に対して必要とされる測定の角度分解能に基づいて、上述した第1領域に対応する検出領域BX1内の照射点数(換言すると、照射点密度)を算出し設定する。上述したように、検出領域BX1内に格子状に配列した照射点を算出し、格子点の上下方向および左右方向の間隔を角度分解能に対応させる。
また、設定部113は、ライダ5に対して第2領域に対応する検出領域BY1および第3領域に対応する検出領域BZ1をそれぞれ設定した場合には、検出領域BX1に対しては第1分解能用の照射点数を、検出領域BY1および検出領域BZ1に対しては第1分解能よりも低密度の第2分解能用の照射点数を、それぞれ算出し設定する。第1分解能は、例えば、奥行距離L1が100mの地点の道路RD上の15cmを超える立体物等を検出するのに必要な照射点数に対応する。第2分解能は、例えば、奥行距離L1が100mの地点の道路RD上の100cmを超える立体物等を検出するのに必要な照射点数に対応する。
マッピング部114は、ライダ5でリアルタイムに測定された時系列の点群データに基づいて検出した検出対象の位置(区画線の位置を含む)を示すデータを、例えば図4Bと同様の二次元マップ上にマッピング(mapping)して一続きとなる位置データを生成する。
より具体的には、マッピング部114は、記憶部12に記憶されている二次元マップ上の全ての立体物等(区画線を除く)の位置情報を取得し、自車両101の移動速度と移動方向(例えば方位角)から上記立体物等の相対位置を自車両101の位置を中心に座標変換して算出する。マッピング部114は、後述する本測定(ステップS310)により点群データがライダ5で取得される毎に、取得された点群データに基づく立体物等の相対位置を自車両101の位置を中心に座標変換して二次元マップ上に記録する。
また、マッピング部114は、記憶部12に記憶されている二次元マップ上の全ての区画線の位置情報を取得し、自車両101の移動速度と移動方向から上記区画線の相対位置を自車両101の位置を中心に座標変換して算出する。マッピング部114は、後述する本測定(ステップS310)により点群データが取得される毎に、取得された点群データに基づく区画線の相対位置を自車両101の位置を中心に座標変換して二次元マップ上に記録する。
図6は、あらかじめ定められたプログラムに従い図2のコントローラ10の演算部11が実行する処理の一例を示すフローチャートである。図6のフローチャートに示す処理は、例えば、自車両101が自動運転モードで走行中に所定周期毎に繰り返される。
ステップS10により照射光の照射範囲を垂直方向に調整するので、道路RDの路面の高さHや勾配によって照射光が照射される奥行距離が変化する場合でも、後述するステップS30の本測定の前に照射光の照射範囲を垂直方向に修正しておくことが可能になる。ステップS10の処理の詳細については図7を参照して後述する。
ステップS20により照射光の照射範囲を道路幅方向に調整するので、道路RDのカーブによって照射光の照射範囲から道路RDの左右端(境界線RL、RB)が外れる場合でも、後述するステップS30の本測定の前に照射光の照射範囲を道路幅方向に修正しておくことが可能になる。ステップS20の処理の詳細については図8を参照して後述する。
より具体的には、後述する本測定(ステップS310)により点群データがライダ5で取得される毎に、演算部11のマッピング部114が、取得された点群データに基づく区画線の相対位置を自車両101の位置を中心に座標変換して二次元マップ上に記録する。
ステップS110において、演算部11は、ライダ5により検出された検出データを用いて、3次元の点群データを取得してステップS120へ進む。ステップS110で点群データを取得するために行うライダ5の測定は、第1予備測定と呼んでもよい。第1予備測定は、ライダ5の照射光が奥行距離L1(例えば100m)の地点の道路RD上の検出領域BX1(第1領域に対応)を照射しているか否かを判定するためのものである。
演算部11は、路面データがある(換言すると、道路幅方向にノイズレベルよりも高い値の平坦なデータが存在する)場合に、ステップS130を肯定判定してステップS140へ進む。演算部11は、路面データがない(換言すると、ノイズレベルのデータのみが存在する)場合に、ステップS130を否定判定してステップS170へ進む。
ステップS210において、演算部11は、ライダ5により検出された検出データを用いて、3次元の点群データを取得してステップS220へ進む。ステップS210で点群データを取得するために行うライダ5の測定は、第2予備測定と呼んでもよい。第2予備測定は、ライダ5の照射範囲に、奥行距離L1(例えば100m)の地点の道路RD上の道路端が含まれているか否かを判定するためのものである。
例えば、ステップS240で左右端の一方を示すデータが抽出されていない場合、現在設定されている検出領域BX1(第1領域に対応)の道路幅方向の両端位置および長さW1に基づき、次回照射用の検出領域BX1の道路幅方向の両端のうち上記データが抽出されていない方の端位置を、所定量拡大するように設定する。
ステップS310において、演算部11は、ライダ5により検出された検出データを用いて、3次元の点群データを取得してステップS320へ進む。ステップS310で点群データを取得するために行うライダ5の測定は、本測定と呼んでもよい。本測定は、あらかじめ定めた検出対象として、区画線とともに所定の立体物等をライダ5で検出するためのものである。
この算出値は、区画線を含む路面全体の路面の高さHを表す。路面の高さ分布の取得は、他の手法を用いてもよい。
演算部11は、路面全体の山のデータの平均値と輝度が閾値を超えている部分に対応する山のデータの平均値との差の絶対値が所定の判定閾値よりも大きい場合に、ステップS370を否定判定してステップS310へ戻る。ステップS370を否定判定する場合は、ステップS340で残った高輝度部分の点群データが路面上のデータであるとはいえない(例えば、高輝度部分が立体物上に存在する)場合である。また、別の判定閾値の例として、路面全体の高さデータの山のピークトップの位置する値と、輝度が閾値を超えている部分に対応する高さデータの山のピークトップの位置する値との差の絶対値が所定の判定閾値よりも小さい場合に肯定判定とし、判定閾値よりも大きい場合に否定判定、としても良い。
(1)区画線認識装置としての外界認識装置50は、自車両101の周囲に電磁波としての照射光を照射して周囲の外界状況を時系列に検出する車載検出器としてのライダ5と、ライダ5で検出された情報に基づいて、自車両101が走行する道路RDの路面情報を取得する路面情報取得部としての演算部11と、を備える。演算部11は、道路RD上の異なる位置でそれぞれ、自車両101から所定距離離れた道路RD上の第1領域(検出領域BX1に対応)の区画線を示す情報を認識する認識部111と、認識部111で認識した区画線を示す情報を、自車両101の進行方向および走行速度に基づいてマッピングするマッピング部114と、を含む。
演算部11が道路RD上の第1領域について路面情報を取得するように構成したので、道路RDの路面全域の路面情報を一度に取得する場合と比べて、ライダ5が照射光を照射する照射点の数を低減することが可能になる。また、演算部11を構成する認識部111で認識した情報を、マッピング部114が自車両101の進行方向および走行速度に基づいてマッピングするので、自車両101の走行を実質的なスキャニング走行とみなすことが可能となる。これにより、第1領域が道路RDの進行方向の路面全域をカバーしていなくても、道路RDの路面全域についての路面情報を網羅することが可能となる。
以上により、区画線認識装置としての外界認識装置50が検出対象とする区画線の位置や幅の認識精度を低下させることなく、ライダ5の照射点数を低減できる。照射点数の低減は、演算部11の処理負荷の低減にもつながる。
例えば逆光または天候等に起因してカメラ4の撮像環境が悪化する場合において、ライダ5で取得された点群データに基づいて道路RDの区画線を精度よく認識することは、極めて有益である。
このように構成したので、演算部11が道路RD上の第1領域(検出領域BX1に対応)のみで路面情報を取得する場合と比べて、路面情報を取得する範囲を道路RDの進行方向に拡張することが可能になる。この場合でも、道路RDの路面全域の路面情報を一度に取得する場合と比べて、ライダ5が照射光を照射する照射点の数を低減することができる。
さらに、例えば飛来物が突然に自車両101の進路上で検出領域BX1から外れた位置に落下した場面において、検出領域BY1またはBZ1に落下した場合には、これを認識することが可能になる。
このように構成したので、例えば、第1領域ではより高い認識精度を確保しつつ、第2および第3領域では第1領域と比べて認識精度を下げて、ライダ5が照射光を照射する照射点の数を適切に低減することが可能になる。
このように構成したので、画定部112は、照射光が道路RDの左右の道路端に照射されるように第1領域(検出領域BX1に対応)を画定することが可能になる。画定部112はさらに、道路RD上を移動する自車両101からライダ5が第1領域に対応する検出領域BX1へ照射光を間欠的に照射する場合に、前回の照射光に基づいて演算部11で取得される路面情報と、今回の照射光に基づいて演算部11で取得される路面情報とが、進行方向に切れ目なくつながるように第1領域を画定することが可能になる。
このように構成したので、例えば、道路RDの路面の高さHや勾配によって照射光が照射される奥行距離が変化する場合は、照射光の照射範囲を修正することが可能になる。また、道路RDのカーブによって照射光の照射範囲から道路RDの左右端(境界線RL、RB)が外れる場合も、照射光の照射範囲を修正することが可能になる。
このように構成したので、本測定の前に照射光の照射範囲を垂直方向および道路幅方向に修正しておくことが可能になる。
このように構成したので、検出領域BX1内にライダ5が照射光を照射する道路幅方向の照射点の数を、適切に低減することが可能になる。
このように構成したので、検出領域BX1内にライダ5が照射光を照射する垂直方向の照射点の数を、適切に低減することが可能になる。
このように構成したので、検出領域BY1およびBZ1内にライダ5が照射光を照射する道路幅方向の照射点の数を、適切に低減することが可能になる。
このように構成したので、検出領域BY1およびBZ1内にライダ5が照射光を照射する垂直方向の照射点の数を、適切に低減することが可能になる。
(変形例1)
マッピング部114は、ライダ5が道路RD上の異なる位置で取得した時系列の点群データに基づいて検出した路面の高さHを示すデータを、一次元マップ上にマッピングして一続きとなる路面勾配データを生成してもよい。
より具体的には、マッピング部114は、自車両101の移動速度と移動方向(例えば方位角)から、各測定時における道路RD上の奥行距離L1の地点の相対位置を自車両101の位置を中心に座標変換して算出する。マッピング部114は、本測定(ステップS310)により点群データがライダ5で取得される毎に、取得された点群データに基づく奥行距離L1の地点の路面の高さHを、上記一次元マップ上に記録する。一次元マップの情報は、記憶部12に記憶させてもよい。
自車両101から離れた遠方の路面においてライダ5による照射光の反射強度が弱く、十分な強さの反射光を検出できない場合がある。このような、路面による反射強度が検出可能なぎりぎりのレベルまで低下するときの奥行距離を、最大路面検出距離L´と呼ぶことにする。
なお、検出領域BX´の奥行幅を広げて検出領域BX´と検出領域BXとをひとつながりの検出領域としてもよい。
変形例2によれば、遠方であることに起因して路面そのものの検出が困難な状況でも、反射光のレベルが路面の反射光よりも高い路面の凹凸、立体物等を検出することが可能になる。
Claims (10)
- 自車両の周囲に電磁波を照射して周囲の外界状況を時系列に検出する車載検出器と、前記車載検出器で検出された情報に基づいて、前記自車両が走行する道路の路面情報を取得する路面情報取得部と、を備える区画線認識装置であって、
前記路面情報取得部は、
前記道路上の異なる位置でそれぞれ、前記自車両から所定距離離れた前記道路上の第1領域の区画線を示す情報を認識する認識部と、
前記認識部で認識した前記区画線を示す情報を、前記自車両の進行方向および走行速度に基づいてマッピングするマッピング部と、を含み、
前記路面情報取得部は、さらに、前記自車両の前記走行速度に基づいて前記所定距離を算出し、前記自車両から進行方向に前記所定距離離れた前記道路上で前記道路と交差するとともに、前記走行速度に基づく奥行幅を有して道路幅方向に長い帯状領域を、前記第1領域として画定する画定部を含むことを特徴とする区画線認識装置。 - 請求項1に記載の区画線認識装置において、
前記認識部はさらに、前記道路上の異なる位置でそれぞれ、前記第1領域よりも前記自車両に近い前記道路上の第2領域および前記第1領域よりも前記自車両から遠い前記道路上の第3領域の、あらかじめ定めた検出対象を示す情報を認識することを特徴とする区画線認識装置。 - 請求項2に記載の区画線認識装置において、
前記認識部は、前記第1領域に対して第1分解能で前記区画線を示す情報を認識し、前記第2および第3領域に対して前記第1分解能よりも低い第2分解能で前記検出対象を示す情報を認識することを特徴とする区画線認識装置。 - 請求項1に記載の区画線認識装置において、
前記路面情報取得部はさらに、前記車載検出器に対し、少なくとも前記第1領域の路面で散乱した電磁波が検出されるように前記電磁波の照射方向を設定する設定部を含むことを特徴とする区画線認識装置。 - 請求項4に記載の区画線認識装置において、
前記認識部はさらに、前記車載検出器の本測定前の予備測定で検出された情報に基づいて前記自車両の進行方向の路面データを認識し、
前記設定部は、前記所定距離と前記路面データとに基づいて、前記道路上の前記第1領域へ前記電磁波を照射するための垂直方向および前記道路幅方向の照射範囲を設定することを特徴とする区画線認識装置。 - 請求項5に記載の区画線認識装置において、
前記認識部はさらに、前記道路上の異なる位置でそれぞれ、前記第1領域よりも前記自車両に近い前記道路上の第2領域および前記第1領域よりも前記自車両から遠い前記道路上の第3領域の、あらかじめ定めた検出対象を示す情報を認識し、
前記認識部は、前記第1領域に対して第1分解能で前記区画線を示す情報を認識し、前記第2および第3領域に対して前記第1分解能よりも低い第2分解能で前記検出対象を示す情報を認識し、
前記設定部は、前記第1分解能に基づき前記第1領域を前記道路幅方向に分割して得られる各格子点の位置に、前記車載検出器の照射位置を対応付けることを特徴とする区画線認識装置。 - 請求項6に記載の区画線認識装置において、
前記設定部は、前記第1分解能に基づき前記第1領域を垂直方向にさらに分割して得られる各格子点の位置に、前記車載検出器の照射位置を対応付けることを特徴とする区画線認識装置。 - 請求項7に記載の区画線認識装置において、
前記設定部は、前記第2分解能に基づき前記第2および第3領域を前記道路幅方向に分割して得られる各格子点の位置に、前記車載検出器の照射位置を対応付けることを特徴とする区画線認識装置。 - 請求項8に記載の区画線認識装置において、
前記設定部は、前記第2分解能に基づき前記第2および第3領域を垂直方向にさらに分割して得られる各格子点の位置に、前記車載検出器の照射位置を対応付けることを特徴とする区画線認識装置。 - 請求項1から9のいずれか一項に記載の区画線認識装置において、
前記車載検出器は、ライダであることを特徴とする区画線認識装置。
Priority Applications (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2022140010A JP7486556B2 (ja) | 2022-09-02 | 2022-09-02 | 区画線認識装置 |
US18/232,214 US20240077585A1 (en) | 2022-09-02 | 2023-08-09 | Division line recognition apparatus |
CN202311029713.6A CN117647819A (zh) | 2022-09-02 | 2023-08-15 | 道路划线识别装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2022140010A JP7486556B2 (ja) | 2022-09-02 | 2022-09-02 | 区画線認識装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2024035512A JP2024035512A (ja) | 2024-03-14 |
JP7486556B2 true JP7486556B2 (ja) | 2024-05-17 |
Family
ID=90043859
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2022140010A Active JP7486556B2 (ja) | 2022-09-02 | 2022-09-02 | 区画線認識装置 |
Country Status (3)
Country | Link |
---|---|
US (1) | US20240077585A1 (ja) |
JP (1) | JP7486556B2 (ja) |
CN (1) | CN117647819A (ja) |
Citations (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2006329971A (ja) | 2005-04-27 | 2006-12-07 | Sanyo Electric Co Ltd | 検出装置 |
US20100017060A1 (en) | 2008-07-18 | 2010-01-21 | Gm Global Technology Operations, Inc. | Road-edge detection |
JP2011221005A (ja) | 2010-03-26 | 2011-11-04 | Denso Corp | 区画線検出装置および区画線検出方法 |
WO2012117542A1 (ja) | 2011-03-02 | 2012-09-07 | トヨタ自動車株式会社 | レーザレーダ装置 |
JP2017016172A (ja) | 2015-06-26 | 2017-01-19 | 日産自動車株式会社 | 走路境界推定装置及び走路境界推定方法 |
WO2017037753A1 (ja) | 2015-08-28 | 2017-03-09 | 日産自動車株式会社 | 車両位置推定装置、車両位置推定方法 |
WO2018212284A1 (ja) | 2017-05-19 | 2018-11-22 | パイオニア株式会社 | 測定装置、測定方法およびプログラム |
JP2020149079A (ja) | 2019-03-11 | 2020-09-17 | 本田技研工業株式会社 | 路面検出装置 |
WO2021141981A1 (en) | 2020-01-06 | 2021-07-15 | Luminar Holdco, Llc | Adaptive scan pattern with virtual horizon estimation |
JP2021127075A (ja) | 2020-02-17 | 2021-09-02 | 株式会社デンソー | 道路勾配推定装置、道路勾配推定システムおよび道路勾配推定方法 |
-
2022
- 2022-09-02 JP JP2022140010A patent/JP7486556B2/ja active Active
-
2023
- 2023-08-09 US US18/232,214 patent/US20240077585A1/en active Pending
- 2023-08-15 CN CN202311029713.6A patent/CN117647819A/zh active Pending
Patent Citations (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2006329971A (ja) | 2005-04-27 | 2006-12-07 | Sanyo Electric Co Ltd | 検出装置 |
US20100017060A1 (en) | 2008-07-18 | 2010-01-21 | Gm Global Technology Operations, Inc. | Road-edge detection |
JP2011221005A (ja) | 2010-03-26 | 2011-11-04 | Denso Corp | 区画線検出装置および区画線検出方法 |
WO2012117542A1 (ja) | 2011-03-02 | 2012-09-07 | トヨタ自動車株式会社 | レーザレーダ装置 |
JP2017016172A (ja) | 2015-06-26 | 2017-01-19 | 日産自動車株式会社 | 走路境界推定装置及び走路境界推定方法 |
WO2017037753A1 (ja) | 2015-08-28 | 2017-03-09 | 日産自動車株式会社 | 車両位置推定装置、車両位置推定方法 |
WO2018212284A1 (ja) | 2017-05-19 | 2018-11-22 | パイオニア株式会社 | 測定装置、測定方法およびプログラム |
JP2020149079A (ja) | 2019-03-11 | 2020-09-17 | 本田技研工業株式会社 | 路面検出装置 |
WO2021141981A1 (en) | 2020-01-06 | 2021-07-15 | Luminar Holdco, Llc | Adaptive scan pattern with virtual horizon estimation |
JP2021127075A (ja) | 2020-02-17 | 2021-09-02 | 株式会社デンソー | 道路勾配推定装置、道路勾配推定システムおよび道路勾配推定方法 |
Also Published As
Publication number | Publication date |
---|---|
CN117647819A (zh) | 2024-03-05 |
JP2024035512A (ja) | 2024-03-14 |
US20240077585A1 (en) | 2024-03-07 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10239539B2 (en) | Vehicle travel control method and vehicle travel control device | |
US8189870B2 (en) | Process for the automatic calculation of the coefficient of a slope about to be ascended by a motor vehicle and an associated device | |
JP6627152B2 (ja) | 車両制御装置、車両制御方法、およびプログラム | |
US11631257B2 (en) | Surroundings recognition device, and surroundings recognition method | |
KR101281499B1 (ko) | 자동차 자동 운행 시스템 | |
US10777077B2 (en) | Vehicle control device, vehicle control method, and storage medium | |
JP7486556B2 (ja) | 区画線認識装置 | |
WO2022050006A1 (ja) | 画像処理装置 | |
JP7216695B2 (ja) | 周囲車両監視装置及び周囲車両監視方法 | |
JP2019144066A (ja) | 道路構造推定方法及び道路構造推定装置 | |
JP6827391B2 (ja) | 車両制御装置、車両制御方法、およびプログラム | |
US10796570B2 (en) | Vehicle control device, vehicle control method, and storage medium | |
JP5452518B2 (ja) | 車両用白線認識装置 | |
JP2024035511A (ja) | 外界認識装置 | |
CN115050205B (zh) | 地图生成装置以及位置识别装置 | |
JP2020148601A (ja) | 認識装置、車両制御装置、認識方法、およびプログラム | |
JP7332731B1 (ja) | 外界認識装置 | |
US20220276069A1 (en) | Map generation apparatus | |
JP7467562B1 (ja) | 外界認識装置 | |
JP2023149511A (ja) | 地図生成装置 | |
CN116894871A (zh) | 地图生成装置 | |
CN114954510A (zh) | 划分线识别装置 | |
JP2023087255A (ja) | 車両用制御装置 | |
CN116890846A (zh) | 地图生成装置 | |
CN114926805A (zh) | 划分线识别装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20230526 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20231219 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20240213 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20240430 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20240507 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7486556 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |