JP2019153281A - 道路中の車線境界線を確定するための方法、装置および機器 - Google Patents

道路中の車線境界線を確定するための方法、装置および機器 Download PDF

Info

Publication number
JP2019153281A
JP2019153281A JP2018242723A JP2018242723A JP2019153281A JP 2019153281 A JP2019153281 A JP 2019153281A JP 2018242723 A JP2018242723 A JP 2018242723A JP 2018242723 A JP2018242723 A JP 2018242723A JP 2019153281 A JP2019153281 A JP 2019153281A
Authority
JP
Japan
Prior art keywords
curve
point
determining
fitting
road
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2018242723A
Other languages
English (en)
Other versions
JP6966989B2 (ja
Inventor
トアン、シオン
Xiong Duan
チョウ、ワン
Wang Zhou
イェン、ミャオ
Miao Yan
チャン、イーフェイ
Yifei Zhan
マー、チャンチエ
Changjie Ma
ラン、シエンポン
Xianpeng Lang
チン、ヨンカン
Yonggang Jin
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Baidu Online Network Technology Beijing Co Ltd
Original Assignee
Baidu Online Network Technology Beijing Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Baidu Online Network Technology Beijing Co Ltd filed Critical Baidu Online Network Technology Beijing Co Ltd
Publication of JP2019153281A publication Critical patent/JP2019153281A/ja
Application granted granted Critical
Publication of JP6966989B2 publication Critical patent/JP6966989B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/56Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
    • G06V20/588Recognition of the road, e.g. of lane markings; Recognition of the vehicle driving pattern in relation to the road
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S17/00Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
    • G01S17/88Lidar systems specially adapted for specific applications
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/22Matching criteria, e.g. proximity measures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/50Depth or shape recovery
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10028Range image; Depth image; 3D point clouds
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30248Vehicle exterior or interior
    • G06T2207/30252Vehicle exterior; Vicinity of vehicle
    • G06T2207/30256Lane; Road marking

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Multimedia (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Electromagnetism (AREA)
  • Data Mining & Analysis (AREA)
  • Automation & Control Theory (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Artificial Intelligence (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Evolutionary Biology (AREA)
  • Evolutionary Computation (AREA)
  • General Engineering & Computer Science (AREA)
  • Traffic Control Systems (AREA)
  • Instructional Devices (AREA)
  • Image Analysis (AREA)
  • Image Processing (AREA)

Abstract

【課題】道路中の車線境界線を確定するための方法を提供する。【解決手段】車線境界線を確定する方法300は、基準曲線として第1のポイントセットに対するフィッティングにより第1の曲線を取得するステップ302と、基準曲線に基づいて複数のポイントセットから第2のポイントセットを選択するステップ304と、基準線に関連する第1のフィッティング度と第2のポイントセットに対してフィッティングを行って生成した第2の曲線に関連するフィッティング度の差を確定するステップ306と、フィッティング度の差に基づいて、収束条件を満たしているかどうかを確定するステップ308と、収束条件を満たさないことに応じて、第2の曲線を基準曲線に設定するステップ312を少なくとも一回繰り返し実行するステップと、収束条件を満たすときの第2のポイントセットに基づいて、道路の車線境界線を確定するステップ310を含む。【選択図】図3

Description

本発明の実施形態は、データ処理技術分野に関するものであり、より具体的に、道路中の車線境界線を確定するための方法、装置、機器、およびコンピュータ読み取り可能な記憶媒体に関するものである。
人工知能の発展に伴い、自律走行技術は、更に注目を受けている。3次元高精度地図は、次世代のデジタル地図の主な発展方向として業界で認められ、これは自律走行の前提条件であり、自律走行車の正確な運行と正確な方策のために主な根拠を提供する。
高精度地図は、道路利用状況を分析し、スマートトラフィックを実現する重要な戦略的プラットフォーム資源である。3次元高精度地図製作の重要な問題点は、道路面車線境界線情報の検出と作成に集中している。従来の車線境界線検出技術は、例えば、横断歩道線、交通標識線などのような車線境界線の特徴と似ているその他の線を排除することが困難であり、自律走行の方策の過程に影響を与える可能性が存在する。
本発明の例示的実施形態によれば、道路中の車線境界線を確定するための方案を提供する。
本発明の第1の態様において、道路中の車線境界線を確定するための方法を提供する。この方法は、基準曲線として第1の曲線を取得するステップであって、前記第1の曲線は、第1のポイントセットに対してフィッティングを行って取得されたものであり、前記第1のポイントセットは、前記道路中の異なる領域の複数のポイントセットから選択されたものである、ステップと、前記基準曲線に基づいて前記複数のポイントセットから第2のポイントセットを選択するステップと、前記第2のポイントセットに対してフィッティングを行って第2の曲線を生成するステップと、前記基準曲線に関連する第1のフィッティング度と前記第2の曲線に関連する第2のフィッティング度との間のフィッティング度の差を確定するステップと、少なくとも部分的に前記フィッティング度の差に基づいて、収束条件を満たしているかどうかを確定するステップと、前記収束条件を満たさないことに応じて、前記第2の曲線を前記基準曲線に設定するステップと、を少なくとも一回繰り返し実行する、ステップと、前記収束条件を満たすときの前記第2のポイントセットに基づいて、前記道路の前記車線境界線を確定するステップとを含む。
本発明の第2の態様において、道路中の車線境界線を確定するための装置を提供する。この装置は、基準曲線として第1の曲線を取得するように構成された曲線取得モジュールであって、前記第1の曲線は、第1のポイントセットに対してフィッティングを行って取得されたものであり、前記第1のポイントセットは、前記道路中の異なる領域の複数のポイントセットから選択されたものである、曲線取得モジュールと、前記基準曲線に基づいて前記複数のポイントセットから第2のポイントセットを選択し、前記第2のポイントセットに対してフィッティングを行って、第2の曲線を生成し、前記基準曲線に関連する第1のフィッティング度と前記第2曲線に関連する第2のフィッティング度との間のフィッティング度の差を確定し、少なくとも部分的に前記フィッティング度の差に基づいて収束条件を満たしているかどうかを確定し、前記収束条件を満たさないことに応じて、前記第2曲線を前記基準曲線に設定することを、少なくとも一回繰り返し実行するように構成された曲線更新モジュールと、前記収束条件を満たすときの前記第2のポイントセットに基づいて、前記道路の前記車線境界線を確定するように構成された車線境界線確定モジュールと、を含む。
本発明の第3の態様において、1つまたは複数のプロセッサと、1つまたは複数のプログラムを格納するための記憶装置を含む機器であって、当該1つまたは複数のプログラムが当該1つまたは複数のプロセッサによって実行される場合、当該1つまたは複数のプロセッサが本発明の第1の態様による方法を実現する機器を提供する。
本発明の第4の態様において、コンピュータプログラムが記憶されているコンピュータ読み取り可能な記憶媒体であって、当該プログラムがプロセッサによって実行される場合、本発明の第1の態様による方法を実現するコンピュータ読み取り可能な記憶媒体を提供する。
発明の内容の部分で説明した内容は、本発明の実施形態のポイントまたは重要な特徴を限定しようとするものではなく、本発明の範囲を限定するためのものではないことを理解されたい。本発明の他の特徴は、下の説明を介して容易に理解できるだろう。
以下の図面を参照してなされた制限的でない実施形態に対する詳細的な説明により、本発明の他の特徴、目的及び利点はより明らかになる。
図1は、本発明の複数の実施形態を実現可能な例示的な環境の概略図を示す。 図2は、本発明の一実施形態に係る車線境界線を生成する概略図を示す。 図3は、本発明の一実施形態に係る道路中の車線境界線を確定するための方法のフローチャートを示す。 図4は、本発明の一実施形態に係る第2の座標点のセットを選択する方法のフローチャートを示す。 図5は、本発明の他の一実施形態に係る第2の座標点のセットを選択する方法のフローチャートを示す。 図6は、本発明の一部の実施形態に係るフィッティング度を算出する例示的な方法のフローチャートを示す。 図7は、本発明の実施形態に係る道路中の車線境界線を確定するための装置の概略ブロック図を示す。 図8は、本発明の複数の実施形態を実現可能な計算機器のブロック図を示す。
以下、説明の詳細を参照しながら本発明の様々な実施形態及び態様を説明し、図面には、上記様々な実施形態が示される。以下の説明及び図面は、本発明を例示するためのものであり、限定するものとして解釈されるべきではない。本発明の様々な実施形態を全面的に理解するために、多くの特定の詳細を説明する。ところが、いくつかの場合に、本発明の実施形態に対する簡単な説明を提供するために、周知又は従来技術の詳細について説明していない。
本発明の実施形態を説明することにおいて、用語「含む」及び似ている用語は、開放的な「含む」に理解すべきである。つまり、「...を含むが、これらに限定されない」と理解すべきである。用語「に基づいて」は、「少なくとも部分的に...に基づいて」と理解すべきである。用語「一実施形態」または「当該実施形態」は、「少なくとも一つの実施形態」として理解すべきである。用語「第1」、「第2」などは、異なるか、同じ対象物を示す可能性もある。以下、他の明確な定義と暗黙的定義を含める可能性もある。
本発明の実施形態において、当該技術分野の当業者が理解しやすいように、いくつかの特定された数値を用いたが、これらの数字は、単に例示的なものであり、本発明の保護範囲を限定しようとしない。
前述したように、道路中の車線境界線を確定するために、従来の方法において、レーダーを介して3次元点群を収集したり、イメージセンサに基づいて画像データを収集することにより実現される。これらの方策は、正確率または適応性などの面に欠陥が存在する。例えば、横断歩道線、交通標識線が存在する複雑な場面に対して、横断歩道線または交通標識線が車線境界線と同じような視覚特徴とレーザ反射特徴を備えるので、従来の方法は、横断歩道線または交通表紙線を車線境界線と効果的に分離させるにくく、横断歩道線または交通標識線を車線境界線に間違って認定する可能性が存在し、自律走行の決定に影響を与える。
本発明の実施形態によれば、道路中の車線境界線を確定するための方案を提出する。当該方案において、フィッティング曲線が十分に収束するまで、フィッティングされて取得した曲線のフィッティング度を利用してフィッティングを繰り返し行う。収束を判定する過程では、選択毎のフィッティング曲線に用いられる候補点が、3次元点群データおよび/または画像データに基づいて判断した相対的に高い確率を備える車線境界上の点(ポイント)に同時に満たすように、レーダーおよび/または画像センサから取得した道路中の車線境界線の3次元点群データおよび/または画像データを結合させることもできる。
これらの方案に基づいて、生成された車線境界線がさらに良好な曲線特性を備えるようにすることができる。また、当該案はフィッティング曲線の収束判定を利用して、横断歩道線、交通標識線などの特徴が車線境界線と似ている干渉を効果的に区分することにより、生成された車線境界線の精度を向上させることができる。
以下、添付された図面を参照して、本発明の実施形態を具体的に説明する。図1は、本発明の複数の実施形態を実現可能な例示的環境100の概略図を示す。この例示的環境100において、認識された車線境界線180は、計算機器170によってセンサデータ150、152、152に基づいて確定される。
道路110中の車線境界線115を認識することができるように、道路110に1つまたは複数の収集本体(例えば、収集本体120、収集本体130、収集本体140)を走行させる必要がある。収集本体120を例にすると、収集本体120上に、例えばレーダー装置と画像収集装置を含む1つまたは複数のセンサ装置を設置することができ、ここで、レーダー装置は、道路110の3次元点群データを収集することができ、画像収集装置は、道路110のうち車線境界線115の画像を収集することができる。一部の実施形態において、収集本体120上に、画像が収集されるときの収集本体の位置する場所を確定するための位置確定装置が設置されることができる。
一部の実施形態において、収集本体120、130、140には、有線または無線方式を経由して収集されたセンサデータ150、152、154を記憶装置160に送信するための通信装置がインストールされることができる。本発明の実施形態によれば、計算機器170は、記憶装置160からのセンサデータを取得し、センサデータに基づいて、認識された車線境界線180を確定する。
以下、図2乃至図3を組み合わせて、本発明の実施形態に係る道路中の車線境界線を確定するための方法を説明する。図2は、本発明の実施形態に係る車線境界線を確定する概略図200を示し、図3は、本発明の実施形態に係る道路中の車線境界線を確定するための方法300のフローチャートを示す。
図2に示すように、道路110中の車線境界線115を確定するように、図1に示すような1つまたは複数の収集本体120を道路110で走行させて、道路中の車線境界線のセンサデータ(つまり、3次元点群データおよび/または画像データ)を取得することができる。
一部の実施形態において、収集されたセンサデータに対して、収集車の進行軌跡に沿って、所定の距離(例えば、2メートル)を間隔で所定領域のセンサデータを選択して車線境界線確定に利用することができる。これにより、十分な精度を確保することができる前提の下で、必要なコンピューティング量を低減させることができる。一部の実施形態において、例えば、収集本体120の周囲の0.5メートルの半径の範囲をその所定の領域とすることができる。図2に示すように、所定領域の複数の例に(第1の領域206、第2の領域208及び第3領域210)が挙げられる。これらの所定の領域は、単に例示的であるだけで、他の任意の適切なルールに基づいて、その所定の領域を選択することで、車線境界線が存在する可能性がない領域の判定を低減させることもできることを理解されたい。
各所定領域206、208、210のうち1つまたは複数の位置は、予め選択または設定することができ、これらの位置の2次元または3次元座標は、複数のポイント212に対応することができる。図2の例では、各所定の領域206、208、210の中の位置に対応するポイント212が概略的に示されている。一部の実施形態において、ポイントの212は、レーダーに基づいて取得した3次元点群データ中のサンプリングポイントに対応することができる。以下、説明の便宜のために、領域中の位置とポイントは、相互に交換可能に使用される。以下、図3を結びつけて車線境界線を確定する方法300を説明する。
ブロック302において、基準曲線として第1の曲線を取得する。第1の曲線は、第1のポイントセットに対してフィッティングを行いって取得されたものであり、第1のポイントセットは、道路中の異なる領域の複数のポイントセットから選択されることができる。図2に示すように、第1の曲線220は、第1の領域206中のポイント222、第2の領域208中のポイント224及び第3領域210中のポイント226に対してフィッティングを行って取得されたものである。
一部の実施形態において、3次元点群データに基づいて、各所定領域のうち、第1の曲線をフィッティングするためのポイントを確定することができる。車線境界線の表面材質が相対的に高いレーザ反射率を備えるので、取得した3次元点群データの各点により表示される位置のレーザ反射率に基づいて、車線境界線である可能性があるかどうかを判定することができる。例えば、第1の領域206に対して、その領域の中で、すべてのポイントの点群反射率に基づいて、第1の曲線をフィッティングするためのポイントとして、その中のレーザ反射率が最も高い1つまたは複数のポイントを選択することができる。一部の実施形態において、特定のレーザの反射値閾値に基づいて、第1の曲線をフィッティングするための1つまたは複数のポイントを確定することができる。図2に示された例示において、例えば、第1の領域206で選択された第1の曲線をフィッティングするためのポイントに222は、第1の領域206のうち、レーザ反射率が最も高いポイントであってもよい。
一部の実施形態において、画像データに基づいて、各所定領域のうち、第1の曲線をフィッティングするためのポイントを確定することができる。一部の実施形態において、当該画像データは、ピクセルポイントの深度データ(depth of field data)を含むことができる。このような場合に、従来の画像処理アルゴリズムを利用して、画像データに対して処理を進めることにより、画像データ中の各ピクセルポイントが車線境界線上に位置する信頼性を確定することができる。一部の実施形態において、例えば深層学習アルゴリズムを利用して画像データに対して分析を行い、ピクセルポイントの分類結果を取得することにより、各ピクセルポイントが車線境界線に該当する信頼性を取得することができる。一部の実施形態において、例えば、単にピクセルのグレースケールに基づいてピクセルポイントが車線境界線上に位置する信頼性を判定することもできる。例えば、車線境界線のサンプリンググレースケール範囲に基づいて、検出されグレースケールがその範囲に位置するピクセルのポイントは、相対的に高い信頼性を有するとみなすことができる。画像中の各ピクセルポイントが車線境界線上に位置する信頼性を確定するために、任意の他の適切な画像処理方法を使用することができ、その信頼性は、各ピクセルポイントが車線境界線上に位置する確率または可能性を表示することを理解されたい。
収集された画像中の各ピクセルポイントの信頼性を確定した後に、画像を収集するときの収集本体120の位置(例えば、GPSを介して与えられる)、イメージセンサの定格パラメータおよび画像の深度データに基づいて、画像データから所定の領域中のポイントへのマッピングを確立し、所定の領域中のポイントにより表示される位置が車線境界線に該当する信頼性を取得することができる。画像データ中のピクセルポイントから所定の領域中のポイントへのマッピング過程を確立する場合、一部のポイントが対応されていない画像データが存在する可能性が存在し、このような場合、これらの点の信頼度は、固定値(例えば、0または任意の他の適当な数値)に設定されることを理解できるだろう。
一部の実施形態において、当該画像データは、深度情報を含んでいないことができる。このような場合に、画像データ中のピクセルポイントにより反映されるのは、2次元の位置であり、所定の領域中のポイントにより反映されるのは、3次元位置なので、ピクセルポイントから所定の領域中のポイントへのマッピング過程を確立する場合、2次元位置の一つのポイントは、3次元位置の一つの線にマッピングされる。一部の実施形態において、画像データのピクセルポイントのマッピング位置として、マップされた線のうち、収集本体120との位置が最も近いポイントを選択することができ、そのポイントの信頼性は、そのピクセルポイントの信頼性に設定することができ、その線の中の他のポイントの信頼性は、固定値(例えば、0)に設定することができる。
また、先に議論したレーザ反射率と同様に、画像データのピクセルポイントと所定の領域ポイントのマッピングにより確定されたポイントの信頼性に基づいて、第1の曲線をフィッティングするように、所定の領域のうち、信頼性が最も高い1つまたは複数のポイントを選択し、または第1曲線をフィッティングするように、所定の領域のうち、信頼性が所定の閾値よりも高い1つまたは複数のポイントを選択することができる。図2に示された例示において、例えば第1の領域206で選択された第1の曲線をフィッティングするためのポイントに222は、第1の領域206の信頼性が最も高いポイントであってもよい。
一部の実施形態において、選択されたポイントの精度を向上させるためには、同時にレーザ反射率と画像データの信頼性に基づいて、第1の曲線をフィッティングするためのポイントを確定することができる。一部の実施形態において、レーザ反射率および信頼性に対して、それぞれ正規化を行い、レーザ反射率と信頼性に各自の重みを分配して、彼の加重合計に基づいて、各ポイントの得点を確定することができ、その得点はセンサデータに基づいて確定した各ポイントの対応する位置が車線境界線に該当する可能性を反映することができる。例えば、ポイントの得点Point_Scoreは、以下の式に基づいて確定することができる。
(式1)
Point_Score=α*Point_Cloud_Rate+β*Image_Conf
ここで、αとβは重み係数を表示し、Point_Cloud_Rateは、そのポイントの点群反射率を表示し、Image_Confは、そのポイントの信頼性を表示する。一部の実施形態において、レーザ反射率は、位置が車線境界線であるかどうかの可能性を相対的により正確に反映することができるので、反射率に対して相対的に高い重みαを分配して、信頼性に対して相対的に低い重みβを分配することができる。一部の実施形態において、第1の曲線をフィッティングするために、所定の領域の中で得点が最も高い1つまたは複数のポイントを選択することができ、または第1曲線をフィッティングするために、所定の領域の得点が所定の閾値より高い1つまたは複数のポイントを選択することができる。図2に示された例示において、例えば、第1の領域206で選択された第1の曲線をフィッティングするためのポイントに222は、第1の領域206の中で得点が最も高いポイントであってもよい。3次元点群データと画像データを融合処理する方法を使用して、両者のデータは相互認証することができる。そして、両者がすべて該当するポイントにより表示される位置が車線境界線上に位置する可能性が存在することを表示する場合、当該ポイントは相対的に高い得点を取得することができるので、この方法は、従来の方法に比べてより正確であることができる。
各所定領域のうち、第1の曲線をフィッティングするためのポイントを確定した後に、曲線フィッティングアルゴリズムを用いて、確定されたポイントに対して曲線フィッティングを行うことができる。一部の実施形態において、RANSACアルゴリズムを利用して、確定された複数のポイントに対してフィッティングを行うことができる。第1の曲線を確定するために、任意の他の適切な曲線フィッティングアルゴリズムを用いて、確定された複数のポイントに対して曲線フィッティングを行うことができることを理解されたい。例えば、図2に示された例示において、選択されたポイント222、ポイント224、ポイント226に対してフィッティングを行って得られた曲線は、第1の曲線214である。
続いて、図3を参照すると、ブロック304において、基準曲線に基づいて、異なる領域の複数のポイントセットから第2のポイントセットを選択する。一部の実施形態において、現在の基準曲線(即ち、第1の曲線214)に対して、各所定の領域中のポイントから第1の曲線214へのユークリッド距離を算出し、その距離に基づいて、第2のポイントセットを選択することができる。例えば、所定の領域のうち、第1の曲線214との距離が最も近い1つまたは複数のポイントを選択し、または所定の領域のうち、その距離が所定の閾値よりも小さい1つまたは複数のポイントを選択することができる。一部の実施形態において、当該距離に基づいて所定の領域の中で、各ポイントの新しい得点を確定することができる。例えば、各ポイントの得点Point_Score_Newは、以下の式に基づいて確定することができる。
(式2)
Point_Score_New=2/(1+e^(f*Dist))
ここで、fは定数であってもよく、Distはポイントから基準曲線までのユークリッド距離を表示する。このような場合に、例えば、基準曲線とより近いポイントが優先的に選択され、新しい曲線がより望ましい平滑度を備えることができるように、第2のポイントセットとして、所定の領域の中で得点が最も高い1つまたは複数のポイントを選択し、または所定の領域の中で得点が所定の閾値よりも高い1つまたは複数のポイントを選択することができる。
一部の実施形態において、3次元点群データに基づいて、第2のポイントセットを確定することができる。図4に示すように、方法400は、ブロック304の一例示的実施形態である。
ブロック402において、道路の異なる領域の複数のポイントセットに関連する点群データを取得する。一部の実施形態において、レーダーを介して道路の異なる領域の3次元点群データを取得し、複数のセットが対応する位置とレーダーのサンプリングポイントの間の位置マッチングに基づいて、複数のポイントセットに関連する点群データを確定することができる。ブロック404において、点群データから、複数のポイントセットのうちのポイントにより表示される位置のレーザ反射率を確定する。
ブロック406において、レーザ反射率と基準曲線に基づいて、第2のポイントセットを選択する。一部の実施形態において、レーザ反射率と基準曲線に基づいて、所定の領域中のポイントの得点を再確定することができる。一部の実施形態において、前述したように、所定の領域の各ポイントから基準曲線までのユークリッド距離を確定することができる。この時、得点Ponit_Score_Newは、例えば以下のような式によって確定することができる。
(式3−1)
Ponit_Score_New=α1*Point_Cloud_Rate+β1*Point_Dist_Score
(式3−2)
Point_Dist_Score=2/(1+e^(f*Dist))
ここで、α1とβ1は、重み係数を表示し、Point_Cloud_Rateは、ポイントにより表示される位置のレーザ反射率を表示し、Distは、ポイントから基準曲線までのユークリッド距離を表示し、fは、定数である。このような場合に、例えば当該基準曲線との距離が近く、レーザ反射率が高いポイントが優先的に選択されるように、所定の領域の中で得点が最も高い1つまたは複数のポイントを選択し、または所定の領域の中で得点が所定の閾値よりも高い1つまたは複数のポイントを選択することができる。この方法に基づいて、一方で、上述したように、取得した曲線はより平滑することができ、他の一方で、第2のポイントセットを選択する過程でレーザ反射率と曲線までの距離との2つの要素を同時に考慮するので、単にレーザ反射率により確定した車線境界線の結果を更に修正し、ある誤った検出の発生を避けて、車線境界線の精度を向上させることができる。
一部の実施形態において、画像データに基づいて、第2のポイントセットを確定することができる。図4に示すように、方法400は、ブロック304の別の一例示的実施形態である。ブロック502において、道路の異なる領域の車線境界線画像を取得する。一部の実施形態において、例えば、撮像装置を介して、道路の異なる領域の車線境界線画像を取得することができる。
ブロック504において、複数のポイントセットのうちのポイントにより表示される位置から画像へのマッピングを確立する。一部の実施形態において、車線境界線画像は、深度情報をさらに含むことができる。このような場合に、従来の画像処理アルゴリズムを利用して、画像データに対して処理を行い、画像データ中の各ピクセルポイントが車線境界線である信頼性を確認することができる。前述したように、例えば、深層学習アルゴリズムを利用して画像データに対して分析を行い、ピクセルポイントの分類結果を取得することにより、各ピクセルポイントが車線境界線に該当する信頼性を取得することができる。一部の実施形態において、例えば単にピクセルのグレースケールに基づいてピクセルポイントが車線境界線に該当する信頼性を判定することもでき、例えば車線境界線の一般的なグレースケール領域に基づいて、グレースケールの対応する領域に位置するピクセルのポイントは、相対的に高い信頼性を備える。画像中の各ピクセルポイントが車線境界線に該当する確率を確定するために、任意の他の適切な画像処理方法をすべて利用することができることを理解されたい。
収集した画像の中の各ピクセルポイントの信頼性を確定した後に、画像を収集するときの収集本体120の位置(例えば、GPSを介して与えられる)、イメージセンサの定格パラメータおよび画像の深度データに基づいて、画像データから所定の領域中のポイントへのマッピングを確立し、所定の領域中のポイントの対応する位置が車線境界線に該当する信頼性を取得することができる。画像データのうち、ピクセルポイントから所定の領域中のポイントへのマッピング過程を確立する場合、一部のポイントが対応されていない画像データが存在する可能性が存在し、このような場合に、これらの点の信頼度は、固定値(例えば、0または任意の他の適当な数値)に設定されることを理解できるだろう。
一部の実施形態において、当該画像データは、深度情報を含んでいないことができる。このような場合に、画像データ中のピクセルポイントにより反映されるのは、2次元の位置であり、所定の領域中のポイントにより反映されるのは、3次元位置なので、ピクセルポイントから所定の領域中のポイントへのマッピング過程を確立する場合、2次元位置の一つのポイントは、3次元位置の一つの線にマッピングされる。一部の実施形態において、画像データのピクセルポイントのマッピング位置として、マップされた線のうち収集本体120との位置が最も近いポイントを選択することができ、そのポイントの信頼性は、そのピクセルポイントの信頼性に設定することができ、その線の中の他のポイントの信頼性は、固定値(例えば、0または任意の他の適当な数値)に設定することができる。
ブロック506において、マッピングと基準曲線に基づいて、第2のポイントセットを選択する。一部の実施形態において、マッピングにより取得したポイントの信頼性および基準曲線の距離に基づいて、ポイントの取得を再確定することができる。例えば、いくつかのの実施形態において、前述したように、所定の領域の各ポイントから基準曲線までのユークリッド距離を確定することができる。この時、得点Point_Score_Newは、例えば以下のような式により確定することができる。
(数4−1)
Ponit_Score_New=α2*Image_Conf+β2*Point_Dist_Score
(数4−2)
Point_Dist_Score=2/(1+e^(f*Dist))
ここで、α2とβ2は、重み係数を表示し、Image_Confは、ポイントの信頼性を表示し、Distは、ポイントから基準曲線までのユークリッド距離を表示し、fは、定数である。このような場合に、例えば、当該基準曲線との距離が近く、信頼性の高いポイントが優先的に選択されるように、所定の領域の中で得点が最も高い1つまたは複数のポイントを選択し、または所定の領域の中で得点が所定の閾値よりも高い1つまたは複数のポイントを選択することができる。この方法に基づいて、一方で、上述したように、取得した曲線はより平滑することができ、他の一方で、第2のポイントセットを選択する過程で、画像に基づいて確定したポイントが車線境界線上に位置する信頼性と曲線までの距離との2つの要素を同時に考慮するので、単に画像データに基づいて確定した車線境界線の結果を更に修正し、いくつかの誤った検出の発生を避けて、車線境界線の精度を向上させることができる。
一部の実施形態において、3次元点群データと画像データに基づいて、第2のポイントセットを確定することもできる。上述したように、道路の異なる領域の3次元点群データと、対応する車線境界線画像とを取得することができる。上記内容と同じようなプロセスに基づいて、各所定領域のいずれの各ポイントのレーザ反射率、信頼性、および基準曲線までの距離を確定することができる。この時のポイントの得点は、以下のような式で算出することができる。
(数5−1)
Ponit_Score_New=α3*Point_Cloud_Rate+β3*Image_Conf+γ*Point_Dist_Score
(数5−2)
Point_Dist_Score=2/(1+e^(f*Dist))
ここで、α3、β3およびγは、重み係数を表示し、Point_Cloud_Rateは、ポイントにより表示される位置のレーザ反射率を表示し、Image_Confは、ポイントの信頼性を表示し、Distは、ポイントから基準曲線までのユークリッド距離を表示し、fは、定数である。このような場合に、例えば当該基準曲線との距離が近く、レーザ反射率が高く、信頼性の高いポイントが優先的に選択され、さらに第2のポイントセットが実際の中の車線境界線に更に近接することができるように、所定領域のいずれ得点が最も高い1つまたは複数のポイントを選択し、または所定の領域の中で得点が所定の閾値よりも高い1つまたは複数のポイントを選択することができる。
この方法を使用して、一方で、上述したように、取得した曲線はより平滑することができ、他の一方で、第2のポイントセットを選択する過程でレーザ反射率と、画像に基づいて確定したポイントが車線境界線上に位置する信頼性と、曲線までの距離との3つの要素を同時に考慮するので、まず複数のパラメータの総合検証に基づいて検出結果を取得することができ、より正確であるだけでなく、さらにポイントから基準曲線までの距離を考慮するので、センサ融合により確定した車線境界線の結果を更に修正し、いくつかのの誤った検出の発生を避けて、車線境界線の精度を向上させることができる。
例えば、図2に示された例示において、第1の領域206で選択されたポイントは、ポイント232であり、第1の領域206で選択されたポイントは、ポイント234であり、第1の領域206で選択されたポイントは、ポイント236であり、フィッティングにより取得した曲線は、第2の曲線230である。
続いて、図3を参照すると、ブロック306において、基準曲線に関連する第1のフィッティング度と第2曲線に関連する第2のフィッティング度との間のフィッティング度の差(違い)を確定する。一部の実施形態において、フィッティング度は、曲線をフィッティングするためのポイントとフィッティングにより取得した曲線とのフィッティング精度を反映する。図6を参照すると、図6は、本発明の実施形態に係るフィッティング度を確定する方法600のフローチャートを示す。
ブロック602において、一ポイントセットにおけるポイントから曲線までの距離を確定する。例えば、第2の曲線を例にとると、一部の実施形態において、当該距離は、第2のポイントセットのうち、ポイントから第2の曲線までのユークリッド距離である。ブロック604において、一ポイントセットのうち、曲線までの距離が所定の距離よりも小さいポイントの占有率を確定する。第2の曲線を例として、いくつかのの実施形態において、占有率Ratioは、例えば以下の式で確定することができる。
(数6)
Ratio=Count(Dist<Dist_Threshold)/Amount
ここで、Distは、曲線上のポイントから第2の曲線までの距離を表示し、Dist_Thresholdは、距離閾値を表示し、Amountは、曲線上のポイントの数を表示し、Count(Dist <Dist_Threshold)は、第2の曲線までの距離が閾値距離よりも小さい点の数を表示する。一部の実施形態において、幅内のポイントがすべて相対的に良好なフィッティング度を備えるように、閾値距離は、車線境界線幅の半分に選択することができる。
ブロック606において、距離と占有率の加重合計に基づいてフィッティング度を確定する。第2ゴクソンルルを例として、いくつかのの実施形態において、例えば、距離に基づいてその曲線上のすべてのポイントの平均距離得点Average_Dist_Scoreを取得することができる。
(式7−1)
Average_Dist_Score=Sum(Point_Dist_Score)/Amount
(式7−2)
Point_Dist_Score=2/(1+e^(f*Dist))
ここで、Distは、曲線上のポイントから第2の曲線までの距離を表示し、fは、定数であり、Amountは、その曲線上のポイントの数を表示し、Sum(Point_Dist_Score)は、曲線上のポイントの距離得点の合計を表示する。一部の実施形態において、続いて、平均距離得点と占有率に基づいて、第2フィッティング度Fit_Score_2を算出することができる。
(式8)
Fit_Score_2 =α4* Average_Dist_Score +β4* Ratio
ここで、α4とβ4は、重み係数を表示する。この方法に基づいて算出されたフィッティング度は、曲線自体とポイントのマッチングの度合いを考慮するだけではなく、車線境界線が特定の幅を備える特徴も考慮するので、当該曲線をフィッティングするためのラインを候補車線境界線上のポイントとする可能性をより正確に反映することができる。
続いて、図3を参照すると、基準曲線に関連する第1のフィッティング度は、方法600に基づいて確定されることができることを理解されたい。一部の実施形態において、フィッティング度の差は、第2フィッティング度と第1のフィッティング度の差値で表示されることができる。
ブロック308において、収束条件を満たしているかどうかを確定する。一部の実施形態において、収束条件はフィッティング度の差に関連することができる。一部の実施形態において、例えば、フィッティング度の差の絶対値が所定の閾値よりも小さいかどうかを判断し、小さい場合に、2つの曲線が非常に近接すること、即ち収束が十分であることを反映する。一部の実施形態において、例えば、フィッティングの差値が0よりも大きいか同じであり、所定の閾値よりも小さい場合、即ち第2の曲線の品質が基準曲線の質よりも良好であり、2つの曲線が非常に近接する場合、この時点でこれ以上の繰り返しを進めても、曲線の品質を著しく向上させることは困難の可能性があり、このように収束条件を満足すると確定することができる。
一部の実施形態において、収束条件は曲線上のポイントのレーザ反射率に関連することもできる。一部の実施形態において、例えば、基準曲線に関連する第1の平均レーザ反射率および第2の曲線に関連する第2の平均レーザ反射率とをそれぞれ確定することができる。ここで、平均レーザ反射率は、曲線上のすべてのポイントにより表示される位置のレーザ反射率の平均値を指す。続いて、第1の平均レーザ反射率および第2の平均レーザ反射率に基づいて、両者の差、即ちレーザ反射率の差を算出することができる。一部の実施形態において、レーザ反射率の差とフィッティング度の差に対して加重合計を行って相違度の得点を取得することができる。つまり、相違度の得点Diff_Scoreは、以下のように表示されることができる。
(式9)
Diff_Score=α5*Diff_Point_Cloud_Ratio+β5*Diff_Fitting_Score
ここで、α5とβ5は、重み係数を表示し、Diff_Point_Cloud_Ratioは、レーザ反射率の差を表示し、Diff_Fitting_Scoreは、フィッティング度の差を表示する。一部の実施形態において、相違度の得点と所定の閾値を比較して、合計が所定の閾値よりも小さい場合に、収束条件を満たしていると判定する。一部の実施形態において、同様に、相違度の得点が0よりも大きいか同じであり、所定の閾値よりも小さい場合に、収束条件を満足すると確定することもできる。
一部の実施形態において、収束条件は曲線上のポイントの信頼性に関連してもよい。一部の実施形態において、例えば、基準曲線に関連する第1の平均信頼性と、第2の曲線に関連する第2の平均信頼性とをそれぞれ確定することができる。ここで、平均信頼性は、その曲線上のすべてのポイントの信頼性の平均値を指す。続いて、第1の平均信頼性および第2の平均信頼性に基づいて、両車の差、即ち信頼性の差を算出することができる。一部の実施形態において、信頼性の差とフィッティング度の差に対して加重合計を進めて相違度の得点を取得することができる。つまり、相違度の得点Diff_Scoreは、以下のように表示されることができる。
(式10)
Diff_Score=α6*Diff_Image_Conf+β6*Diff_Fitting_Score
ここで、α6とβ6は、重み係数を表示し、Diff_Image_Confは、信頼性の差を表示し、Diff_Fitting_Scoreは、フィッティング度の差を表示する。一部の実施形態において、続いて、相違度の得点と所定の閾値を比較して、合計が所定の閾値よりも小さい場合に、収束条件を満たしていると判定する。一部の実施形態において、同様に、相違度の得点が0よりも大きいか同じであり、所定の閾値よりも小さい場合に、収束条件を満足すると確定することもできる。
収束条件は、同時にフィッティング度の差、レーザ反射率の差や信頼性の差に関連することができ、つまり3者に対して加重合計を進めて相違度の得点を取得することができることを理解しなければならない。即ち、相違度の得点Diff_Scoreは、以下のように表示されることができる。
(式11)
Diff_Score=α7*Diff_Point_Cloud_Ratio+β7*Diff_Image_Conf+γ2*Diff_Fitting_Score
ここで、α7、β7とγ2は、重み係数を表示し、Diff_Point_Cloud_Ratioは、レーザ反射率の差を表示し、Diff_Image_Confは、信頼性の差を表示し、Diff_Fitting_Scoreは、フィッティング度の差を表示する。一部の実施形態において、続いて、相違度の得点と所定の閾値を比較して、合計が所定の閾値よりも小さい場合に、収束条件を満たしていると判定する。一部の実施形態において、同様に、相違度の得点が0よりも大きいか同じであり、所定の閾値よりも小さい場合に、収束条件を満足すると確定することもできる。
ブロック308で収束条件を満足していることを確定した場合、方法300は、ブロック310に進め、収束条件を満たすときの第2のポイントセットに基づいて、道路の車線境界線を確定し、第2のポイントセットを最終の車線境界線の結果として出力する。
収束条件を満たしていないと確定される場合に、方法300は、ブロック312に進め、第2の曲線を基準曲線に設定し、次いでブロック304に戻り、新たな基準曲線に基づいて第2のポイントセットを再選択する。ブロック304、ブロック306、ブロック308とブロック312は、収束条件を満たすまで繰り返し実行されることを理解されたい。一部の実施形態において、算出結果と算出オーバーヘッドのバランスのために、例えば、繰り返し回数に上限(例えば、10回)を設定することができ、繰り返し回数がその上限に達した場合、収束条件を満たしていると確定し、繰り返しを自動的に終了し、この時の第2のポイントセットを最終の車線境界線の結果として出力する。
上記のように、本発明の実施形態により提供される車線境界線を確定する方案は、3次元点群と画像収集データに対して融合判定を行い、単一のセンサで認識する案に比べてより正確である。また、当該案は、レーザ反射率、信頼性、および基準曲線までの距離に基づいて、各候補ポイントに対してスコアを算出し、センサデータに基づいて更に曲線の特性を導入して、取得した曲線がより平滑で、実際の車道特徴に適合させることができる。さらに、複数の繰り返し方法により、取得したポイントが相対的に高いレーザ反射率を備え、相対的に高い信頼性を備え、フィッティング曲線との距離が相対的に近いことができるだけでなく、いくつかの視覚的な特徴が車線境界線と相対的に近いその他の道路線(例えば、横断歩道線と車道標識線など)を排除することができる。
図7は、本発明の実施形態に係る道路中の車線境界線を確定するための装置700の概略ブロック図を示す。図7に示すように、装置700は、基準曲線として第1の曲線を取得するように構成された曲線取得モジュール702であって、第1の曲線は、第1のポイントセットに対してフィッティングを行って取得したものであり、第1のポイントセットは、道路中の異なる領域の複数のポイントセットから選択されるものである、曲線取得モジュール702と、基準曲線に基づいて、複数のポイントセットから第2のポイントセットを選択し、第2のポイントセットに対してフィッティングを行って、第2曲線を生成し、基準曲線に関連する第1フィッティング度と第2曲線に関連する第2のフィッティング度の間のフィッティング度の差を確定し、少なくとも部分的にフィッティング度の差に基づいて収束条件を満たしているかどうかを確定し、収束条件を満たさないことに応じて、第2の曲線を基準曲線に設定することを、少なくとも一回繰り返し実行するように構成された曲線更新モジュール704と、収束条件を満たすときの第2のポイントセットに基づいて、道路の車線境界線を確定するように構成された車線境界線確定モジュール706を含む。
一部の実施形態において、曲線更新モジュール704は、準曲線との距離が近いポイントが優先的に選択されるように、複数のポイントセットから基準曲線までの距離に基づいて、第2のポイントセットを選択するように構成された第1のポイント選択モジュールをさらに含む。
一部の実施形態において、曲線更新モジュール704は、道路中の異なる領域の複数のポイントセットに関連する点群データを取得するように構成された点群データ取得モジュールと、点群データから、複数のポイントセットの中のポイントにより表示される位置のレーザ反射率を確定するように構成されたレーザ反射率確定モジュールと、基準曲線との距離が近く、レーザ反射率が高いポイントが優先的に選択されるように、点群の信頼性と基準曲線に基づいて、第2ポイントセットを選択するように構成された第2ポイント選択モジュールをさらに含む。
一部の実施形態において、曲線更新モジュール704は、基準曲線をフィッティングするためのポイントにより表示される位置のレーザ反射率に基づいて、基準曲線に関連する第1の平均レーザ反射率を確定するように構成された第1の平均レーザ反射率確定モジュールと、第2の曲線をフィッティングするためのポイントにより表示される位置のレーザ反射率に基づいて、第2の曲線に関連する第2の平均レーザ反射率を確定するように構成された第2の平均レーザ反射率確定モジュールと、第1の平均レーザ反射率と第2の平均レーザ反射率との間のレーザ反射率の差を確定するように構成されたレーザ反射率差確定モジュールと、レーザ反射率の差とフィッティング度の差の加重合計が所定の閾値よりも小さいことに応じて、収束条件を満足すると確定するように構成された第1の収束判断モジュールをさらに含む。
一部の実施形態において、曲線更新モジュール704は、道路の異なる領域中の車線境界線の画像を取得するように構成された画像取得モジュールと、複数のポイントセットのうちのポイントにより表示される位置を画像上にマッピングするように構成されたマッピングモジュールと、基準曲線との距離が近く、対応する位置が画像において車線境界線に近接し、車線境界線上に位置するポイントが優先的に選択されるように、マッピングと基準曲線に基づいて、第2ポイントセットを選択するように構成された第3のポイント選択モジュールをさらに含む。
一部の実施形態において、曲線更新モジュール704は、ポイントにより表示される位置のマッピングに基づいて、ポイントが車線境界線に該当する信頼性を確定するように構成された信頼性確定モジュールと、基準曲線をフィッティングするためのポイントの信頼性に基づいて、基準曲線に関連する第1の平均信頼性を確定するように構成された第1の平均信頼性確定モジュールと、第2の曲線をフィッティングするためのポイントの信頼性に基づいて、第2の曲線に関連する第2平均信頼性を確定するように構成された第2の平均信頼性確定モジュールと、第1の平均信頼性と第2の信頼性との間の信頼性の差を確定するように構成された信頼性差確定モジュールと、信頼性の差とフィッティング度の差の加重合計が所定の閾値よりも小さいことに応じて、収束条件を満足すると確定するように構成された第2の収束判断モジュールをさらに含む。
一部の実施形態において、曲線更新モジュール704は、繰り返し回数が所定の閾値に達したことに応じて、収束条件を満足すると確定するように構成された第3の収束判断モジュールをさらに含む。
一部の実施形態において、曲線更新モジュール704は、第2のポイントセットから第2の曲線までの距離を確定するように構成された距離確定モジュールと、第2のポイントセットのうち、第2の曲線までの距離が所定の距離よりも小さいポイントの占有率を確定するように構成された占有率確定モジュールと、平均距離と占有率の加重合計に基づいて、第2のフィッティング度を確定するように構成されたフィッティング度確定モジュールをさらに含む。
図8は、本願の複数の実施形態を実施することができる機器800のブロック図を示す。機器800は、図1のコンピューティング機器170を実現するのに使用することができる。図示されたように、機器800は、中央処理ユニット801(CPU)を含み、CPU801は、読み取り専用メモリ802(ROM)に記憶されたコンピュータプログラム指令、または記憶ユニット808からランダムアクセスメモリ803(RAM)にロードされたコンピュータプログラム指令に基づいて、各種の適切な動作と処理を実行することができる。RAM803には、機器800の動作に必要な各種のプログラムやデータが記憶されることができる。CPU801、ROM802とRAM803、バス804を介して互いに接続される。入力/出力(I/O)インターフェース805もバス804に接続される。
機器800中のI/Oインターフェース805に接続されている複数の部品として、キーボード、マウスなどの入力ユニット806と、様々なタイプの表示装置、スピーカーなどの出力ユニット807と、磁気ディスク、コンパクトディスクなどの記憶ユニット808と、LANカード、モデム、無線通信トランシーバなどの通信ユニット809が含まれる。通信ユニット809は、機器800がインターネットなどのコンピュータネットワークおよび/または各種の電気通信網を介して他の機器と情報/データを交換することを可能にする。
中央処理ユニット801は、前述した各方法と処理、例えば、プロセス300、400、500および/または方法600を実行する。例えば、いくつかのの実施形態において、プロセス300、400、500および/または方法600は、コンピュータソフトウェアプログラムとして実現されることができ、これは機械可読媒体(例えば、記憶ユニット808)に含まれている。一部の実施形態において、コンピュータプログラムの一部または全部は、ROM802、および/または通信ユニット809を経由して機器800上にロードおよび/またはインストールすることができる。コンピュータプログラムは、RAM803にロードされてCPU801により実行される場合、前述したプロセス300、400、500および/または方法600の1つまたは複数のステップを実行することができる。選択可能に、その他の実施形態において、CPU801は、ギターの任意の適切な方法で(例えば、ファームウェアの助けを借りて)プロセス300、400、500および/または方法600を実行するように構築することができる。
本明細書に説明されて複数の機能は、少なくとも部分的に1つまたは複数のハードウェアロジック部材で実行することができる。例えば、使用可能な模式的なタイプのハードウェアロジック部材は、フィールドプログラマブルゲートアレイ(FPGA)、特定用途向け集積回路(ASIC)、オンデマンド標準製品(ASSP)、システム−オン−チップシステム(SOC)、複合プログラマブルロジック素子(CPLD)などを含むが、これに限定されない。
本願の方法を実施するためのプログラムコードは、1つまたは複数のプログラマブル言語の任意の組み合わせを利用してプログラミングすることができる。これらのプログラムコードは、汎用コンピュータ、オンデマンドコンピュータ又はその他のプログラマブルデータ処理装置のプロセッサまたは制御装置に提供されることができ、プログラムコードがプロセッサまたは制御装置により実行される場合には、フローチャート、および/またはブロック図に規定された機能/操作が実施される。プログラムコードは、完全に機械上で実行されるか、部分的に機械上で実行されるか、独立したソフトウェアパッケージとして部分的に機械上で実行されて、部分的にリモートマシン上で実行されたり、または完全にリモートマシンまたはサービスで実行されることができる。
本願の文脈において、機械可読媒体は、あるタイプの媒体であることができ、コマンドを実行するシステム、装置又は機器によって使用されるか、またはコマンドの実行システム、装置または機器と組み合わせて使用されるプログラムを含むまたは記憶することができる。機械可読媒体は、機械可読信号媒体または機械可読記憶媒体であることができる。機械可読媒体は、電子、磁気、光学、電磁、赤外線または半導体システム、装置、または機器、または前述した内容の任意の適切な組み合わせを含むことができるが、これに限定されない。機械可読記憶媒体のより具体的な例は、1つまたは複数のワイヤベースの電気的接続、ポータブルコンピュータディスク、ハードディスク、ランダムアクセスメモリ(RAM)、読み取り専用メモリ(ROM)、消去およびプログラム可能な読み取り専用メモリ(EPROMまたはフラッシュメモリ)、光ファイバ、ポータブルコンパクトディスク読み取り専用メモリ(CD−ROM)、光学ストレージ装置、磁気記憶装置、または前述した内容の任意の適切な組み合わせを含むことができるが、これに限定されない。
また、特定の順序を利用して、各操作ウルルル説明したが、これはこのような操作が図示された特定の順序またはシーケンスで実行されることを要求したり、目的の結果を実現するために図示されたすべての操作が実行されることを要求すると理解してはならない。一定の環境において、マルチタスクと並列処理は、有利であることができる。同様に、上記説明に様々な具体的な実現の詳細が含まれているが、これらは本願の範囲の限定と解釈してはならない。別の実施形態の文脈で説明されたいくつかの特徴は、組み合わせの方法で単一の実現に実現されることができる。逆に、単一の実現のコンテキストで説明された各種の特徴も個別にまたは任意の適切なサブ組み合わせの方法で複数の実現に実現されることもできる。
構造の特徴および/または方法のロジックの動作に固有の言語を使用して本主題を説明したが、特許請求の範囲に限定された主題は、必ずしも前述した特定の特徴または動作に限定されるべきではないことを理解すべきである。逆に、前述した特定の特徴または動作は、単に特許請求の範囲を実現する例示的形式である。

Claims (18)

  1. 道路中の車線境界線を確定するための方法であって、
    基準曲線として第1の曲線を取得するステップであって、前記第1の曲線は、第1のポイントセットに対してフィッティングを行って取得されたものであり、前記第1のポイントセットは、前記道路中の異なる領域の複数のポイントセットから選択されたものである、ステップと、
    前記基準曲線に基づいて前記複数のポイントセットから第2のポイントセットを選択するステップと、前記第2のポイントセットに対してフィッティングを行って第2の曲線を生成するステップと、前記基準曲線に関連する第1のフィッティング度と前記第2の曲線に関連する第2のフィッティング度との間のフィッティング度の差を確定するステップと、少なくとも部分的に前記フィッティング度の差に基づいて、収束条件を満たしているかどうかを確定するステップと、前記収束条件を満たさないことに応じて、前記第2の曲線を前記基準曲線に設定するステップと、を少なくとも一回繰り返し実行する、ステップと、
    前記収束条件を満たすときの前記第2のポイントセットに基づいて、前記道路の前記車線境界線を確定するステップとを含む、道路中の車線境界線を確定するための方法。
  2. 請求項1において、
    前記第2のポイントセットを選択するステップは、
    前記基準曲線との距離が近いポイントが優先的に選択されるように、前記複数のポイントセットから前記基準曲線までの距離に基づいて、前記第2のポイントセットを選択するステップを含む道路中の車線境界線を確定するための方法。
  3. 請求項1又は請求項2において、
    前記複数のポイントセットから前記第2のポイントセットを選択するステップは、
    前記道路中の前記異なる領域の前記複数のポイントセットに関連する点群データを取得するステップと、
    前記点群データから、前記複数のポイントセットのうちのポイントにより表示される位置のレーザ反射率を確定するステップと、
    前記基準曲線との距離が近く、レーザ反射率が高いポイントが優先的に選択されるように、前記レーザ反射率と前記基準曲線に基づいて、前記第2のポイントセットを選択するステップをさらに含む、道路中の車線境界線を確定するための方法。
  4. 請求項3において、
    前記収束条件を満たしているかどうかを確定するステップは、
    前記基準曲線をフィッティングするためのポイントにより表示される位置のレーザ反射率に基づいて、前記基準曲線に関連する第1の平均レーザ反射率を確定するステップと、
    前記第2の曲線をフィッティングするためのポイントにより表示される位置のレーザ反射率に基づいて、前記第2の曲線に関連する第2の平均レーザ反射率を確定するステップと、
    前記第1の平均レーザ反射率と前記第2の平均レーザ反射率との間のレーザ反射率の差を確定するステップと、
    前記レーザ反射率の差と前記フィッティング度の差の加重合計が所定の閾値よりも小さいことに応じて、前記収束条件を満足していると確定するステップを含む道路中の車線境界線を確定するための方法。
  5. 請求項1又は請求項2において、
    前記複数のポイントセットから前記第2のポイントセットを選択するステップは、
    前記道路の前記異なる領域のうちの車線境界線の画像を取得するステップと、
    前記複数のポイントセットのうちのポイントにより表示される位置から前記画像へのマッピングを確立するステップと、
    前記基準曲線との距離が近く、対応する位置が画像において車線境界線に近接し、または車線境界線上に位置するポイントが優先的に選択されるように、前記マッピングと前記基準曲線に基づいて前記第2のポイントセットを選択するステップをさらに含む道路中の車線境界線を確定するための方法。
  6. 請求項5において、
    前記収束条件を満たしているかどうかを確定するステップは、
    前記ポイントにより表示される前記位置の前記マッピングに基づいて、前記ポイントが前記車線境界線に該当する信頼性を確定するステップと、
    前記基準曲線をフィッティングするためのポイントの前記信頼性に基づいて、前記基準曲線に関連する第1の平均信頼性を確定するステップと、
    前記第2の曲線をフィッティングするためのポイントの前記信頼性に基づいて、前記第2の曲線に関連する第2の平均信頼性を確定するステップと、
    前記第1の平均信頼性と前記第2の信頼性との間の信頼性の差を確定するステップと、
    前記信頼性の差と前記フィッティング度の差との加重合計が所定の閾値よりも小さいことに応じて、前記収束条件を満足していると確定するステップを含む道路中の車線境界線を確定するための方法。
  7. 請求項1において、
    前記収束条件を満足していると確定するステップは、
    繰り返し回数が所定の閾値に達したことに応じて、前記収束条件を満足していると確定するステップを含む道路中の車線境界線を確定するための方法。
  8. 請求項1において、
    前記第2の曲線に関連する前記第2のフィッティング度は、
    前記第2のポイントセットから前記第2の曲線までの距離を確定し、
    前記第2のポイントセットのうち、前記第2の曲線までの距離が所定の距離よりも小さいポイントの占有率を確定し、
    前記距離と前記占有率の加重合計に基づいて、前記第2のフィッティング度を確定することに基づいて確定される道路中の車線境界線を確定するための方法。
  9. 道路中の車線境界線を確定するための装置であって、
    基準曲線として第1の曲線を取得するように構成された曲線取得モジュールであって、前記第1の曲線は、第1のポイントセットに対してフィッティングを行って取得されたものであり、前記第1のポイントセットは、前記道路中の異なる領域の複数のポイントセットから選択されたものである、曲線取得モジュールと、
    前記基準曲線に基づいて前記複数のポイントセットから第2のポイントセットを選択し、前記第2のポイントセットに対してフィッティングを行って、第2の曲線を生成し、前記基準曲線に関連する第1のフィッティング度と前記第2曲線に関連する第2のフィッティング度との間のフィッティング度の差を確定し、少なくとも部分的に前記フィッティング度の差に基づいて収束条件を満たしているかどうかを確定し、前記収束条件を満たさないことに応じて、前記第2曲線を前記基準曲線に設定することを、少なくとも一回繰り返し実行するように構成された曲線更新モジュールと、
    前記収束条件を満たすときの前記第2のポイントセットに基づいて、前記道路の前記車線境界線を確定するように構成された車線境界線確定モジュールと、を含む道路中の車線境界線を確定するための装置。
  10. 請求項9において、
    前記曲線更新モジュールは、
    前記基準曲線との距離が近いポイントが優先的に選択されるように、前記複数のポイントセットから前記基準曲線までの距離に基づいて、前記第2のポイントセットを選択するように構成された第1のポイント選択モジュールを含む道路中の車線境界線を確定するための装置。
  11. 請求項9において、
    前記曲線更新モジュールは、
    前記道路中の前記異なる領域の前記複数のポイントセットに関連する点群データを取得するように構成された点群データ取得モジュールと、
    前記点群データから、前記複数のポイントセットのうちのポイントにより表示される位置のレーザ反射率を確定するように構成されたレーザ反射率確定モジュールと、
    前記基準曲線との距離が近く、レーザ反射率が高いポイントが優先的に選択されるように、前記レーザ反射率と前記基準曲線に基づいて、前記第2のポイントセットを選択するように構成された第2のポイント選択モジュールとを含む道路中の車線境界線を確定するための装置。
  12. 請求項11において、
    前記曲線更新モジュールは、
    前記基準曲線をフィッティングするためのポイントにより表示される位置のレーザ反射率に基づいて、前記基準曲線に関連する第1の平均レーザ反射率を確定するように構成された第1の平均レーザ反射率確定モジュールと、
    前記第2の曲線をフィッティングするためのポイントにより表示される位置のレーザ反射率に基づいて、前記第2の曲線に関連する第2の平均レーザ反射率を確定するように構成された第2の平均レーザ反射率確定モジュールと、
    前記第1の平均レーザ反射率と前記第2の平均レーザ反射率との間のレーザ反射率の差を確定するように構成されたレーザ反射率差確定モジュールと、
    前記レーザ反射率の差と前記フィッティング度の差の加重合計が所定の閾値よりも小さいことに応じて、前記収束条件を満足していると確定するように構成された第1の収束判断モジュールをさらに含む道路中の車線境界線を確定するための装置。
  13. 請求項9において、
    前記曲線更新モジュールは、
    前記道路の前記異なる領域のうちの車線境界線の画像を取得するように構成された画像取得モジュールと、
    前記複数のポイントセットのうちのポイントにより表示される位置から前記画像へのマッピングを確立するように構成されたマッピングモジュールと、
    前記基準曲線との距離が近く、対応する位置が画像において車線境界線に近接し、または車線境界線上に位置するポイントが優先的に選択されるように、前記マッピングと前記基準曲線に基づいて前記第2のポイントセットを選択するように構成された第3のポイント選択モジュールをさらに含む道路中の車線境界線を確定するための装置。
  14. 請求項13において、
    前記曲線更新モジュールは、
    前記ポイントにより表示される前記位置の前記マッピングに基づいて、前記ポイントが前記車線境界線に該当する信頼性を確定するように構成された信頼性確定モジュールと、
    前記基準曲線をフィッティングするためのポイントの前記信頼性に基づいて、前記基準曲線に関連する第1の平均信頼性を確定するように構成された第1の平均信頼性確定モジュールと、
    前記第2の曲線をフィッティングするためのポイントの前記信頼性に基づいて、前記第2の曲線に関連する第2の平均信頼性を確定するように構成された第2の平均信頼性確定モジュールと、
    前記第1の平均信頼性と前記第2の信頼性との間の信頼性の差を確定するように構成された信頼性差確定モジュールと、
    前記信頼性の差と前記フィッティング度の差の加重合計が所定の閾値よりも小さいことに応じて、前記収束条件を満足していると確定するように構成された第2の収束判断モジュールをさらに含む道路中の車線境界線を確定するための装置。
  15. 請求項9において、
    前記曲線更新モジュールは、
    繰り返し回数が所定の閾値に達したことに応じて、前記収束条件を満足していると確定するように構成された第3の収束判断モジュールを含む道路中の車線境界線を確定するための装置。
  16. 請求項9において、
    前記曲線更新モジュールは、
    前記第2のポイントセットから前記第2の曲線までの距離を確定するように構成された距離確定モジュールと、
    前記第2のポイントセットのうち、前記第2の曲線までの距離が所定の距離よりも小さいポイントの占有率を確定するように構成された占有率確定モジュールと、
    前記平均距離と前記占有率の加重合計に基づいて、前記第2のフィッティング度を確定するように構成されたフィッティング度確定モジュールを含む道路中の車線境界線を確定するための装置。
  17. 1つまたは複数のプロセッサと、
    1つまたは複数のプログラムを格納するための記憶装置とを含む機器であって、
    前記1つまたは複数のプログラムが前記1つまたは複数のプロセッサによって実行される場合、前記1つまたは複数のプロセッサが請求項1から請求項8のうちいずれか1項の方法を実現する機器。
  18. コンピュータプログラムが記憶されているコンピュータ読み取り可能な記憶媒体であって、
    前記コンピュータプログラムがプロセッサによって実行される場合、請求項1から請求項8のうちいずれか1項の方法を実現するコンピュータ読み取り可能な記憶媒体。


JP2018242723A 2017-12-29 2018-12-26 道路中の車線境界線を確定するための方法、装置、電子機器、記憶媒体およびコンピュータプログラム Active JP6966989B2 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
CN201711475639.5A CN108256446B (zh) 2017-12-29 2017-12-29 用于确定道路中的车道线的方法、装置和设备
CN201711475639.5 2017-12-29

Publications (2)

Publication Number Publication Date
JP2019153281A true JP2019153281A (ja) 2019-09-12
JP6966989B2 JP6966989B2 (ja) 2021-11-17

Family

ID=62724638

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2018242723A Active JP6966989B2 (ja) 2017-12-29 2018-12-26 道路中の車線境界線を確定するための方法、装置、電子機器、記憶媒体およびコンピュータプログラム

Country Status (5)

Country Link
US (1) US10885352B2 (ja)
EP (1) EP3506158B1 (ja)
JP (1) JP6966989B2 (ja)
KR (1) KR102210715B1 (ja)
CN (1) CN108256446B (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2022522385A (ja) * 2020-02-07 2022-04-19 シェンチェン センスタイム テクノロジー カンパニー リミテッド 道路標識認識方法、地図生成方法、及び関連する製品

Families Citing this family (39)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108256446B (zh) * 2017-12-29 2020-12-11 百度在线网络技术(北京)有限公司 用于确定道路中的车道线的方法、装置和设备
CN108960183B (zh) * 2018-07-19 2020-06-02 北京航空航天大学 一种基于多传感器融合的弯道目标识别系统及方法
CN109300322B (zh) * 2018-10-31 2021-05-04 百度在线网络技术(北京)有限公司 引导线绘制方法、装置、设备和介质
CN109636877B (zh) * 2018-10-31 2021-06-01 百度在线网络技术(北京)有限公司 车道线调整处理方法、装置及电子设备
CN109598199B (zh) * 2018-10-31 2021-07-27 百度在线网络技术(北京)有限公司 车道线生成方法和装置
JP7095559B2 (ja) * 2018-11-09 2022-07-05 トヨタ自動車株式会社 区画線検出装置及び区画線検出方法
CN111179152B (zh) * 2018-11-12 2023-04-28 阿里巴巴集团控股有限公司 一种道路标识识别方法及装置、介质、终端
CN109798903B (zh) * 2018-12-19 2021-03-30 广州文远知行科技有限公司 一种从地图数据中获取道路信息的方法及装置
CN111247525A (zh) * 2019-01-14 2020-06-05 深圳市大疆创新科技有限公司 一种车道检测方法、装置及车道检测设备、移动平台
CN109916416B (zh) * 2019-01-29 2022-04-01 腾讯科技(深圳)有限公司 车道线数据处理与更新方法、装置及设备
CN109703569B (zh) * 2019-02-21 2021-07-27 百度在线网络技术(北京)有限公司 一种信息处理方法、装置及存储介质
CN110426051B (zh) * 2019-08-05 2021-05-18 武汉中海庭数据技术有限公司 一种车道线绘制方法、装置及存储介质
KR102228278B1 (ko) * 2019-09-03 2021-03-16 충북대학교 산학협력단 라이다 센서를 이용한 차선인식 방법 및 그를 위한 장치
CN110703227B (zh) * 2019-09-20 2023-01-24 中国铁路设计集团有限公司 一种基于TerraSolid参数阈值自动选择的地面点云滤波方法
CN110705444B (zh) * 2019-09-27 2022-02-08 四川长虹电器股份有限公司 车道跟踪系统及方法
CN112630751B (zh) * 2019-10-09 2024-06-18 中车时代电动汽车股份有限公司 一种激光雷达的标定方法
CN110909711B (zh) * 2019-12-03 2022-08-02 阿波罗智能技术(北京)有限公司 检测车道线位置变化的方法、装置、电子设备和存储介质
CN111130147B (zh) * 2020-02-21 2023-09-05 海南电网有限责任公司电力科学研究院 一种基于清洁能源的智能微网协调控制方法
CN111353466B (zh) * 2020-03-12 2023-09-22 北京百度网讯科技有限公司 车道线识别处理方法、设备、存储介质
CN111460073B (zh) * 2020-04-01 2023-10-20 北京百度网讯科技有限公司 车道线检测方法、装置、设备和存储介质
CN111553844B (zh) 2020-04-29 2023-08-29 阿波罗智能技术(北京)有限公司 用于更新点云的方法及装置
CN111652952B (zh) * 2020-06-05 2022-03-18 腾讯科技(深圳)有限公司 车道线生成方法、装置、计算机设备和存储介质
CN111811530B (zh) * 2020-06-16 2022-06-21 北京五一视界数字孪生科技股份有限公司 车道线生成方法、装置、存储介质及电子设备
CN111860484B (zh) * 2020-07-22 2023-11-03 腾讯科技(深圳)有限公司 一种区域标注方法、装置、设备及存储介质
CN112037328A (zh) * 2020-09-02 2020-12-04 北京嘀嘀无限科技发展有限公司 生成地图中的道路边沿的方法、装置、设备和存储介质
CN114264310B (zh) * 2020-09-14 2024-06-21 阿里巴巴集团控股有限公司 定位及导航方法、装置、电子设备、计算机存储介质
CN112115857B (zh) * 2020-09-17 2024-03-01 福建牧月科技有限公司 智能汽车的车道线识别方法、装置、电子设备及介质
KR102414647B1 (ko) * 2020-11-02 2022-06-30 주식회사 맵퍼스 모바일 매핑 시스템을 이용한 차선 데이터 자동 추출 시스템 및 방법
CN112382092B (zh) * 2020-11-11 2022-06-03 成都纳雷科技有限公司 交通毫米波雷达自动生成车道的方法、系统及介质
CN112528917A (zh) * 2020-12-18 2021-03-19 深兰科技(上海)有限公司 斑马线区域识别方法、装置、电子设备和存储介质
CN112580179B (zh) * 2020-12-29 2022-04-19 武汉中海庭数据技术有限公司 高精度地图路口车道形状更新方法及系统、服务器及介质
CN113640823B (zh) * 2021-07-15 2023-11-21 北京三快在线科技有限公司 一种基于激光反射率底图进行地图绘制的方法及装置
CN114519696B (zh) * 2021-12-31 2022-11-29 扬州盛强薄膜材料有限公司 基于光学智能化的pvc热收缩膜检测方法及系统
CN114494518A (zh) * 2022-01-19 2022-05-13 上汽通用五菱汽车股份有限公司 车道线的生成方法、装置、设备和存储介质
CN114782638B (zh) * 2022-06-17 2022-09-09 小米汽车科技有限公司 生成车道线的方法、装置、车辆、存储介质及芯片
CN114862957B (zh) * 2022-07-08 2022-09-27 西南交通大学 一种基于3d激光雷达的地铁车底定位方法
CN116047537B (zh) * 2022-12-05 2023-12-26 北京中科东信科技有限公司 基于激光雷达的道路信息生成方法及系统
CN116580559A (zh) * 2023-05-18 2023-08-11 中国公路工程咨询集团有限公司 一种基于人工智能技术的交通数据处理方法
CN117475399B (zh) * 2023-12-27 2024-03-29 新石器慧通(北京)科技有限公司 车道线拟合方法、电子设备及可读介质

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2011258131A (ja) * 2010-06-11 2011-12-22 Fuji Heavy Ind Ltd 車両用白線認識装置
JP2017010554A (ja) * 2015-06-25 2017-01-12 株式会社リコー 曲線検出方法と曲線検出装置

Family Cites Families (41)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH08314540A (ja) * 1995-03-14 1996-11-29 Toyota Motor Corp 車両走行誘導システム
EP0740163B1 (en) * 1995-04-25 2005-12-14 Matsushita Electric Industrial Co., Ltd. Local positioning apparatus for detecting a local position of an automobile on a road
US7720580B2 (en) * 2004-12-23 2010-05-18 Donnelly Corporation Object detection system for vehicle
WO2008091565A1 (en) * 2007-01-23 2008-07-31 Valeo Schalter & Sensoren Gmbh Method and system for universal lane boundary detection
US8311283B2 (en) * 2008-07-06 2012-11-13 Automotive Research&Testing Center Method for detecting lane departure and apparatus thereof
JP5074365B2 (ja) * 2008-11-28 2012-11-14 日立オートモティブシステムズ株式会社 カメラ装置
US9077958B2 (en) * 2010-08-30 2015-07-07 Honda Motor Co., Ltd. Road departure warning system
US9057203B2 (en) * 2011-06-10 2015-06-16 Peter J. BUTTERFIELD Swimming pool lane line support apparatus
US9189976B2 (en) * 2013-07-10 2015-11-17 Telenav Inc. Navigation system with multi-layer road capability mechanism and method of operation thereof
KR101504252B1 (ko) * 2013-11-28 2015-03-19 현대모비스 주식회사 곡선 도로에서 차량의 속도를 제어하기 위한 시스템 및 그 방법
KR101892306B1 (ko) * 2013-12-18 2018-08-27 주식회사 만도 Fmcw 레이더 기반의 도로 환경 감지 방법 및 장치
US9283967B2 (en) * 2014-07-16 2016-03-15 GM Global Technology Operations LLC Accurate curvature estimation algorithm for path planning of autonomous driving vehicle
US9858487B2 (en) * 2015-02-19 2018-01-02 Here Global B.V. Method and apparatus for converting from an analytical curve road geometry to a clothoid road geometry
CN104766058B (zh) * 2015-03-31 2018-04-27 百度在线网络技术(北京)有限公司 一种获取车道线的方法和装置
CN105260699B (zh) * 2015-09-10 2018-06-26 百度在线网络技术(北京)有限公司 一种车道线数据的处理方法及装置
CN105261020B (zh) * 2015-10-16 2018-11-20 桂林电子科技大学 一种快速车道线检测方法
CN105528558B (zh) 2015-12-12 2019-03-08 天津南大通用数据技术股份有限公司 一种隐蔽信道通信的检测方法及装置
US10102434B2 (en) * 2015-12-22 2018-10-16 Omnivision Technologies, Inc. Lane detection system and method
CN105528588B (zh) * 2015-12-31 2019-04-23 百度在线网络技术(北京)有限公司 一种车道线识别方法及装置
CN105701449B (zh) * 2015-12-31 2019-04-23 百度在线网络技术(北京)有限公司 路面上的车道线的检测方法和装置
KR101765279B1 (ko) * 2016-01-08 2017-08-07 서울대학교산학협력단 구간적 다항식을 기반으로 한 곡선 근사 방법
JP6733225B2 (ja) * 2016-03-08 2020-07-29 株式会社リコー 画像処理装置、撮像装置、移動体機器制御システム、画像処理方法、及びプログラム
US10121367B2 (en) * 2016-04-29 2018-11-06 Ford Global Technologies, Llc Vehicle lane map estimation
JP6529463B2 (ja) * 2016-06-14 2019-06-12 日本電信電話株式会社 道路構造化装置、道路構造化方法、及び道路構造化プログラム
US10102435B2 (en) * 2016-08-10 2018-10-16 Omnivision Technologies, Inc. Lane departure warning system and associated methods
CN107742091B (zh) * 2016-08-22 2019-01-29 腾讯科技(深圳)有限公司 一种路肩提取的方法及装置
CN106407893B (zh) 2016-08-29 2019-11-22 东软集团股份有限公司 一种检测车道线的方法、装置和设备
CN107097794B (zh) * 2016-12-15 2020-04-21 财团法人车辆研究测试中心 道路车道线的侦测系统及其方法
CN107045629B (zh) * 2017-04-19 2020-06-26 南京理工大学 一种多车道线检测方法
US10633024B2 (en) * 2017-12-27 2020-04-28 Automotive Research & Testing Center Vehicle lateral control system having lane model with modulation weighting and control method thereof
CN108256446B (zh) * 2017-12-29 2020-12-11 百度在线网络技术(北京)有限公司 用于确定道路中的车道线的方法、装置和设备
CN108229386B (zh) * 2017-12-29 2021-12-14 百度在线网络技术(北京)有限公司 用于检测车道线的方法、装置和介质
KR102589967B1 (ko) * 2017-12-29 2023-10-16 삼성전자주식회사 차선을 검출하는 방법 및 장치
CN108319895B (zh) * 2017-12-29 2021-09-17 百度在线网络技术(北京)有限公司 用于识别电子地图中的路口的方法和装置
DE112019000122T5 (de) * 2018-02-27 2020-06-25 Nvidia Corporation Echtzeiterfassung von spuren und begrenzungen durch autonome fahrzeuge
US10990832B2 (en) * 2018-03-06 2021-04-27 Phantom AI, Inc. Lane line reconstruction using future scenes and trajectory
TWI662278B (zh) * 2018-09-18 2019-06-11 財團法人工業技術研究院 刀具磨耗監控方法
KR102675523B1 (ko) * 2018-09-28 2024-06-14 삼성전자주식회사 차로를 결정하는 방법 및 장치
US11518384B2 (en) * 2018-12-07 2022-12-06 Thinkware Corporation Method for displaying lane information and apparatus for executing the method
US11531348B2 (en) * 2018-12-21 2022-12-20 Here Global B.V. Method and apparatus for the detection and labeling of features of an environment through contextual clues
KR20200090527A (ko) * 2019-01-21 2020-07-29 현대자동차주식회사 차선 인식 장치 및 그 방법

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2011258131A (ja) * 2010-06-11 2011-12-22 Fuji Heavy Ind Ltd 車両用白線認識装置
JP2017010554A (ja) * 2015-06-25 2017-01-12 株式会社リコー 曲線検出方法と曲線検出装置

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2022522385A (ja) * 2020-02-07 2022-04-19 シェンチェン センスタイム テクノロジー カンパニー リミテッド 道路標識認識方法、地図生成方法、及び関連する製品

Also Published As

Publication number Publication date
CN108256446B (zh) 2020-12-11
KR102210715B1 (ko) 2021-02-01
US10885352B2 (en) 2021-01-05
EP3506158A1 (en) 2019-07-03
US20190205665A1 (en) 2019-07-04
EP3506158B1 (en) 2023-08-30
JP6966989B2 (ja) 2021-11-17
KR20190082069A (ko) 2019-07-09
CN108256446A (zh) 2018-07-06

Similar Documents

Publication Publication Date Title
JP2019153281A (ja) 道路中の車線境界線を確定するための方法、装置および機器
US20230099113A1 (en) Training method and apparatus for a target detection model, target detection method and apparatus, and medium
CN108319895B (zh) 用于识别电子地图中的路口的方法和装置
KR20190088387A (ko) 차도선을 검출하기 위한 방법, 장치 및 매체
CN111079619A (zh) 用于检测图像中的目标对象的方法和装置
CN110879961B (zh) 利用车道模型的车道检测方法和装置
US12073575B2 (en) Object-centric three-dimensional auto labeling of point cloud data
CN112329754B (zh) 障碍物识别模型训练方法、障碍物识别方法、装置及系统
CN112347999A (zh) 障碍物识别模型训练方法、障碍物识别方法、装置及系统
CN113378760A (zh) 训练目标检测模型和检测目标的方法及装置
CN114097006A (zh) 交叉模态传感器数据对准
EP3620945A1 (en) Obstacle distribution simulation method, device and terminal based on multiple models
US20180307917A1 (en) Method and apparatus for pixel based lane prediction
CN113674287A (zh) 高精地图的绘制方法、装置、设备以及存储介质
CN115797736B (zh) 目标检测模型的训练和目标检测方法、装置、设备和介质
JP6119225B2 (ja) 交差点道路境界検出装置及びプログラム
Zeybek Extraction of road lane markings from mobile LiDAR data
CN114545424A (zh) 障碍物识别、模型训练方法、装置、设备及存储介质
CN110147748A (zh) 一种基于道路边缘检测的移动机器人障碍物识别方法
CN112912894A (zh) 道路边界识别方法和装置
CN114387576A (zh) 一种车道线识别方法、系统、介质、设备及信息处理终端
CN111340145A (zh) 点云数据分类方法、装置、分类设备
CN116343143A (zh) 目标检测方法、存储介质、路侧设备及自动驾驶系统
WO2020103043A1 (zh) 线状物识别方法及装置、系统和计算机存储介质
Daudt et al. Learning to understand earth observation images with weak and unreliable ground truth

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20190412

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20190412

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20200604

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20200804

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20201104

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20201207

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20210601

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210827

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20211001

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20211022

R150 Certificate of patent or registration of utility model

Ref document number: 6966989

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

A711 Notification of change in applicant

Free format text: JAPANESE INTERMEDIATE CODE: A711

Effective date: 20211029

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313113