JP6966989B2 - 道路中の車線境界線を確定するための方法、装置、電子機器、記憶媒体およびコンピュータプログラム - Google Patents

道路中の車線境界線を確定するための方法、装置、電子機器、記憶媒体およびコンピュータプログラム Download PDF

Info

Publication number
JP6966989B2
JP6966989B2 JP2018242723A JP2018242723A JP6966989B2 JP 6966989 B2 JP6966989 B2 JP 6966989B2 JP 2018242723 A JP2018242723 A JP 2018242723A JP 2018242723 A JP2018242723 A JP 2018242723A JP 6966989 B2 JP6966989 B2 JP 6966989B2
Authority
JP
Japan
Prior art keywords
curve
points
point
reliability
fitting
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2018242723A
Other languages
English (en)
Other versions
JP2019153281A (ja
Inventor
トアン、シオン
チョウ、ワン
イェン、ミャオ
チャン、イーフェイ
マー、チャンチエ
ラン、シエンポン
チン、ヨンカン
Original Assignee
バイドゥ オンライン ネットワーク テクノロジー (ベイジン) カンパニー リミテッド
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by バイドゥ オンライン ネットワーク テクノロジー (ベイジン) カンパニー リミテッド filed Critical バイドゥ オンライン ネットワーク テクノロジー (ベイジン) カンパニー リミテッド
Publication of JP2019153281A publication Critical patent/JP2019153281A/ja
Application granted granted Critical
Publication of JP6966989B2 publication Critical patent/JP6966989B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/56Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
    • G06V20/588Recognition of the road, e.g. of lane markings; Recognition of the vehicle driving pattern in relation to the road
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S17/00Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
    • G01S17/88Lidar systems specially adapted for specific applications
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/22Matching criteria, e.g. proximity measures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/50Depth or shape recovery
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10028Range image; Depth image; 3D point clouds
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30248Vehicle exterior or interior
    • G06T2207/30252Vehicle exterior; Vicinity of vehicle
    • G06T2207/30256Lane; Road marking

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Remote Sensing (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Multimedia (AREA)
  • Electromagnetism (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Data Mining & Analysis (AREA)
  • Evolutionary Biology (AREA)
  • Evolutionary Computation (AREA)
  • General Engineering & Computer Science (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Artificial Intelligence (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Automation & Control Theory (AREA)
  • Traffic Control Systems (AREA)
  • Instructional Devices (AREA)
  • Image Analysis (AREA)
  • Image Processing (AREA)

Description

本発明の実施形態は、データ処理技術分野に関するものであり、より具体的に、道路中の車線境界線を確定するための方法、装置、電子機器、コンピュータ読み取り可能な記憶媒体およびコンピュータプログラムに関するものである。
人工知能の発展に伴い、自律走行技術は、更に注目を受けている。3次元高精度地図は、次世代のデジタル地図の主な発展方向として業界で認められ、これは自律走行の前提条件であり、自律走行車の正確な測位と正確な経路決定のために主な根拠を提供する。
高精度地図は、道路利用状況を分析し、高度道路交通を実現する重要な戦略的プラットフォーム資源である。3次元高精度地図製作の重要な問題点は、道路面車線境界線情報の検出と作成に集中している。従来の車線境界線検出技術は、例えば、横断歩道線、交通標識線などのような車線境界線の特徴と似ているその他の線を排除することが困難であり、自律走行の経路決定プロセスに影響を与える可能性が存在する。
本発明の例示的実施形態によれば、道路中の車線境界線を確定するための方案を提供する。
本発明の第1の態様において、道路中の車線境界線を確定するための方法を提供する。この方法は、基準曲線として第1の曲線を取得するステップであって、前記第1の曲線は、第1組の点に対してカーブフィッティングを行って取得されたものであり、前記第1組の点は、前記道路中の異なる領域の複数領域の点から選択されたものである、ステップと、前記基準曲線に基づいて前記複数領域の点から第2を選択するステップと、前記第2組の点に対してカーブフィッティングを行って第2の曲線を生成するステップと、前記基準曲線に関連する第1のフィッティング度と前記第2の曲線に関連する第2のフィッティング度との間のフィッティング度の差を確定するステップと、少なくとも部分的に前記フィッティング度の差に基づいて、収束条件を満たしているかどうかを確定するステップと、前記収束条件を満たさないことに応じて、前記第2の曲線を前記基準曲線に設定するステップと、を少なくとも一回繰り返し実行する、ステップと、前記収束条件を満たすときの前記第2組の点に基づいて、前記道路の前記車線境界線を確定するステップとを含む。
本発明の第2の態様において、道路中の車線境界線を確定するための装置を提供する。この装置は、基準曲線として第1の曲線を取得するように構成された曲線取得モジュールであって、前記第1の曲線は、第1組の点に対してカーブフィッティングを行って取得されたものであり、前記第1組の点は、前記道路中の異なる領域の複数領域の点から選択されたものである、曲線取得モジュールと、前記基準曲線に基づいて前記複数領域の点から第2組の点を選択し、前記第2組の点に対してカーブフィッティングを行って、第2の曲線を生成し、前記基準曲線第1のフィッティング度と前記第2曲線第2のフィッティング度との間のフィッティング度の差を確定し、少なくとも部分的に前記フィッティング度の差に基づいて収束条件を満たしているかどうかを確定し、前記収束条件を満たさないことに応じて、前記第2曲線を前記基準曲線に設定することを、少なくとも一回繰り返し実行するように構成された曲線更新モジュールと、前記収束条件を満たすときの前記第2組の点に基づいて、前記道路の前記車線境界線を確定するように構成された車線境界線確定モジュールと、を含む。
本発明の第3の態様において、1つまたは複数のプロセッサと、1つまたは複数のプログラムを格納するための記憶装置を含む機器であって、当該1つまたは複数のプログラムが当該1つまたは複数のプロセッサによって実行される場合、当該1つまたは複数のプロセッサが本発明の第1の態様による方法を実現する機器を提供する。
本発明の第4の態様において、コンピュータプログラムが記憶されているコンピュータ読み取り可能な記憶媒体であって、当該プログラムがプロセッサによって実行される場合、本発明の第1の態様による方法を実現するコンピュータ読み取り可能な記憶媒体を提供する。
発明の内容の部分で説明した内容は、本発明の実施形態のポイントまたは重要な特徴を限定しようとするものではなく、本発明の範囲を限定するためのものではないことを理解されたい。本発明の他の特徴は、下の説明を介して容易に理解できるだろう。
以下の図面を参照してなされた制限的でない実施形態に対する詳細的な説明により、本発明の他の特徴、目的及び利点はより明らかになる。
図1は、本発明の複数の実施形態を実現可能な例示的な環境の概略図を示す。 図2は、本発明の一実施形態に係る車線境界線を生成する概略図を示す。 図3は、本発明の一実施形態に係る道路中の車線境界線を確定するための方法のフローチャートを示す。 図4は、本発明の一実施形態に係る第2の座標点の組(セット)を選択する方法のフローチャートを示す。 図5は、本発明の他の一実施形態に係る第2の座標点の組(セット)を選択する方法のフローチャートを示す。 図6は、本発明の一部の実施形態に係るフィッティング度を算出する例示的な方法のフローチャートを示す。 図7は、本発明の実施形態に係る道路中の車線境界線を確定するための装置の概略ブロック図を示す。 図8は、本発明の複数の実施形態を実現可能な計算機器のブロック図を示す。
以下、説明の詳細を参照しながら本発明の様々な実施形態及び態様を説明し、図面には、上記様々な実施形態が示される。以下の説明及び図面は、本発明を例示するためのものであり、限定するものとして解釈されるべきではない。本発明の様々な実施形態を全面的に理解するために、多くの特定の詳細を説明する。ところが、いくつかの場合に、本発明の実施形態に対する簡単な説明を提供するために、周知又は従来技術の詳細について説明していない。
本発明の実施形態を説明することにおいて、用語「含む」及び似ている用語は、開放的な「含む」に理解すべきである。つまり、「...を含むが、これらに限定されない」と理解すべきである。用語「に基づいて」は、「少なくとも部分的に...に基づいて」と理解すべきである。用語「一実施形態」または「当該実施形態」は、「少なくとも一つの実施形態」として理解すべきである。用語「第1」、「第2」などは、異なるか、同じ対象物を示す可能性もある。以下、他の明確な定義と暗黙的定義を含める可能性もある。
本発明の実施形態において、当該技術分野の当業者が理解しやすいように、いくつかの特定された数値を用いたが、これらの数字は、単に例示的なものであり、本発明の保護範囲を限定しようとしない。
前述したように、道路中の車線境界線を確定するために、従来の方法において、レーダーを介して3次元点群を収集したり、イメージセンサに基づいて画像データを収集することにより実現される。これらの方策は、正確率または適応性などの面のに欠陥が存在する。例えば、横断歩道線、交通標識線が存在する複雑な場面に対して、横断歩道線または交通標識線が車線境界線と同じような視覚特徴とレーザ反射特徴を備えるので、従来の方法は、横断歩道線または交通標識線を車線境界線と効果的に区分けにくく、横断歩道線または交通標識線を車線境界線に間違って認する可能性が存在し、自律走行経路の決定に影響を与える。
本発明の実施形態によれば、道路中の車線境界線を確定するための方案を提出する。当該方案において、カーブフィッティングされた曲線が十分に収束するまで、カーブフィッティングにより取得した曲線のフィッティング度を利用してカーブフィッティングを繰り返し行う。収束を判定する過程では、カーブフィッティング用いられる候補点を選択する度に選択された点が3次元点群データおよび/または画像データに基づいて判断した車線境界線に属する確率が相対的に高い点に属するように、レーダーおよび/または画像センサから取得した道路中の車線境界線の3次元点群データおよび/または画像データを結合ることもできる。
これらの方案に基づいて、生成された車線境界線がさらにスムーズな曲線特性を備えるようにすることができる。また、当該案はカーブフィッティングの収束判定を利用して、車線境界線と似ている横断歩道線、交通標識線などの特徴効果的に区することにより、生成された車線境界線の精度を向上させることができる。
以下、添付された図面を参照して、本発明の実施形態を具体的に説明する。図1は、本発明の複数の実施形態を実現可能な例示的環境100の概略図を示す。この例示的環境100において、認識された車線境界線180は、計算機器170によってセンサデータ150、152、152に基づいて確定される。
道路110中の車線境界線115を認識することができるように、道路110に1つまたは複数の収集主体(例えば、収集主体120、収集主体130とを収集主体140)を走行させる必要がある。収集主体120を例にすると、収集主体120上に、例えばレーダー装置と画像収集装置を含む1つまたは複数のセンサ装置を設置することができ、ここで、レーダー装置は、道路110の車線境界線115の3次元点群データを収集することができ、画像収集装置は、道路110のうち車線境界線115の画像を収集することができる。一部の実施形態において、収集主体120上に、画像が収集されるときの収集主体の位置する場所を確定するための測位装置が設置されることができる。
一部の実施形態において、収集主体120、130、140には、有線または無線方式を経由して収集されたセンサデータ150、152、154を記憶装置160に送信するための通信装置を設けることができる。本発明の実施形態によれば、計算機器170は、記憶装置160からのセンサデータを取得し、センサデータに基づいて、認識された車線境界線180を確定する。
以下、図2乃至図3を組み合わせて、本発明の実施形態に係る道路中の車線境界線を確定するための方法を説明する。図2は、本発明の実施形態に係る車線境界線を確定する概略図200を示し、図3は、本発明の実施形態に係る道路中の車線境界線を確定するための方法300のフローチャートを示す。
図2に示すように、道路110中の車線境界線115を確定するように、図1に示すような1つまたは複数の収集主体120を道路110で走行させて、道路中の車線境界線のセンサデータ(つまり、3次元点群データおよび/または画像データ)を取得することができる。
一部の実施形態において、収集されたセンサデータに対して、収集車の進行軌跡に沿って、所定の距離(例えば、2メートル)を間隔で所定領域のセンサデータを選択して車線境界線確定に利用することができる。これにより、十分な精度を確保することができる前提の下で、必要なコンピューティング量を低減させることができる。一部の実施形態において、例えば、収集主体120の周囲の0.5メートルの半径の範囲をその所定の領域とすることができる。図2に示すように、所定領域の複数の例に(第1の領域206、第2の領域208及び第3領域210)が挙げれる。これらの所定の領域は、単に例示的であるだけで、他の任意の適切なルールに基づいて、その所定の領域を選択することで、車線境界線が存在する可能性がない領域の判定を低減させることもできることを理解されたい。
各所定領域206、208、210のうち1つまたは複数の位置は、予め選択または設定することができ、これらの位置の2次元または3次元座標は、複数領域の点212に対応することができる。図2の例では、各所定の領域206、208、210の中の位置に対応する212が概略的に示されている。一部の実施形態において、212は、レーダーに基づいて取得した車線境界線の3次元点群データ中のサンプリングに対応することができる。以下、説明の便宜のために、領域中の位置とは、相互に交換可能に使用される。以下、図3を結びつけて車線境界線を確定する方法300を説明する。
ブロック302において、基準曲線として第1の曲線を取得する。第1の曲線は、第1組の点に対してカーブフィッティングを行って取得されたものであり、第1組の点は、道路中の異なる領域の複数領域の点から選択されることができる。図2に示すように、第1の曲線220は、第1の領域206中の222、第2の領域208中の224及び第3領域210中の226に対してカーブフィッティングを行って取得されたものである。
一部の実施形態において、車線境界線の3次元点群データに基づいて、各所定領域のうち、第1の曲線をカーブフィッティングするためのを確定することができる。車線境界線の表面材質が相対的に高いレーザ反射率を備えるので、取得した車線境界線の3次元点群データの各点により表示される位置のレーザ反射率に基づいて、車線境界線である可能性があるかどうかを判定することができる。例えば、第1の領域206に対して、その領域の中で、すべてのレーザ反射率に基づいて、第1の曲線をカーブフィッティングするためのとして、その中のレーザ反射率が最も高い1つまたは複数の点を選択することができる。一部の実施形態において、特定のレーザ反射率閾値に基づいて、第1の曲線をカーブフィッティングするための1つまたは複数の点を確定することができる。図2に示された例示において、例えば、第1の領域206で選択された第1の曲線をカーブフィッティングするための点222は、第1の領域206のうち、レーザ反射率が最も高いであってもよい。
一部の実施形態において、画像データに基づいて、各所定領域のうち、第1の曲線をカーブフィッティングするためのを確定することができる。一部の実施形態において、当該画像データは、画素の深度データ(depth of field data)を含むことができる。このような場合に、従来の画像処理アルゴリズムを利用して、画像データに対して処理を進めることにより、画像データ中の各画素が車線境界線上に位置する信頼を確定することができる。一部の実施形態において、例えば深層学習アルゴリズムを利用して画像データに対して分析を行い、画素の分類結果を取得することにより、各画素が車線境界線に該当する信頼を取得することができる。一部の実施形態において、例えば、単に画素のグレースケール値に基づいて画素が車線境界線上に位置する信頼を判定することもできる。例えば、車線境界線の所定のグレースケール値の範囲に基づいて、検出されグレースケールがその範囲に位置する画素は、相対的に高い信頼を有するとみなすことができる。画像中の各画素が車線境界線上に位置する信頼を確定するために、任意の他適切な画像処理方法を使用することができ、その信頼は、各画素が車線境界線上に位置する確率または可能性を表示することを理解されたい。
収集された画像中の各画素の信頼を確定した後に、画像を収集するときの収集主体120の位置(例えば、GPSを介して与えられる)、イメージセンサのキャリブレーションパラメータおよび画像の深度データに基づいて、画像データから所定の領域中のへのマッピングを確立し、所定の領域中のにより表示される位置が車線境界線に該当する信頼を取得することができる。画像データにおける画素から所定の領域における点へのマッピングを確立するプロセスにおいて、一部のが対応されていない画像データが存在する可能性が存在し、このような場合、これらの点の信頼は、固定値(例えば、0または任意の他の適当な数値)に設定されることを理解できるだろう。
一部の実施形態において、当該画像データは、深度情報を含んでいないことができる。このような場合に、画像データ中の画素により反映されるのは、2次元の位置であり、所定の領域中のにより反映されるのは、3次元位置なので、画素から所定の領域における点へのマッピングを確立するプロセスにおいて、2次元位置の一つのは、3次元位置の一つの線にマッピングされる。一部の実施形態において、画像データの画素のマッピング位置として、マッピングされた線における収集主体120からの位置が最も近いを選択することができ、そのの信頼を、その画素の信頼度とすることができ、その線の中の他のの信頼は、固定値(例えば、0)に設定することができる。
また、先に議論したレーザ反射率と同様に、画像データの画素と所定の領域の点のマッピングにより確定されたの信頼に基づいて、第1の曲線をカーブフィッティングするように、所定の領域のうち、信頼が最も高い1つまたは複数の点を選択し、または第1曲線をカーブフィッティングするように、所定の領域のうち、信頼が所定の閾値よりも高い1つまたは複数の点を選択することができる。図2に示された例示において、例えば第1の領域206で選択された第1の曲線をカーブフィッティングするための点222は、第1の領域206の信頼が最も高いであってもよい。
一部の実施形態において、選択されたの精度を向上させるためには、同時にレーザ反射率と画像データの信頼に基づいて、第1の曲線をカーブフィッティングするためのを確定することができる。一部の実施形態において、レーザ反射率および信頼に対して、それぞれ正規化を行い、レーザ反射率と信頼対してそれぞれ重み付けを行いそれらの加重合計に基づいて、各の得点を確定することができ、その得点はセンサデータに基づいて確定した各の対応する位置が車線境界線に該当する可能性を反映することができる。例えば、の得点Point_Scoreは、以下の式に基づいて確定することができる。
(式1)
Point_Score=α*Point_Cloud_Rate+β*Image_Conf
ここで、αとβは重み係数を表示し、Point_Cloud_Rateは、そのレーザ反射率を表示し、Image_Confは、そのの信頼を表示する。一部の実施形態において、レーザ反射率は、位置が車線境界線であるかどうかの可能性を相対的により正確に反映することができるので、反射率に対して相対的に高い重みαを分配して、信頼に対して相対的に低い重みβを分配することができる。一部の実施形態において、第1の曲線をカーブフィッティングするために、所定の領域の中で得点が最も高い1つまたは複数の点を選択することができ、または第1曲線をカーブフィッティングするために、所定の領域の得点が所定の閾値より高い1つまたは複数の点を選択することができる。図2に示された例示において、例えば、第1の領域206で選択された第1の曲線をカーブフィッティングするための点222は、第1の領域206の中で得点が最も高いであってもよい。3次元点群データと画像データを結合して処理する方法により、両者のデータは相互証することができる。そして、両者は共に該当するにより表示される位置が車線境界線上に位置する可能性が存在することを表示する場合、当該は相対的に高い得点を取得することができるので、この方法は、従来の方法に比べてより正確であることができる。
各所定領域のうち、第1の曲線をカーブフィッティングするためのを確定した後に、カーブフィッティングアルゴリズムを用いて、確定されたに対してカーブフィッティングを行うことができる。一部の実施形態において、RANSACアルゴリズムを利用して、確定された複数領域の点に対してカーブフィッティングを行うことができる。第1の曲線を確定するために、任意の他の適切なカーブフィッティングアルゴリズムを用いて、確定された複数領域の点に対してカーブフィッティングを行うことができることを理解されたい。例えば、図2に示された例示において、選択された222、224、226に対してカーブフィッティングを行って得られた曲線は、第1の曲線220である。
続いて、図3を参照すると、ブロック304において、基準曲線に基づいて、異なる領域の複数領域の点から第2を選択する。一部の実施形態において、現在の基準曲線(即ち、第1の曲線220)に対して、各所定の領域中のから第1の曲線220へのユークリッド距離を算出し、その距離に基づいて、第2を選択することができる。例えば、所定の領域のうち、第1の曲線214との距離が最も近い1つまたは複数のを選択し、または所定の領域のうち、その距離が所定の閾値よりも小さい1つまたは複数のを選択することができる。一部の実施形態において、当該距離に基づいて所定の領域の中で、各の新しい得点を確定することができる。例えば、各の得点Point_Score_Newは、以下の式に基づいて確定することができる。
(式2)
Point_Score_New=2/(1+e^(f*Dist))
ここで、fは定数であってもよく、Distはから基準曲線までのユークリッド距離を表示する。このような場合に、例えば、基準曲線とより近いが優先的に選択され、新しい曲線がより望ましい平滑度を備えることができるように、第2として、所定の領域の中で得点が最も高い1つまたは複数のを選択し、または所定の領域の中で得点が所定の閾値よりも高い1つまたは複数のを選択することができる。
一部の実施形態において、車線境界線の3次元点群データに基づいて、第2を確定することができる。図4に示すように、方法400は、ブロック304の一例示的実施形態である。
ブロック402において、道路の異なる領域の複数領域の点に関連する点群データを取得する。一部の実施形態において、レーダーを介して道路の異なる領域における車線境界線の3次元点群データを取得し、複数領域の点が対応する位置とレーダーのサンプリングの間の位置マッチングに基づいて、複数領域の点に関連する点群データを確定することができる。ブロック404において、車線境界線の3次元点群データから、複数領域の点それぞれが位置に関わるレーザ反射率を確定する。
ブロック406において、レーザ反射率と基準曲線に基づいて、第2を選択する。一部の実施形態において、レーザ反射率と基準曲線に基づいて、所定の領域中のの得点を再確定することができる。一部の実施形態において、前述したように、所定の領域の各から基準曲線までのユークリッド距離を確定することができる。この時、得点Ponit_Score_Newは、例えば以下のような式によって確定することができる。
(式3−1)
Ponit_Score_New=α1*Point_Cloud_Rate+β1*Point_Dist_Score
(式3−2)
Point_Dist_Score=2/(1+e^(f*Dist))

ここで、α1とβ1は、重み係数を表示し、Point_Cloud_Rateは、により表示される位置のレーザ反射率を表示し、Distは、から基準曲線までのユークリッド距離を表示し、fは、定数である。このような場合に、例えば当該基準曲線との距離が近く、レーザ反射率が高いが優先的に選択されるように、所定の領域の中で得点が最も高い1つまたは複数のを選択し、または所定の領域の中で得点が所定の閾値よりも高い1つまたは複数のを選択することができる。この方法に基づいて、一方で、上述したように、取得した曲線はより平滑することができ、他の一方で、第2を選択する過程でレーザ反射率と曲線までの距離との2つの要素を同時に考慮するので、単にレーザ反射率により確定した車線境界線の結果を更に修正し、ある誤った検出の発生を避けて、車線境界線の精度を向上させることができる。
一部の実施形態において、画像データに基づいて、第2を確定することができる。図に示すように、方法00は、ブロック304の別の一例示的実施形態である。ブロック502において、道路の異なる領域の車線境界線画像を取得する。一部の実施形態において、例えば、撮像装置を介して、道路の異なる領域の車線境界線画像を取得することができる。
ブロック504において、複数領域の点のうちのにより表示される位置から画像へのマッピングを確立する。一部の実施形態において、車線境界線画像は、深度情報をさらに含むことができる。このような場合に、従来の画像処理アルゴリズムを利用して、画像データに対して処理を行い、画像データ中の各画素が車線境界線である信頼を確認することができる。前述したように、例えば、深層学習アルゴリズムの利用して画像データに対して分析を行い、画素の分類結果を取得することにより、各画素が車線境界線に該当する信頼を取得することができる。一部の実施形態において、例えば単に画素のグレースケールに基づいて画素が車線境界線に該当する信頼を判定することもでき、例えば車線境界線の一般的なグレースケール領域に基づいて、グレースケール値が当該領域に位置する画素は、相対的に高い信頼を備える。画像中の各画素が車線境界線に該当する確率を確定するために、任意の他の適切な画像処理方法をすべて利用することができることを理解されたい。
収集した画像の中の各画素の信頼を確定した後に、画像を収集するときの収集主体120の位置(例えば、GPSを介して与えられる)、イメージセンサのキャリブレーションパラメータおよび画像の深度データに基づいて、画像データから所定の領域中のへのマッピングを確立し、所定の領域中のの対応する位置が車線境界線に該当する信頼を取得することができる。画像データにおける画素から所定の領域における点へのマッピング確立するプロセスにおいて、一部のが対応する画像データがない可能性が存在し、このような場合に、これらの点の信頼は、固定値(例えば、0または任意の他の適当な数値)に設定されることを理解できるだろう。
一部の実施形態において、当該画像データは、深度情報を含んでいないことができる。このような場合に、画像データ中の画素により反映されるのは、2次元の位置であり、所定の領域中のにより反映されるのは、3次元位置なので、画素から所定の領域における点へのマッピング確立するプロセスにおいて、2次元位置の一つのは、3次元位置の一つの線にマッピングされる。一部の実施形態において、画像データの画素のマッピング位置として、マッピングされた線における収集主体120からの位置が最も近いを選択することができ、そのの信頼度を、その画素の信頼度とすることができ、その線の中の他のの信頼は、固定値(例えば、0または任意の他の適当な数値)に設定することができる。
ブロック506において、マッピングと基準曲線に基づいて、第2を選択する。一部の実施形態において、マッピングにより取得したの信頼および基準曲線の距離に基づいて、の取得を再確定することができる。例えば、いくつか実施形態において、前述したように、所定の領域の各から基準曲線までのユークリッド距離を確定することができる。この時、得点Point_Score_Newは、例えば以下のような式により確定することができる。
(式4−1)
Ponit_Score_New=α2*Image_Conf+β2*Point_Dist_Score
(式4−2)
Point_Dist_Score=2/(1+e^(f*Dist))
ここで、α2とβ2は、重み係数を表示し、Image_Confは、の信頼を表示し、Distは、から基準曲線までのユークリッド距離を表示し、fは、定数である。このような場合に、例えば、当該基準曲線との距離が近く、信頼の高いが優先的に選択されるように、所定の領域の中で得点が最も高い1つまたは複数のを選択し、または所定の領域の中で得点が所定の閾値よりも高い1つまたは複数のを選択することができる。この方法に基づいて、一方で、上述したように、取得した曲線はより平滑することができ、他の一方で、第2を選択する過程で、画像に基づいて確定したが車線境界線上に位置する信頼と曲線までの距離との2つの要素を同時に考慮するので、単に画像データに基づいて確定した車線境界線の結果を更に修正し、いくつかの誤った検出の発生を避けて、車線境界線の精度を向上させることができる。
一部の実施形態において、3次元点群データと画像データに基づいて、第2を確定することもできる。上述したように、道路の異なる領域の3次元点群データと、対応する車線境界線画像とを取得することができる。上記内容と同じようなプロセスに基づいて、各所定領域のいずれの各のレーザ反射率、信頼、および基準曲線までの距離を確定することができる。この時のの得点は、以下のような式で算出することができる。
(式5−1)
Ponit_Score_New=α3*Point_Cloud_Rate+β3・Image_Conf+γ*Point_Dist_Score
(式5−2)
Point_Dist_Score=2/(1+e^(f*Dist))
ここで、α3、β3およびγは、重み係数を表示し、Point_Cloud_Rateは、により表示される位置のレーザ反射率を表示し、Image_Confは、の信頼を表示し、Distは、から基準曲線までのユークリッド距離を表示し、fは、定数である。このような場合に、例えば当該基準曲線との距離が近く、レーザ反射率が高く、信頼の高いが優先的に選択され、さらに第2が実際の中の車線境界線に更に近接することができるように、所定領域のいずれ得点が最も高い1つまたは複数のを選択し、または所定の領域の中で得点が所定の閾値よりも高い1つまたは複数のを選択することができる。
この方法を使用して、一方で、上述したように、取得した曲線はより平滑になり、他の方で、第2を選択する過程でレーザ反射率と、画像に基づいて確定したが車線境界線上に位置する信頼と、曲線までの距離との3つの要素を同時に考慮するので、まず複数のパラメータを総合的に検証することで、より正確な検出結果を取得することができ、さらにから基準曲線までの距離を考慮するので、センサより確定した車線境界線の融合結果を更に修正することができ、いくつかの検出の発生を避けて、車線境界線の精度を向上させることができる。
例えば、図2に示された例示において、第1の領域206で選択されたは、232であり、第1の領域206で選択されたは、234であり、第1の領域206で選択されたは、236であり、カーブフィッティングにより取得した曲線は、第2の曲線230である。
続いて、図3を参照すると、ブロック306において、基準曲線第1のフィッティング度と第2の曲線第2のフィッティング度との間のフィッティング度の差(違い)を確定する。一部の実施形態において、フィッティング度は、曲線をカーブフィッティングするためのカーブフィッティングにより取得した曲線とのフィッティング精度を反映する。図6を参照すると、図6は、本発明の実施形態に係るフィッティング度を確定する方法600のフローチャートを示す。
ブロック602において、第1組または第2組の点におけるから曲線までの距離を確定する。例えば、第2の曲線を例にとると、一部の実施形態において、当該距離は、第2のうち、から第2の曲線までのユークリッド距離である。ブロック604において、第1組または第2組の点のうち、曲線までの距離が所定の距離よりも小さいの占有率を確定する。第2の曲線を例として、いくつかの実施形態において、占有率Ratioは、例えば以下の式で確定することができる。
(式6)
Ratio=Count(Dist<Dist_Threshold)/Amount
ここで、Distは、曲線上のから第2の曲線までの距離を表示し、Dist_Thresholdは、距離閾値を表示し、Amountは、曲線上のの数を表示し、Count(Dist <Dist_Threshold)は、第2の曲線までの距離が閾値距離よりも小さい点の数を表示する。一部の実施形態において、車線幅内のがすべて相対的に良好なフィッティング度を備えるように、閾値距離は、車線境界線幅の半分に選択することができる。
ブロック606において、距離と占有率の加重合計に基づいてフィッティング度を確定する。第2の曲線を例として、いくつか実施形態において、例えば、距離に基づいてその曲線上のすべてのの平均距離得点Average_Dist_Scoreを取得することができる。
(式7−1)
Average_Dist_Score=Sum(Point_Dist_Score)/Amount
(式7−2)
Point_Dist_Score=2/(1+e^(f*Dist))
ここで、Distは、曲線上のから第2の曲線までの距離を表示し、fは、定数であり、Amountは、その曲線上のの数を表示し、Sum(Point_Dist_Score)は、曲線上の点から第2の曲線までの距離得点の合計を表示する。一部の実施形態において、続いて、平均距離得点と占有率に基づいて、第2のフィッティング度Fit_Score_2を算出することができる。
(式8)
Fit_Score_2 =α4* Average_Dist_Score +β4* Ratio
ここで、α4とβ4は、重み係数を表示する。この方法に基づいて算出されたフィッティング度は、曲線自体とのマッチングの度合いを考慮するだけではなく、車線境界線が特定の幅を備える特徴も考慮するので、当該曲線をカーブフィッティングするためのラインを候補車線境界線上のとする可能性をより正確に反映することができる。
続いて、図3を参照すると、基準曲線に関連する第1のフィッティング度は、方法600に基づいて確定されることができることを理解されたい。一部の実施形態において、フィッティング度の差は、第2フィッティング度と第1のフィッティング度の差値で表示されることができる。
ブロック308において、収束条件を満たしているかどうかを確定する。一部の実施形態において、収束条件はフィッティング度の差に関連することができる。一部の実施形態において、例えば、フィッティング度の差の絶対値が所定の閾値よりも小さいかどうかを判断し、小さい場合に、2つの曲線が非常に近接すること、即ち収束が十分であることを反映する。一部の実施形態において、例えば、カーブフィッティングの差値が0よりも大きいか同じであり、所定の閾値よりも小さい場合、即ち第2の曲線のカーブフィッティング品質が基準曲線のカーブフィッティング品質よりも良好であり、2つの曲線が非常に近接する場合、この時点でこれ以上の繰り返しを進めても、第2の曲線のカーブフィッティング品質を著しく向上させることは困難の可能性があり、このように収束条件を満足すると確定することができる。
一部の実施形態において、収束条件は曲線上ののレーザ反射率に関連することもできる。一部の実施形態において、例えば、基準曲線第1の平均レーザ反射率および第2の曲線第2の平均レーザ反射率とをそれぞれ確定することができる。ここで、平均レーザ反射率は、曲線上のすべてのにより表示される位置のレーザ反射率の平均値を指す。続いて、第1の平均レーザ反射率および第2の平均レーザ反射率に基づいて、両者の差、即ちレーザ反射率の差を算出することができる。一部の実施形態において、レーザ反射率の差とフィッティング度の差に対して加重合計を行って相違度の得点を取得することができる。つまり、相違度の得点Diff_Scoreは、以下のように表示されることができる。
(式9)
Diff_Score=α5*Diff_Point_Cloud_Ratio+β5*Diff_Fitting_Score
ここで、α5とβ5は、重み係数を表示し、Diff_Point_Cloud_Ratioは、レーザ反射率の差を表示し、Diff_Fitting_Scoreは、フィッティング度の差を表示する。一部の実施形態において、相違度の得点と所定の閾値を比較して、合計が所定の閾値よりも小さい場合に、収束条件を満たしていると判定する。一部の実施形態において、同様に、相違度の得点が0よりも大きいか同じであり、所定の閾値よりも小さい場合に、収束条件を満足すると確定することもできる。
一部の実施形態において、収束条件は曲線上のの信頼に関連してもよい。一部の実施形態において、例えば、基準曲線第1の平均信頼と、第2の曲線第2の平均信頼とをそれぞれ確定することができる。ここで、平均信頼は、その曲線上のすべてのの信頼の平均値を指す。続いて、第1の平均信頼および第2の平均信頼に基づいて、両の差、即ち信頼の差を算出することができる。一部の実施形態において、信頼の差とフィッティング度の差に対して加重合計を行相違度の得点を取得することができる。つまり、相違度の得点Diff_Scoreは、以下のように表示されることができる。
(式10)
Diff_Score=α6*Diff_Image_Conf+β6*Diff_Fitting_Score
ここで、α6とβ6は、重み係数を表示し、Diff_Image_Confは、信頼の差を表示し、Diff_Fitting_Scoreは、フィッティング度の差を表示する。一部の実施形態において、続いて、相違度の得点と所定の閾値を比較して、合計が所定の閾値よりも小さい場合に、収束条件を満たしていると判定する。一部の実施形態において、同様に、相違度の得点が0よりも大きいか同じであり、所定の閾値よりも小さい場合に、収束条件を満足すると確定することもできる。
収束条件は、同時にフィッティング度の差、レーザ反射率の差や信頼の差に関連することができ、つまり3者に対して加重合計を行い相違度の得点を取得することができることを理解しなければならない。即ち、相違度の得点Diff_Scoreは、以下のように表示されることができる。
(式11)
Diff_Score=α7*Diff_Point_Cloud_Ratio+β7*Diff_Image_Conf+γ2*Diff_Fitting_Score

ここで、α7、β7とγ2は、重み係数を表示し、Diff_Point_Cloud_Ratioは、レーザ反射率の差を表示し、Diff_Image_Confは、信頼の差を表示し、Diff_Fitting_Scoreは、フィッティング度の差を表示する。一部の実施形態において、続いて、相違度の得点と所定の閾値を比較して、合計が所定の閾値よりも小さい場合に、収束条件を満たしていると判定する。一部の実施形態において、同様に、相違度の得点が0よりも大きいか同じであり、所定の閾値よりも小さい場合に、収束条件を満足すると確定することもできる。
ブロック308で収束条件を満足していることを確定した場合、方法300は、ブロック310に進め、収束条件を満たすときの第2に基づいて、道路の車線境界線を確定し、第2を最終の車線境界線の結果として出力する。
収束条件を満たしていないと確定される場合に、方法300は、ブロック312に進、第2の曲線を基準曲線に設定し、次いでブロック304に戻り、新たな基準曲線に基づいて第2を再選択する。ブロック304、ブロック306、ブロック308とブロック312は、収束条件を満たすまで繰り返し実行されることを理解されたい。一部の実施形態において、算出結果と計算オーバーヘッドのバランスを取るために、例えば、反復ステップの実行回数に上限(例えば、10回)を設定することができ、反復ステップの実行回数がその上限に達した場合、収束条件を満たしていると確定し、反復ステップを自動的に終了し、この時の第2を最終の車線境界線の結果として出力する。
上記のように、本発明の実施形態により提供される車線境界線を確定する方案は、車線境界線の3次元点群データと画像収集データに対して総合的な判定を行い、単なるセンサにより認識する案に比べてより正確である。また、当該案は、レーザ反射率、信頼、および基準曲線までの距離に基づいて、各候補に対して得点を算出し、センサデータに基づいて更にカーブフィッティングの特性を合わせて、取得した曲線がより平滑で、実際の車道特徴に適合ることができる。さらに、複数の繰り返し方法により、取得したが相対的に高いレーザ反射率を備え、相対的に高い信頼を備え、カーブフィッティング曲線との距離が相対的に近いことができるだけでなく、いくつかの視覚的な特徴が車線境界線と相対的に近いその他の道路標識線(例えば、横断歩道標識線と車標識線など)を排除することができる。
図7は、本発明の実施形態に係る道路中の車線境界線を確定するための装置700の概略ブロック図を示す。図7に示すように、装置700は、基準曲線として第1の曲線を取得するように構成された曲線取得モジュール702であって、第1の曲線は、第1に対してカーブフィッティングを行って取得したものであり、第1は、道路中の異なる領域の複数領域の点から選択されるものである、曲線取得モジュール702と、基準曲線に基づいて、複数領域の点から第2を選択し、第2に対してカーブフィッティングを行って、第2曲線を生成し、基準曲線第1フィッティング度と第2曲線第2のフィッティング度の間のフィッティング度の差を確定し、少なくとも部分的にフィッティング度の差に基づいて収束条件を満たしているかどうかを確定し、収束条件を満たさないことに応じて、第2の曲線を基準曲線に設定することを、少なくとも一回繰り返し実行するように構成された曲線更新モジュール704と、収束条件を満たすときの第2に基づいて、道路の車線境界線を確定するように構成された車線境界線確定モジュール706を含む。
一部の実施形態において、曲線更新モジュール704は、準曲線との距離が近いが優先的に選択されるように、複数領域の点から基準曲線までの距離に基づいて、第2を選択するように構成された第1の選択モジュールをさらに含む。
一部の実施形態において、曲線更新モジュール704は、道路中の異なる領域における複数領域の点の3次元点群データを取得するように構成された点群データ取得モジュールと、点群データから、複数領域の点の中のにより表示される位置のレーザ反射率を確定するように構成されたレーザ反射率確定モジュールと、基準曲線との距離が近く、レーザ反射率が高いが優先的に選択されるように、点群の信頼と基準曲線に基づいて、第2組の点を選択するように構成された第2の点選択モジュールをさらに含む。
一部の実施形態において、曲線更新モジュール704は、基準曲線をカーブフィッティングするためのにより表示される位置のレーザ反射率に基づいて、基準曲線第1の平均レーザ反射率を確定するように構成された第1の平均レーザ反射率確定モジュールと、第2の曲線をカーブフィッティングするためのにより表示される位置のレーザ反射率に基づいて、第2の曲線第2の平均レーザ反射率を確定するように構成された第2の平均レーザ反射率確定モジュールと、第1の平均レーザ反射率と第2の平均レーザ反射率との間のレーザ反射率の差を確定するように構成されたレーザ反射率差確定モジュールと、レーザ反射率の差とフィッティング度の差の加重合計が所定の閾値よりも小さいことに応じて、収束条件を満足すると確定するように構成された第1の収束判断モジュールをさらに含む。
一部の実施形態において、曲線更新モジュール704は、道路の異なる領域中の車線境界線の画像を取得するように構成された画像取得モジュールと、複数領域の点のうちのにより表示される位置を画像上にマッピングするように構成されたマッピングモジュールと、基準曲線との距離が近く、対応する位置が画像において車線境界線に近接し、車線境界線上に位置するが優先的に選択されるように、マッピングと基準曲線に基づいて、第2組の点を選択するように構成された第3の点選択モジュールをさらに含む。
一部の実施形態において、曲線更新モジュール704は、により表示される位置のマッピングに基づいて、が車線境界線に該当する信頼を確定するように構成された信頼確定モジュールと、基準曲線をカーブフィッティングするめのの信頼に基づいて、基準曲線第1の平均信頼を確定するように構成された第1の平均信頼確定モジュールと、第2の曲線をカーブフィッティングするためのの信頼に基づいて、第2の曲線第2の平均信頼を確定するように構成された第2の平均信頼確定モジュールと、第1の平均信頼と第2の平均信頼との間の信頼の差を確定するように構成された信頼差確定モジュールと、信頼の差とフィッティング度の差の加重合計が所定の閾値よりも小さいことに応じて、収束条件を満足すると確定するように構成された第2の収束判断モジュールをさらに含む。
一部の実施形態において、曲線更新モジュール704は、繰り返し回数が所定の閾値に達したことに応じて、収束条件を満足すると確定するように構成された第3の収束判断モジュールをさらに含む。
一部の実施形態において、曲線更新モジュール704は、第2から第2の曲線までの距離を確定するように構成された距離確定モジュールと、第2のうち、第2の曲線までの距離が所定の距離よりも小さいの占有率を確定するように構成された占有率確定モジュールと、第2の曲線までの距離の平均と占有率の加重合計に基づいて、第2のフィッティング度を確定するように構成されたフィッティング度確定モジュールをさらに含む。
図8は、本願の複数の実施形態を実施することができる機器800のブロック図を示す。機器800は、図1のコンピューティング機器170を実現するのに使用することができる。図示されたように、機器800は、中央処理ユニット801(CPU)を含み、CPU801は、読み取り専用メモリ802(ROM)に記憶されたコンピュータプログラム指令、または記憶ユニット808からランダムアクセスメモリ803(RAM)にロードされたコンピュータプログラム指令に基づいて、各種の適切な動作と処理を実行することができる。RAM803には、機器800の動作に必要な各種のプログラムやデータが記憶されることができる。CPU801、ROM802とRAM803、バス804を介して互いに接続される。入力/出力(I/O)インターフェース805もバス804に接続される。
機器800中のI/Oインタフェース805に接続されている複数の部品として、キーボード、マウスなどの入力ユニット806と、様々なタイプの表示装置、スピーカーなどの出力ユニット807と、磁気ディスク、コンパクトディスクなどの記憶ユニット808と、LANカード、モデム、無線通信トランシーバなどの通信ユニット809が含まれる。通信ユニット809は、機器800がインターネットなどのコンピュータネットワークおよび/または各種の電気通信網を介して他の機器と情報/データを交換することを可能にする。
中央処理ユニット801は、前述した各方法と処理、例えば、プロセス300、400、500および/または方法600を実行する。例えば、いくつか実施形態において、プロセス300、400、500および/または方法600は、コンピュータソフトウェアプログラムとして実現されることができ、これは機械可読媒体(例えば、記憶ユニット808)に含まれている。一部の実施形態において、コンピュータプログラムの一部または全部は、ROM802、および/または通信ユニット809を経由して機器800上にロードおよび/またはインストールすることができる。コンピュータプログラムは、RAM803にロードされてCPU801により実行される場合、前述したプロセス300、400、500および/または方法600の1つまたは複数のステップを実行することができる。選択可能に、その他の実施形態において、CPU801は、ギターの任意の適切な方法で(例えば、ファームウェアの助けを借りて)プロセス300、400、500および/または方法600を実行するように構築することができる。
本明細書に説明されて複数の機能は、少なくとも部分的に1つまたは複数のハードウェアロジック部材で実行することができる。例えば、使用可能な模式的なタイプのハードウェアロジック部材は、フィールドプログラマブルゲートアレイ(FPGA)、特定用途向け集積回路(ASIC)、オンデマンド標準製品(ASSP)、システム−オン−チップシステム(SOC)、複合プログラマブルロジック素子(CPLD)などを含むが、これに限定されない。
本願の方法を実施するためのプログラムコードは、1つまたは複数のプログラマブル言語の任意の組み合わせを利用してプログラミングすることができる。これらのプログラムコードは、汎用コンピュータ、オンデマンドコンピュータ又はその他のプログラマブルデータ処理装置のプロセッサまたは制御装置に提供されることができ、プログラムコードがプロセッサまたは制御装置により実行される場合には、フローチャート、および/またはブロック図に規定された機能/操作が実施される。プログラムコードは、完全に機械上で実行されるか、部分的に機械上で実行されるか、独立したソフトウェアパッケージとして部分的に機械上で実行されて、部分的にリモートマシン上で実行されたり、または完全にリモートマシンまたはサービスで実行されることができる。
本願の文脈において、機械可読媒体は、あるタイプの媒体であることができ、コマンドを実行するシステム、装置又は機器によって使用されるか、またはコマンドの実行システム、装置または機器と組み合わせて使用されるプログラムを含むまたは記憶することができる。機械可読媒体は、電子的、磁気的、光学的、電磁気的、赤外線、または半導体を用いた、システム/装置/機器、またはれらの任意の適切な組み合わせを含むことができるが、これに限定されない。機械可読記憶媒体のより具体的な例はポータブルコンピュータディスク、ハードディスク、ランダムアクセスメモリ(RAM)、読み取り専用メモリ(ROM)、消去およびプログラム可能な読み取り専用メモリ(EPROMまたはフラッシュメモリ)ポータブルコンパクトディスク読み取り専用メモリ(CD−ROM)、光学ストレージ装置、磁気記憶装置、またはれらの任意の適切な組み合わせを含むことができるが、これに限定されない。
また、特定の順序を利用して、各操作説明したが、これはこのような操作が図示された特定の順序またはシーケンスで実行されることを要求したり、目的の結果を実現するために図示されたすべての操作が実行されることを要求すると理解してはならない。一定の環境において、マルチタスクと並列処理は、有利であることができる。同様に、上記説明に様々な具体的な実現の詳細が含まれているが、これらは本願の範囲の限定と解釈してはならない。別の実施形態の文脈で説明されたいくつかの特徴は、組み合わせの方法で単一の実現に実現されることができる。逆に、単一実現された前記各種の特徴も個別にまたは任意の適切なサブ組み合わせの方法で複数の実現に実現されることもできる。
構造の特徴および/または方法のロジックの動作に固有の言語を使用して本主題を説明したが、特許請求の範囲に限定された主題は、必ずしも前述した特定の特徴または動作に限定されるべきではないことを理解すべきである。逆に、前述した特定の特徴または動作は、単に特許請求の範囲を実現する例示的形式である。

Claims (15)

  1. 道路中の車線境界線を確定するための方法であって、
    収集主体を道路で走行させて取得した、道路中の車線境界線を含むセンサデータとしてのレーザ反射率を含む点群データから、所定距離をおいた所定領域のそれぞれから点群データを複数選択するステップと、
    前記点群データに基づいて、前記所定領域のそれぞれからレーザ反射率閾値を満たす第1のレーザ反射率を有する点を選択して第1組の点とし、前記第1組の点を通る曲線を基準曲線として作成するステップと、
    収束条件が満たされるまで反復ステップを実行するステップであって、
    前記反復ステップは、
    前記所定領域のそれぞれの点群データから、少なくとも前記基準曲線および第2のレーザ反射率に基づいて曲線を構成する点を選択して第2組の点とすることと、
    前記第2組の点を通る曲線を作成し、該曲線を第2の曲線とすることと、
    前記基準曲線の第1のフィッティング度と前記第2の曲線の第2のフィッティング度との間のフィッティング度の差を確定することと、
    少なくとも前記フィッティング度の差と所定の閾値との比較結果に基づいて、前記第2の曲線が収束条件を満たしているかどうかを確定することと、
    前記収束条件が満たされていないことに応じて、前記第2の曲線を前記基準曲線とすることと、を含む、ステップと、
    前記第2の曲線が前記収束条件を満たしていることに応じて、前記収束条件を満たしたときの第2組の点を、前記道路の前記車線境界線として確定するステップとを含み、
    前記基準曲線の第1のフィッティング度は、前記第1組の点における各点から前記基準曲線までのユークリッド距離と、前記第1組の点のうち前記基準曲線までのユークリッド距離が所定距離よりも小さい点の占有率との加重合計に基づいて確定され、
    前記第2の曲線の第2のフィッティング度は、前記第2組の点における各点から前記第2の曲線までのユークリッド距離と、前記第2組の点のうち前記第2の曲線までのユークリッド距離が所定距離よりも小さい点の占有率との加重合計に基づいて確定される、
    道路中の車線境界線を確定するための方法。
  2. 前記所定領域の点群データから少なくとも前記基準曲線及び第2のレーザ反射率に基づいて曲線を構成する点を選択して第2組の点とすることは、
    前記基準曲線からのユークリッド距離が近く且つレーザ反射率が高い点が優先的に選択されることを含む、
    請求項1に記載の道路中の車線境界線を確定するための方法。
  3. 前記少なくとも前記フィッティング度の差と所定の閾値との比較結果に基づいて、前記第2の曲線が前記収束条件を満たしているかどうかを確定することは、
    前記基準曲線を構成するすべての点におけるレーザ反射率の平均値を第1の平均レーザ反射率として確定するステップと、
    前記第2の曲線を構成するすべての点におけるレーザ反射率の平均値を第2の平均レーザ反射率として確定するステップと、
    前記第1の平均レーザ反射率と前記第2の平均レーザ反射率との間のレーザ反射率の差を確定するステップと、
    前記レーザ反射率の差と前記フィッティング度の差の加重合計が所定の閾値よりも小さいことに応じて、前記収束条件を満たしていると確定するステップを含む、
    請求項に記載の道路中の車線境界線を確定するための方法。
  4. 前記収集主体が具備する画像収集装置によって、前記所定領域における車線境界線を含む画像データを取得するステップと、
    前記所定領域における各点の前記画像データへのマッピングを確立するステップと、
    をさらに含む、
    請求項1に記載の道路中の車線境界線を確定するための方法。
  5. 前記少なくとも前記フィッティング度の差と所定の閾値との比較結果に基づいて、前記第2の曲線が収束条件を満たしているかどうかを確定することは、
    前記所定領域における各点の前記画像データへのマッピングに基づいて、前記第1組の点および前記第2組の点の前記車線境界線に属することを示す信頼度をそれぞれ確定するステップと、
    確定された前記第1組の点の前記車線境界線に属する信頼度に基づいて、前記基準曲線を構成する全ての点の信頼度の平均値を第1の平均信頼度として確定するステップと、
    確定された前記第2組の点の前記車線境界線に属する信頼度に基づいて、前記第2の曲線を構成する全ての点の信頼度の平均値を第2の平均信頼度として確定するステップと、
    前記第1の平均信頼度と前記第2の平均信頼度との間の信頼度の差を確定するステップと、
    前記信頼度の差と前記フィッティング度の差との加重合計が所定の閾値よりも小さいことに応じて、前記収束条件を満たしていると確定するステップと、を含む、
    請求項に記載の道路中の車線境界線を確定するための方法。
  6. 前記第2の曲線の前記第2のフィッティング度は、
    前記第2組の点における各点から前記第2の曲線までのユークリッド距離の平均値と、前記第2組の点のうち前記第2の曲線までのユークリッド距離が所定距離よりも小さい点の占有率の加重合計に基づいて確定される、
    請求項1に記載の道路中の車線境界線を確定するための方法。
  7. 道路中の車線境界線を確定するための装置であって、
    収集主体を道路で走行させて取得した、道路中の車線境界線を含むセンサデータとしてのレーザ反射率を含む点群データから、所定距離をおいた所定領域のそれぞれから点群データを複数選択するように構成された点群データ取得モジュールと、
    前記点群データに基づいて、前記所定領域のそれぞれからレーザ反射率閾値を満たす第1のレーザ反射率を有する点を選択して第1組の点とし、前記第1組の点を通る曲線を基準曲線として作成するように構成された曲線取得モジュールと、
    収束条件が満たされるまで反復ステップを実行するように構成された曲線更新モジュールであって、
    前記反復ステップは、
    前記所定領域それぞれの点群データから、少なくとも前記基準曲線及び第2のレーザ反射率に基づいて曲線を構成する点を選択して第2組の点とすることと、
    前記第2組の点を通る曲線を作成し、該曲線を第2の曲線とすることと、
    前記基準曲線の第1のフィッティング度と前記第2の曲線の第2のフィッティング度との間のフィッティング度の差を確定することと、
    少なくとも前記フィッティング度の差と所定の閾値との比較結果に基づいて、前記第2の曲線が収束条件を満たしているかどうかを確定することと、
    前記収束条件が満たされていないことに応じて、前記第2の曲線を前記基準曲線とすることと、を含む、曲線更新モジュールと、
    前記第2の曲線が前記収束条件を満たしていることに応じて、前記収束条件を満たしたときの第2組の点を、前記道路の前記車線境界線として確定するように構成された車線境界線確定モジュールと、を含み、
    前記基準曲線の第1のフィッティング度は、前記第1組の点における各点から前記基準曲線までのユークリッド距離と、前記第1組の点のうち前記基準曲線までのユークリッド距離が所定距離よりも小さい点の占有率との加重合計に基づいて確定され、
    前記第2の曲線の第2のフィッティング度は、前記第2組の点における各点から前記第2の曲線までのユークリッド距離と、前記第2組の点のうち前記第2の曲線までのユークリッド距離が所定距離よりも小さい点の占有率との加重合計に基づいて確定される、
    道路中の車線境界線を確定するための装置。
  8. 前記曲線更新モジュールは、
    前記基準曲線からのユークリッド距離が近く且つレーザ反射率が高い点が優先的に選択されるように、前記第2組の点を選択するように構成された第2の点選択モジュールを含む、請求項に記載の道路中の車線境界線を確定するための装置。
  9. 前記曲線更新モジュールは、
    前記基準曲線を構成するすべての点におけるレーザ反射率の平均値を第1の平均レーザ反射率として確定するように構成された第1の平均レーザ反射率確定モジュールと、
    前記第2の曲線を構成するすべての点におけるレーザ反射率の平均値を第2の平均レーザ反射率として確定するように構成された第2の平均レーザ反射率確定モジュールと、
    前記第1の平均レーザ反射率と前記第2の平均レーザ反射率との間のレーザ反射率の差を確定するように構成されたレーザ反射率差確定モジュールと、
    前記レーザ反射率の差と前記フィッティング度の差の加重合計が所定の閾値よりも小さいことに応じて、前記収束条件を満たしていると確定するように構成された第1の収束判断モジュールをさらに含む、
    請求項に記載の道路中の車線境界線を確定するための装置。
  10. 前記曲線更新モジュールは、
    前記所定領域における車線境界線を含む画像データを取得するように構成された画像取得モジュールと、
    前記所定領域における各点の前記画像データへのマッピングを確立するように構成されたマッピングモジュールと、
    をさらに含む請求項に記載の道路中の車線境界線を確定するための装置。
  11. 前記曲線更新モジュールは、
    前記所定領域における各点の前記画像データへのマッピングに基づいて、前記第1組の点および前記第2組の点の前記車線境界線に属することを示す信頼度をそれぞれ確定するように構成された信頼度確定モジュールと、
    確定された前記第1組の点の前記車線境界線に属する信頼度に基づいて、前記基準曲線を構成する全ての点の信頼度の平均値を第1の平均信頼度として確定するように構成された第1の平均信頼度確定モジュールと、
    確定された前記第2組の点の前記車線境界線に属する信頼度に基づいて、前記第2の曲線を構成する全ての点の信頼度の平均値を第2の平均信頼度として確定するように構成された第2の平均信頼度確定モジュールと、
    前記第1の平均信頼度と前記第2の平均信頼度との間の信頼度の差を確定するように構成された信頼度差確定モジュールと、
    前記信頼度の差と前記フィッティング度の差との加重合計が所定の閾値よりも小さいことに応じて、前記収束条件を満たしていると確定するように構成された第2の収束判断モジュールと、をさらに含む、
    請求項10に記載の道路中の車線境界線を確定するための装置。
  12. 前記曲線更新モジュールは、
    前記第1組の点における各点から前記基準曲線までのユークリッド距離と、前記第1組の点のうち前記基準曲線までのユークリッド距離が所定距離よりも小さい点の占有率との加重合計に基づいて、前記基準曲線の前記第1のフィッティング度を確定し、
    前記第2組の点における各点から前記第2の曲線までのユークリッド距離の平均値と、前記第2組の点のうち前記第2の曲線までのユークリッド距離が所定距離よりも小さい点の占有率との加重合計に基づいて、前記第2の曲線の前記第2のフィッティング度を確定するように構成されたフィッティング度確定モジュールを含む、
    請求項に記載の道路中の車線境界線を確定するための装置。
  13. 1つまたは複数のプロセッサと、
    1つまたは複数のプログラムを格納するための記憶装置とを含む機器であって、
    前記1つまたは複数のプログラムが前記1つまたは複数のプロセッサによって実行される場合、前記1つまたは複数のプロセッサが請求項1から請求項のいずれか1項の方法を実現する機器。
  14. コンピュータプログラムが記憶されているコンピュータ読み取り可能な記憶媒体であって、
    前記コンピュータプログラムがプロセッサによって実行される場合、請求項1から請求項のうちいずれか1項の方法を実現するコンピュータ読み取り可能な記憶媒体。
  15. コンピュータプログラムであって、
    前記コンピュータプログラムがプロセッサにより実行される場合、請求項1から請求項のうちいずれか1項の方法を実現させるコンピュータプログラム。
JP2018242723A 2017-12-29 2018-12-26 道路中の車線境界線を確定するための方法、装置、電子機器、記憶媒体およびコンピュータプログラム Active JP6966989B2 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
CN201711475639.5 2017-12-29
CN201711475639.5A CN108256446B (zh) 2017-12-29 2017-12-29 用于确定道路中的车道线的方法、装置和设备

Publications (2)

Publication Number Publication Date
JP2019153281A JP2019153281A (ja) 2019-09-12
JP6966989B2 true JP6966989B2 (ja) 2021-11-17

Family

ID=62724638

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2018242723A Active JP6966989B2 (ja) 2017-12-29 2018-12-26 道路中の車線境界線を確定するための方法、装置、電子機器、記憶媒体およびコンピュータプログラム

Country Status (5)

Country Link
US (1) US10885352B2 (ja)
EP (1) EP3506158B1 (ja)
JP (1) JP6966989B2 (ja)
KR (1) KR102210715B1 (ja)
CN (1) CN108256446B (ja)

Families Citing this family (39)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108256446B (zh) * 2017-12-29 2020-12-11 百度在线网络技术(北京)有限公司 用于确定道路中的车道线的方法、装置和设备
CN108960183B (zh) * 2018-07-19 2020-06-02 北京航空航天大学 一种基于多传感器融合的弯道目标识别系统及方法
CN109300322B (zh) * 2018-10-31 2021-05-04 百度在线网络技术(北京)有限公司 引导线绘制方法、装置、设备和介质
CN109636877B (zh) * 2018-10-31 2021-06-01 百度在线网络技术(北京)有限公司 车道线调整处理方法、装置及电子设备
CN109598199B (zh) * 2018-10-31 2021-07-27 百度在线网络技术(北京)有限公司 车道线生成方法和装置
JP7095559B2 (ja) * 2018-11-09 2022-07-05 トヨタ自動車株式会社 区画線検出装置及び区画線検出方法
CN111179152B (zh) * 2018-11-12 2023-04-28 阿里巴巴集团控股有限公司 一种道路标识识别方法及装置、介质、终端
CN109798903B (zh) * 2018-12-19 2021-03-30 广州文远知行科技有限公司 一种从地图数据中获取道路信息的方法及装置
CN111247525A (zh) * 2019-01-14 2020-06-05 深圳市大疆创新科技有限公司 一种车道检测方法、装置及车道检测设备、移动平台
CN109916416B (zh) * 2019-01-29 2022-04-01 腾讯科技(深圳)有限公司 车道线数据处理与更新方法、装置及设备
CN109703569B (zh) * 2019-02-21 2021-07-27 百度在线网络技术(北京)有限公司 一种信息处理方法、装置及存储介质
CN110426051B (zh) * 2019-08-05 2021-05-18 武汉中海庭数据技术有限公司 一种车道线绘制方法、装置及存储介质
KR102228278B1 (ko) * 2019-09-03 2021-03-16 충북대학교 산학협력단 라이다 센서를 이용한 차선인식 방법 및 그를 위한 장치
CN110703227B (zh) * 2019-09-20 2023-01-24 中国铁路设计集团有限公司 一种基于TerraSolid参数阈值自动选择的地面点云滤波方法
CN110705444B (zh) * 2019-09-27 2022-02-08 四川长虹电器股份有限公司 车道跟踪系统及方法
CN112630751A (zh) * 2019-10-09 2021-04-09 中车时代电动汽车股份有限公司 一种激光雷达的标定方法
CN110909711B (zh) * 2019-12-03 2022-08-02 阿波罗智能技术(北京)有限公司 检测车道线位置变化的方法、装置、电子设备和存储介质
JP2022522385A (ja) * 2020-02-07 2022-04-19 シェンチェン センスタイム テクノロジー カンパニー リミテッド 道路標識認識方法、地図生成方法、及び関連する製品
CN111130147B (zh) * 2020-02-21 2023-09-05 海南电网有限责任公司电力科学研究院 一种基于清洁能源的智能微网协调控制方法
CN111353466B (zh) * 2020-03-12 2023-09-22 北京百度网讯科技有限公司 车道线识别处理方法、设备、存储介质
CN111460073B (zh) * 2020-04-01 2023-10-20 北京百度网讯科技有限公司 车道线检测方法、装置、设备和存储介质
CN111553844B (zh) 2020-04-29 2023-08-29 阿波罗智能技术(北京)有限公司 用于更新点云的方法及装置
CN111652952B (zh) * 2020-06-05 2022-03-18 腾讯科技(深圳)有限公司 车道线生成方法、装置、计算机设备和存储介质
CN111811530B (zh) * 2020-06-16 2022-06-21 北京五一视界数字孪生科技股份有限公司 车道线生成方法、装置、存储介质及电子设备
CN111860484B (zh) * 2020-07-22 2023-11-03 腾讯科技(深圳)有限公司 一种区域标注方法、装置、设备及存储介质
CN112037328A (zh) * 2020-09-02 2020-12-04 北京嘀嘀无限科技发展有限公司 生成地图中的道路边沿的方法、装置、设备和存储介质
CN114264310A (zh) * 2020-09-14 2022-04-01 阿里巴巴集团控股有限公司 定位及导航方法、装置、电子设备、计算机存储介质
CN112115857B (zh) * 2020-09-17 2024-03-01 福建牧月科技有限公司 智能汽车的车道线识别方法、装置、电子设备及介质
KR102414647B1 (ko) * 2020-11-02 2022-06-30 주식회사 맵퍼스 모바일 매핑 시스템을 이용한 차선 데이터 자동 추출 시스템 및 방법
CN112382092B (zh) * 2020-11-11 2022-06-03 成都纳雷科技有限公司 交通毫米波雷达自动生成车道的方法、系统及介质
CN112528917A (zh) * 2020-12-18 2021-03-19 深兰科技(上海)有限公司 斑马线区域识别方法、装置、电子设备和存储介质
CN112580179B (zh) * 2020-12-29 2022-04-19 武汉中海庭数据技术有限公司 高精度地图路口车道形状更新方法及系统、服务器及介质
CN113640823B (zh) * 2021-07-15 2023-11-21 北京三快在线科技有限公司 一种基于激光反射率底图进行地图绘制的方法及装置
CN114519696B (zh) * 2021-12-31 2022-11-29 扬州盛强薄膜材料有限公司 基于光学智能化的pvc热收缩膜检测方法及系统
CN114782638B (zh) * 2022-06-17 2022-09-09 小米汽车科技有限公司 生成车道线的方法、装置、车辆、存储介质及芯片
CN114862957B (zh) * 2022-07-08 2022-09-27 西南交通大学 一种基于3d激光雷达的地铁车底定位方法
CN116047537B (zh) * 2022-12-05 2023-12-26 北京中科东信科技有限公司 基于激光雷达的道路信息生成方法及系统
CN116580559A (zh) * 2023-05-18 2023-08-11 中国公路工程咨询集团有限公司 一种基于人工智能技术的交通数据处理方法
CN117475399B (zh) * 2023-12-27 2024-03-29 新石器慧通(北京)科技有限公司 车道线拟合方法、电子设备及可读介质

Family Cites Families (43)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH08314540A (ja) * 1995-03-14 1996-11-29 Toyota Motor Corp 車両走行誘導システム
EP0740163B1 (en) * 1995-04-25 2005-12-14 Matsushita Electric Industrial Co., Ltd. Local positioning apparatus for detecting a local position of an automobile on a road
US7720580B2 (en) * 2004-12-23 2010-05-18 Donnelly Corporation Object detection system for vehicle
WO2008091565A1 (en) * 2007-01-23 2008-07-31 Valeo Schalter & Sensoren Gmbh Method and system for universal lane boundary detection
US8311283B2 (en) * 2008-07-06 2012-11-13 Automotive Research&Testing Center Method for detecting lane departure and apparatus thereof
JP5074365B2 (ja) * 2008-11-28 2012-11-14 日立オートモティブシステムズ株式会社 カメラ装置
JP5444130B2 (ja) 2010-06-11 2014-03-19 富士重工業株式会社 車両用白線認識装置
US9077958B2 (en) * 2010-08-30 2015-07-07 Honda Motor Co., Ltd. Road departure warning system
US9057203B2 (en) * 2011-06-10 2015-06-16 Peter J. BUTTERFIELD Swimming pool lane line support apparatus
US9189976B2 (en) * 2013-07-10 2015-11-17 Telenav Inc. Navigation system with multi-layer road capability mechanism and method of operation thereof
KR101504252B1 (ko) * 2013-11-28 2015-03-19 현대모비스 주식회사 곡선 도로에서 차량의 속도를 제어하기 위한 시스템 및 그 방법
KR101892306B1 (ko) * 2013-12-18 2018-08-27 주식회사 만도 Fmcw 레이더 기반의 도로 환경 감지 방법 및 장치
US9283967B2 (en) * 2014-07-16 2016-03-15 GM Global Technology Operations LLC Accurate curvature estimation algorithm for path planning of autonomous driving vehicle
US9858487B2 (en) * 2015-02-19 2018-01-02 Here Global B.V. Method and apparatus for converting from an analytical curve road geometry to a clothoid road geometry
CN104766058B (zh) * 2015-03-31 2018-04-27 百度在线网络技术(北京)有限公司 一种获取车道线的方法和装置
CN106327468B (zh) 2015-06-25 2019-02-15 株式会社理光 曲线检测方法和曲线检测装置
CN105260699B (zh) * 2015-09-10 2018-06-26 百度在线网络技术(北京)有限公司 一种车道线数据的处理方法及装置
CN105261020B (zh) * 2015-10-16 2018-11-20 桂林电子科技大学 一种快速车道线检测方法
CN105528558B (zh) 2015-12-12 2019-03-08 天津南大通用数据技术股份有限公司 一种隐蔽信道通信的检测方法及装置
US10102434B2 (en) * 2015-12-22 2018-10-16 Omnivision Technologies, Inc. Lane detection system and method
CN105701449B (zh) * 2015-12-31 2019-04-23 百度在线网络技术(北京)有限公司 路面上的车道线的检测方法和装置
CN105528588B (zh) * 2015-12-31 2019-04-23 百度在线网络技术(北京)有限公司 一种车道线识别方法及装置
KR101765279B1 (ko) * 2016-01-08 2017-08-07 서울대학교산학협력단 구간적 다항식을 기반으로 한 곡선 근사 방법
JP6733225B2 (ja) * 2016-03-08 2020-07-29 株式会社リコー 画像処理装置、撮像装置、移動体機器制御システム、画像処理方法、及びプログラム
US10121367B2 (en) * 2016-04-29 2018-11-06 Ford Global Technologies, Llc Vehicle lane map estimation
JP6529463B2 (ja) * 2016-06-14 2019-06-12 日本電信電話株式会社 道路構造化装置、道路構造化方法、及び道路構造化プログラム
US10102435B2 (en) * 2016-08-10 2018-10-16 Omnivision Technologies, Inc. Lane departure warning system and associated methods
CN107742091B (zh) * 2016-08-22 2019-01-29 腾讯科技(深圳)有限公司 一种路肩提取的方法及装置
CN106407893B (zh) * 2016-08-29 2019-11-22 东软集团股份有限公司 一种检测车道线的方法、装置和设备
CN107097794B (zh) * 2016-12-15 2020-04-21 财团法人车辆研究测试中心 道路车道线的侦测系统及其方法
CN107045629B (zh) * 2017-04-19 2020-06-26 南京理工大学 一种多车道线检测方法
US10633024B2 (en) * 2017-12-27 2020-04-28 Automotive Research & Testing Center Vehicle lateral control system having lane model with modulation weighting and control method thereof
KR102589967B1 (ko) * 2017-12-29 2023-10-16 삼성전자주식회사 차선을 검출하는 방법 및 장치
CN108256446B (zh) * 2017-12-29 2020-12-11 百度在线网络技术(北京)有限公司 用于确定道路中的车道线的方法、装置和设备
CN108319895B (zh) * 2017-12-29 2021-09-17 百度在线网络技术(北京)有限公司 用于识别电子地图中的路口的方法和装置
CN108229386B (zh) * 2017-12-29 2021-12-14 百度在线网络技术(北京)有限公司 用于检测车道线的方法、装置和介质
WO2019168869A1 (en) * 2018-02-27 2019-09-06 Nvidia Corporation Real-time detection of lanes and boundaries by autonomous vehicles
US10990832B2 (en) * 2018-03-06 2021-04-27 Phantom AI, Inc. Lane line reconstruction using future scenes and trajectory
TWI662278B (zh) * 2018-09-18 2019-06-11 財團法人工業技術研究院 刀具磨耗監控方法
KR20200036335A (ko) * 2018-09-28 2020-04-07 삼성전자주식회사 차로를 결정하는 방법 및 장치
US11518384B2 (en) * 2018-12-07 2022-12-06 Thinkware Corporation Method for displaying lane information and apparatus for executing the method
US11531348B2 (en) * 2018-12-21 2022-12-20 Here Global B.V. Method and apparatus for the detection and labeling of features of an environment through contextual clues
KR20200090527A (ko) * 2019-01-21 2020-07-29 현대자동차주식회사 차선 인식 장치 및 그 방법

Also Published As

Publication number Publication date
EP3506158A1 (en) 2019-07-03
US10885352B2 (en) 2021-01-05
KR20190082069A (ko) 2019-07-09
EP3506158B1 (en) 2023-08-30
CN108256446B (zh) 2020-12-11
US20190205665A1 (en) 2019-07-04
KR102210715B1 (ko) 2021-02-01
CN108256446A (zh) 2018-07-06
JP2019153281A (ja) 2019-09-12

Similar Documents

Publication Publication Date Title
JP6966989B2 (ja) 道路中の車線境界線を確定するための方法、装置、電子機器、記憶媒体およびコンピュータプログラム
CN111091105B (zh) 基于新的边框回归损失函数的遥感图像目标检测方法
Hata et al. Road marking detection using LIDAR reflective intensity data and its application to vehicle localization
US11776155B2 (en) Method and apparatus for detecting target object in image
JP2017223511A (ja) 道路構造化装置、道路構造化方法、及び道路構造化プログラム
CN113674287A (zh) 高精地图的绘制方法、装置、设备以及存储介质
CN109472799B (zh) 基于深度学习的图像分割方法及装置
WO2022217630A1 (zh) 一种车速确定方法、装置、设备和介质
US20220236075A1 (en) Map construction device and method thereof
Tsai et al. Horizontal roadway curvature computation algorithm using vision technology
Zeybek Extraction of road lane markings from mobile LiDAR data
CN111241994A (zh) 一种深度学习的遥感影像农村公路砂化路段的提取方法
CN110147748A (zh) 一种基于道路边缘检测的移动机器人障碍物识别方法
CN115797736A (zh) 目标检测模型的训练和目标检测方法、装置、设备和介质
CN115100741A (zh) 一种点云行人距离风险检测方法、系统、设备和介质
CN114387576A (zh) 一种车道线识别方法、系统、介质、设备及信息处理终端
JP6800901B2 (ja) 物体領域識別装置、物体領域識別方法およびプログラム
CN113793364B (zh) 目标跟踪方法、装置、计算机设备和存储介质
Shi et al. Anchor Free remote sensing detector based on solving discrete polar coordinate equation
Daudt et al. Learning to understand earth observation images with weak and unreliable ground truth
CN115311244A (zh) 一种病灶尺寸确定方法、装置、电子设备及存储介质
CN115239700A (zh) 一种脊椎Cobb角测量方法、装置、设备及存储介质
CN113963027B (zh) 不确定性检测模型的训练、不确定性的检测方法及装置
CN117177178B (zh) 一种基于物联网的城市道路分流系统
KR20240076177A (ko) 회전 다중 특징 피라미드 트랜스포머 기반 객체 인식 모델 구축 장치 및 방법

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20190412

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20190412

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20200604

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20200804

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20201104

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20201207

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20210601

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210827

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20211001

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20211022

R150 Certificate of patent or registration of utility model

Ref document number: 6966989

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

A711 Notification of change in applicant

Free format text: JAPANESE INTERMEDIATE CODE: A711

Effective date: 20211029

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313113