JP2023038164A

JP2023038164A - 障害物検出方法、装置、自動運転車両、機器、及び記憶媒体

Info

Publication number: JP2023038164A
Application number: JP2022122815A
Authority: JP
Inventors: ジャン、レイ; Lei Zhang; ヤン、カイ; Kai Yang; イン、チジュアン; Qijuan Yin; ジャン、ウジャオ; Wuzhao Zhang; ワン、シャオヤン; Xiaoyan Wang
Original assignee: Apollo Intelligent Driving Technology Beijing Co Ltd
Current assignee: Apollo Intelligent Driving Technology Beijing Co Ltd
Priority date: 2021-09-06
Filing date: 2022-08-01
Publication date: 2023-03-16
Also published as: KR20230036960A; EP4145408A1; CN113963327B; CN113963327A; US20230072632A1

Abstract

【課題】自動運転車両について、自動運転車両の走行安全を確保するために、障害物をタイムリー且つ効果的に検出する。【解決手段】障害物検出方法は、様々な障害物検出方式を使用して、車両の走行プロセス中の障害物に対して障害物検出を行って、障害物検出の複数の初期検出結果を取得するステップ１０１であって、複数の初期検出結果は様々な障害物検出方式に対応するステップと、複数の初期検出結果に対して融合処理を行って、融合結果を取得するステップ１０２と、融合結果に基づいて、障害物検出の最終検出結果を取得するステップ１０３と、を含む。【選択図】図１

Description

本開示は、コンピュータ技術の分野に関し、具体的には、自動運転、インテリジェント交通、モノのインターネット、深層学習などの技術分野に関し、特に、障害物検出方法、装置、車両、機器、及び記憶媒体に関する。

自動運転車両（Ａｕｔｏｎｏｍｏｕｓｖｅｈｉｃｌｅｓ；Ｓｅｌｆ－ｄｒｉｖｉｎｇａｕｔｏｍｏｂｉｌｅ）、無人運転車両、コンピュータ運転車両、または車輪付き移動ロボットは、コンピュータシステムを介して無人運転を実現するインテリジェント車両である。

多くのシナリオでは、例えば、自動運転車両について、自動運転車両の走行安全を確保するために、障害物をタイムリー且つ効果的に検出する必要がある。

関連技術では、通常、単一の障害物検出方式を使用して障害物検出を行う。

本開示は、障害物検出方法、装置、機器、及び記憶媒体を提供する。

本開示の一態様によれば、障害物検出方法を提供し、様々な障害物検出方式を使用して、車両の走行プロセス中の障害物に対して障害物検出を行って、前記障害物検出の複数の初期検出結果を取得するステップであって、前記複数の初期検出結果は前記様々な障害物検出方式に対応するステップと、前記複数の初期検出結果に対して融合処理を行って、融合結果を取得するステップと、前記融合結果に基づいて、前記障害物検出の最終検出結果を取得するステップと、を含む。

本開示の別の態様によれば、障害物検出装置を提供し、様々な障害物検出方式を使用して、車両の走行プロセス中の障害物に対して障害物検出を行って、前記障害物検出の複数の初期検出結果を取得するための検出モジュールであって、前記複数の初期検出結果は前記様々な障害物検出方式に対応する検出モジュールと、前記複数の初期検出結果に対して融合処理を行って、融合結果を取得するための融合モジュールと、前記融合結果に基づいて、前記障害物検出の最終検出結果を取得するための決定モジュールと、を含む。

本開示の別の態様によれば、電子機器を提供し、少なくとも一つのプロセッサと、前記少なくとも一つのプロセッサと通信接続されたメモリと、を含み、前記メモリに前記少なくとも一つのプロセッサにより実行可能な命令が記憶されており、前記命令が前記少なくとも一つのプロセッサにより実行されると、前記少なくとも一つのプロセッサが上記の態様のいずれか一つに記載の方法を実行させる。

本開示の別の態様によれば、コンピュータ命令が記憶されている非一時的なコンピュータ読み取り可能な記憶媒体を提供し、前記コンピュータ命令は、上記の態様のいずれか一つに記載の方法を実行させる。

本開示の別の態様によれば、コンピュータプログラムを提供し、前記コンピュータプログラムがプロセッサによって実行される時に上記の態様のいずれか一つに記載の方法を実現する。

本開示の別の態様によれば、自動運転車両を提供し、上記の態様のいずれか一つに記載の電子機器を含む。

本開示の技術案によれば、障害物検出の精度を向上させることができる。

本明細書で説明された内容は、本開示の実施例のキーまたは重要な特徴を特定することを意図しておらず、本開示の範囲を制限するためにも使用されないことを理解されたい。本開示の他の特徴は、以下の明細書を通じて容易に理解できる。

図面は、本出願をより良く理解するためのものであり、本出願を限定しない。
本開示の第１の実施例による概略図である。本開示の第２の実施例による概略図である。本開示の第３の実施例による概略図である。本開示の第４の実施例による概略図である。本開示の実施例の障害物検出方法のいずれか１つの方法を実現するための電子機器の概略図である。

以下、図面に基づいて、本出願の例示のな実施例を説明する。理解を容易にするために、本出願の実施例の様々な詳細が含まれており、それらは単なる例示と見なされるべきである。従って、当業者は、本出願の範囲及び精神から逸脱することなく、本明細書に記載の実施形態に対して様々な変更及び修正を行うことができることを認識するはずである。同様に、簡明のために、以下の説明では、よく知られた機能と構造の説明は省略される。

関連技術では、通常、単一の障害物検出を使用して障害物検出を行う。例えば、レーザレーダーを使用して障害物検出を行い、レーザレーダーの障害物検出結果を最終の障害物検出結果とすることができ、または、自動運転車両上のカメラによって収集された画像を処理して、障害物検出結果を取得し、それを最終の障害物検出結果とすることもできる。

しかし、単一の障害物検出は、すべて検出が不正確であるという問題がある可能性がある。

図１は本開示の第１の実施例による概略図である。本実施例は障害物検出方法を提供し、前記方法は、以下のようなステップを含む。
１０１、様々な障害物検出方式を使用して、車両の走行プロセス中の障害物に対して障害物検出を行って、前記障害物検出の複数の初期検出結果を取得し、前記複数の初期検出結果は前記様々な障害物検出方式に対応する。

１０２、前記複数の初期検出結果に対して融合処理を行って、融合結果を取得する。

１０３、前記複数の障害物センサ間の相関度情報と、前記複数の障害物検出結果と、前記複数の障害物検出結果の精度に基づいて、最終的な検出結果を決定する。

その中、車両は、自動運転車両であってもよく、または、先進運転補助システム（ＡｄｖａｎｃｅｄＤｒｉｖｉｎｇＡｓｓｉｓｔａｎｃｅＳｙｓｔｅｍ、ＡＤＡＳ）を有する車両であってもよい。

様々な障害物検出方式は、距離測定に基づく障害物検出方式、及びコンピュータビジョンに基づく障害物検出方式などを含むことができる。

距離測定に基づく障害物検出方式は、車両上の距離測定検出装置を使用して実行することができ、距離測定検出装置は、例えば、レーザレーダー、及びミリ波レーダーなどを含む。

コンピュータビジョンに基づく障害物検出方式は、車両上のカメラを介して車両周囲の環境画像を収集し、次に、車両自体のプロセッサで環境画像に対して後続処理を行い、または、車両から環境画像をクラウドに送信し、クラウドによって環境画像に対して後続処理を行って、コンピュータビジョンに基づく障害物検出結果を取得することができる。

自動運転車両を例とし、様々な障害物検出方式は、距離測定に基づく障害物検出方式とコンピュータビジョンに基づく障害物検出方式を含み、レーザレーダーに基づいて距離測定すると仮定すると、図２に示すように、自動運転車両にはレーザレーダー、カメラなどが取付けていることができ、自動運転車両上のレーザレーダーを使用すると、１つの検出結果を取得することができ、自動運転車両上のカメラを使用すると、別の検出結果を取得することができる。区別するために、この時の検出結果は初期検出結果と呼ぶことができ、さらに、レーザレーダーによって取得された検出結果は、第１の初期検出結果と呼ぶことができ、カメラに基づいて取得された検出結果は、第２の初期検出結果と呼ぶことができる。

さらに、図２に示すように、複数の初期検出結果を取得した後、複数の初期検出結果を融合して、融合結果を取得し、次に、融合結果に基づいて最終検出結果を取得することができる。

いくつかの実施例では、前記複数の初期検出結果中の各初期検出結果は、障害物が存在するか否かを指示するために用いられ、前記複数の初期検出結果に対して融合処理を行って、融合結果を取得するステップは、前記複数の初期検出結果中の、障害物の存在を指示する初期検出結果を、処理対象検出結果として選択するステップと、前記処理対象検出結果の融合情報を取得するステップと、前記処理対象検出結果の融合情報に基づいて、前記融合結果を取得するステップと、を含む。

その中、初期検出結果は、１または０であってもよく、１は障害物が存在することを意味し、０は障害物が存在しないことを意味する。

３つの初期検出結果があり、第１の初期検出結果、第２の初期検出結果、及び第３の初期検出結果としてそれぞれ表しすると仮定し、第１の初期検出結果が１であり、第２の初期検出結果が１であり、第３の初期検出結果が０である場合、処理対象検出結果は、第１の初期検出結果と第２の初期検出結果である。

その後、第１の初期検出結果と第２の初期検出結果の融合情報を取得し、前記融合情報に基づいて融合結果を取得することができる。

複数の初期検出結果の中から障害物の存在を指示する初期検出結果を選択し、次に、選択された初期検出結果に対して後続処理を行うことにより、処理量を低減し、処理効率を向上させることができる。

いくつかの実施例では、前記処理対象検出結果は複数であり、前記処理対象検出結果の融合情報は、前記複数の処理対象検出結果中の各処理対象検出結果の精度情報と、前記複数の処理対象検出結果中の２つずつの処理対象検出結果間の相関度情報を含み、前記処理対象検出結果の融合情報を取得するステップは、予め確立された精度検出モデルを使用して、前記車両が存在する環境の環境情報に対して検出処理を行って、前記各処理対象検出結果の精度情報を取得するステップと、予め配置された配置ファイルから、前記２つずつの処理対象検出結果に対応する２つずつの障害物検出方式間の相関度情報を取得し、前記相関度情報を前記２つずつの処理対象検出結果間の相関度情報とするステップと、を含む。

その中、処理対象検出結果が第１の初期検出結果と第２の初期検出結果を含むと仮定すると、第１の初期検出結果の精度及び第２の初期検出結果の精度情報を取得することができ、また、第１の初期検出結果と第２の初期検出結果との間の相関度情報を取得し、上記の精度情報と相関度情報を融合情報とすることもできる。

その中、精度検出モデルを予め確立することができ、当該モデルは、多層パーセプトロン（Ｍｕｌｔｉ－ＬａｙｅｒＰｅｒｃｅｐｔｒｏｎ、ＭＬＰ）モデルであってもよく、当該モデルの入力は、自動運転車両に対応する環境情報であり、出力は、自動運転車両が有する様々な障害物検出方式における各種障害物検出方式に対応する精度情報である。

当該モデルは、履歴環境情報とそれに対応するラベル情報を使用してトレーニングした後に取得することができ、ラベル情報は、履歴環境情報に対応する各種障害物検出方式の精度情報を手動でラベリングした後に取得することができる。

自動運転車両に対応する環境情報は、天気状況（晴れ、雨、雪など）、光照射強度、雨量強度、雪量強度、霧強度、温度、車両速度、障害物速度、及び障害物との間の距離などを含むことができる。

上記の環境情報は、車両上のセンサを介して検出して取得することができ、または、車両がクラウドから取得することもできる。

様々な障害物検出方式がレーザレーダーとカメラにそれぞれ対応するのを例とし、精度検出モデルを使用して、現在の環境情報の下のレーザレーダーに対応する初期検出結果の精度と、カメラに対応する初期検出結果の精度を取得することができる。精度検出モデルをＭＬＰモデルとするのを例とし、レーザレーダーに対応する初期検出結果の精度はＰｘで表し、カメラに対応する初期検出結果の精度はＰｙで表すと仮定すると、図３に示すように、ＭＬＰモデルは、環境情報を処理して、ＰｘとＰｙを出力することができる。

また、クラウドまたは車両自体に配置ファイルを記憶することができる、配置ファイルに異なる障害物検出方式間の相関度情報を予め配置することができ、例えば、レーザレーダーに対応する検出方式とカメラに対応する検出方式との間の相関度情報を配置することができ、その後、当該相関度情報は、対応する初期検出結果間の相関度情報とすることができる。

上記の２つの障害物検出方式を例とし、よく多くの障害物検出方式について、類似の処理を実行できることが理解できる。例えば、３つの障害物検出方式について、具体的には、例えば、レーザレーダーに対応する障害物検出方式、ミリ波レーダーに対応する障害物検出方式、及びカメラに対応する障害物検出方式、この３つの障害物検出方式に対応する初期検出結果は、それぞれ第１の初期検出結果、第２の初期検出結果、及び第３の初期検出結果である。この３つの初期検出結果がすべて障害物の存在を示す場合、例えば、すべて１である場合、精度検出モデルを使用して、第１の初期検出結果の精度情報、第２の初期検出結果の精度情報、及び第３の初期検出結果の精度情報を取得することができる。また、配置ファイルには、レーザレーダーに対応する障害物検出方式とミリ波レーダーに対応する障害物検出方式との間の相関度情報、ミリ波レーダーに対応する障害物検出方式とカメラに対応する障害物検出方式との間の相関度情報、及びレーザレーダーに対応する障害物検出方式とカメラに対応する障害物検出方式との間の相関度情報を予め配置することができ、その後、上記の３つの精度情報と３つの相関度情報に基づいて融合処理を行って、融合結果を取得することができる。

精度検出モデルと配置ファイルを使用することによって、対応する精度情報と相関度情報を適応的に取得することができる。

いくつかの実施例では、前記処理対象検出結果は複数であり、前記処理対象検出結果の融合情報は、前記複数の処理対象検出結果中の各処理対象検出結果の精度情報、及び前記複数の処理対象検出結果中の２つの処理対象検出結果間の相関度情報を含み、前記処理対象検出結果の融合情報に基づいて、前記融合結果を取得するステップは、前記各処理対象検出結果の精度情報を大きい順にソートして、ソート後の精度情報を取得するステップと、予め設定された関数関係を使用して、前記ソート後の精度情報と、前記２つずつの処理対象検出結果間の相関度情報に基づいて、前記融合結果を取得するステップと、を含み、前記予め設定された関数関係は、前記融合結果と前記精度情報及び前記相関度情報との間の関係を示すために用いられる。

その中、前記精度情報は第１の部分の精度情報と第２の部分の精度情報に分けることができ、相関度情報は第１の部分と第２の部分との間の相関度情報である。前記予め設定された関数関係では、前記融合結果は、前記２つの精度情報のうちの１つの精度情報、前記２つの精度情報のうちのもう１つの精度情報、及び前記相関度情報の積と比例関係になる。

さらに、２つの処理対象検出結果について、上記の第１の部分と第２の部分は、１つの処理対象検出結果に分けることができる。３つ以上の処理対象検出結果について、第２の部分は１つの処理対象検出結果であってもよく、第１の部分は可変数の処理対象検出結果を含むことができ、初期値は１つの処理対象検出結果であり、その後徐々に増加することができる。

具体的には、２つの処理対象検出結果をそれぞれｘ、ｙで表し、対応する精度情報が大きい順にソートした後はＰｘとＰｙであり、２つの処理対象検出結果の相関度情報はＲｘｙで表し、融合結果はＰで表すと仮定すると、融合結果Ｐの計算公式は以下のようである。
Ｐ＝１－（１－Ｐｘ）＊（１－Ｐｙ＊Ｒｘｙ）。

その中、Ｐｘ、Ｐｙ、及びＲｘｙは、すべて［０、１］間の値である。

２つの処理対象検出結果がそれぞれレーザレーダーに対応する初期検出結果、及びカメラに対応する初期検出結果であると仮定すると、レーザレーダーに対応する初期検出結果の精度情報が０．８であり、カメラに対応する初期検出結果の精度が０．９であり、予め配置された両者間の相関度情報が０．１である場合、上記の演算をへて、融合結果Ｐは以下のようになる。
Ｐ＝１－（１－０．９）＊（１－０．８＊０．１）＝０．９７２。

３つの処理対象検出結果を例とし、３つの処理対象検出結果がそれぞれｘ、ｙ、ｚで表し、対応する精度情報が大きい順にソートした後はＰｘ、Ｐｙ、及びＰｚであり、３つの処理対象検出結果中の２つずつ間の相関度情報がＲｘｙ、Ｒｘｚ、及びＲｙｚで表し、融合結果がＰで表すと仮定すると、融合結果Ｐの計算公式は以下のようである。
Ｐｘｙ＝１－（１－Ｐｘ）＊（１－Ｐｙ＊Ｒｘｙ）；
Ｐ＝１－（１－Ｐｘｙ）＊（１－Ｐｚ＊Ｒｘｙｚ）
その中、Ｒｘｙｚは、ＲｘｚとＲｙｚとの間の小さい値として選択する。

その中、Ｐｘ、Ｐｙ、Ｐｚ、Ｒｘｙ、Ｒｘｚ、及びＲｙｚは、すべて［０、１］間の値である。

精度情報をソートし、ソート後の精度情報と相関度情報に基づいて融合結果の計算を行うことによって、融合結果の精度を向上させることができる。

いくつかの実施例では、前記融合結果に基づいて、前記障害物検出の最終検出結果を取得するステップは、前記融合情報が予め設定された閾値以上である場合、前記最終検出結果に障害物が存在すると決定するステップを含む。

上記の融合結果Ｐ＝０．９７２を例とし、予め設定された閾値が０．５であると仮定し、０．９７２が０．５より大きいので、この時は障害物が存在する。

逆に、融合が予め設定された閾値より小さい場合、この時は障害物が存在しないと決定する。

融合情報と予め設定された閾値を比較することによって、最終的な検出結果を簡単かつ効率的に決定することができる。

さらに、自動運転車両は、障害物の最終検出結果に基づいて対応する操作を実行することができ、例えば、最終検出結果が障害物が存在する場合、ブレーキ操作を実行することができる。

本開示の実施例では、様々な障害物検出方式を使用して、複数の初期検出結果を取得し、前記初期検出結果に対して融合処理を行い、融合結果に基づいて障害物検出の最終検出結果を取得することによって、様々な障害物検出方式の融合を実現し、障害物検出の精度を向上させることができる。

図４は本開示の第４の実施例による概略図である。本実施例は障害物検出装置を提供する。図４に示すように、当該装置４００は、検出モジュール４０１、融合モジュール４０２、及び決定モジュール４０３を含む。

検出モジュール４０１は、様々な障害物検出方式を使用して、車両の走行プロセス中の障害物に対して障害物検出を行って、前記障害物検出の複数の初期検出結果を取得するために用いられ、前記複数の初期検出結果は前記様々な障害物検出方式に対応し、融合モジュール４０２は、前記複数の初期検出結果に対して融合処理を行って、融合結果を取得するために用いられ、決定モジュール４０３は、前記融合結果に基づいて、前記障害物検出の最終検出結果を取得するために用いられる。

いくつかの実施例では、前記複数の初期検出結果中の各初期検出結果は、障害物が存在するか否かを指示するために用いられ、前記融合モジュール４０２は、具体的には、前記複数の初期検出結果中の、障害物の存在を指示する初期検出結果を、処理対象検出結果として選択し、前記処理対象検出結果の融合情報を取得し、前記処理対象検出結果の融合情報に基づいて、前記融合結果を取得するために用いられる。

いくつかの実施例では、前記処理対象検出結果は複数であり、前記処理対象検出結果の融合情報は、前記複数の処理対象検出結果中の各処理対象検出結果の精度情報と、前記複数の処理対象検出結果中の２つずつの処理対象検出結果間の相関度情報を含み、前記融合モジュール４０２は、さらに、具体的には、予め確立された精度検出モデルを使用して、前記車両が存在する環境の環境情報に対して検出処理を行って、前記各処理対象検出結果の精度情報を取得し、予め配置された配置ファイルから、前記２つずつの処理対象検出結果に対応する２つずつの障害物検出方式間の相関度情報を取得し、前記取得された相関度情報を前記２つずつの処理対象検出結果間の相関度情報とするために用いられる。

いくつかの実施例では、前記処理対象検出結果は複数であり、前記処理対象検出結果の融合情報は、前記複数の処理対象検出結果中の各処理対象検出結果の精度情報と、前記複数の処理対象検出結果中の２つずつの処理対象検出結果間の相関度情報を含み、前記融合モジュール４０２は、さらに、具体的には、前記各処理対象検出結果の精度情報を大きい順にソートして、ソート後の精度情報を取得し、予め設定された関数関係を使用して、前記ソート後の精度情報と、前記２つずつの処理対象検出結果間の相関度情報に基づいて、前記融合結果を取得するために用いられ、前記予め設定された関数関係は、前記融合結果と前記精度情報及び前記相関度情報との間の関係を示すために用いられる。

いくつかの実施例では、前記決定モジュール４０３は、具体的には、前記融合情報が予め設定された閾値以上である場合、前記最終検出結果に障害物が存在すると決定するために用いられる。

本開示の実施例では、異なる実施例の同じまたは類似内容は、互いに参照できることを理解することができる。

本開示の実施例における「第１」、「第２」などは、区別のためにのみ使用され、重要度の高低、タイミングの前後などを示さないことを理解されたい。

本開示の実施例によれば、本開示は、さらに、電子機器、読み取り可能な記憶媒体、およびコンピュータプログラム製品を提供する。

図５に示すように、本開示の実施例の例を実現するための電子機器５００のブロック図である。電子機器は、ラップトップコンピュータ、デスクトップコンピュータ、ワークステーション、サーバ、ブレードサーバ、大型コンピュータ、及び他の適切なコンピュータなどの様々な形式のデジタルコンピュータを表すことを目的とする。電子機器は、パーソナルデジタル処理、携帯電話、スマートフォン、ウェアラブルデバイス、他の同様の計算デバイスなどの様々な形式のモバイルデバイスを表すこともできる。本明細書で示されるコンポーネント、それらの接続と関係、及びそれらの機能は単なる例であり、本明細書の説明及び／又は要求される本開示の実現を制限することを意図したものではない。

図５に示すように、電子機器５００は計算ユニット５０１を含み、計算ユニット５０１は、読み取り専用メモリ（ＲＯＭ）５０２に記憶されているコンピュータプログラムまたは記憶ユニット５０８からランダムアクセスメモリ（ＲＡＭ）５０３にロードされたコンピュータプログラムに基づいて、様々な適切な動作と処理を実行することができる。ＲＡＭ５０３には、電子機器５００が動作するに必要な様々なプログラムとデータも記憶することができる。計算ユニット５０１、ＲＯＭ５０２、およびＲＡＭ５０３は、バス５０４を介してお互いに接続される。入出力（Ｉ／Ｏ）インターフェース５０５もバス５０４に接続される。

電子機器５００内の複数のコンポーネントは、Ｉ／Ｏインターフェース５０５に接続されており、キーボード、マウスなどの入力ユニット５０６と、様々なタイプのディスプレイ、スピーカなどの出力ユニット５０７と、ディスク、光ディスクなどの記憶ユニット５０８と、およびネットワークカード、モデム、無線通信トランシーバなどの通信ユニット５０９と、を含む。通信ユニット５０９は、電子機器５００が、インターネットなどのコンピュータネットワーク、および／または様々な電気通信ネットワークを介して他の機器と情報／データを交換することを可能にする。

計算ユニット５０１は、様々な処理と計算能力を備える汎用および／または専用の処理コンポーネントである。計算ユニット５０１のいくつかの例は、中央処理装置（ＣＰＵ）、グラフィックス処理ユニット（ＧＰＵ）、様々な専用の人工知能（ＡＩ）計算チップ、様々な機械学習モデルアルゴリズムを実行する計算ユニット、デジタル信号プロセッサ（ＤＳＰ）、および任意の適切なプロセッサ、コントローラ、マイクロコントローラなどを含むが、これらに限定されない。計算ユニット５０１は、障害物検出方法などの上記の様々な方法と処理を実行する。例えば、いくつかの実施例では、障害物検出方法は、記憶ユニット５０８などの機械読み取り可能な媒体に有形的に含まれるコンピュータソフトウェアプログラムとして実現することができる。いくつかの実施例では、コンピュータプログラムの一部または全部は、ＲＯＭ５０２および／または通信ユニット５０９を介して電子機器５００にロードおよび／またはインストールされる。コンピュータプログラムがＲＡＭ５０３にロードされて計算ユニット５０１によって実行される場合、上記の障害物検出方法の一つまたは複数のステップを実行することができる。代替的に、他の実施例では、計算ユニット５０１は、他の任意の適切な方式（例えば、ファームウェアによって）を介して障害物検出方法を実行するように構成されることができる。

本開示の実施例によれば、本開示は、上記の図５に示す電子機器を含む自動運転車両をさらに提供する。

本明細書で説明されるシステムと技術の様々な実施方式は、デジタル電子回路システム、集積回路システム、フィールドプログラマブルゲートアレイ（ＦＰＧＡ）、特定用途向け集積回路（ＡＳＩＣ）、特定用途向け標準製品（ＡＳＳＰ）、システムオンチップシステム（ＳＯＣ）、ロードプログラマブルロジックデバイス（ＣＰＬＤ）、コンピュータハードウェア、ファームウェア、ソフトウェア、及び／又はそれらの組み合わせで実現することができる。これらの様々な実施方式は、一つ又は複数のコンピュータプログラムで実施されることを含むことができ、当該一つ又は複数のコンピュータプログラムは、少なくとも一つのプログラマブルプロセッサを含むプログラム可能なシステムで実行及び／又は解釈されることができ、当該プログラマブルプロセッサは、特定用途向け又は汎用プログラマブルプロセッサであってもよく、ストレージシステム、少なくとも一つの入力装置、及び少なくとも一つの出力装置からデータ及び命令を受信し、データ及び命令を当該ストレージシステム、当該少なくとも一つの入力装置、及び当該少なくとも一つの出力装置に伝送することができる。

本開示の方法を実施するためのプログラムコードは、一つまたは複数のプログラミング言語の任意の組み合わせを使用して作成することができる。これらのプログラムコードは、プログラムコードがプロセッサまたはコントローラによって実行される時にフローチャートおよび／またはブロック図に規定された機能／動作が実施されるように、汎用コンピュータ、専用コンピュータ、または他のプログラム可能なデータ処理装置のプロセッサまたはコントローラに提供することができる。プログラムコードは、完全に機械上で実行されたり、部分的に機械上で実行されたり、独立したソフトウェアパッケージとして部分的に機械上で実行され、部分的にリモート機械上実行されたり、または完全にリモート機械またはサーバ上で実行されたりすることができる。

本開示の文脈において、機械読み取り可能な媒体は、命令実行システム、装置、または機器の使用、または命令実行システム、装置または機器と組み合わせて使用するプログラムを含むか、または記憶することができる有形の媒体であってもよい。機械読み取り可能な媒体は、機械読み取り可能な信号媒体または機械読み取り可能な記憶媒体であってもよい。機械読み取り可能な媒体は、電子、磁気、光学、電磁気、赤外線、または半導体システム、装置または機器、または上記の内容の任意の適切な組み合わせを含むが、これらに限定されない。機械読み取り可能な記憶媒体のより具体的な例は、一つまたは複数のワイヤに基づく電気接続、ポータブルコンピュータディスク、ハードディスク、ランダムアクセスメモリ（ＲＡＭ）、読み取り専用メモリ（ＲＯＭ）、消去可能プログラマブル読み取り専用メモリ（ＥＰＲＯＭまたはフラッシュメモリ）、光ファイバ、ポータブルコンパクトディスク読み取り専用メモリ（ＣＤ－ＲＯＭ）、光学記憶装置、磁気記憶装置、または上記の内容の任意の適切な組み合わせを含む。

ユーザとのインタラクションを提供するために、コンピュータ上でここで説明されているシステム及び技術を実施することができ、当該コンピュータは、ユーザに情報を表示するためのディスプレイ装置（例えば、ＣＲＴ（陰極線管）又はＬＣＤ（液晶ディスプレイ）モニタ）と、キーボード及びポインティングデバイス（例えば、マウス又はトラックボール）とを有し、ユーザは、当該キーボード及び当該ポインティングデバイスによって入力をコンピュータに提供することができる。他の種類の装置は、ユーザとのインタラクションを提供するために用いられることもでき、例えば、ユーザに提供されるフィードバックは、任意の形式のセンシングフィードバック（例えば、視覚フィードバック、聴覚フィードバック、又は触覚フィードバック）であってもよく、任意の形式（音響入力と、音声入力と、触覚入力とを含む）でユーザからの入力を受信することができる。

ここで説明されるシステム及び技術は、バックエンドコンポーネントを含む計算システム（例えば、データサーバとする）、又はミドルウェアコンポーネントを含む計算システム（例えば、アプリケーションサーバー）、又はフロントエンドコンポーネントを含む計算システム（例えば、グラフィカルユーザインタフェース又はウェブブラウザを有するユーザコンピュータ、ユーザは、当該グラフィカルユーザインタフェース又は当該ウェブブラウザによってここで説明されるシステム及び技術の実施方式とインタラクションする）、又はこのようなバックエンドコンポーネントと、ミドルウェアコンポーネントと、フロントエンドコンポーネントの任意の組み合わせを含む計算システムで実施することができる。任意の形式又は媒体のデジタルデータ通信（例えば、通信ネットワーク）によってシステムのコンポーネントを相互に接続されることができる。通信ネットワークの例は、ローカルエリアネットワーク（ＬＡＮ）と、ワイドエリアネットワーク（ＷＡＮ）と、インターネットと、ブロックチェーンネットワークと、を含む。

コンピュータシステムは、クライアントとサーバとを含むことができる。クライアントとサーバは、一般に、互いに離れており、通常に通信ネットワークを介してインタラクションする。対応するコンピュータ上で実行され、互いにクライアント-サーバ関係を有するコンピュータプログラムによってクライアントとサーバとの関係が生成される。サーバは、クラウドサーバであってもよく、クラウド計算またはクラウドホストとも呼ばれ、クラウド計算サービスシステムの中の一つのホスト製品であり、従来の物理ホストとＶＰＳサービス（「ＶｉｒｔｕａｌＰｒｉｖａｔｅＳｅｒｖｅｒ」、または「ＶＰＳ」と略称する）に、存在する管理困難度が高く、業務拡張性が弱い欠陥を解決する。サーバは、分散システムのサーバであってもよく、またはブロックチェーンを組み合わせるサーバであってもよい。

上記に示される様々な形式のフローを使用して、ステップを並べ替え、追加、又は削除することができることを理解されたい。例えば、本開示に記載されている各ステップは、並列に実行されてもよいし、順次的に実行されてもよいし、異なる順序で実行されてもよいが、本開示で開示されている技術案が所望の結果を実現することができれば、本明細書では限定されない。

上記の具体的な実施方式は、本開示に対する保護範囲の制限を構成するものではない。当業者は、設計要求と他の要因に基づいて、様々な修正、組み合わせ、サブコンビネーション、及び代替を行うことができる。任意の本開示の精神と原則内で行われる修正、同等の置換、及び改善などは、いずれも本開示の保護範囲内に含まれなければならない。

Claims

障害物検出方法であって、
様々な障害物検出方式を使用して、車両の走行プロセス中の障害物に対して障害物検出を行って、前記障害物検出の複数の初期検出結果を取得するステップであって、前記複数の初期検出結果は前記様々な障害物検出方式に対応する、ステップと、
前記複数の初期検出結果に対して融合処理を行って、融合結果を取得するステップと、
前記融合結果に基づいて、前記障害物検出の最終検出結果を取得するステップと、を含む、
障害物検出方法。
前記複数の初期検出結果中の各初期検出結果は、障害物が存在するか否かを指示するために用いられ、
前記複数の初期検出結果に対して融合処理を行って、融合結果を取得するステップは、
前記複数の初期検出結果中の、障害物の存在を指示する初期検出結果を、処理対象検出結果として選択するステップと、
前記処理対象検出結果の融合情報を取得するステップと、
前記処理対象検出結果の融合情報に基づいて、前記融合結果を取得するステップと、を含む、
請求項１に記載の障害物検出方法。
前記処理対象検出結果は複数であり、前記処理対象検出結果の融合情報は、複数の前記処理対象検出結果中の各処理対象検出結果の精度情報と、複数の前記処理対象検出結果中の２つずつの処理対象検出結果間の相関度情報を含み、
前記処理対象検出結果の融合情報を取得するステップは、
予め確立された精度検出モデルを使用して、前記車両が存在する環境の環境情報に対して検出処理を行って、前記各処理対象検出結果の精度情報を取得するステップと、
予め配置された配置ファイルから、前記２つずつの処理対象検出結果に対応する２つずつの障害物検出方式間の相関度情報を取得し、前記取得された相関度情報を前記２つずつの処理対象検出結果間の相関度情報とするステップと、を含む、
請求項２に記載の障害物検出方法。
前記処理対象検出結果は複数であり、前記処理対象検出結果の融合情報は、複数の前記処理対象検出結果中の各処理対象検出結果の精度情報と、複数の前記処理対象検出結果中の２つずつの処理対象検出結果間の相関度情報を含み、
前記処理対象検出結果の融合情報に基づいて、前記融合結果を取得するステップは、
前記各処理対象検出結果の精度情報を大きい順にソートして、ソート後の精度情報を取得するステップと、
予め設定された関数関係を使用して、前記ソート後の精度情報と、前記２つずつの処理対象検出結果間の相関度情報に基づいて、前記融合結果を取得するステップと、を含み、前記予め設定された関数関係は、前記融合結果と前記精度情報及び前記相関度情報との間の関係を示すために用いられる、
請求項２に記載の障害物検出方法。
前記融合結果に基づいて、前記障害物検出の最終検出結果を取得するステップは、
前記融合情報が予め設定された閾値以上である場合、前記最終検出結果に障害物が存在すると決定するステップを含む、
請求項２に記載の障害物検出方法。
障害物検出装置であって、
様々な障害物検出方式を使用して、車両の走行プロセス中の障害物に対して障害物検出を行って、前記障害物検出の複数の初期検出結果を取得するための検出モジュールであって、前記複数の初期検出結果は前記様々な障害物検出方式に対応する検出モジュールと、
前記複数の初期検出結果に対して融合処理を行って、融合結果を取得するための融合モジュールと、
前記融合結果に基づいて、前記障害物検出の最終検出結果を取得するための決定モジュールと、を含む、
障害物検出装置。
前記複数の初期検出結果中の各初期検出結果は、障害物が存在するか否かを指示するために用いられ、前記融合モジュールは、具体的には、
前記複数の初期検出結果中の、障害物の存在を指示する初期検出結果を、処理対象検出結果として選択し、
前記処理対象検出結果の融合情報を取得し、
前記処理対象検出結果の融合情報に基づいて、前記融合結果を取得するために用いられる、
請求項６に記載の障害物検出装置。
前記処理対象検出結果は複数であり、前記処理対象検出結果の融合情報は、複数の前記処理対象検出結果中の各処理対象検出結果の精度情報と、複数の前記処理対象検出結果中の２つずつの処理対象検出結果間の相関度情報を含み、前記融合モジュールは、さらに、具体的には、
予め確立された精度検出モデルを使用して、前記車両が存在する環境の環境情報に対して検出処理を行って、前記各処理対象検出結果の精度情報を取得し、
予め配置された配置ファイルから、前記２つずつの処理対象検出結果に対応する２つずつの障害物検出方式間の相関度情報を取得し、前記取得された相関度情報を前記２つずつの処理対象検出結果間の相関度情報とするために用いられる、
請求項７に記載の障害物検出装置。
前記処理対象検出結果は複数であり、前記処理対象検出結果の融合情報は、複数の前記処理対象検出結果中の各処理対象検出結果の精度情報と、複数の前記処理対象検出結果中の２つずつの処理対象検出結果間の相関度情報を含み、前記融合モジュールは、さらに、具体的には、
前記各処理対象検出結果の精度情報を大きい順にソートして、ソート後の精度情報を取得し、
予め設定された関数関係を使用して、前記ソート後の精度情報と、前記２つずつの処理対象検出結果間の相関度情報に基づいて、前記融合結果を取得するために用いられ、前記予め設定された関数関係は、前記融合結果と前記精度情報及び前記相関度情報との間の関係を示すために用いられる、
請求項７に記載の障害物検出装置。
前記決定モジュールは、具体的には、
前記融合情報が予め設定された閾値以上である場合、前記最終検出結果に障害物が存在すると決定するために用いられる、
請求項７～９のいずれか一つに記載の障害物検出装置。
電子機器であって、
少なくとも一つのプロセッサと、
前記少なくとも一つのプロセッサに通信接続されたメモリと、を含み、
前記メモリに前記少なくとも一つのプロセッサにより実行可能な命令が記憶されており、前記命令が前記少なくとも一つのプロセッサにより実行されると、前記少なくとも一つのプロセッサが請求項１～５のいずれかの一つに記載の障害物検出方法を実行する、
電子機器。
コンピュータ命令が記憶されているコンピュータで読み取り可能な非一時的な記憶媒体であって、
前記コンピュータ命令は、前記コンピュータに請求項１～５のいずれかの一つに記載の障害物検出方法を実行させる、
コンピュータ命令が記憶されているコンピュータで読み取り可能な非一時的な記憶媒体。
コンピュータプログラムであって、
前記コンピュータプログラムがプロセッサによって実行される時に請求項１～５のいずれかの一つに記載の障害物検出方法を実現する、
コンピュータプログラム。
自動運転車両であって、
請求項１1に記載の電子機器を含む、
自動運転車両。