JP6672915B2 - 物体検出装置、物体検出方法、及び、プログラム - Google Patents
物体検出装置、物体検出方法、及び、プログラム Download PDFInfo
- Publication number
- JP6672915B2 JP6672915B2 JP2016050942A JP2016050942A JP6672915B2 JP 6672915 B2 JP6672915 B2 JP 6672915B2 JP 2016050942 A JP2016050942 A JP 2016050942A JP 2016050942 A JP2016050942 A JP 2016050942A JP 6672915 B2 JP6672915 B2 JP 6672915B2
- Authority
- JP
- Japan
- Prior art keywords
- detection
- signal waveform
- detection signal
- time
- unit
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 238000001514 detection method Methods 0.000 title claims description 471
- 230000008859 change Effects 0.000 claims description 18
- 230000002123 temporal effect Effects 0.000 claims description 15
- 238000000034 method Methods 0.000 description 58
- 230000008569 process Effects 0.000 description 53
- 238000010586 diagram Methods 0.000 description 22
- 239000008186 active pharmaceutical agent Substances 0.000 description 15
- 230000010354 integration Effects 0.000 description 13
- 230000006870 function Effects 0.000 description 9
- 238000005259 measurement Methods 0.000 description 9
- 230000007246 mechanism Effects 0.000 description 7
- 238000013075 data extraction Methods 0.000 description 4
- 239000000284 extract Substances 0.000 description 4
- 230000000630 rising effect Effects 0.000 description 4
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000001174 ascending effect Effects 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 238000005315 distribution function Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 230000008054 signal transmission Effects 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 239000000758 substrate Substances 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S17/00—Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
- G01S17/02—Systems using the reflection of electromagnetic waves other than radio waves
- G01S17/06—Systems determining position data of a target
- G01S17/08—Systems determining position data of a target for measuring distance only
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S17/00—Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
- G01S17/87—Combinations of systems using electromagnetic waves other than radio waves
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S17/00—Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
- G01S17/88—Lidar systems specially adapted for specific applications
- G01S17/89—Lidar systems specially adapted for specific applications for mapping or imaging
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S17/00—Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
- G01S17/88—Lidar systems specially adapted for specific applications
- G01S17/93—Lidar systems specially adapted for specific applications for anti-collision purposes
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S17/00—Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
- G01S17/88—Lidar systems specially adapted for specific applications
- G01S17/93—Lidar systems specially adapted for specific applications for anti-collision purposes
- G01S17/931—Lidar systems specially adapted for specific applications for anti-collision purposes of land vehicles
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S7/00—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
- G01S7/48—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S17/00
- G01S7/4802—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S17/00 using analysis of echo signal for target characterisation; Target signature; Target cross-section
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/10—Image acquisition
- G06V10/12—Details of acquisition arrangements; Constructional details thereof
- G06V10/14—Optical characteristics of the device performing the acquisition or on the illumination arrangements
- G06V10/143—Sensing or illuminating at different wavelengths
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/10—Image acquisition
- G06V10/12—Details of acquisition arrangements; Constructional details thereof
- G06V10/14—Optical characteristics of the device performing the acquisition or on the illumination arrangements
- G06V10/145—Illumination specially adapted for pattern recognition, e.g. using gratings
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/50—Context or environment of the image
- G06V20/56—Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
- G06V20/58—Recognition of moving objects or obstacles, e.g. vehicles or pedestrians; Recognition of traffic objects, e.g. traffic signs, traffic lights or roads
-
- G—PHYSICS
- G08—SIGNALLING
- G08G—TRAFFIC CONTROL SYSTEMS
- G08G1/00—Traffic control systems for road vehicles
- G08G1/16—Anti-collision systems
-
- G—PHYSICS
- G08—SIGNALLING
- G08G—TRAFFIC CONTROL SYSTEMS
- G08G1/00—Traffic control systems for road vehicles
- G08G1/16—Anti-collision systems
- G08G1/167—Driving aids for lane monitoring, lane changing, e.g. blind spot detection
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S7/00—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
- G01S7/02—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S13/00
- G01S7/41—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S13/00 using analysis of echo signal for target characterisation; Target signature; Target cross-section
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
- G06F18/20—Analysing
- G06F18/23—Clustering techniques
-
- G—PHYSICS
- G08—SIGNALLING
- G08G—TRAFFIC CONTROL SYSTEMS
- G08G1/00—Traffic control systems for road vehicles
- G08G1/16—Anti-collision systems
- G08G1/166—Anti-collision systems for active traffic, e.g. moving vehicles, pedestrians, bikes
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Electromagnetism (AREA)
- Remote Sensing (AREA)
- Radar, Positioning & Navigation (AREA)
- Computer Networks & Wireless Communication (AREA)
- Multimedia (AREA)
- Theoretical Computer Science (AREA)
- Artificial Intelligence (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Optical Radar Systems And Details Thereof (AREA)
- Traffic Control Systems (AREA)
- Geophysics And Detection Of Objects (AREA)
- Length Measuring Devices By Optical Means (AREA)
Description
また、上記のセンサによって、検出した物体を所定の平面座標に投影する二次元座標の集合体としてのデータが得られる。当該二次元座標のそれぞれには、光を出力してから当該光が物体に反射されて戻ってくるまでの時間が奥行きを示すデータとして関連付けられている(このようなデータを「距離画像」と呼ぶ)。
本発明の一見地に係る物体検出装置は、出力部と、複数の検出部と、データ取得部と、物体情報確定部と、を備える。出力部は、物体に向けて第1信号を出力する。複数の検出部のそれぞれは、第2信号を、観測している領域に存在する物体までの距離および物体の形状を表す信号として検出する。第2信号は、第1信号が物体にて反射されることにより発生する信号である。データ取得部は、第2信号の強度の時間的変化として表される検出信号波形を取得する。物体情報確定部は、検出信号波形に基づいて、任意の2以上の検出部が同じ物体に対応するか、または、異なる物体に対応するか、のいずれであるかを判定することにより、物体の存在範囲を確定する。
上記の物体検出装置において、物体の配置状態を確定するために用いられる検出信号波形は、第2信号の強度の時間的変化という連続的な情報である。これにより、物体検出装置は、検出部の集積度などに依存することなく、検出部にて検出された物体の距離と配置状態とを高い精度で確定できる。
これにより、物体情報確定部は、検出信号波形の形状に基づいて、任意の2以上の検出部が、同じ物体に対応するか、または、異なる物体に対応するかを判定するとともに、検出部と当該物体との距離を算出できる。
これにより、複数の検出部にて検出された物体を、同一の物体であると確定できる。
これにより、複数の検出部にて検出された物体を、例えば、傾斜した1つの物体と確定できる。
これにより、複数の検出部にて検出された物体を、異なる物体であると確定できる。
これにより、例えば、複数の検出部にて検出した物体を、傾斜した異なる物体であると確定できる。
これにより、複数の検出部にて検出した物体を、傾斜した1つの物体であると確定できる。
◎物体に向けて第1信号を出力するステップ。
◎第1信号が物体にて反射されることにより発生する第2信号を、複数の検出部により、観測している領域に存在する物体までの距離および物体の形状を表す信号として検出するステップ。
◎第2信号の強度の時間的変化として表される検出信号波形を取得するステップ。
◎検出信号波形に基づいて、任意の2以上の検出部が同じ物体に対応するか、または、異なる物体に対応するか、のいずれであるかを判定することにより、物体の存在範囲を確定するステップ。
(1)物体検出装置が用いられる移動体システムの構成
以下、第1実施形態に係る物体検出装置100が用いられる移動体システム1の構成について、図1を用いて説明する。図1は、物体検出装置が用いられる移動体システムの構成を示す図である。第1実施形態に係る物体検出装置100は、例えば、自動車などの移動体の運転者による操作をアシストする装置である。
その他、移動体システム1の近傍に物体Oが存在すると判定した場合には、上記のステアリングシステムなどを制御して、移動体システム1に対して当該物体Oを回避させる移動体制御信号を出力してもよい。
制御部15は、物体検出センサ14a〜14dからの検出信号を入力し、当該検出信号に基づいて、周囲に存在する物体Oと本体11との間の位置関係を決定する。制御部15の構成については、後ほど詳しく説明する。
次に、本実施形態に係る物体検出装置100にて用いられる物体検出センサ14a〜14dの構成について、図2を用いて説明する。図2は、物体検出センサの構成を示す図である。4つの物体検出センサ14a〜14dは同じ構成を有しているので、物体検出センサ14aの構成を例にとって以下説明する。
物体検出センサ14aは、出力部141を有する。出力部141は、例えば、検出対象である物体Oに向けて、赤外領域の測定光Lm(第1信号の一例)を出力する光源である。図2に示すように、本実施形態において、出力部141は、移動体システム1が移動する空間の広い範囲に広がった測定光Lmを出力することが好ましい。なぜなら、物体検出センサ14aは、移動体システム1が移動する空間の広い範囲にある物体Oを同時に検出できるからである。
複数の検出部143−1〜143−nのそれぞれには、当該検出部と外部の制御部15とを接続/切断するためのスイッチング素子(例えば、MOS−FET)が接続されている。また、スイッチング素子にはアドレス線が接続されており、アドレス線に信号が印加されたときに、当該スイッチング素子はONされ、ONされたスイッチング素子に接続された検出部と、制御部15とが信号送受信可能となる。
以下、本実施形態に係る物体検出装置100の制御部15の構成を、図3を用いて説明する。図3は、制御部の構成を示す図である。以下に説明する制御部15の各要素の機能の一部又は全部は、制御部15を構成するコンピュータシステムにて実行可能なプログラムとして実現されていてもよい。このとき、当該プログラムは、コンピュータシステムの記憶装置に形成された記憶領域に記憶されていてもよい。また、制御部15の各要素の機能の一部又は全部は、カスタムICなどによりハードウェア的に実現されていてもよい。
制御部15は、記憶部151を有する。記憶部151は、各種データを記憶する、例えば、コンピュータシステムの記憶装置に設けられた記憶領域の一部である。
なお、反射光Lrが検出されなかった場合には、検出部143−1からの信号の入力がないので、検出信号波形は0に設定される。
検出信号波形を取得後、データ取得部152は、検出部143−1〜143−nの検出面DSにおける配置位置を第1座標に投影した座標値(x1,y1)、(x2,y2)、・・・(xn,yn)と、各検出部にて得られた対応する検出信号波形W1〜Wnと、を関連付けて、第1位置情報(x1,y1,W1)、(x2,y2,W2)、・・・(xn,yn,Wn)の集合体として、第1データD1を生成する。
例えば、図4Aに示すように、検出信号波形Wm(検出部143−mにて取得された検出信号波形)が、反射光Lrの強度について2つの極大値P1、P2を時刻t1、t2において有する場合、物体情報確定部153は、反射光Lrが異なる距離を有する2箇所から発生したと確定する。すなわち、出力部141から測定光Lmを出力した時刻を0として、検出部143−mにて検出された物体O1、O2が、それぞれ、距離c*t1/2(c:光速)の位置及び距離c*t2/2の位置に、検出面DSと平行に配置されていると確定する。図4Aは、2つの物体のそれぞれが個別の場所に配置されている場合の検出信号波形の一例を示す図である。
また、物体情報確定部153は、2つの極大値P1、P2を有する検出信号波形が出現する第1座標上の座標値に対応する実空間の位置に、2つの物体O1の境界が存在し、その後方にさらに物体O2が存在すると確定する。
具体的には、物体情報確定部153は、投影像データ抽出部1531を有する。投影像データ抽出部1531は、第1データD1から、検出信号波形に示される距離が所定の範囲内にある複数の第1位置情報を抽出し、投影像データD2を生成する。
確定部1533にて実行される第2クラスタリング処理については、後ほど詳しく説明する。
これにより、実空間データVDを受け取った移動体制御部13は、移動体システム1の近傍の物体Oなどの回避が必要な物体Oが存在すると判定した場合に、ブレーキの制動機能、動力機能、及び/又はハンドルの回転機能などを制御する移動体制御信号を出力し、必要に応じて移動体システム1の運転者に代わって、移動体システム1を制御できる。
例えば、移動体制御部13は、移動体システム1の近傍に物体Oが存在すると判定した場合に、移動体システム1(本体11)を停止させるか、又は、当該物体Oを回避する運動を移動体システム1に対して実行させる。
(4−1)物体検出装置の全体的な動作
以下、移動体システム1に備わった物体検出装置100の動作について説明する。まず、物体検出装置100の全体的な動作について、図5を用いて説明する。図5は、物体検出装置の全体的な動作を示すフローチャートである。なお、以下の説明においては、4つの物体検出センサ14a〜14dは同じ構成を有しているので、物体検出センサ14aの動作を例にとって以下説明する。
移動体システム1が実空間を移動中の所定の時間毎に、データ取得部152は、物体検出センサ14aの出力部141に対して、測定光Lmを出力するよう指令する(ステップS1)。
その後、データ取得部152は、物体検出センサ14aに対して、取得した検出信号波形と第1座標上の各検出部の座標値とを関連付けて複数の第1位置情報の集合体を生成し、第1データD1として記憶部151に記憶する(ステップS3)。
この場合、上記のステップS1〜S4を実行することにより、物体検出センサ14aについては、例えば、図7に示すような、物体検出センサ14aからの距離に基づき、複数の投影像データD2−1〜D2−6が得られたとする。
一方、移動体システム1の運転者などにより、物体検出装置100の動作を停止するよう指令された場合(ステップS7において「Yes」の場合)、物体検出装置100は動作を停止する。
次に、上記のステップS5において実行される第2クラスタリング処理について、図8を用いて説明する。図8は、第2クラスタリング処理の流れを示すフローチャートである。
以下に説明する第2クラスタリング処理において、確定部1533は、本実施形態においては、投影像データD2に含まれる第2位置情報を、第1座標のx軸方向に走査することにより、投影像データD2の境界を確定していく。
具体的には、図9の点線にて示すように、投影像データD2に含まれる第2位置情報のy座標値をyiとしx座標値を正方向に変化させていく場合、まず、確定部1533は、x座標値の小さい方から順に、投影像データD2−1を第1投影像データとして選択し、投影像データD2−2を第2投影像データとして選択する。図9は、投影像データの境界を確定する際の走査方向の一例を示す図である。
また、確定部1533は、第2投影像データD2−2から、y=yiとの関数で示される線上にある複数の第2位置情報を抽出し、当該抽出した各第2位置情報に関連付けられている検出信号波形を、第2検出信号波形として抽出する(ステップS52)。これにより、第2投影像データに含まれる検出信号波形を検出した1以上の検出部が選択される。
例えば、第1投影像データD2−1と第2投影像データD2−2との境界近傍V1において、第2位置情報の座標値(x1,yi)、(x2,yi)、及び(x3,yi)のそれぞれに関連付けられていた検出信号波形W(x1,yi)、W(x2,yi)、及びW(x3,yi)が、第1検出信号波形として抽出されたとする。すなわち、第1座標の座標値(x1,yi)、(x2,yi)、及び(x3,yi)に配置された3つの検出部が、それぞれ、第1検出信号波形(x1,yi)、W(x2,yi)、及びW(x3,yi)を検出したとする。
また、境界近傍V1において、第2位置情報の座標値(x4,yi)及び(x5,yi)のそれぞれに関連付けられていた検出信号波形W(x4,yi)及びW(x5,yi)が、第2検出信号波形として抽出されたとする。すなわち、第1座標の座標値(x4,yi)及び(x5,yi)に配置された2つの検出部が、それぞれ、第2検出信号波形(x4,yi)及びW(x5,yi)を検出したとする。
図10Aは、2つの極大値を有する1つの検出信号波形が存在する場合の境界近傍の複数の検出信号波形の一例を示す図である。
また、同様に、他の検出部にて検出した第2検出信号波形W(x4,yi)及びW(x5,yi)中の強度の極大をとる時刻t4は、第1検出信号波形W(x3,yi)に含まれる2つの極大のうち1つの極大をとる時刻t4と一致している。このような場合、確定部1533は、第1検出信号波形W(x3,yi)、第2検出信号波形W(x4,yi)、及び第2検出信号波形W(x5,yi)を検出した検出部は、同じ物体O5(第2物体)に対応すると判定する。
従って、本実施形態において、確定部1533は、例えば、上記の領域の中心点((x3’+x3’’)/2,(yi’+yi’’)/2)を、第1投影像データD2−1と第2投影像データD2−2との境界が存在する座標点と確定する。
また、第2投影像データD2−2に、新たな第2位置情報である((x3’+x3’’)/2,(yi’+yi’’)/2,W(x3,yi))を追加して、第2投影像データD2−2の境界を確定する(ステップS54)。
具体的には、第1検出信号波形W(x1,yi)、W(x2,yi)、及びW(x3,yi)を検出した検出部が時刻t3に対応する距離にある1つの物体に対応し、第1検出信号波形W(x3,yi)を検出した検出部が時刻t4に対応する距離にある1つの小さな(1つの検出部のみにて検出された)物体に対応し、さらに、第2検出信号波形W(x4,yi)及びW(x5,yi)を検出した検出部が時刻t5に対応する距離にある1つの物体に対応する。すなわち、上記の5つの検出部により、検出面DSからの異なる距離に配置された3つの物体の存在範囲が確定されたことになる。
例えば、投影像データD2−5(第1投影像データ)と投影像データD2−4(第2投影像データ)との境界近傍V3において、図10Cに示すように、2つの極大値を有しない長時間にわたり強度が一定値となっている第1検出信号波形及び第2検出信号波形W(x6,yi)〜W(x10,yi)が抽出され、かつ、これらの長時間にわたり強度が一定値となって検出信号波形W(x6,yi)〜W(x10,yi)が発生する時間帯が重なっているとする。また、第1クラスタリング処理によって、第1座標の座標値(x8,yi)に、投影像データD2−5と投影像データD2−4との境界が存在すると判定されているとする。図10Cは、長時間にわたり強度が一定値となっている検出信号波形が存在する場合の一例を示す図である。
図11に示すような長時間にわたり一定の強度を有する加算波形W’が算出された場合(ステップS55において「Yes」の場合)、確定部1533は、検出信号波形W(x6,yi)〜W(x10,yi)を検出した検出部は、同じ物体に対応すると判定する。すなわち、確定部1533は、第1座標の座標値(x8,yi)には、投影像データD2−5と投影像データD2−4との境界は存在せず、2つの投影像データD2−4及びD2−5が1つの物体についてのデータであると確定する。この場合、確定部1533は、例えば、2つの投影像データD2−5とD2−4とを連結(合体)して、1つの物体についての新たな1つの投影像データD2を、y=yiにおいて生成する(ステップS56)。
図11は、長時間にわたり一定の強度を有する加算波形が算出された場合の一例を示す図である。
このようにして、確定部1533は、物体O6について、その存在範囲を確定できる。
図10Dは、第1検出信号波形の1つの極大値が現れる時刻が、第2検出信号波形の1つの極大値が現れる時刻と一致せず、複数の検出部により2つの物体が検出された場合の一例を示す図である。
具体的には、図10Eにおいては、第1検出信号波形W(x8,yi)が発生する時間帯と、第2検出信号波形W(x9,yi)が発生する時間帯とが重なっていない。この場合、確定部1533は、第1検出信号波形W(x6,yi)〜W(x8,yi)を検出した検出部を実空間のZ軸方向に対して傾斜した1つの物体に対応し、第2検出信号波形W(x9,yi)及びW(x10,yi)を検出した検出部を実空間のZ軸方向に対して傾斜した他の1つの物体に対応すると、2つの物体の存在範囲を確定する。
図10Eは、第1検出信号波形が発生する時間帯と、第2検出信号波形が発生する時間帯とが重ならず、複数の検出部により2つの物体が検出された場合の一例を示す図である。
図12は、2つの異なる波形を有する検出信号波形が境界近傍に存在する場合の一例を示す図である。
このような場合、確定部1533は、例えば、x軸に垂直なy軸方向に検出信号波形を走査してもよい。これにより、確定部1533は、x軸方向にほぼ平行な複数の投影像データの境界、又は、物体の傾斜を確定できる。
y=yiの線上の全てのx座標値について上記のステップS51〜S57を実行していない場合(ステップS58において「No」の場合)、y=yiの線上において境界を確定すべきx座標値が存在しているとして、第2クラスタリング処理は、ステップS51に戻る。
全てのy座標値について上記のステップS51〜S57を実行していない場合(ステップS59において「No」の場合)、境界を確定すべきy座標値が存在しているとして、第2クラスタリング処理は、ステップS51に戻る。
一方、全ての取りうるy座標値について投影像データの境界を確定した場合(ステップS59において「Yes」の場合)、第2クラスタリング処理を終了する。
このように、検出信号波形Wpが第2信号の強度の時間的変化という連続的な情報であることにより、検出部143−1〜143−nの集積度などに依存することなく、検出部143−1〜143−nにて検出された物体Oの距離と配置状態とを高い精度で確定できる。
図13は、第2クラスタリング処理を実行後のクラスタリング結果の一例を示す図である。
次に、上記のステップS6において実行される移動体システム1の制御について、図14を用いて説明する。図14は、移動体システムの制御の流れを示すフローチャートである。以下においては、検出した物体Oと本体11との間の決定した位置関係に基づいて、移動体システム1の走行機能を制御する場合を例にとって説明する。
移動体システム1の制御を開始すると、移動体システム1が移動する実空間における物体Oの配置位置を決定するため、実空間データ生成部154が、第2クラスタリング処理にて生成された投影像データD2’−1〜D’2−3を用いて、検出された物体Oの実空間における配置位置を表す実空間データVDを生成する(ステップS61)。
具体的には、実空間データ生成部154は、投影像データD2’−1〜D’2−3に含まれる第2位置情報を実空間座標系(X−Y−Z座標)に展開することにより、実空間データVDを生成する。
その他、検出信号波形Wpが立ち上がって強度がほぼ一定値にて安定するタイミング、及び/又は、検出信号波形Wpがほぼ一定値にて安定した状態から立ち下がりを開始するタイミングを、検出信号波形Wpにエッジが発生する時刻としてもよい。
図15に示すように、第2クラスタリング処理の実行後に生成された3つの投影像データD2’−1〜D2’−3を用いて実空間データVDを生成することにより、物体O4〜O6の配置位置、及び、物体O6が1つの物体としてZ方向に傾斜している様子が、実空間データVDにて反映できている。
その他、必要に応じて、エンジン及び/又は電動モータと車輪12a、12bとの間のクラッチを切断する移動体制御信号を出力してもよい。
以上、本発明の一実施形態について説明したが、本発明は上記実施形態に限定されるものではなく、発明の要旨を逸脱しない範囲で種々の変更が可能である。特に、本明細書に書かれた複数の実施形態及び変形例は必要に応じて任意に組み合せ可能である。
(A)検出信号波形についての他の実施形態
上記の第1実施形態において、検出部143−1〜143−nと物体Oとの間の距離を求めるに当たり、検出信号波形W1〜Wnの極大値を求めている。極大値を求める方法としては次のような方法も考えられる。
上記の第1実施形態においては、最初に第1データD1に対して第1位置情報に示された距離(極大値が出現する時刻)に基づく第1クラスタリング処理が実行され、次に、当該第1クラスタリング処理を実行して生成された投影像データD2について検出信号波形の特性を用いた第2クラスタリング処理を実行することにより、高精度のクラスタリングがなされた投影像データD2’が生成されていた。
しかし、これに限られず、第1クラスタリング処理を経ることなく、第1データD1に対して直接第2クラスタリング処理を実行しても、高精度のクラスタリングがなされた投影像データD2’を生成できる。
なお、2つの極大値が存在するx座標値においては、各極大値に対応するx軸に平行な2本の直線が定義される。
図16A〜図16Cは、第1データを検出信号波形にてクラスタリングする過程の一例を示す図である。
図17の下図に示すクラスタリング結果において、x<x1’及びx>x4’の範囲のx座標値においては検出信号波形の強度は0である。一方、x=x2’及びx3’においては、直線の切れ目が見られる。すなわち、図17に示すクラスタリング結果では、x座標値x1’〜x4’において、時刻の急激な変化が見られている。
上記の操作を第1位置情報のとりうる全てのy座標値に対して実行することにより、第1データD1に含まれる全ての第1位置情報に対して、データのクラスタリングを実行できる。
1 移動体システム
11 本体
12a、12b、12c、12d 車輪
13 移動体制御部
14a、14b、14c、14d 物体検出センサ
141 出力部
143−1〜143−n 検出部
145 レンズ
15 制御部
151 記憶部
152 データ取得部
153 物体情報確定部
1531 投影像データ抽出部
1533 確定部
154 実空間データ生成部
155 実空間データ出力部
D1 第1データ
D2、D2' 投影像データ
DS 検出面
Lm 測定光
Lr 反射光
O 物体
VD 実空間データ
W 検出信号波形
Claims (9)
- 物体に向けて第1信号を出力する出力部と、
それぞれが、前記第1信号が前記物体にて反射されることにより発生する第2信号を、観測している領域に存在する物体までの距離および当該物体の形状を表す信号として検出する複数の検出部と、
前記第2信号の強度の時間的変化として表される検出信号波形を取得するデータ取得部と、
前記検出信号波形に基づいて、任意の2以上の検出部が同じ物体に対応するか、または、異なる物体に対応するか、のいずれであるかを判定することにより、物体の存在範囲を確定する一方、1つの前記検出信号波形に強度の極大が複数存在する場合、対応する前記検出部からの距離が異なる複数の物体が存在していると確定する物体情報確定部と、
を備え、
前記物体情報確定部は、前記任意の2以上の検出部にて検出した前記検出信号波形の強度が前記検出部の検出面と平行に配置された物体から反射されることで発生する第2信号の立ち上がりから立ち下がりまでの時間よりも長時間にわたり一定であるか、又は、前記任意の2以上の検出部にて検出した前記検出信号波形が前記長時間にわたり強度が変化することで極大を有しており、かつ、当該強度が前記長時間にわたり一定であるか、又は、前記長時間にわたり強度が変化することで極大を有する検出信号波形が発生する時間帯の少なくとも一部が重なっている場合に、前記任意の2以上の検出部は同じ物体に対応すると判定する、物体検出装置。 - 物体に向けて第1信号を出力する出力部と、
それぞれが、前記第1信号が前記物体にて反射されることにより発生する第2信号を、観測している領域に存在する物体までの距離および当該物体の形状を表す信号として検出する複数の検出部と、
前記第2信号の強度の時間的変化として表される検出信号波形を取得するデータ取得部と、
前記検出信号波形に基づいて、任意の2以上の検出部が同じ物体に対応するか、または、異なる物体に対応するか、のいずれであるかを判定することにより、物体の存在範囲を確定する一方、1つの前記検出信号波形に強度の極大が複数存在する場合、対応する前記検出部からの距離が異なる複数の物体が存在していると確定する物体情報確定部と、
を備え、
前記物体情報確定部は、前記任意の2以上の検出部について、それぞれの検出信号波形を加算することにより、前記検出部の検出面と平行に配置された物体から反射されることで発生する第2信号の立ち上がりから立ち下がりまでの時間よりも長時間にわたり強度が一定である信号波形が得られれば、前記任意の2以上の検出部は同じ物体に対応すると判定する、物体検出装置。 - 前記物体情報確定部は、1つの前記検出信号波形の強度が前記長時間にわたり一定であるか、又は、前記長時間にわたり変化することで極大を有する場合に、対応する前記検出部に対して傾斜している1の物体が存在すると確定する、請求項1又は2のいずれかに記載の物体検出装置。
- 前記任意の2以上の検出部は検出面上で互いに隣接している、請求項1〜3のいずれかに記載の物体検出装置。
- 前記物体情報確定部は、前記検出信号波形の形状パターンに基づいて、前記任意の2以上の検出部が同じ物体に対応するか、または、異なる物体に対応するか、のいずれであるかを判定し、
前記検出信号波形にエッジが発生する時刻に基づいて前記検出部と前記物体の間の距離を算出する、請求項1〜4のいずれかに記載の物体検出装置。 - 複数の検出部を備える物体検出装置における物体検出方法であって、
物体に向けて第1信号を出力するステップと、
前記第1信号が前記物体にて反射されることにより発生する第2信号を、前記複数の検出部により、観測している領域に存在する物体までの距離および物体の形状を表す信号として検出するステップと、
前記第2信号の強度の時間的変化として表される検出信号波形を取得するステップと、
前記検出信号波形に基づいて、任意の2以上の検出部が同じ物体に対応するか、または、異なる物体に対応するか、のいずれであるかを判定することにより、物体の存在範囲を確定するステップと、を含み、
前記物体の存在を確定するステップは、1つの前記検出信号波形に強度の極大が複数存在する場合、対応する前記検出部からの距離が異なる複数の物体が存在していると確定するステップを含み、
前記物体の存在を確定するステップは、前記任意の2以上の検出部にて検出した前記検出信号波形の強度が前記検出部の検出面と平行に配置された物体から反射されることで発生する第2信号の立ち上がりから立ち下がりまでの時間よりも長時間にわたり一定であるか、又は、前記任意の2以上の検出部にて検出した前記検出信号波形が前記長時間にわたり強度が変化することで極大を有しており、かつ、当該強度が前記長時間にわたり一定であるか、又は、前記長時間にわたり強度が変化することで極大を有する検出信号波形が発生する時間帯の少なくとも一部が重なっている場合に、前記任意の2以上の検出部は同じ物体に対応すると判定するステップを含む、物体検出方法。 - 複数の検出部を備える物体検出装置における物体検出方法であって、
物体に向けて第1信号を出力するステップと、
前記第1信号が前記物体にて反射されることにより発生する第2信号を、前記複数の検出部により、観測している領域に存在する物体までの距離および物体の形状を表す信号として検出するステップと、
前記第2信号の強度の時間的変化として表される検出信号波形を取得するステップと、
前記検出信号波形に基づいて、任意の2以上の検出部が同じ物体に対応するか、または、異なる物体に対応するか、のいずれであるかを判定することにより、物体の存在範囲を確定するステップと、を含み、
前記物体の存在を確定するステップは、1つの前記検出信号波形に強度の極大が複数存在する場合、対応する前記検出部からの距離が異なる複数の物体が存在していると確定するステップを含み、
前記物体の存在を確定するステップは、前記任意の2以上の検出部について、それぞれの検出信号波形を加算することにより、前記検出部の検出面と平行に配置された物体から反射されることで発生する第2信号の立ち上がりから立ち下がりまでの時間よりも長時間にわたり強度が一定である信号波形が得られれば、前記任意の2以上の検出部は同じ物体に対応すると判定するステップを含む、物体検出方法。 - 前記物体の存在を確定するステップは、1つの前記検出信号波形の強度が前記長時間にわたり一定であるか、又は、前記長時間にわたり変化することで極大を有する場合に、対応する前記検出部に対して傾斜している1の物体が存在すると確定するステップを含む、請求項6又は7に記載の物体検出方法。
- 請求項6〜8のいずれかに記載の物体検出方法を、コンピュータに実行させるプログラム。
Priority Applications (6)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016050942A JP6672915B2 (ja) | 2016-03-15 | 2016-03-15 | 物体検出装置、物体検出方法、及び、プログラム |
CN201680046921.9A CN107923978B (zh) | 2016-03-15 | 2016-12-06 | 物体检测装置、物体检测方法及记录媒体 |
PCT/JP2016/086219 WO2017158949A1 (ja) | 2016-03-15 | 2016-12-06 | 物体検出装置、物体検出方法、及び、プログラム |
KR1020187004094A KR20180116212A (ko) | 2016-03-15 | 2016-12-06 | 물체 검출 장치, 물체 검출 방법, 및 프로그램 |
US15/751,152 US10656270B2 (en) | 2016-03-15 | 2016-12-06 | Object detection device, object detection method, and program |
EP16894566.5A EP3432033B1 (en) | 2016-03-15 | 2016-12-06 | Object detection device, object detection method, and program |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016050942A JP6672915B2 (ja) | 2016-03-15 | 2016-03-15 | 物体検出装置、物体検出方法、及び、プログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2017166907A JP2017166907A (ja) | 2017-09-21 |
JP6672915B2 true JP6672915B2 (ja) | 2020-03-25 |
Family
ID=59852187
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2016050942A Expired - Fee Related JP6672915B2 (ja) | 2016-03-15 | 2016-03-15 | 物体検出装置、物体検出方法、及び、プログラム |
Country Status (6)
Country | Link |
---|---|
US (1) | US10656270B2 (ja) |
EP (1) | EP3432033B1 (ja) |
JP (1) | JP6672915B2 (ja) |
KR (1) | KR20180116212A (ja) |
CN (1) | CN107923978B (ja) |
WO (1) | WO2017158949A1 (ja) |
Families Citing this family (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108766005A (zh) * | 2018-06-08 | 2018-11-06 | 北京洪泰同创信息技术有限公司 | 交通工具的控制方法、装置及系统 |
JP7059956B2 (ja) * | 2019-02-08 | 2022-04-26 | コベルコ建機株式会社 | 建設機械の障害物検出装置 |
CN109917418B (zh) * | 2019-03-28 | 2023-04-07 | 安徽理工大学 | 一种激光雷达无反射区域的测量方法 |
JP7379021B2 (ja) | 2019-08-29 | 2023-11-14 | 株式会社東芝 | 距離計測装置、距離計測方法、及び速度計測装置 |
CN115436899A (zh) * | 2022-08-31 | 2022-12-06 | 中国第一汽车股份有限公司 | 毫米波雷达探测数据的处理方法、装置、设备和存储介质 |
Family Cites Families (20)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3630077B2 (ja) * | 2000-06-09 | 2005-03-16 | 日産自動車株式会社 | 車両用レーダの中心軸検出方法および装置 |
JP2002311138A (ja) * | 2001-04-06 | 2002-10-23 | Mitsubishi Electric Corp | 車両用測距装置 |
JP2003307603A (ja) * | 2002-02-15 | 2003-10-31 | Omron Corp | 光学素子及び当該素子を用いた光学部品 |
JP3636150B2 (ja) * | 2002-03-12 | 2005-04-06 | 日産自動車株式会社 | 走路上反射物の物体種類判定方法 |
US8009871B2 (en) * | 2005-02-08 | 2011-08-30 | Microsoft Corporation | Method and system to segment depth images and to detect shapes in three-dimensionally acquired data |
US7640122B2 (en) * | 2007-11-07 | 2009-12-29 | Institut National D'optique | Digital signal processing in optical systems used for ranging applications |
JP5710109B2 (ja) * | 2009-07-10 | 2015-04-30 | 日本信号株式会社 | 光測距装置 |
JP5483961B2 (ja) * | 2009-09-02 | 2014-05-07 | キヤノン株式会社 | 画像処理装置、被写体判別方法、プログラム及び記憶媒体 |
WO2011077400A2 (en) * | 2009-12-22 | 2011-06-30 | Leddartech Inc. | Active 3d monitoring system for traffic detection |
JP4880805B2 (ja) * | 2010-03-03 | 2012-02-22 | パナソニック株式会社 | 物体位置推定装置、物体位置推定方法、及び、物体位置推定プログラム |
WO2013128427A1 (en) * | 2012-03-02 | 2013-09-06 | Leddartech Inc. | System and method for multipurpose traffic detection and characterization |
JP5949162B2 (ja) * | 2012-05-28 | 2016-07-06 | 株式会社デンソー | 物体検知装置 |
CN102968817A (zh) * | 2012-10-10 | 2013-03-13 | 韩晓刚 | 一种双摄像头三维电子眼 |
JP2014092434A (ja) * | 2012-11-02 | 2014-05-19 | Denso Corp | 物標検出装置、及び、当該装置を用いた接触回避システム |
JP6035540B2 (ja) | 2012-12-21 | 2016-11-30 | 奥野製薬工業株式会社 | 導電性皮膜形成浴 |
JP5979020B2 (ja) * | 2013-01-23 | 2016-08-24 | 株式会社デンソー | 物体認識装置 |
US9268012B2 (en) * | 2013-07-12 | 2016-02-23 | Princeton Optronics Inc. | 2-D planar VCSEL source for 3-D imaging |
CN103364790B (zh) * | 2013-07-18 | 2015-09-02 | 武汉海达数云技术有限公司 | 一种基于波形时域配准分析的脉冲激光测距系统测距的方法 |
KR101480651B1 (ko) * | 2013-12-09 | 2015-01-09 | 현대자동차주식회사 | 오브젝트 처리 방법 및 이를 지원하는 차량 |
CN104700624B (zh) * | 2015-03-16 | 2017-07-07 | 电子科技大学 | 基于相敏光时域反射仪的车流量在线监测系统的监测方法 |
-
2016
- 2016-03-15 JP JP2016050942A patent/JP6672915B2/ja not_active Expired - Fee Related
- 2016-12-06 EP EP16894566.5A patent/EP3432033B1/en active Active
- 2016-12-06 WO PCT/JP2016/086219 patent/WO2017158949A1/ja active Application Filing
- 2016-12-06 KR KR1020187004094A patent/KR20180116212A/ko not_active Application Discontinuation
- 2016-12-06 US US15/751,152 patent/US10656270B2/en active Active
- 2016-12-06 CN CN201680046921.9A patent/CN107923978B/zh active Active
Also Published As
Publication number | Publication date |
---|---|
JP2017166907A (ja) | 2017-09-21 |
KR20180116212A (ko) | 2018-10-24 |
EP3432033B1 (en) | 2020-12-02 |
US20180239020A1 (en) | 2018-08-23 |
EP3432033A1 (en) | 2019-01-23 |
CN107923978A (zh) | 2018-04-17 |
US10656270B2 (en) | 2020-05-19 |
EP3432033A4 (en) | 2019-11-27 |
CN107923978B (zh) | 2021-07-23 |
WO2017158949A1 (ja) | 2017-09-21 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6672915B2 (ja) | 物体検出装置、物体検出方法、及び、プログラム | |
JP4760272B2 (ja) | 車両周辺監視装置及びセンサユニット | |
US9046599B2 (en) | Object detection apparatus and method | |
JP2020164162A (ja) | 車両状態表示システム | |
EP3432259B1 (en) | Object detection device, object detection method, and program | |
WO2018043028A1 (ja) | 周辺監視装置及び周辺監視方法 | |
JP2017166866A (ja) | 路面形状測定装置、測定方法、及び、プログラム | |
JP2017156306A (ja) | 距離センサ、走行体、ロボット及び3次元計測装置 | |
JP6656359B2 (ja) | 駐車支援用表示制御装置および駐車支援用表示制御方法 | |
JP2019064431A (ja) | 駐車支援装置 | |
CN114026462A (zh) | 电子设备及其控制方法 | |
JP6186863B2 (ja) | 測距装置及びプログラム | |
JP2017142171A (ja) | 物体検知装置 | |
WO2017158951A1 (ja) | 物体検知システム、異常判定方法、及びプログラム | |
JP2018179782A (ja) | 障害物検知システム | |
US10921119B2 (en) | Three dimensional image measurement system | |
JP6967846B2 (ja) | 物体検出方法及び物体検出装置 | |
KR102288635B1 (ko) | 자율 이동 로봇의 장애물 감지 장치 | |
US20230341556A1 (en) | Distance measurement sensor, signal processing method, and distance measurement module | |
JP7251328B2 (ja) | 物体認識装置および物体認識方法 | |
JP2011177334A (ja) | 段差検知装置およびこれを備えた電動車両 | |
JP7471927B2 (ja) | 障害物検出装置、車両、障害物検出システム、及び障害物検出方法 | |
WO2021181841A1 (ja) | 測距装置 | |
JP2021015558A (ja) | 3次元データ分析装置および3次元データ分析方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20171023 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20180522 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20180720 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20181225 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20190222 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20190702 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20190820 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20200204 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20200217 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6672915 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
LAPS | Cancellation because of no payment of annual fees |