JP6672915B2 - 物体検出装置、物体検出方法、及び、プログラム - Google Patents

物体検出装置、物体検出方法、及び、プログラム Download PDF

Info

Publication number
JP6672915B2
JP6672915B2 JP2016050942A JP2016050942A JP6672915B2 JP 6672915 B2 JP6672915 B2 JP 6672915B2 JP 2016050942 A JP2016050942 A JP 2016050942A JP 2016050942 A JP2016050942 A JP 2016050942A JP 6672915 B2 JP6672915 B2 JP 6672915B2
Authority
JP
Japan
Prior art keywords
detection
signal waveform
detection signal
time
unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2016050942A
Other languages
English (en)
Other versions
JP2017166907A (ja
Inventor
由紀子 柳川
由紀子 柳川
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Omron Corp
Original Assignee
Omron Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Omron Corp filed Critical Omron Corp
Priority to JP2016050942A priority Critical patent/JP6672915B2/ja
Priority to CN201680046921.9A priority patent/CN107923978B/zh
Priority to PCT/JP2016/086219 priority patent/WO2017158949A1/ja
Priority to KR1020187004094A priority patent/KR20180116212A/ko
Priority to US15/751,152 priority patent/US10656270B2/en
Priority to EP16894566.5A priority patent/EP3432033B1/en
Publication of JP2017166907A publication Critical patent/JP2017166907A/ja
Application granted granted Critical
Publication of JP6672915B2 publication Critical patent/JP6672915B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S17/00Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
    • G01S17/02Systems using the reflection of electromagnetic waves other than radio waves
    • G01S17/06Systems determining position data of a target
    • G01S17/08Systems determining position data of a target for measuring distance only
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S17/00Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
    • G01S17/87Combinations of systems using electromagnetic waves other than radio waves
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S17/00Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
    • G01S17/88Lidar systems specially adapted for specific applications
    • G01S17/89Lidar systems specially adapted for specific applications for mapping or imaging
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S17/00Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
    • G01S17/88Lidar systems specially adapted for specific applications
    • G01S17/93Lidar systems specially adapted for specific applications for anti-collision purposes
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S17/00Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
    • G01S17/88Lidar systems specially adapted for specific applications
    • G01S17/93Lidar systems specially adapted for specific applications for anti-collision purposes
    • G01S17/931Lidar systems specially adapted for specific applications for anti-collision purposes of land vehicles
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S7/00Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
    • G01S7/48Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S17/00
    • G01S7/4802Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S17/00 using analysis of echo signal for target characterisation; Target signature; Target cross-section
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/10Image acquisition
    • G06V10/12Details of acquisition arrangements; Constructional details thereof
    • G06V10/14Optical characteristics of the device performing the acquisition or on the illumination arrangements
    • G06V10/143Sensing or illuminating at different wavelengths
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/10Image acquisition
    • G06V10/12Details of acquisition arrangements; Constructional details thereof
    • G06V10/14Optical characteristics of the device performing the acquisition or on the illumination arrangements
    • G06V10/145Illumination specially adapted for pattern recognition, e.g. using gratings
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/56Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
    • G06V20/58Recognition of moving objects or obstacles, e.g. vehicles or pedestrians; Recognition of traffic objects, e.g. traffic signs, traffic lights or roads
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/16Anti-collision systems
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/16Anti-collision systems
    • G08G1/167Driving aids for lane monitoring, lane changing, e.g. blind spot detection
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S7/00Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
    • G01S7/02Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S13/00
    • G01S7/41Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S13/00 using analysis of echo signal for target characterisation; Target signature; Target cross-section
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/23Clustering techniques
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/16Anti-collision systems
    • G08G1/166Anti-collision systems for active traffic, e.g. moving vehicles, pedestrians, bikes

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Electromagnetism (AREA)
  • Remote Sensing (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Artificial Intelligence (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Optical Radar Systems And Details Thereof (AREA)
  • Traffic Control Systems (AREA)
  • Geophysics And Detection Of Objects (AREA)
  • Length Measuring Devices By Optical Means (AREA)

Description

本発明は、周囲に存在する物体を認識して所定の処理を実行する物体検出装置に関する。
従来、車両などの移動体の周辺の障害物を認識し、移動体を自動的又は半自動的に移動させるシステムが知られている。例えば、障害物と移動体とが近接した場合に、移動体の操作者に代わって当該移動体のブレーキを自動的に作動させる自動緊急ブレーキ等の先進運転支援システム(Advanced Driver Assistance System、ADAS)が知られている。上記のシステムは、対向車、歩行者等の障害物を検知するセンサから得られた情報を用いて、制御対象の移動体と上記の障害物との間の相対的な位置関係を算出し、当該位置関係に基づいて移動体を制御している。
上記のシステムでは、一般的には、赤外光などの光を用いて、当該光が投光されて、物体に反射されて、戻ってくるまでの時間に基づいて、当該物体と移動体との間の距離を測定している。このような距離を測定するセンサは、物体の形状を認識できる程度の情報を得るために、一般的には、アレイ状に配置された複数の光の検出素子を有している。
また、上記のセンサによって、検出した物体を所定の平面座標に投影する二次元座標の集合体としてのデータが得られる。当該二次元座標のそれぞれには、光を出力してから当該光が物体に反射されて戻ってくるまでの時間が奥行きを示すデータとして関連付けられている(このようなデータを「距離画像」と呼ぶ)。
上記のシステムにおいて移動体を的確に制御するためには、距離画像から、センサにより検出された物体を認識し、さらに、当該物体から移動体までの距離を算出する必要がある。このような目的のため、特許文献1には、距離画像から、奥行きがある三次元的な像と、当該像の形状とを検出する方法が開示されている。当該方法では、距離画像において、奥行きを示すデータが所定の範囲内にある座標値の集合体が1つの物体を形成しているとして、距離画像に含まれる物体を認識している。
米国特許第8009871号明細書
上記の距離画像から物体を認識する方法においては、距離画像に含まれる1画素単位(センサの検出素子単位)での物体の認識が行われている。そのため、物体の境界の検出精度は、センサに備わる検出素子の集積度に依存する。また、奥行きを示すデータの値が近い値にて異なっている場合には、複数の物体が異なる奥行き位置に配置されているのか、それとも、連続して一つの物体が存在しているのかを、明確に確定できなかった。
本発明の課題は、周囲に存在する物体を認識して所定の処理を実行する物体検出装置において、センサが有する検出素子の集積度などに依存しない物体の位置や配置状態を検出することにある。
以下に、課題を解決するための手段として複数の態様を説明する。これら態様は、必要に応じて任意に組み合せることができる。
本発明の一見地に係る物体検出装置は、出力部と、複数の検出部と、データ取得部と、物体情報確定部と、を備える。出力部は、物体に向けて第1信号を出力する。複数の検出部のそれぞれは、第2信号を、観測している領域に存在する物体までの距離および物体の形状を表す信号として検出する。第2信号は、第1信号が物体にて反射されることにより発生する信号である。データ取得部は、第2信号の強度の時間的変化として表される検出信号波形を取得する。物体情報確定部は、検出信号波形に基づいて、任意の2以上の検出部が同じ物体に対応するか、または、異なる物体に対応するか、のいずれであるかを判定することにより、物体の存在範囲を確定する。
上記の物体検出装置では、まず、出力部が第1信号を出力し、複数の検出部のそれぞれが、当該第1信号が物体にて反射されて発生する第2信号を、観測している領域に存在する物体までの距離および当該物体の形状を表す信号として検出する。このとき、データ取得部は、第2信号の強度の時間的変化を表す検出信号波形を取得する。検出信号波形を取得後、物体情報確定部が、検出信号波形に基づいて、任意の2以上の検出部が同じ物体に対応するか、または、異なる物体に対応するか、のいずれであるかを判定することにより、物体の存在範囲を確定する。
上記の物体検出装置において、物体の配置状態を確定するために用いられる検出信号波形は、第2信号の強度の時間的変化という連続的な情報である。これにより、物体検出装置は、検出部の集積度などに依存することなく、検出部にて検出された物体の距離と配置状態とを高い精度で確定できる。
上記の任意の2以上の検出部は、検出面上で互いに隣接していてもよい。これにより、任意の2以上の検出部が同じ物体に対応するか、または、異なる物体に対応するか、のいずれであるかを判定するかを、精度よく確定できる。
物体情報確定部は、検出信号波形の形状パターンに基づいて、任意の2以上の検出部が同じ物体に対応するか、または、異なる物体に対応するか、のいずれであるかを判定してもよい。物体情報確定部は、さらに、検出信号波形にエッジが発生する時刻に基づいて、検出部と物体の間の距離を算出する。
これにより、物体情報確定部は、検出信号波形の形状に基づいて、任意の2以上の検出部が、同じ物体に対応するか、または、異なる物体に対応するかを判定するとともに、検出部と当該物体との距離を算出できる。
物体情報確定部は、任意の2以上の検出部のうち、1の検出部にて検出した検出信号波形中に強度の極大が1以上存在し、他の検出部にて検出した検出信号波形中の強度の極大をとる時刻が、1以上の極大をとる時刻のいずれかと一致する場合に、任意の2以上の検出部は同じ物体に対応すると判定してもよい。
これにより、複数の検出部にて検出された物体を、同一の物体であると確定できる。
物体情報確定部は、任意の2以上の検出部にて検出した検出信号波形が、強度が長時間にわたり一定であるか、又は、時間に対して緩やかに変化する極大を有しており、かつ、当該強度が長時間にわたり一定であるか、又は、時間に対して緩やかに変化する極大を有する検出信号波形が発生する時間帯が重なっている場合に、任意の2以上の検出部は同じ物体に対応すると判定してもよい。
これにより、複数の検出部にて検出された物体を、例えば、傾斜した1つの物体と確定できる。
物体情報確定部は、任意の2以上の検出部のうち、1の検出部にて検出した検出信号波形中に強度の極大が1以上存在し、他の検出部にて検出した検出信号波形中に強度の極大をとる時刻が、当該1以上の極大をとる時刻のいずれとも一致しない場合に、任意の2以上の検出部は異なる物体に対応すると判定してもよい。
これにより、複数の検出部にて検出された物体を、異なる物体であると確定できる。
物体情報確定部は、任意の2以上の検出部にて検出した検出信号波形が、強度が長時間にわたり一定であるか、又は、時間に対して緩やかに変化する極大を有しているが、当該強度が長時間にわたり一定であるか、又は、時間に対して緩やかに変化する極大を有する検出信号波形が発生する時間帯が重ならない場合に、任意の2以上の検出部は異なる物体に対応すると判定してもよい。
これにより、例えば、複数の検出部にて検出した物体を、傾斜した異なる物体であると確定できる。
物体情報確定部は、任意の2以上の検出部について、それぞれの検出信号波形を加算することにより、強度が長時間にわたり一定である信号波形が得られれば、任意の2以上の検出部は同じ物体に対応すると判定してもよい。
これにより、複数の検出部にて検出した物体を、傾斜した1つの物体であると確定できる。
本発明の他の見地に係る物体検出方法は、複数の検出部を備える物体検出装置における物体検出方法である。物体検出方法は、以下のステップを含む。
◎物体に向けて第1信号を出力するステップ。
◎第1信号が物体にて反射されることにより発生する第2信号を、複数の検出部により、観測している領域に存在する物体までの距離および物体の形状を表す信号として検出するステップ。
◎第2信号の強度の時間的変化として表される検出信号波形を取得するステップ。
◎検出信号波形に基づいて、任意の2以上の検出部が同じ物体に対応するか、または、異なる物体に対応するか、のいずれであるかを判定することにより、物体の存在範囲を確定するステップ。
上記の物体検出方法において、物体の配置状態を確定するために用いられる検出信号波形は、第2信号の強度の時間的変化という連続的な情報である。これにより、物体検出装置は、検出部の集積度などに依存することなく、検出部にて検出された物体の距離と配置状態とを高い精度で確定できる。
本発明のさらに他の見地に係るプログラムは、上記の物体検出方法を、コンピュータに実行させるプログラムである。
周囲に存在する物体を認識して所定の処理を実行する物体検出装置において、センサが有する検出素子の集積度などに依存することなく物体の位置と配置状態とを検出できる。
移動体システムの構成を示す図。 物体検出センサの構成を示す図。 制御部の構成を示す図。 2つの物体のそれぞれが個別の場所に配置されている場合の検出信号波形の一例を示す図。 1つの物体が検出面に対して傾斜している場合の検出信号波形の一例を示す図。 物体検出装置の全体的な動作を示すフローチャート。 移動体システムの前方に存在する物体の一例を示す図。 第1クラスタリング処理により抽出された投影像データの一例を示す図。 第2クラスタリング処理の流れを示すフローチャート。 投影像データの境界を確定する際の走査方向の一例を示す図。 2つの極大値を有する1つの検出信号波形が存在する場合の境界近傍の複数の検出信号波形の一例を示す図。 異なる位置に配置された3つの物体が検出される場合の複数の検出信号波形の一例を示す図。 長時間にわたり強度が一定値となっている検出信号波形が存在する場合の一例を示す図。 第1検出信号波形の1つの極大値が現れる時刻が、第2検出信号波形の1つの極大値が現れる時刻と一致せず、複数の検出部により2つの物体が検出された場合の一例を示す図。 第1検出信号波形が発生する時間帯と、第2検出信号波形が発生する時間帯とが重ならず、複数の検出部により2つの物体が検出された場合の一例を示す図である。 長時間にわたり一定の強度を有する加算波形が算出された場合の一例を示す図。 2つの異なる波形を有する検出信号波形が境界近傍に存在する場合の一例を示す図。 第2クラスタリング処理を実行後のクラスタリング結果の一例を示す図。 移動体システムの制御の流れを示すフローチャート。 実空間データの一例を示す図。 第1データを検出信号波形にてクラスタリングする過程の一例を示す図。 第1データを検出信号波形にてクラスタリングする過程の一例を示す図。 第1データを検出信号波形にてクラスタリングする過程の一例を示す図。 第1データに対して検出信号波形によるクラスタリングを実行した結果の一例を示す図。
1.第1実施形態
(1)物体検出装置が用いられる移動体システムの構成
以下、第1実施形態に係る物体検出装置100が用いられる移動体システム1の構成について、図1を用いて説明する。図1は、物体検出装置が用いられる移動体システムの構成を示す図である。第1実施形態に係る物体検出装置100は、例えば、自動車などの移動体の運転者による操作をアシストする装置である。
移動体システム1は、本体11を備える。本体11は、移動体システム1の本体を構成する。移動体システム1は、車輪12a、12b、12c、12dを備える。車輪12a、12bは、本体11の直進方向(図1)の前部において、駆動部(例えば、エンジン及び/又は電動モータ)の出力回転軸に、減速機構を介して軸回りに回転可能に取り付けられている。一方、車輪12c、12dは、本体11の直進方向の後部に、軸回りに回転可能に取り付けられている。
移動体システム1は、移動体制御部13を備える。移動体制御部13は、車輪12a、12bに設けられたブレーキの駆動機構、駆動部の駆動機構(例えば、アクセルやモータ制御装置)、及び/又は、ハンドルの駆動機構などに接続され、これらの機構を制御可能なコンピュータシステムである。移動体制御部13は、物体Oと本体11との間の決定した位置関係に基づいて、必要に応じて移動体システム1の運転者に代わって、上記の駆動機構を制御する。
具体的には、移動体制御部13は、実空間データVD(後述)に基づき、検出された物体Oが移動体システム1(本体11)の近傍に存在するか否かを判定する。移動体制御部13は、移動体システム1の近傍に物体Oが存在すると判定した場合に、例えば、上記のブレーキシステムや駆動部などを制御して、移動体システム1(本体11)を停止させる移動体制御信号を出力する。
その他、移動体システム1の近傍に物体Oが存在すると判定した場合には、上記のステアリングシステムなどを制御して、移動体システム1に対して当該物体Oを回避させる移動体制御信号を出力してもよい。
移動体システム1は、4つの物体検出センサ14a、14b、14c、14dを備える。図1に示すように、物体検出センサ14aは、本体11の直進方向の最前部に取り付けられ、本体11の前方に存在する物体を検出する。物体検出センサ14bは、本体11の直進方向の最後部に取り付けられ、本体11の後方に存在する物体を検出する。物体検出センサ14cは、本体11の直進方向の左側面に取り付けられ、本体11の左側方に存在する物体を検出する。物体検出センサ14dは、本体11の直進方向の右側面に取り付けられ、本体11の右側方に存在する物体を検出する。
本実施形態において、物体検出センサ14a〜14dは、検出対象の物体Oまでの距離を測定するTOF(Time Of Flight)センサである。しかし、物体検出センサはこれに限られず、例えば、左右2つのカメラの画像差から距離を測定するレーザレンジファインダ(Laser Range Finder、LRF)などの他の方式の測距センサを用いてもよい。本実施形態における物体検出センサ14a〜14dの構成については、後ほど詳しく説明する。
移動体システム1は、制御部15を備える。制御部15は、CPU(Central Processing Unit)と、記憶装置(RAM(Random Access Memory)、ROM(Read Only Memory)、SSD(Solid State Drive)又はHDD(Hard Disk Drive)など)と、各種インターフェース(例えば、A/D、D/A変換器など)を備えたコンピュータシステムである。
制御部15は、物体検出センサ14a〜14dからの検出信号を入力し、当該検出信号に基づいて、周囲に存在する物体Oと本体11との間の位置関係を決定する。制御部15の構成については、後ほど詳しく説明する。
上記の構成を備えることにより、移動体システム1は、物体検出センサ14a〜14dにより検出された物体Oと本体11との位置関係に基づいて、移動体システム1の運転者による運転をアシストできる。また、本実施形態においては、物体検出センサ14a〜14dと制御部15とが、物体検出装置100を構成する。
(2)物体検出センサの構成
次に、本実施形態に係る物体検出装置100にて用いられる物体検出センサ14a〜14dの構成について、図2を用いて説明する。図2は、物体検出センサの構成を示す図である。4つの物体検出センサ14a〜14dは同じ構成を有しているので、物体検出センサ14aの構成を例にとって以下説明する。
物体検出センサ14aは、出力部141を有する。出力部141は、例えば、検出対象である物体Oに向けて、赤外領域の測定光Lm(第1信号の一例)を出力する光源である。図2に示すように、本実施形態において、出力部141は、移動体システム1が移動する空間の広い範囲に広がった測定光Lmを出力することが好ましい。なぜなら、物体検出センサ14aは、移動体システム1が移動する空間の広い範囲にある物体Oを同時に検出できるからである。
物体検出センサ14aは、複数の検出部143−1、143−2、・・・143−nを有する。複数の検出部143−1、143−2、・・・143−nのそれぞれは、例えば、検出面DS(半導体基板)上の所定の位置に配置され、測定光Lmが物体Oにて反射されることにより発生する反射光Lr(第2信号の一例)を検出する。検出部143−1〜143−nは、例えば、電荷結合素子(Charge Coupled Device)、又は、CMOS(Complementary MOS)素子である。
また、図2に示すように、複数の検出部143−1〜143−nは、検出面DS上の上下方向及び左右方向に配置されてアレイを形成している。これにより、複数の検出部143−1〜143−nは、検出面DS上に、CCDイメージセンサ又はCMOSイメージセンサを形成できる。
複数の検出部143−1〜143−nのそれぞれには、当該検出部と外部の制御部15とを接続/切断するためのスイッチング素子(例えば、MOS−FET)が接続されている。また、スイッチング素子にはアドレス線が接続されており、アドレス線に信号が印加されたときに、当該スイッチング素子はONされ、ONされたスイッチング素子に接続された検出部と、制御部15とが信号送受信可能となる。
物体検出センサ14aは、レンズ145を有している。レンズ145は、反射光Lrを、検出面DSのうち複数の検出部143−1〜143−nが形成された領域に集光する。これにより、実空間にある物体Oの像を、複数の検出部143−1〜143−nが形成された領域に結像できる。予めキャリブレーションを行うことにより、複数の検出部143−1〜143−nと実空間領域は対応付けされる。
上記の構成を有することにより、物体検出センサ14aは、実空間にある物体Oを、検出部143−1〜143−nに対応付けて、所定の座標上に投影して、距離データを取得できる。すなわち、検出部143−1〜143−nのそれぞれは、測定光Lmが物体Oにて反射されることにより発生する反射光Lrを、観測している領域に存在する物体Oまでの距離および物体Oの形状を表す信号として検出できる。
(3)制御部の構成
以下、本実施形態に係る物体検出装置100の制御部15の構成を、図3を用いて説明する。図3は、制御部の構成を示す図である。以下に説明する制御部15の各要素の機能の一部又は全部は、制御部15を構成するコンピュータシステムにて実行可能なプログラムとして実現されていてもよい。このとき、当該プログラムは、コンピュータシステムの記憶装置に形成された記憶領域に記憶されていてもよい。また、制御部15の各要素の機能の一部又は全部は、カスタムICなどによりハードウェア的に実現されていてもよい。
制御部15は、記憶部151を有する。記憶部151は、各種データを記憶する、例えば、コンピュータシステムの記憶装置に設けられた記憶領域の一部である。
制御部15は、データ取得部152を有する。データ取得部152は、反射光Lrの強度の時間的変化として表される検出信号波形を、第1データD1として生成する。第1データD1は、各検出部143−1〜143−nの検出面DSにおける配置位置を所定の座標(第1座標と呼ぶ)に投影した座標値と、当該各検出部における反射光Lrの強度の時間的変化を表す検出信号波形と、が関連付けられた複数の第1位置情報の集合体である。
以下、物体検出センサ14aの第1データD1を取得する場合を例に説明する。データ取得部152は、最初に、1番目の検出部143−1に対応するアドレス線に、上記の検出信号波形を取得できる以上の所定の時間だけ印加することで、1番目の検出部143−1とデータ取得部152とを当該所定の時間接続する。
検出部143−1とデータ取得部152とを接続している間、データ取得部152は、当該所定の時間よりも短い時間間隔にて、検出部143−1が反射光Lrを検出したか否かを示す信号(電圧信号又は電流信号)を入力する。この結果、データ取得部152は、検出部143−1が反射光Lrを検出したか否かを示す信号の強度(反射光Lrの強度に対応)の時間的変化である検出信号波形を取得できる。
なお、反射光Lrが検出されなかった場合には、検出部143−1からの信号の入力がないので、検出信号波形は0に設定される。
データ取得部152は、信号を印加するアドレス線を順次変更することにより、上記の工程を他の全ての検出部143−2〜143−nに対して実行して、n個の検出信号波形W1、W2、・・・Wnを得る。
検出信号波形を取得後、データ取得部152は、検出部143−1〜143−nの検出面DSにおける配置位置を第1座標に投影した座標値(x1,y1)、(x2,y2)、・・・(xn,yn)と、各検出部にて得られた対応する検出信号波形W1〜Wnと、を関連付けて、第1位置情報(x1,y1,W1)、(x2,y2,W2)、・・・(xn,yn,Wn)の集合体として、第1データD1を生成する。
制御部15は、物体情報確定部153を有する。物体情報確定部153は、第1データD1に含まれる検出信号波形W1〜Wnに基づいて、検出部143−1〜143−nと物体Oとの間の距離と、検出部143−1〜143−nに対する物体Oの配置状態とを確定する。
例えば、図4Aに示すように、検出信号波形Wm(検出部143−mにて取得された検出信号波形)が、反射光Lrの強度について2つの極大値P1、P2を時刻t1、t2において有する場合、物体情報確定部153は、反射光Lrが異なる距離を有する2箇所から発生したと確定する。すなわち、出力部141から測定光Lmを出力した時刻を0として、検出部143−mにて検出された物体O1、O2が、それぞれ、距離c*t1/2(c:光速)の位置及び距離c*t2/2の位置に、検出面DSと平行に配置されていると確定する。図4Aは、2つの物体のそれぞれが個別の場所に配置されている場合の検出信号波形の一例を示す図である。
また、物体情報確定部153は、2つの極大値P1、P2を有する検出信号波形が出現する第1座標上の座標値に対応する実空間の位置に、2つの物体O1の境界が存在し、その後方にさらに物体O2が存在すると確定する。
このように、検出信号波形Wm中に反射光Lrの強度の極大が複数存在する場合に、検出部143−mからの距離が異なる複数の物体が存在していると確定することにより、検出部143−1〜143−nの集積度などに依存することなく、複数の物体Oの境界を高精度に確定できる。
一方、例えば、図4Bに示すように、検出信号波形Wmが、反射光Lrの強度が長時間にわたり実質的に一定であるか、又は、時間に対して緩やかに変化する極大を有する波形である場合、物体情報確定部153は、当該反射光Lrを発生した物体O3の反射面と検出面DSとの間の距離が連続的に変化していると確定する。すなわち、検出部143−mにて検出された1つの物体O3が、検出面DSに対して傾斜していると確定する。図4Bは、1つの物体が検出面に対して傾斜している場合の検出信号波形の一例を示す図である。
このように、検出信号波形Wmが、反射光Lrの強度が長時間にわたり一定であるか、又は、時間に対して緩やかに変化する極大を有する場合に、検出部143−mに対して傾斜している物体が存在すると確定することにより、1つの物体O3が検出部143−1〜143−n(検出面DS)に対して傾斜して配置されていることを、検出部143−1〜143−nの集積度などに依存することなく、高精度に確定できる。
本実施形態において、物体情報確定部153は、物体が複数の検出部143−1〜143−nにより検出されている場合に、上記の検出信号波形の特性を用いて、隣接した物体間の境界を確定する。
具体的には、物体情報確定部153は、投影像データ抽出部1531を有する。投影像データ抽出部1531は、第1データD1から、検出信号波形に示される距離が所定の範囲内にある複数の第1位置情報を抽出し、投影像データD2を生成する。
本実施形態において、投影像データ抽出部1531は、第1データD1から、所定の中心時刻から所定の値だけ早い又は遅い範囲内の時刻において0でない強度を有する検出信号波形が関連付けられている第1位置情報群を、第2位置情報として抽出することで、投影像データD2を生成する。このような、検出部143−1〜143−n(物体検出センサ14a)から物体までの距離に基づいた投影像データの抽出処理を、「第1クラスタリング処理」と呼ぶことにする。
物体情報確定部153は、確定部1533を有する。確定部1533は、上記の検出信号波形の特性を用いて、投影像データD2の境界を確定する。具体的には、確定部1533は、まず、2つの投影像データ(第1投影像データ、及び、第2投影像データと呼ぶことにする)を横切る線上に存在する第1検出信号波形を第1投影像データから抽出し、当該線上に存在する第2検出信号波形を第2投影像データから抽出する。このようにして、確定部1533は、第1投影像データ及び第2投影像データに対応する任意の2以上の検出部を選択できる。なぜなら、投影像データD2(第1データD1)に含まれる画素のそれぞれは、1つの検出部に対応しているからである。
次に、確定部1533は、抽出した第1検出信号波形と第2検出信号波形との比較に基づいて、当該隣接した2つの投影像データの境界を確定する。すなわち、第1検出信号波形と第2検出信号波形との関係に基づいて、確定部1533は、上記にて選択された2以上の検出部が、同じ物体に対応するか、または、異なる物体に対応するかを判定することにより、物体Oの存在範囲を確定する。このような、検出信号波形の比較に基づいた投影像データの境界の確定処理を「第2クラスタリング処理」と呼ぶことにする。
確定部1533にて実行される第2クラスタリング処理については、後ほど詳しく説明する。
上記の構成を有することにより、物体情報確定部153は、検出面DSが複数の検出部143−1〜143−nを有する場合において、第1物体と第2物体の位置関係(2つの物体の配置位置や配置状態)を、複数の検出部143−1〜143−nの集積度などに依存することなく高い精度で確定できる。
制御部15は、実空間データ生成部154を有する。実空間データ生成部154は、第2クラスタリング処理にて生成された投影像データD2を用いて、移動体システム1が移動する実空間における検出された物体Oの配置位置を表す実空間データVDを生成する。
制御部15は、実空間データ出力部155を有する。実空間データ出力部155は、実空間データVDを移動体制御部13に出力する。
これにより、実空間データVDを受け取った移動体制御部13は、移動体システム1の近傍の物体Oなどの回避が必要な物体Oが存在すると判定した場合に、ブレーキの制動機能、動力機能、及び/又はハンドルの回転機能などを制御する移動体制御信号を出力し、必要に応じて移動体システム1の運転者に代わって、移動体システム1を制御できる。
例えば、移動体制御部13は、移動体システム1の近傍に物体Oが存在すると判定した場合に、移動体システム1(本体11)を停止させるか、又は、当該物体Oを回避する運動を移動体システム1に対して実行させる。
上記の構成を有することにより、制御部15は、物体検出センサ14aが有する複数の検出部143−1〜143−nの集積度などに依存することなく、検出部143−1〜143−nにて検出された物体の配置状態(境界)を高い精度にて確定できる。
(4)物体検出装置の動作
(4−1)物体検出装置の全体的な動作
以下、移動体システム1に備わった物体検出装置100の動作について説明する。まず、物体検出装置100の全体的な動作について、図5を用いて説明する。図5は、物体検出装置の全体的な動作を示すフローチャートである。なお、以下の説明においては、4つの物体検出センサ14a〜14dは同じ構成を有しているので、物体検出センサ14aの動作を例にとって以下説明する。
移動体システム1が実空間を移動中の所定の時間毎に、データ取得部152は、物体検出センサ14aの出力部141に対して、測定光Lmを出力するよう指令する(ステップS1)。
測定光Lmの出力とほぼ同時に、データ取得部152は、物体検出センサ14aの各検出部に対応するアドレス線に順次信号を印加し、当該各検出部から反射光Lrの強度を示す信号を所定の時間だけ取得することにより、各検出部にて検出された反射光Lrの強度の時間的変化を検出信号波形として取得する(ステップS2)。
その後、データ取得部152は、物体検出センサ14aに対して、取得した検出信号波形と第1座標上の各検出部の座標値とを関連付けて複数の第1位置情報の集合体を生成し、第1データD1として記憶部151に記憶する(ステップS3)。
第1データD1を生成後、投影像データ抽出部1531が、第1クラスタリング処理により、第1データD1から、所定の中心時刻から所定の値だけ早い又は遅い範囲内の時刻において0でない強度を有する検出信号波形Wmが関連付けられている第1位置情報群を、第2位置情報として抽出して、投影像データD2を生成する(ステップS4)。
例えば、物体検出センサ14aが測定光Lmを出力した瞬間に、移動体システム1の直進方向の前方に、図6に示すような、物体O4(人の形状をした物体)と、物体O5(自動車の形状をした物体)と、物体O6(平面形状の物体)が存在したとする。図6は、移動体システムの前方に存在する物体の一例を示す図である。
この場合、上記のステップS1〜S4を実行することにより、物体検出センサ14aについては、例えば、図7に示すような、物体検出センサ14aからの距離に基づき、複数の投影像データD2−1〜D2−6が得られたとする。
第1クラスタリング処理により、図7に示すように、物体O4及び物体O5は、それぞれ、投影像データD2−1及びD2−2にてクラスタリングされている。ただし、投影像データD2−1と投影像データD2−2との間に重複部分があり、重複部分での物体O4と物体O5との境界が確定されていない。また、投影像データD2−2と投影像データD2−6とは重複部分があり、重複部分での境界が確定されていない。
一方、物体O6は、第1クラスタリング処理により、4つの投影像データD2−3〜D2−6とクラスタリングされている。第1クラスタリング処理は、検出面DSからの距離が所定の範囲内にある物体(の部分)を表すデータを1つの投影像データとして抽出する処理である。従って、複数の投影像データD2−1〜D2−6が生成される場合には、第1クラスタリング処理では、当該複数の投影像データD2−1〜D2−6が、検出面DSからの距離方向(実空間のZ軸方向)の異なる位置に配置された複数の物体を表すのか、それとも、Z軸方向に傾斜して延びる1つの物体を表すのか、が判別できない。
従って、ステップS4における第1クラスタリング処理の実行後、確定部1533は、各投影像データD2−1〜D2−6について境界を確定するために、上記の検出信号波形の特性を用いて各投影像データD2−1〜D2−6の境界を確定する第2クラスタリング処理を実行する(ステップS5)。第2クラスタリング処理については、後ほど詳しく説明する。
第2クラスタリング処理を実行後、制御部15は、第2クラスタリング処理にて境界が確定された投影像データD2を用いて、移動体システム1の制御を実行する(ステップS6)。ステップS6において実行される移動体システム1の制御については、後ほど詳しく説明する。
上記のステップS1〜S6を実行後、移動体システム1の運転者などにより、物体検出装置100の動作を停止するよう指令されない限り(ステップS7において「No」の場合)、プロセスはステップS1に戻り、物体検出装置100は動作を継続する。
一方、移動体システム1の運転者などにより、物体検出装置100の動作を停止するよう指令された場合(ステップS7において「Yes」の場合)、物体検出装置100は動作を停止する。
上記のステップS1〜S7を実行することにより、物体検出センサ14aに備わる複数の検出部143−1〜143−nの集積度などに依存することなく、物体検出センサ14aにて検出された物体の境界を高精度に確定できる。
(4−2)第2クラスタリング処理
次に、上記のステップS5において実行される第2クラスタリング処理について、図8を用いて説明する。図8は、第2クラスタリング処理の流れを示すフローチャートである。
以下に説明する第2クラスタリング処理において、確定部1533は、本実施形態においては、投影像データD2に含まれる第2位置情報を、第1座標のx軸方向に走査することにより、投影像データD2の境界を確定していく。
具体的には、図9の点線にて示すように、投影像データD2に含まれる第2位置情報のy座標値をyiとしx座標値を正方向に変化させていく場合、まず、確定部1533は、x座標値の小さい方から順に、投影像データD2−1を第1投影像データとして選択し、投影像データD2−2を第2投影像データとして選択する。図9は、投影像データの境界を確定する際の走査方向の一例を示す図である。
第1投影像データと第2投影像データとを選択後、確定部1533は、第1投影像データから、y=yiとの関数で示される線上にある複数の第2位置情報を抽出し、当該抽出した各第2位置情報に関連付けられている検出信号波形を、第1検出信号波形として抽出する(ステップS51)。これにより、第1投影像データに含まれる検出信号波形を検出した1以上の検出部が選択される。
また、確定部1533は、第2投影像データD2−2から、y=yiとの関数で示される線上にある複数の第2位置情報を抽出し、当該抽出した各第2位置情報に関連付けられている検出信号波形を、第2検出信号波形として抽出する(ステップS52)。これにより、第2投影像データに含まれる検出信号波形を検出した1以上の検出部が選択される。
複数の第1検出信号波形と複数の第2検出信号波形とを抽出後、確定部1533は、当該複数の第1検出信号波形と複数の第2検出信号波形とを比較する(ステップS53)。
例えば、第1投影像データD2−1と第2投影像データD2−2との境界近傍V1において、第2位置情報の座標値(x1,yi)、(x2,yi)、及び(x3,yi)のそれぞれに関連付けられていた検出信号波形W(x1,yi)、W(x2,yi)、及びW(x3,yi)が、第1検出信号波形として抽出されたとする。すなわち、第1座標の座標値(x1,yi)、(x2,yi)、及び(x3,yi)に配置された3つの検出部が、それぞれ、第1検出信号波形(x1,yi)、W(x2,yi)、及びW(x3,yi)を検出したとする。
また、境界近傍V1において、第2位置情報の座標値(x4,yi)及び(x5,yi)のそれぞれに関連付けられていた検出信号波形W(x4,yi)及びW(x5,yi)が、第2検出信号波形として抽出されたとする。すなわち、第1座標の座標値(x4,yi)及び(x5,yi)に配置された2つの検出部が、それぞれ、第2検出信号波形(x4,yi)及びW(x5,yi)を検出したとする。
上記のように抽出した第1検出信号波形及び第2検出信号波形に対して、確定部1533は、第1検出信号波形及び第1検出信号波形の形状パターンに基づいて、第1検出信号波形及び第2検出信号波形を検出した任意の2以上の検出部が、同じ物体に対応するか、または、異なる物体に対応するか、のいずれであるかを判定する。 具体的には、第1検出信号波形と第2検出信号波形との比較の結果、例えば、図10Aに示すように、1つの検出部にて検出した第1検出信号波形W(x3,yi)が時刻t3及び時刻t4において2つの極大値を有する一方、他の検出部にて検出した検出信号波形が1つの極大値を有すると判定された場合(ステップS53において「Yes」の場合)、確定部1533は、第1座標の座標値(x3,yi)に、第1投影像データD2−1と第2投影像データD2−2との境界が存在すると確定する。
図10Aは、2つの極大値を有する1つの検出信号波形が存在する場合の境界近傍の複数の検出信号波形の一例を示す図である。
また、図10Aに示すように、他の検出部にて検出した第1検出信号波形W(x1,yi)及びW(x2,yi)中の強度の極大をとる時刻t3は、第1検出信号波形W(x3,yi)に含まれる2つの極大のうち1つの極大をとる時刻t3と一致している。このような場合、確定部1533は、第1検出信号波形W(x1,yi)、W(x2,yi)、及びW(x3,yi)を検出した検出部は、同じ物体O4(第1物体)に対応すると判定する。
また、同様に、他の検出部にて検出した第検出信号波形W(x4,yi)及びW(x5,yi)中の強度の極大をとる時刻t4は、第1検出信号波形W(x3,yi)に含まれる2つの極大のうち1つの極大をとる時刻t4と一致している。このような場合、確定部1533は、第1検出信号波形W(x3,yi)、第2検出信号波形W(x4,yi)、及び第2検出信号波形W(x5,yi)を検出した検出部は、同じ物体O5(第2物体)に対応すると判定する。
これにより、確定部1533は、2つの極大値(時刻t3、t4に現れる極大値)を有する検出信号波形W(x3,yi)が出現する第1座標上の座標値(x3,yi)に対応する実空間の位置に、物体O4の境界が存在し、その後方にさらに物体O5が存在すると、物体O4、O5の存在範囲を確定できる。
なお、物体検出センサ14aの1つの検出部により検出できる範囲は、一般的には広がりがある。すなわち、物体検出センサ14aが取得する波形は、x3’<x3<x3’’、かつ、yi’<yi<yi’’の領域内で検出された反射光Lrの強度を表す。
従って、本実施形態において、確定部1533は、例えば、上記の領域の中心点((x3’+x3’’)/2,(yi’+yi’’)/2)を、第1投影像データD2−1と第2投影像データD2−2との境界が存在する座標点と確定する。
上記のように境界が存在する座標点を確定後、確定部1533は、例えば、第1投影像データD2−1の第2位置情報(x3,yi,W(x3,yi))のx3を(x3’+x3’’)/2に、yiを(yi’+yi’’)/2と置き換えて、第1投影像データD2−1の境界を確定する。
また、第2投影像データD2−2に、新たな第2位置情報である((x3’+x3’’)/2,(yi’+yi’’)/2,W(x3,yi))を追加して、第2投影像データD2−2の境界を確定する(ステップS54)。
上記のように、第1検出信号波形又は第2検出信号波形のいずれか(上記の例では、第1検出信号波形W(x3,yi))が、第1物体と第2物体とに対応する2つの極大を有していれば、物体情報確定部153(確定部1533)が、第1物体(物体O4)と第2物体(物体O5)とは互いに検出部143−1〜143−nからの距離が異なる個別の物体であると確定することにより、検出部143−1〜143−nの集積度などに依存することなく、高い精度にて、第1物体と第2物体とが配置位置が異なる個別の物体であると確定できる。
なお、図10Bに示すように、他の検出部にて検出した検出信号波形(x4,yi)及びW(x5,yi)中に強度の極大をとる時刻(図10Bでは、時刻t5)が、1の検出部にて検出した検出信号波形W(x3,yi)中に存在する2つの強度の極大がとる時刻(時刻t3、t4)のいずれとも一致しない場合には、これら複数の検出部は、異なる物体に対応すると判定する。図10Bは、異なる位置に配置された3つの物体が検出される場合の複数の検出信号波形の一例を示す図である
具体的には、第1検出信号波形W(x1,yi)、W(x2,yi)、及びW(x3,yi)を検出した検出部が時刻t3に対応する距離にある1つの物体に対応し、第1検出信号波形W(x3,yi)を検出した検出部が時刻t4に対応する距離にある1つの小さな(1つの検出部のみにて検出された)物体に対応し、さらに、第検出信号波形W(x4,yi)及びW(x5,yi)を検出した検出部が時刻t5に対応する距離にある1つの物体に対応する。すなわち、上記の5つの検出部により、検出面DSからの異なる距離に配置された3つの物体の存在範囲が確定されたことになる。
一方、2つの極大値を有する検出信号波形が存在しない場合(ステップS53において「No」の場合)、確定部1533は、抽出した第1検出信号波形と第2検出信号波形とを加算して加算波形W’を算出する(ステップS55)。
例えば、投影像データD2−5(第1投影像データ)と投影像データD2−4(第2投影像データ)との境界近傍V3において、図10Cに示すように、2つの極大値を有しない長時間にわたり強度が一定値となっている第1検出信号波形及び第2検出信号波形W(x6,yi)〜W(x10,yi)が抽出され、かつ、これらの長時間にわたり強度が一定値となって検出信号波形W(x6,yi)〜W(x10,yi)が発生する時間帯が重なっているとする。また、第1クラスタリング処理によって、第1座標の座標値(x8,yi)に、投影像データD2−5と投影像データD2−4との境界が存在すると判定されているとする。図10Cは、長時間にわたり強度が一定値となっている検出信号波形が存在する場合の一例を示す図である。
図10Cに示すような第1検出信号波形及び第2検出信号波形が抽出されている場合に、当該第1検出信号波形と第2検出信号波形について、それぞれの検出信号波形を加算すると、図11に示すような、長時間にわたり一定の強度を有する加算波形W’が算出される。
図11に示すような長時間にわたり一定の強度を有する加算波形W’が算出された場合(ステップS55において「Yes」の場合)、確定部1533は、検出信号波形W(x6,yi)〜W(x10,yi)を検出した検出部は、同じ物体に対応すると判定する。すなわち、確定部1533は、第1座標の座標値(x8,yi)には、投影像データD2−5と投影像データD2−4との境界は存在せず、2つの投影像データD2−4及びD2−5が1つの物体についてのデータであると確定する。この場合、確定部1533は、例えば、2つの投影像データD2−5とD2−4とを連結(合体)して、1つの物体についての新たな1つの投影像データD2を、y=yiにおいて生成する(ステップS56)。
図11は、長時間にわたり一定の強度を有する加算波形が算出された場合の一例を示す図である。
なお、本実施形態においては、図10Cに示すような第1検出信号波形及び第2検出信号波形が、投影像データD2−4と投影像データD2−3との境界近傍V4、及び、投影像データD2−6と投影像データD2−5との境界近傍V5においても得られているので、確定部1533は、最終的に、4つの投影像データD2−3〜D2−6を連結して、物体O6について、新たな1つの投影像データD2を、y=yiにおいて生成できる。
このようにして、確定部1533は、物体O6について、その存在範囲を確定できる。
一方、長時間にわたり強度が一定となる加算波形W’が算出されない場合(ステップS55において「No」の場合)、例えば、図10Dに示すように、抽出された第1検出信号波形及び第2検出信号波形のそれぞれが1つの極大値のみを有するが、第1検出信号波形の1つの極大値が現れる時刻(時刻t3)が、第2検出信号波形の1つの極大値が現れる時刻(時刻t4)と一致しない場合、確定部1533は、第1クラスタリング処理により決定された2つの投影像データの境界をそのまま維持して、第1検出信号波形及び第2検出信号波形を検出した検出部が、2つの物体に対応すると確定する(ステップS57)。
図10Dは、第1検出信号波形の1つの極大値が現れる時刻が、第2検出信号波形の1つの極大値が現れる時刻と一致せず、複数の検出部により2つの物体が検出された場合の一例を示す図である。
また、確定部1533は、図10Eに示すように、第1検出信号波形及び第2検出信号波形が、いずれも、強度が長時間にわたり一定であるが、第1検出信号波形が発生する時間帯と第2検出信号波形が発生する時間帯とが重ならない場合にも、当該第1検出信号波形及び第2検出信号波形を検出した検出部は、異なる物体に対応すると判定する。
具体的には、図10Eにおいては、第1検出信号波形W(x8,yi)が発生する時間帯と、第2検出信号波形W(x9,yi)が発生する時間帯とが重なっていない。この場合、確定部1533は、第1検出信号波形W(x6,yi)〜W(x8,yi)を検出した検出部を実空間のZ軸方向に対して傾斜した1つの物体に対応し、第2検出信号波形W(x9,yi)及びW(x10,yi)を検出した検出部を実空間のZ軸方向に対して傾斜した他の1つの物体に対応すると、2つの物体の存在範囲を確定する。
図10Eは、第1検出信号波形が発生する時間帯と、第2検出信号波形が発生する時間帯とが重ならず、複数の検出部により2つの物体が検出された場合の一例を示す図である。
なお、例えば、投影像データD2−2(第1投影像データ)と投影像データD2−6(第2投影像データ)との境界近傍V2においては、図12に示すように、1つの極大値を時刻t4においてのみ有する2つの第1検出信号波形W(x11,yi)及びW(x12,yi)が存在し、長時間にわたり強度が一定値となっている2つの第2検出信号波形W(x14,yi)及びW(x15,yi)が存在する。また、2つの異なる波形を有する第1検出信号波形W(x13,yi)が存在する。
図12は、2つの異なる波形を有する検出信号波形が境界近傍に存在する場合の一例を示す図である。
このような場合、確定部1533は、上記のステップS51〜S57を実行することにより、第1座標の座標値(x13,yi)に、第1投影像データD2−2と第2投影像データD2−6との境界が存在すると確定し、第2投影像データD2−6にて表される物体は傾斜した物体であると確定できる。
また、例えば、境界近傍に、複数の極大値を有する複数の検出信号波形がx軸方向に沿って連続して存在している場合、又は、長時間にわたり一定値を示す複数の検出信号波形が時刻がシフトすることなく連続して存在している場合には、複数の投影像データの境界がx軸に沿って存在しているか、又は、投影像データにて表されている物体の面がx軸にほぼ平行であることが考えられる。
このような場合、確定部1533は、例えば、x軸に垂直なy軸方向に検出信号波形を走査してもよい。これにより、確定部1533は、x軸方向にほぼ平行な複数の投影像データの境界、又は、物体の傾斜を確定できる。
上記のステップS51〜S57を実行後、確定部1533は、y=yiの線上において、全ての投影像データD2−1〜D2−6の境界を確定したか否かを判断する(ステップS58)。
y=yiの線上の全てのx座標値について上記のステップS51〜S57を実行していない場合(ステップS58において「No」の場合)、y=yiの線上において境界を確定すべきx座標値が存在しているとして、第2クラスタリング処理は、ステップS51に戻る。
一方、y=yiの線上の全てのx座標値について上記のステップS51〜S57を実行した場合(ステップS58において「Yes」の場合)、確定部1533は、さらに、第1座標の全ての領域(すなわち、複数の検出部143−1〜143−n)について投影像データの境界を確定したか否かを判断する(ステップS59)。
全てのy座標値について上記のステップS51〜S57を実行していない場合(ステップS59において「No」の場合)、境界を確定すべきy座標値が存在しているとして、第2クラスタリング処理は、ステップS51に戻る。
一方、全ての取りうるy座標値について投影像データの境界を確定した場合(ステップS59において「Yes」の場合)、第2クラスタリング処理を終了する。
上記のステップS51〜S59を第2クラスタリング処理として実行することにより、上記のステップS4の第1クラスタリング処理により図7に示すようなクラスタリングがなされたとき(すなわち、1つの物体O6が複数のクラスタとしてクラスタリングされた場合)に、最終的に、図13に示すように、高い精度にて、1つの物体を1つのクラスタとして確定できる。具体的には、例えば、第2クラスタリング処理により、3つの物体O4〜O6に対して、それぞれ、3つの投影像データD2’−1〜D’2−3を生成できる。
このように、検出信号波形Wpが第2信号の強度の時間的変化という連続的な情報であることにより、検出部143−1〜143−nの集積度などに依存することなく、検出部143−1〜143−nにて検出された物体Oの距離と配置状態とを高い精度で確定できる。
図13は、第2クラスタリング処理を実行後のクラスタリング結果の一例を示す図である。
また、上記の検出信号波形を用いた第2クラスタリング処理は、第1データの位置情報単位(すなわち、検出部単位)にて決定される精度よりも高い精度にて物体の境界を決定できる。そのため、例えば、フェンスなどの細い部材にて構成されている物体(従来は、空洞又は何も存在しないものとして認識される傾向にあった)も、第2クラスタリング処理により生成された投影像データD2’においては認識可能となる。
(4−3)移動体システムの制御
次に、上記のステップS6において実行される移動体システム1の制御について、図14を用いて説明する。図14は、移動体システムの制御の流れを示すフローチャートである。以下においては、検出した物体Oと本体11との間の決定した位置関係に基づいて、移動体システム1の走行機能を制御する場合を例にとって説明する。
移動体システム1の制御を開始すると、移動体システム1が移動する実空間における物体Oの配置位置を決定するため、実空間データ生成部154が、第2クラスタリング処理にて生成された投影像データD2’−1〜D’2−3を用いて、検出された物体Oの実空間における配置位置を表す実空間データVDを生成する(ステップS61)。
具体的には、実空間データ生成部154は、投影像データD2’−1〜D’2−3に含まれる第2位置情報を実空間座標系(X−Y−Z座標)に展開することにより、実空間データVDを生成する。
投影像データのp番目の第2位置情報(xp,yp,Wp)をX−Y−Z座標に展開する場合を例にとると、実空間データ生成部154は、まず、検出信号波形Wp(1つの極大値を有する波形とする)において極大値が現れる時刻tpを算出する。次に、実空間データ生成部154は、当該時刻tpを物体Oまでの距離dp(=c*tp/2、c:光速)に変換する。次に、実空間データ生成部154は、第1座標の座標値(xp,yp)と物体Oまでの距離dpを用いて、検出部143−1〜143−nの光学的幾何条件により決定される第1座標と実空間の関係に基づき座標変換することにより、X−Y−Z座標における物体Oの座標値を(Xp,Yp,Zp)と算出できる。
なお、物体Oまでの距離を算出するための時刻としては、上記のように極大値が現れる時刻に限られず、検出信号波形Wpにエッジが発生する時刻を物体までの距離を算出するための時刻としてもよい。具体的には、例えば、検出信号波形Wpの立ち上がりタイミング、又は、立ち下がりタイミングを、物体Oまでの距離を算出するための時刻として選択できる。
一方、上記の検出信号波形Wpが時刻tp1と時刻tp2(tp1<tp2とする)において2つの極大値を有する場合(例えば、投影像データD2’−1と投影像データD2’−2の境界上の第2位置情報の場合)には、例えば、物体検出センサ14aにより近い方の投影像データD2’−1においてはdp=c*(tp1)/2とし、より遠い方の投影像データD2’−2においてはdp=c*(tp2)/2として、上記と同様にして、物体O4の境界の座標値を(Xp,Yp,Zp1)と算出し、物体O5の境界の座標値を(Xp,Yp,Zp2)と算出できる。
さらに、検出信号波形Wpが、強度が長時間にわたり一定である(または、時間に対して緩やかに変化する極大を有する)波形を有する場合には、実空間データ生成部154は、例えば、当該強度が長時間にわたり一定である波形の立ち上がり時刻(tp1’とする)と立ち下がり時刻(tp2’とする)、すなわち、検出信号波形Wpにエッジが発生する時刻とを抽出する。次に、実空間データ生成部154は、これら2つの時刻を用いて、上記と同様にして、2つの実空間の座標値(Xp,Yp,Zp1’)と、(Xp,Yp,Zp2’)とを算出する。さらにその後、実空間データ生成部154は、上記の2つの座標値を結ぶ線(X−Y平面の法線と平行な線)を、実空間の(Xp,Yp)に存在するZ軸方向の境界とできる。
その他、検出信号波形Wpが立ち上がって強度がほぼ一定値にて安定するタイミング、及び/又は、検出信号波形Wpがほぼ一定値にて安定した状態から立ち下がりを開始するタイミングを、検出信号波形Wpにエッジが発生する時刻としてもよい。
第2クラスタリング処理の実行後に生成された3つの投影像データD2’−1〜D2’−3に対して、上記の実空間の座標値の算出を実行することにより、実空間データ生成部154は、例えば、図15に示すような、各物体を実空間座標系(X−Y−Z座標系)に配置した実空間データVDを生成できる。図15は、実空間データの一例を示す図である。
図15に示すように、第2クラスタリング処理の実行後に生成された3つの投影像データD2’−1〜D2’−3を用いて実空間データVDを生成することにより、物体O4〜O6の配置位置、及び、物体O6が1つの物体としてZ方向に傾斜している様子が、実空間データVDにて反映できている。
実空間データVDを生成後、実空間データ出力部155は、生成した実空間データVDを移動体制御部13へ出力する。実空間データVDを受け取った移動体制御部13は、本体11の近傍に物体Oが存在するか否かを判定する(ステップS62)。具体的には、移動体制御部13は、実空間データVDに、本体11の座標値から所定の距離以下の範囲内に入る座標値が、実空間データVD内に存在するときに、本体11(移動体システム1)の近傍に衝突回避の必要な物体Oが存在すると判定する。
移動体システム1の近傍に衝突回避の必要な物体Oが存在すると判定された場合(ステップS62において「Yes」の場合)、移動体制御部13は、移動体制御指令を出力する(ステップS63)。移動体制御指令は、例えば、移動体システム1(本体11)を、物体Oの手前で停止させて、当該物体Oと本体11との衝突を回避するための指令である。具体的には、移動体制御部13は、ブレーキをかける指令、及び/又は、アクセル開度(あるいはエンジン及び/又は電動モータの出力制御機構)を0とする指令を、移動体制御信号として出力する。また、移動体制御部13は、本体11の近傍に存在する物体Oを回避する方向にハンドルを操舵する移動体制御指令を出力してもよい。
その他、必要に応じて、エンジン及び/又は電動モータと車輪12a、12bとの間のクラッチを切断する移動体制御信号を出力してもよい。
上記の移動体システム1の制御を必要に応じて運転者に代わって行うことにより、物体Oと本体11との衝突を回避できる。
一方、移動体システム1の近傍に物体Oが存在しないと判定された場合(ステップS62において「No」の場合)、移動体制御部13は、移動体システム1の制御を終了する。この場合には、移動体システム1は、運転者の操作に従って、移動を継続できる。
2.他の実施形態
以上、本発明の一実施形態について説明したが、本発明は上記実施形態に限定されるものではなく、発明の要旨を逸脱しない範囲で種々の変更が可能である。特に、本明細書に書かれた複数の実施形態及び変形例は必要に応じて任意に組み合せ可能である。
(A)検出信号波形についての他の実施形態
上記の第1実施形態において、検出部143−1〜143−nと物体Oとの間の距離を求めるに当たり、検出信号波形W1〜Wnの極大値を求めている。極大値を求める方法としては次のような方法も考えられる。
例えば、反射光Lrの強度の時間的変化を正規分布関数にて表現できると仮定して、反射光Lrの強度と当該反射光Lrの強度を取得した時刻とが関連付けられたデータに、正規分布関数をフィッティングさせる。このとき使用するデータは強度が0以上となっている一部の区間を抽出することが望ましい。結果として得られる中心値を極大値が現れる時刻とすればよい。また、標準偏差の大きさに基づいて極大が時間に対して緩やかに変化する極大であることを判断してもよい。
(B)第1データのクラスタリングについての他の実施形態
上記の第1実施形態においては、最初に第1データD1に対して第1位置情報に示された距離(極大値が出現する時刻)に基づく第1クラスタリング処理が実行され、次に、当該第1クラスタリング処理を実行して生成された投影像データD2について検出信号波形の特性を用いた第2クラスタリング処理を実行することにより、高精度のクラスタリングがなされた投影像データD2’が生成されていた。
しかし、これに限られず、第1クラスタリング処理を経ることなく、第1データD1に対して直接第2クラスタリング処理を実行しても、高精度のクラスタリングがなされた投影像データD2’を生成できる。
例えば、第1データD1の第1位置情報のy座標値をy=yi’に固定して、第1位置情報に関連付けられている検出信号波形をx軸方向に走査する場合を考える。このとき、図16Aのように半値幅が狭い急峻な波形を有する検出信号波形が出現した場合には、例えば、x−t座標系において、時刻tの座標値を検出信号波形において極大値が現れる時刻としたx軸に平行な直線(図16Aでは、t=t3とした直線と、t=t4とした直線)を、当該検出信号波形が現れたx座標値に対して定義する。
なお、2つの極大値が存在するx座標値においては、各極大値に対応するx軸に平行な2本の直線が定義される。
一方、図16Bに示すように、長時間にわたり強度が一定値となる波形を有する検出信号波形が出現した場合には、例えば、当該波形の強度の立ち上がり時刻と立ち下がり時刻と(すなわち、検出信号波形のエッジの時刻)を結んだx軸に垂直な直線を定義できる。または、図16Cに示すように、長時間にわたり強度が一定値となる波形の立ち上がり時刻と立ち下がり時刻の中間の時刻を直線で結ぶ直線を定義してもよい。
図16A〜図16Cは、第1データを検出信号波形にてクラスタリングする過程の一例を示す図である。
上記の図16A〜図16Cに示すようにして第1データD1をクラスタリングすると、例えば、図17の上図のような第1データD1が得られた場合には、図17の下図に示すようなクラスタリング結果がy=yi’において得られる。図17は、第1データに対して検出信号波形によるクラスタリングを実行した結果の一例を示す図である。
図17の下図に示すクラスタリング結果において、x<x1’及びx>x4’の範囲のx座標値においては検出信号波形の強度は0である。一方、x=x2’及びx3’においては、直線の切れ目が見られる。すなわち、図17に示すクラスタリング結果では、x座標値x1’〜x4’において、時刻の急激な変化が見られている。
このような急激な時刻の変化を検出(例えば、クラスタリング結果をx座標値について微分することにより検出できる)して、y=yi’については、x1’≦x≦x2’の範囲の投影像データD2’−1(投影像データ(1))、x2’≦x≦x3’の範囲の投影像データD2’−2(投影像データ(2))、及び、x3’≦x≦x4’の範囲の投影像データD2’−3(投影像データ(3))と、3つの投影像データを確定できる。
上記の操作を第1位置情報のとりうる全てのy座標値に対して実行することにより、第1データD1に含まれる全ての第1位置情報に対して、データのクラスタリングを実行できる。
上記のように、検出信号波形を用いたクラスタリングを第1データD1に対して実行しても、物体検出センサ14aの複数の検出部143−1〜143−nの集積度などに依存することなく、検出された1つの物体に対して1つの投影像データを高精度に確定できる。
本発明は、周囲に存在する物体を認識して所定の処理を実行する物体検出装置に広く適用できる。
100 物体検出装置
1 移動体システム
11 本体
12a、12b、12c、12d 車輪
13 移動体制御部
14a、14b、14c、14d 物体検出センサ
141 出力部
143−1〜143−n 検出部
145 レンズ
15 制御部
151 記憶部
152 データ取得部
153 物体情報確定部
1531 投影像データ抽出部
1533 確定部
154 実空間データ生成部
155 実空間データ出力部
D1 第1データ
D2、D2' 投影像データ
DS 検出面
Lm 測定光
Lr 反射光
O 物体
VD 実空間データ
W 検出信号波形

Claims (9)

  1. 物体に向けて第1信号を出力する出力部と、
    それぞれが、前記第1信号が前記物体にて反射されることにより発生する第2信号を、観測している領域に存在する物体までの距離および当該物体の形状を表す信号として検出する複数の検出部と、
    前記第2信号の強度の時間的変化として表される検出信号波形を取得するデータ取得部と、
    前記検出信号波形に基づいて、任意の2以上の検出部が同じ物体に対応するか、または、異なる物体に対応するか、のいずれであるかを判定することにより、物体の存在範囲を確定する一方、1つの前記検出信号波形に強度の極大が複数存在する場合、対応する前記検出部からの距離が異なる複数の物体が存在していると確定する物体情報確定部と、
    を備え、
    前記物体情報確定部は、前記任意の2以上の検出部にて検出した前記検出信号波形の強度が前記検出部の検出面と平行に配置された物体から反射されることで発生する第2信号の立ち上がりから立ち下がりまでの時間よりも長時間にわたり一定であるか、又は、前記任意の2以上の検出部にて検出した前記検出信号波形が前記長時間にわたり強度が変化することで極大を有しており、かつ、当該強度が前記長時間にわたり一定であるか、又は、前記長時間にわたり強度が変化することで極大を有する検出信号波形が発生する時間帯の少なくとも一部が重なっている場合に、前記任意の2以上の検出部は同じ物体に対応すると判定する、物体検出装置。
  2. 物体に向けて第1信号を出力する出力部と、
    それぞれが、前記第1信号が前記物体にて反射されることにより発生する第2信号を、観測している領域に存在する物体までの距離および当該物体の形状を表す信号として検出する複数の検出部と、
    前記第2信号の強度の時間的変化として表される検出信号波形を取得するデータ取得部と、
    前記検出信号波形に基づいて、任意の2以上の検出部が同じ物体に対応するか、または、異なる物体に対応するか、のいずれであるかを判定することにより、物体の存在範囲を確定する一方、1つの前記検出信号波形に強度の極大が複数存在する場合、対応する前記検出部からの距離が異なる複数の物体が存在していると確定する物体情報確定部と、
    を備え、
    前記物体情報確定部は、前記任意の2以上の検出部について、それぞれの検出信号波形を加算することにより、前記検出部の検出面と平行に配置された物体から反射されることで発生する第2信号の立ち上がりから立ち下がりまでの時間よりも長時間にわたり強度が一定である信号波形が得られれば、前記任意の2以上の検出部は同じ物体に対応すると判定する、物体検出装置。
  3. 前記物体情報確定部は、1つの前記検出信号波形の強度が前記長時間にわたり一定であるか、又は、前記長時間にわたり変化することで極大を有する場合に、対応する前記検出部に対して傾斜している1の物体が存在すると確定する、請求項1又は2のいずれかに記載の物体検出装置。
  4. 前記任意の2以上の検出部は検出面上で互いに隣接している、請求項1〜3のいずれかに記載の物体検出装置。
  5. 前記物体情報確定部は、前記検出信号波形の形状パターンに基づいて、前記任意の2以上の検出部が同じ物体に対応するか、または、異なる物体に対応するか、のいずれであるかを判定し、
    前記検出信号波形にエッジが発生する時刻に基づいて前記検出部と前記物体の間の距離を算出する、請求項1〜4のいずれかに記載の物体検出装置。
  6. 複数の検出部を備える物体検出装置における物体検出方法であって、
    物体に向けて第1信号を出力するステップと、
    前記第1信号が前記物体にて反射されることにより発生する第2信号を、前記複数の検出部により、観測している領域に存在する物体までの距離および物体の形状を表す信号として検出するステップと、
    前記第2信号の強度の時間的変化として表される検出信号波形を取得するステップと、
    前記検出信号波形に基づいて、任意の2以上の検出部が同じ物体に対応するか、または、異なる物体に対応するか、のいずれであるかを判定することにより、物体の存在範囲を確定するステップと、を含み、
    前記物体の存在を確定するステップは、1つの前記検出信号波形に強度の極大が複数存在する場合、対応する前記検出部からの距離が異なる複数の物体が存在していると確定するステップを含み、
    前記物体の存在を確定するステップは、前記任意の2以上の検出部にて検出した前記検出信号波形の強度が前記検出部の検出面と平行に配置された物体から反射されることで発生する第2信号の立ち上がりから立ち下がりまでの時間よりも長時間にわたり一定であるか、又は、前記任意の2以上の検出部にて検出した前記検出信号波形が前記長時間にわたり強度が変化することで極大を有しており、かつ、当該強度が前記長時間にわたり一定であるか、又は、前記長時間にわたり強度が変化することで極大を有する検出信号波形が発生する時間帯の少なくとも一部が重なっている場合に、前記任意の2以上の検出部は同じ物体に対応すると判定するステップを含む、物体検出方法。
  7. 複数の検出部を備える物体検出装置における物体検出方法であって、
    物体に向けて第1信号を出力するステップと、
    前記第1信号が前記物体にて反射されることにより発生する第2信号を、前記複数の検出部により、観測している領域に存在する物体までの距離および物体の形状を表す信号として検出するステップと、
    前記第2信号の強度の時間的変化として表される検出信号波形を取得するステップと、
    前記検出信号波形に基づいて、任意の2以上の検出部が同じ物体に対応するか、または、異なる物体に対応するか、のいずれであるかを判定することにより、物体の存在範囲を確定するステップと、を含み、
    前記物体の存在を確定するステップは、1つの前記検出信号波形に強度の極大が複数存在する場合、対応する前記検出部からの距離が異なる複数の物体が存在していると確定するステップを含み、
    前記物体の存在を確定するステップは、前記任意の2以上の検出部について、それぞれの検出信号波形を加算することにより、前記検出部の検出面と平行に配置された物体から反射されることで発生する第2信号の立ち上がりから立ち下がりまでの時間よりも長時間にわたり強度が一定である信号波形が得られれば、前記任意の2以上の検出部は同じ物体に対応すると判定するステップを含む、物体検出方法。
  8. 前記物体の存在を確定するステップは、1つの前記検出信号波形の強度が前記長時間にわたり一定であるか、又は、前記長時間にわたり変化することで極大を有する場合に、対応する前記検出部に対して傾斜している1の物体が存在すると確定するステップを含む、請求項6又は7に記載の物体検出方法。
  9. 請求項6〜8のいずれかに記載の物体検出方法を、コンピュータに実行させるプログラム。
JP2016050942A 2016-03-15 2016-03-15 物体検出装置、物体検出方法、及び、プログラム Expired - Fee Related JP6672915B2 (ja)

Priority Applications (6)

Application Number Priority Date Filing Date Title
JP2016050942A JP6672915B2 (ja) 2016-03-15 2016-03-15 物体検出装置、物体検出方法、及び、プログラム
CN201680046921.9A CN107923978B (zh) 2016-03-15 2016-12-06 物体检测装置、物体检测方法及记录媒体
PCT/JP2016/086219 WO2017158949A1 (ja) 2016-03-15 2016-12-06 物体検出装置、物体検出方法、及び、プログラム
KR1020187004094A KR20180116212A (ko) 2016-03-15 2016-12-06 물체 검출 장치, 물체 검출 방법, 및 프로그램
US15/751,152 US10656270B2 (en) 2016-03-15 2016-12-06 Object detection device, object detection method, and program
EP16894566.5A EP3432033B1 (en) 2016-03-15 2016-12-06 Object detection device, object detection method, and program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2016050942A JP6672915B2 (ja) 2016-03-15 2016-03-15 物体検出装置、物体検出方法、及び、プログラム

Publications (2)

Publication Number Publication Date
JP2017166907A JP2017166907A (ja) 2017-09-21
JP6672915B2 true JP6672915B2 (ja) 2020-03-25

Family

ID=59852187

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2016050942A Expired - Fee Related JP6672915B2 (ja) 2016-03-15 2016-03-15 物体検出装置、物体検出方法、及び、プログラム

Country Status (6)

Country Link
US (1) US10656270B2 (ja)
EP (1) EP3432033B1 (ja)
JP (1) JP6672915B2 (ja)
KR (1) KR20180116212A (ja)
CN (1) CN107923978B (ja)
WO (1) WO2017158949A1 (ja)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108766005A (zh) * 2018-06-08 2018-11-06 北京洪泰同创信息技术有限公司 交通工具的控制方法、装置及系统
JP7059956B2 (ja) * 2019-02-08 2022-04-26 コベルコ建機株式会社 建設機械の障害物検出装置
CN109917418B (zh) * 2019-03-28 2023-04-07 安徽理工大学 一种激光雷达无反射区域的测量方法
JP7379021B2 (ja) 2019-08-29 2023-11-14 株式会社東芝 距離計測装置、距離計測方法、及び速度計測装置
CN115436899A (zh) * 2022-08-31 2022-12-06 中国第一汽车股份有限公司 毫米波雷达探测数据的处理方法、装置、设备和存储介质

Family Cites Families (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3630077B2 (ja) * 2000-06-09 2005-03-16 日産自動車株式会社 車両用レーダの中心軸検出方法および装置
JP2002311138A (ja) * 2001-04-06 2002-10-23 Mitsubishi Electric Corp 車両用測距装置
JP2003307603A (ja) * 2002-02-15 2003-10-31 Omron Corp 光学素子及び当該素子を用いた光学部品
JP3636150B2 (ja) * 2002-03-12 2005-04-06 日産自動車株式会社 走路上反射物の物体種類判定方法
US8009871B2 (en) * 2005-02-08 2011-08-30 Microsoft Corporation Method and system to segment depth images and to detect shapes in three-dimensionally acquired data
US7640122B2 (en) * 2007-11-07 2009-12-29 Institut National D'optique Digital signal processing in optical systems used for ranging applications
JP5710109B2 (ja) * 2009-07-10 2015-04-30 日本信号株式会社 光測距装置
JP5483961B2 (ja) * 2009-09-02 2014-05-07 キヤノン株式会社 画像処理装置、被写体判別方法、プログラム及び記憶媒体
WO2011077400A2 (en) * 2009-12-22 2011-06-30 Leddartech Inc. Active 3d monitoring system for traffic detection
JP4880805B2 (ja) * 2010-03-03 2012-02-22 パナソニック株式会社 物体位置推定装置、物体位置推定方法、及び、物体位置推定プログラム
WO2013128427A1 (en) * 2012-03-02 2013-09-06 Leddartech Inc. System and method for multipurpose traffic detection and characterization
JP5949162B2 (ja) * 2012-05-28 2016-07-06 株式会社デンソー 物体検知装置
CN102968817A (zh) * 2012-10-10 2013-03-13 韩晓刚 一种双摄像头三维电子眼
JP2014092434A (ja) * 2012-11-02 2014-05-19 Denso Corp 物標検出装置、及び、当該装置を用いた接触回避システム
JP6035540B2 (ja) 2012-12-21 2016-11-30 奥野製薬工業株式会社 導電性皮膜形成浴
JP5979020B2 (ja) * 2013-01-23 2016-08-24 株式会社デンソー 物体認識装置
US9268012B2 (en) * 2013-07-12 2016-02-23 Princeton Optronics Inc. 2-D planar VCSEL source for 3-D imaging
CN103364790B (zh) * 2013-07-18 2015-09-02 武汉海达数云技术有限公司 一种基于波形时域配准分析的脉冲激光测距系统测距的方法
KR101480651B1 (ko) * 2013-12-09 2015-01-09 현대자동차주식회사 오브젝트 처리 방법 및 이를 지원하는 차량
CN104700624B (zh) * 2015-03-16 2017-07-07 电子科技大学 基于相敏光时域反射仪的车流量在线监测系统的监测方法

Also Published As

Publication number Publication date
JP2017166907A (ja) 2017-09-21
KR20180116212A (ko) 2018-10-24
EP3432033B1 (en) 2020-12-02
US20180239020A1 (en) 2018-08-23
EP3432033A1 (en) 2019-01-23
CN107923978A (zh) 2018-04-17
US10656270B2 (en) 2020-05-19
EP3432033A4 (en) 2019-11-27
CN107923978B (zh) 2021-07-23
WO2017158949A1 (ja) 2017-09-21

Similar Documents

Publication Publication Date Title
JP6672915B2 (ja) 物体検出装置、物体検出方法、及び、プログラム
JP4760272B2 (ja) 車両周辺監視装置及びセンサユニット
US9046599B2 (en) Object detection apparatus and method
JP2020164162A (ja) 車両状態表示システム
EP3432259B1 (en) Object detection device, object detection method, and program
WO2018043028A1 (ja) 周辺監視装置及び周辺監視方法
JP2017166866A (ja) 路面形状測定装置、測定方法、及び、プログラム
JP2017156306A (ja) 距離センサ、走行体、ロボット及び3次元計測装置
JP6656359B2 (ja) 駐車支援用表示制御装置および駐車支援用表示制御方法
JP2019064431A (ja) 駐車支援装置
CN114026462A (zh) 电子设备及其控制方法
JP6186863B2 (ja) 測距装置及びプログラム
JP2017142171A (ja) 物体検知装置
WO2017158951A1 (ja) 物体検知システム、異常判定方法、及びプログラム
JP2018179782A (ja) 障害物検知システム
US10921119B2 (en) Three dimensional image measurement system
JP6967846B2 (ja) 物体検出方法及び物体検出装置
KR102288635B1 (ko) 자율 이동 로봇의 장애물 감지 장치
US20230341556A1 (en) Distance measurement sensor, signal processing method, and distance measurement module
JP7251328B2 (ja) 物体認識装置および物体認識方法
JP2011177334A (ja) 段差検知装置およびこれを備えた電動車両
JP7471927B2 (ja) 障害物検出装置、車両、障害物検出システム、及び障害物検出方法
WO2021181841A1 (ja) 測距装置
JP2021015558A (ja) 3次元データ分析装置および3次元データ分析方法

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20171023

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20180522

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20180720

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20181225

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20190222

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20190702

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20190820

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20200204

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20200217

R150 Certificate of patent or registration of utility model

Ref document number: 6672915

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

LAPS Cancellation because of no payment of annual fees