JP3864465B2 - 車両用の動体認識装置 - Google Patents
車両用の動体認識装置 Download PDFInfo
- Publication number
- JP3864465B2 JP3864465B2 JP25854396A JP25854396A JP3864465B2 JP 3864465 B2 JP3864465 B2 JP 3864465B2 JP 25854396 A JP25854396 A JP 25854396A JP 25854396 A JP25854396 A JP 25854396A JP 3864465 B2 JP3864465 B2 JP 3864465B2
- Authority
- JP
- Japan
- Prior art keywords
- vehicle
- threshold value
- moving object
- movement speed
- lateral movement
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Landscapes
- Emergency Alarm Devices (AREA)
- Traffic Control Systems (AREA)
- Optical Radar Systems And Details Thereof (AREA)
Description
【０００１】
【発明の属する技術分野】
本発明は、車両に搭載された衝突回避システム等に用いられる動体認識装置に関する。
【０００２】
【従来の技術】
近年、事故防止システムとしてＡＳＶ(Advanced Safety Vehicle) が提唱されている。この事故防止システムのなかに、レーダと自動ブレーキを用いた衝突回避システムがあり，例えば特開平５−５４２９７号などに開示されている。
【０００３】
【発明が解決しようとする課題】
従来の衝突回避システムは道路上にある車両もしくは道路構造物などの固定物を衝突対象物体として検知して、対象物体と衝突の危険が有ることを検知した時に警報や自動ブレーキを作動させるものである。
【０００４】
しかしながら、交通死亡事故の多くは歩行者、特に道路横断中の歩行者との衝突事故によるものであることが統計的に分かっている。したがって、衝突回避システムにより横断歩行者との衝突を回避できれば、死亡事故の大幅な削減に貢献できる。
【０００５】
一方、従来の衝突回避システムでは歩行者も道路上にいるのならば衝突対象として認識され、衝突回避システムが作動して衝突を回避しえる。しかしながら、自動車側からみれば、道路を横断しようとする歩行者は突然に道路上に飛び出してくるものといえ、このため衝突回避システムが歩行者が道路上に飛び出した後にその歩行者を衝突対象として検知しても、その時には既に衝突回避システムの作動が間に合わないことが多いと予測される。
【０００６】
したがって、現在は道路上にいない歩行者であっても程無く道路を横断する可能性のある歩行者については、この歩行者がまだ道路上にいない場合でも、事前に衝突対象として認識できることが必要である。しかしながら、歩行者は車両や道路構造物に比べてレーダの反射波が小さいことが大部分であり、このためレーダの感度を上げると、周囲環境の外乱が増大することになって、レーダ反射波中から歩行者を抽出することは容易ではない。さらにガードレール等の構造物はレーダ反射波の態様が歩いている人と類似しており、これを歩行者と区別することも容易ではない。また道路外にいる歩行者全てに対して衝突回避システムが常に作動したのでは、その回数が頻繁すぎるため車両の走行は事実上困難になってしまうので、道路を横断し衝突する危険性の高い歩行者だけに対して衝突回避システムを作動することが必要となる。したがって、道路を横断し衝突の危険が高い歩行者を的確に検知する認識アルゴリズムが必要とされる。
【０００７】
したがって本発明は、車両の進行路に侵入して衝突等の危険性のある横移動物体を的確に認識できるようにすることを目的とする。
【０００８】
【課題を解決するための手段、作用および効果】
上述の課題を解決するために、本発明にかかる車両用の動体認識装置は、自車両の進行路の側方領域における該進行路に向かう横移動物体を認識するものであって、該側方領域にある物体の横移動速度を取得する物体情報取得手段と、該物体情報取得手段で取得した物体の横移動速度を所定のしきい値と比較し、該横移動速度が該しきい値を超える物体を自車両の進行路に侵入する危険性のある横移動物体であると認識する侵入危険性判断手段とを備え、該しきい値は、自車両からの距離が近距離の物体に対しては中距離の物体に対するに比して値が大きく設定される。
これにより、みかけ上の横移動速度やセンサ誤差等に起因して固定物体が横移動物体であると誤認識されることを防止しつつ、特に必要となる中距離領域の検出精度を向上できる。
【０００９】
上記しきい値は、自車両からの距離が遠距離の物体に対しては中距離の物体に対するに比して値が大きく設定され、かつ上記近距離の場合のしきい値よりも大きく設定されたよう構成できる。
これにより、遠距離物体の検出の不安定性に起因する遠方にある横移動物体の検出精度の低下を有効に防止できる。
【００１０】
また上記物体の横移動速度は自車両の進行方向に対して直交する方向の移動速度とすることができる。
これにより、進行路への物体侵入の検出が容易かつ正確に行える。
【００１１】
また上記物体情報取得手段は自車両の進行方向をスキャンするレーザレーダからのエコーデータを解析して物体の横移動速度を算出するように構成できる。
このレーザレーダは角度方向の分解能が高いので、より正確な横移動速度の計測が行える。
【００１２】
また上記各横移動物体の横移動速度に基づいて、現在の位置から横移動を続けると自車両と実際に衝突する危険性がある横移動物体を抽出する対象抽出手段を更に備えることができる。
これにより、より危険な横移動物体を抽出でき、危険判断がより的確になる。
【００１３】
また上記対象抽出手段は、自車両の速度および自車両から対象物体までの距離に基づいて上記衝突危険性の判断を行うように構成できる。
これにより、このまま制動をかけなければ衝突するとの判断をより正確に行え、危険判断がより的確になる。
【００１４】
また上記対象抽出手段は、衝突の危険性のある対象物体を、左右隣接車線の自車両から遠い方の路端までにあるものに限定することができる。
これにより、衝突危険性の対象物体を道路上のものに限定でき、横断物体をより確実に検出できる。
【００１５】
また上記対象抽出手段での抽出結果に基づき、衝突回避動作を自車両側でとらなくても衝突しないと予測される場合には運転者に警報する指示を与えるように構成できる。
これにより、運転者に対し侵入物体に対する認識を確実に行える。
【００１６】
また上記対象抽出手段での抽出結果に基づき、衝突回避動作を自車両側でとらないと衝突すると予測される場合には該衝突回避作動の指示を与えるように構成できる。
これにより、車両側で衝突回避が確実に行える。
【００１７】
また上記侵入危険性がある横移動物体として所定時間以上継続して認識された横移動物体は以後該しきい値を下回っても侵入危険性のある横移動物体であると認識し続けるロックオン手段を更に備えるよう構成できる。
これにより侵入危険性のある横移動物体を見失うことなく確実に補足し続けることができる。
【００１８】
また上記物体情報取得手段は進行路に対する物体の寸法情報を取得する手段を含み、該寸法情報を所定のガードレール判定しきい値と比較することで物体がガードレールであるか否かを認識し、ガードレールと認識された時は当該物体を横移動物体との判断から除外するように構成できる。
これにより、ガードレールを横移動物体と誤判断することを防止でき、横移動物体の検出をより正確に行える。
【００１９】
また上記物体情報取得手段は進行路に対する物体の寸法情報を取得する手段を含み、該寸法情報を所定の集団判定しきい値と比較することで物体が歩行者集団であるか否かを認識し、歩行者集団であると認識された時は該歩行者集団に対する上記侵入危険性判定のための所定のしきい値を通常よりも小さくするように構成できる。
これにより、突発的な侵入危険度の高いと考えられる歩行者集団に対して、より慎重に侵入危険性を判定できる。
【００２０】
また上記物体情報取得手段は物体の横移動速度に基づき横移動速度バラツキを取得する手段を含み、該横移動速度バラツキを所定のバラツキ評価しきい値と比較することで侵入危険性のより高い歩行者を認識し、当該歩行者であると認識された時は当該歩行者に対する上記侵入危険性判定のための所定のしきい値を通常よりも小さくするように構成できる。
これにより、突発的な侵入危険度の高いと考えられる歩行者に対して、より慎重に侵入危険性を判定できる。
【００２１】
また本発明に係る車両用の動体認識装置は、他の形態として、自車両の進行路の側方領域における該進行路に向かう横移動物体を認識するものであって、該側方領域にある物体の横移動速度を取得する物体情報取得手段と、該物体情報取得手段で取得した物体の横移動速度を所定のしきい値と比較し、該横移動速度が該しきい値を超える物体を横移動物体であると認識する横移動物体認識手段とを備え、該横移動物体認識手段は、上記横移動速度が所定時間継続して上記しきい値を超えた場合は、以後該しきい値を下回っても該物体を横移動物体であると認識し続けるように構成する。
これにより侵入危険性のある横移動物体を見失うことなく確実に補足し続けることができる。
【００２２】
上記所定時間は自車両の車速が大のときは小の時に比して短く設定されるようにできる。
これにより、自車両の車速が高い時に衝突等の危険があると判断される物体に対しても、当該物体を的確に捕捉でき、緊急時対応と捕捉判定の安定化を両立できる。
【００２３】
また本近距離の物体に対しては上記しきい値を超えた場合は、直ちに以降該しきい値を下回っても横移動体であると認識し続けるように構成できる。
このようにすれば緊急時対応が確実になる。
【００２４】
また本発明に係る車両用の動体認識装置は、また他の形態として、自車両の進行路の側方領域における該進行路に向かう横移動物体を認識する車両用の動体認識装置であって、該側方領域にある物体の寸法情報と横移動速度を取得する物体情報取得手段と、該物体情報取得手段で取得した物体の横移動速度を所定のしきい値と比較し、該横移動速度が該しきい値を超える物体を横移動物体であると認識する横移動物体認識手段と、該寸法情報を所定の寸法を定める寸法しきい値と比較し、該所定の寸法範囲を満たす物体が認識された場合には、該所定の寸法範囲を満たさない物体が認識された場合に比べて上記所定のしきい値を小さくするようにした。
このようにすれば、歩行者集団のような、より危険度の高い横移動物体を認識でき、突発的な侵入危険度の高いと考えられる物体に対して、より慎重に認識判定できる。
【００２５】
この動体認識装置は、上記所定の寸法範囲の物体を構成する個々の物体が認識でき、その個々の物体の個数が多い時は少ない時に比べて上記所定のしきい値を小さくするように構成できる。
これにより、より危険度の高い横移動物体の認識精度を向上できる。
【００２６】
また本発明に係る車両用の動体認識装置は、また他の形態として、自車両の進行路の側方領域における該進行路に向かう横移動物体を認識する車両用の動体認識装置であって、該側方領域にある物体の横移動速度を取得する物体情報取得手段と、該物体情報取得手段で取得した物体の横移動速度を所定のしきい値と比較し、該横移動速度が該しきい値を超える物体を横移動物体であると認識する横移動物体認識手段と、該横移動速度の速度バラツキを所定のバラツキしきい値と比較し、該所定のバラツキしきい値を超える物体が認識された場合には、該所定のバラツキしきい値を下回る物体が認識された場合に比べて上記所定のしきい値を小さくするようにした。
このようにすれば、よろついている歩行者のような、より危険度の高い横移動物体を認識でき、突発的な侵入危険度の高いと考えられる物体に対して、より慎重に認識判定できる。
【００２７】
この動体認識装置は、上記横移動速度の速度バラツキが特に大の物体は小の物体に比べて上記しきい値を小さくするように構成できる。
これにより、より危険度の高い横移動物体の認識精度を向上できる。
【００２８】
また進行路の前後方向における所定の寸法範囲から外れる物体が認識された場合には、当該物体を非横移動物体であると認識するように構成できる。
これにより、ガードレール等の固定物体の誤認の防止が有効に図れる。
【００２９】
【発明の実施の形態】
以下、図面を参照して本発明の実施の形態を説明する。
図２には本発明の一実施例としての動体認識装置の車両への搭載状態が示される。図示するように、車両の前端側にレーザレーダ２が取り付けられ、また車両の屋根側に車両前方を撮影するＣＣＤビデオカメラ３が取り付けられる。これらレーザレーダ２とＣＣＤビデオカメラ３は車両ダッシュパネル側に設けられたＥＣＵ（電子制御ユニット）１に接続されており、ＥＣＵ１は自動ブレーキを行うためのアクチュエータ４に接続される。
【００３０】
図１はＥＣＵ１で実行される処理手順の概略を示すフローチャートである。この処理フローはレーザレーダ２で１回のスキャンがされる毎に実行される。まず、各種データを取得する（ステップＡ）。この各種データとしてはレーザエコーデータ（Ｌi ，θi ）、車両状態量（ｖ0 ，ψ，θH ）、画像処理結果（Ｒ，ｄL ，ｄR ）がある。
【００３１】
レーザレーダ２は図３に示すようにその前方側をレーザビームで扇状にスキャンしてエコーデータを取得するもので、そのエコーデータは、
Ｌi ：距離
θi ：角度
Ｋ：反射強度
からなり、一回のスキャンで５００点程度（すなわちｉ＝１〜５００）のエコーデータを得る。
【００３２】
車両状態量は車両の各種センサから得られるパラメータであり、
ｖ0 ：車速
ψ：ヨーレート
θH ：ハンドル舵角
からなる。
【００３３】
画像処理結果はビデオカメラ３からの画像信号を画像処理して得られるパラメータであり、
Ｒ：道路曲率
ｄL ：左側道路幅（車両中心から左側路端までの幅）
ｄR ：右側道路幅（車両中心から右側路端までの幅）
からなる。これらのパラメータを得るには、例えば画像から自車走行レーン端の白線を検出しその白線を曲線近似して自車の旋回（道路曲率Ｒ）と白線の左右方向の距離を求める。
【００３４】
必要データが取得されると、次に物体認識処理を行う（ステップＢ）。物体認識処理は、レーザレーダ２からのエコーデータを個々の物体毎に纏め、車両、歩行者、ガードレール、標識、リフレクタなどを物体として分離し、物体レベルの情報に加工する処理である。認識された物体の属性としては、
Ｎ：物体番号
ＬN ：物体までの距離
θN ：車両進行方向に対する角度
ＶLONG,N：前後速度
ＶLAT,N ：横速度
ＤLONG,N：前後距離バラツキ
ＤLAT,N ：横距離バラツキ
Ｎum,N ：サンプルを取得し始めてからのサンプル数（＝経過時間）
物体を連続して認識しているか否かの検知状況
がある。なお各パラメータ中の添字Ｎは各物体番号毎のパラメータであることを示す。
【００３５】
ここで、前後方向の速度ＶLONG,Nは走行レーンに対して並行な方向（すなわち車両進行方向）の速度、横速度ＶLONG,Nは走行レーンに対して直交する方向（すなわち車両進行方向と直交方向）の速度であり、横速度ＶLONG,Nは走行レーンに侵入する方向を正とする。また、前後距離バラツキＤLONG,Nは、図１７に示されるように、レーザレーダ２で得られたエコーデータを物体としてグループ化する際に、ある物体であると認識された領域内に属するレーザレーダデータの前後方向の距離の上限値と下限値の差（すなわち物体の進行路前後方向の長さ）こであり、横距離バラツキＤLAT,N は横方向の幅の右端値と左端値の差（すなわち物体の進行路に直交する方向の長さ）であると定義する。
【００３６】
ついで、先行車認識処理（ステップＣ）、先行車危険判断処理（ステップＤ）が行われる。先行車認識処理は、画像もしくは車両状態量から推定された最も確からしい走行レーン上の物体を先行車もしくは障害物として他の物体と識別する処理であり、先行車危険判断処理は、先行車もしくは障害物と自車との関係、すなわち先行車に追従、先行車急減速、停止物等の関係に基づいて、危険判断アルゴリズムを適用し、警報または自動ブレーキを行うか否かを判定する処理である。これらの処理は本発明と直接に関係しないので詳細は省略する。
【００３７】
次に、横移動物体危険判断処理を行う（ステップＥ）。ここで、横移動物体とは道路を横断すると考えられる主に歩行者のことであり、ここでいう横移動は車両進行方向に対して直角方向（通常は道路に対して横方向）への移動である。この横移動物体危険判断処理は、物体認識処理（ステップＢ）で得られた物体の横速度ＶLAT,N から、物体の走行レーンへの侵入の危険度を求め、走行レーン上になくとも侵入の危険有りと認めた物体に対して危険判断を行い、それにより横断歩行者などのような走行レーンに侵入してくる可能性のある物体を事前に検知して、衝突回避処理の判断が遅れることを防止するものである。この横移動物体危険判断処理は、走行レーンへの侵入の危険性を判定する走行レーン侵入危険度判定処理（ステップＥ１）、車両と実際に衝突の危険性のある対象物体を抽出する危険判断対象の抽出処理（ステップＥ２）、危険判断処理（ステップＥ３）、先行車危険判断処理結果との競合解消処理（ステップＥ４）等からなる。
【００３８】
次いで、先行車危険判断処理（ステップＤ）と横移動物体危険判断処理（ステップＥ）などの結果に基づき、必要であれば警報装置や自動ブレーキ装置へのアクチュエータ指令を行う（ステップＦ）。
【００３９】
次に、上述の処理のうち重要なものについてさらに詳細に説明する。
図４は物体認識処理の手順を示すフローチャートである。この処理フローでは物体の属性データを算出する詳細な手順については省略してあり、レーザエコーデータから抽出される物体のうち、どの物体を危険判定の対象物体として残すかを決める処理手順が示されている。すなわち、レーザエコーデータから抽出される全ての物体について処理をすることはＥＣＵ１の処理能力上の限界があるので、処理対象とする物体の数を制限して衝突等の危険性のより高い物体を残し、衝突可能性の低い物体は削除する必要がある。この手法として、従来は走行レーン上になく車両により近い位置にある物体を削除していたが、この従来法では、歩行者に対する衝突回避を行うには、走行レーンに入ってくる可能性のある横断歩行者のデータを削除してしまうことになり問題がある。
【００４０】
そこで、本実施例では、ごく近くにある物体のデータが重要であるとの認識に基づいて、最遠距離にある物体のデータを削除するようにしている。このような最遠距離にある物体は車両の横揺れ等を考えると、もともとレーザレーダ２による測定結果の信頼性も悪く、また車両の進行に伴いいずれ近距離の物体として認識され考慮されるから削除しても問題は少ない。ただし、一度、危険判断対象の物体として認識された物体は例外として取り扱い、削除しないようにしている。
【００４１】
図４のフローチャートにおいて、レーザエコーデータを取得したら、レーザエコーデータにラベリングをして（ステップＢ２）、取得したレーザエコーがどの物体に属するかの判定を行う（ステップＢ３）。この処理を、入力されたレーザエコーデータの入力数（サンプリング数）全てについて繰り返して行う（ステップＢ１）。ついで、新たに入力されたエコーデータのうち、既に認識しているどの物体にも属さない物体のエコーデータが存在しているか否かを判定する（ステップＢ４）。
【００４２】
もし、そのような物体のエコーデータが存在している場合には、既に認識している物体の総数がシステムで処理可能な物体処理個数の最大値になっているか否かを判定する（ステップＢ５）。最大値になっていなければ、まだ割り当てられていない物体番号Ｎd を探し（ステップＢ７）、その物体番号Ｎd の属性データを初期化し、従前のどの物体にも属さない新たに認識された物体のエコーデータを割り当てる（ステップＢ８）。
【００４３】
一方、処理個数が最大値に達していたら（ステップＢ５）、後述する「警報判定フラグＦＷN ≠１」かつ「ブレーキ判定フラグＦＢ≠１」であり、かつ最も遠い位置にある物体の物体番号Ｎd を探す（ステップＢ６）。この「警報判定フラグＦＷN ≠１」かつ「ブレーキ判定フラグＦＢ≠１」とは、後述するように、当該物体がまで危険判断の対象とされたことがないことを意味している。物体番号Ｎd が探されたら、前述のステップＢ８の処理を行う。その後、今回のレーザエコーデータに基づいて、物体属性データの更新を行う（ステップＢ９）。
【００４４】
次に、横移動物体危険判断処理（ステップＥ）について説明する。図５は横移動物体危険判断処理における走行レーン侵入危険度判定処理（ステップＥ１）と危険判断対象の抽出処理（Ｅ２）、危険判断処理（Ｅ３）の概要を示すフローチャートである。この処理は物体認識処理で認識され物体番号Ｎが付された物体に対して順繰りに行われる（ステップＥ５１）。危険度判定処理（ステップＥ１）は、走行レーンへの侵入の危険性がある横移動物体を認識するための処理であり、その結果に基づいて判定フラグＦＶN 、ロックオン判定フラグＦＬN をオン／オフする。ここで、判定フラグＦＶN は“１”のときに対象物体番号Ｎが走行レーンに侵入する危険性があることを示す。ロックオン判定フラグＦＫN は“１”のときに、一度侵入危険性があると判定された物体番号Ｎについてその物体が立ち止まる等した場合でも継続して監視を続ける必要があることを示す。
【００４５】
判定フラグＦＶN が“１”であれば（ステップＥ５２）、次に対象抽出処理（ステップＥ２）を行い、危険判断対象物体の抽出を行う。この処理では、対象物体がそのまま横移動を続けると車両に衝突する危険性のある対象物体を抽出する処理であり、その危険の度合いに応じて、警報判定フラグＦＷN 、ブレーキ判定フラグＦＢN をオン／オフする。
【００４６】
そして、危険判断処理（ステップＥ３）として、「警報判定フラグＦＷN ＝１」かつ「ブレーキ判定フラグＦＢN ＝０」である場合には（ステップＥ５３）、警報装置を作動指示し（ステップＥ５４）、さらに「警報判定フラグＦＷN ＝１」かつ「ブレーキ判定フラグＦＢN ＝１」である場合にはブレーキ装置を作動指示する（ステップＥ５６）。
【００４７】
図６には走行レーン侵入危険度判定処理（ステップＥ１）の詳細な手順が示される。まず、物体番号Ｎの対象物体について、その横速度ＶLAT,N と判定しきい値ＳＨ（ＬN ）とを比較する（ステップＥ１０１）。横速度ＶLAT,N が判定しきい値ＳＨ（ＬN ）以上であれば、走行レーン侵入の危険性があるとして、判定フラグＦＶN をオン（＝１）にし（ステップＥ１０２）、小さければ侵入危険性はないものとして判定フラグＦＶN をオフ（＝０）にする（ステップＥ１０３）。
【００４８】
ここで、判定しきい値ＳＨ（ＬN ）は、図７に示すように、対象物体との距離ＬN の関数となっている。すなわち、判定しきい値ＳＨ（ＬN ）は、対象物体の距離ＬN が５０ｍ以上の遠距離の時には大きな値となって、侵入危険性があると判定する確率を減らし、また２０〜５０ｍ程度の中距離の場合には最も低い値となって、侵入危険性があると判定する確率を高め、２０ｍ以下の近距離（至近距離）の場合は中距離よりやや高い値となる。
【００４９】
このように判定しきい値ＳＨ（ＬN ）を設定するのは、遠くでは歩行者データであっても歩行者は車に比べて遅く歩くため重要でないためであり、また近距離ではレーザレーダ２の測定精度が低いため主にガードレール等の固定物体からのエコーをみかけ上の横速度ＶLAT,N を持っているように誤認識し、その物体（ガードレール等）が横速度で横移動している横方向移動物体であると誤認識する可能性が増大し、判定しきい値ＳＨ（ＬN ）を低くしたのではガートレールと横方向移動している歩行者を識別することが困難になるからであり、判定しきい値ＳＨ（ＬN ）をある程度高くすることで、ガードレール等を横方向移動物体と誤認識することを防止できる。
【００５０】
しかしながら、このように近距離での判定しきい値ＳＨ（ＬN ）を高くすると、最初２０〜５０ｍ範囲では横移動物体として捉えていた歩行者に車両が接近すると、歩行者として認識されないことになる可能性が生じる。そこで、本実施例では、歩行者ロックオン処理を導入しており、例えば走行レーンに侵入する危険があるとして一定時間（例えば０．３５sec ）継続して判断できる横移動物体を検知した時には、以降、横速度が判定しきい値ＳＨ（ＬN ）を下回っても横移動物体として認識し続けるようにしている。この歩行者ロックオン処理は、歩行者が一時的に立ち止まって再び歩きだす可能性に対しても適切に対処できる。
【００５１】
この歩行者ロックオン処理では、上記一定時間はロックオン判定しきい値ＬＴ（ｖ0 ）として実現され、このロックオン判定しきい値ＬＴ（ｖ0 ）は、図８に示すように、車両の車速ｖ0 に対する反比例関数となっている。すなわち、車速ｖ0 が速いほど歩行者をロックオンする確率を上げているもので、車速ｖ0 が速いほど歩行者の侵入に対する衝突回避の余裕が少なくなる事情に対応している。
【００５２】
また、遠い位置にある対象物体でも横速度ＶLAT,N が大きい場合には、上記判定しきい値ＳＨ（ＬN ）による侵入判定でも横移動物体として捉えられ、さらに自車の車速ｖ0 が速ければロックオンされる可能性も高まり、従って、自車の車速ｖ0 が速い故に遠くにあっても衝突の危険性がある横移動物体をロックオンして継続して監視し続け得る可能性が高まる。
【００５３】
図６において、判定フラグＦＶN のオン／オフ処理（ステップＥ１０２、Ｅ１０３）が終わったら、この判定しきい値ＳＨ（ＬN ）がオンか否かを判定し（ステップＥ１０４）、オンである場合にはロックオンカウンタＣＯＵＮＴN および速度バラツキカウンタＣＯＵＮＴＶN をインクリメントし（ステップＥ１０５）、オフである場合にはインクリメントは行わない。ここで、ロックオンカウンタＣＯＵＮＴN は物体番号Ｎについて上記ロックオンのために、侵入危険性がある横移動物体として認識されている継続時間をカウントするためのカウンタである。また速度バラツキカウンタＣＯＵＮＴＶN は物体番号Ｎについて速度バラツキを評価するためのカウンタである。
【００５４】
ロックオンカウンタＣＯＵＮＴN のインクリメント処理は、判定フラグＦＶN ＝１であればカウント値を一つインクリメントするものである。また、速度バラツキカウンＣＯＵＮＴＶN のインクリメント処理は、今回のエコーデータに基づいて得られた物体Ｎの横移動速度ＶLAT,N と、前回のエコーデータに基づいて得られた物体Ｎの横移動速度ＶLAT,N の偏差を求め、この偏差を所定のしきい値を比較し、偏差がこのしきい値を超えていたら、カウント値を１つインクリメントするものである。
【００５５】
ロックオンカウンタＣＯＵＮＴN のカウント値はロックオン判定しきい値ＬＴ（ｖ0 ）と比較され（ステップＥ１０６）、ロックオン判定しきい値ＬＴ（ｖ0 ）以上であれば、ロックオン判定フラグＦＬN がオン（＝１）される（ステップＥ１０７）。一方、ロックオン判定フラグＦＶN がオフ（＝０）で、かつロックオン判定しきい値ＬＴ（ｖ0 ）により小さければ、ロックオンカウンタＣＯＵＮＴN を「０」にリセットする（ステップＥ１０８）。
【００５６】
さらに、ロックオン判定フラグＦＬN がオンされている場合には（ステップＥ１０９）、判定フラグＦＶN をオンにする（ステップＥ１１０）。これにより一度ロックオンがかかった対象物体については、それ以降のエコーデータのサンプリングに基づくフロー処理サイクルにおいて、たとえステップＥ１０１で停止物体と判定された時（例えば歩行者が立ち止まった時）でも、継続して侵入危険性がある物体と認識される。
【００５７】
なお、この例では、物体が所定時間にわたり判定フラグ＝１である場合（すなわちロックオンカウンタＣＯＵＮＴN がしきい値ＬＴ（ｖ0 ）を超えた場合）にロックオン判定フラグＦＬN をオン（＝１）としたが、横移動物体が近距離にある場合には対処の緊急性が高く所定時間を待っていたのでは間に合わない事態が多いので、直ちにロックオン判定フラグＦＬN ＝１とするよう構成すると、より望ましい。
【００５８】
この後、「ＤLONG,N≧ａ」かつ「ＤLAT,N ≦ｂ」の判定を行う（ステップＥ１１１）。この判定は、対象物体がガードレールか、あるいは人の集団またはよろついて歩いている人か、あるいはその他のものかを判定するためのもので、物体の前後距離バラツキＤLONG,Nがガードレール判定しきい値ａ以上であり、かつ横距離バラツキＤLAT,N が集団判定しきい値ｂ以下であるかを判定する。
【００５９】
道路沿いに間隔を置いて配置されているガードレールは、走行している車両から見ると、物体認識処理においてこま切れの物体のように見え、特に近距離においては、レーザレーダ２の測定精度等との関係で、みかけ上、歩行者認識の認識目標下限値０．６ｍ／sec を含む横速度を有している物体のように捉えられる可能性が高く、歩行者の認識に対して大きな環境外乱となり、通常の方法ではガードレールと人との区別が難しい。したがってガードレールに沿って走行する場合、ガードレールと歩行者を横速度以外の何らかの手段で識別する必要がある。そこで、ここではガードレールが物体認識された時には、前後方向に長く、横方向に短い物体として認識されるという物理的特性に基づいて、物体認識の結果得られた対象物体の属性のうち、識別に役立つ情報として、認識物体の前後距離バラツキに着目する。
【００６０】
すなわち、図１３は横断中の歩行者の前後距離バラツキを示し、図１４はその分布を示している。図１３中、横軸は時間、縦軸は前後距離バラツキであり、図１４中、横軸は前後距離バラツキ、縦軸はサンプル数である。これによると、歩行者の前後距離バラツキは約１ｍ程度であることが分かる。次にガードレールに関する同様の前後距離バラツキを図１５に、その分布を図１６に示す。図１５中、横軸は時間、縦軸は前後距離バラツキであり、図１６中、横軸は前後距離バラツキ、縦軸はサンプル数である。なお図１６中の分布データにおいて、２ｍ以下のデータは比較のための歩行者のデータである。これによると、先の歩行者に比べオーダが１桁大きいことが分かる。分布を見ても明らかなように、２ｍ付近にしきい値を設ければ、歩行者とガードレールは識別可能である。このガードレール判定を導入することで歩行者を、ガードレールを含む環境外乱から浮かび上がらせることが可能である。
【００６１】
従って、前後距離バラツキＤLONG,Nが所定のしきい値（ここではガードレール判定しきい値ａ）以上であり、横距離バラツキＤLAT,N が所定のしきい値（ここでは集団判定しきい値ｂ）以下の物体はガードレールであると判定することができる。
【００６２】
なお、このガードレールか否かの判定は、ガードレールと歩行者との誤認識が特に起こりやすい近距離領域での認識精度を向上させるために、近距離領域における対象物体にのみ行うように構成することが望ましい。
【００６３】
ガードレールと判定された場合には、その物体の判定フラグＦＶN 、ロックオン判定フラグＦＬN をオフにし、ロックオンカウンタＣＯＵＮＴN を「０」にリセットする（ステップＥ１１２）。
【００６４】
一方、ステップＥ１１１でガードレールでないと判定された時には、さらにその対象物体が人の集団またはよろついて歩いている人かを判定する。これは人の集団である場合には、その中から走行レーンに飛び出す人がある虞があり、従ってかかる集団に対しては侵入危険性判定の判定しきい値ＳＨ（ＬN ）を下げて、危険と判定される確率を上げたほうがより安全であると考えられる。同様に、よろよろ歩いている人は、しっかりした歩調の人よりも道路に入り込む可能性が高く、この場合にも侵入危険性判定の判定しきい値ＳＨ（ＬN ）を下げて、危険と判定される確率を上げたほうがより安全であると考えられる。
【００６５】
そこで、まず集団か否かを判定するために、「ＤLONG,N＜ａ」かつ「ＤLAT,N ＞ｂ」の判定、すなわち「物体の前後距離バラツキＤLONG,Nがガードレール判定しきい値ａより小さく、かつ横距離バラツキＤLAT,N が集団判定しきい値ｂより小さい」という判定条件を用い、この条件を満たしていれば集団と判定する（ステップＥ１１３）。集団と判定された場合には、判定しきい値を通常の物体の場合の半分にした１／２ＳＨ（ＬN ）としてその集団の横速度ＶLAT,N と比較し（ステップＥ１１４）、１／２ＳＨ（ＬN ）以下であれば、侵入の危険性があるとして判定フラグＦＶN をオンにする（ステップＥ１１５）。
【００６６】
なお、この集団と認識された物体内において、さらにそれを構成する人の数も認識することができる時は、その集団の人数が多い時は少ないときに比べてさらに上記集団に対するしきい値を小さくするようにしてもよく、これにより一層危険度の高い集団（人数の多い集団）に対して安全性を確保できる。
【００６７】
同様に、よろついて歩いている人か否かを判定するために、「ＣＯＵＮＴＶN ／Ｎum,N＞ｃ」の判定、すなわち「物体の速度バラツキカウンタＣＯＵＮＴＶN の値をサンブル数Ｎum,Nで除した値（速度バラツキの平均値）が速度バラツキ判定しきい値ｃよりも大きい」という判定条件を用い、この条件を満たしていれば、よろついて歩いている人と判定する（ステップＥ１１６）。その場合には、判定しきい値を通常の物体の場合の半分にした１／２ＳＨ（ＬN ）として、その人の横速度ＶLAT,N と比較し（ステップＥ１１７）、１／２ＳＨ（ＬN ）以下であれば、侵入の危険性があるとして判定フラグＦＶN をオンにする（ステップＥ１１８）。
【００６８】
なお、上記速度バラツキが速度バラツキ判定しきい値ｃを超えたもののうちでも、さらに速度バラツキがとりわけ大きいものについては、上記しきい値を更に小さくするようにしてもよい。これにより一層危険度の高い歩行者（足取りがかなり危ない歩行者）に対して安全性を確保できる。
【００６９】
次に、危険判断対象の抽出処理（ステップＥ２）について説明する。図９と図１０にはこの対象抽出処理の詳細な手順が示される。この対象抽出処理では、危険度判定処理（ステップＥ１）で侵入危険があると判定された物体番号Ｎについて、さらに車両との衝突の危険があるかを判定して、その度合いに基づいて警報、自動ブレーキ等の指示設定を行う。
【００７０】
まず、ステップＥ２で侵入危険性がある（ＦＶ＝１）とされた横移動物体に対する抽出領域幅ＷN の設定を行う（ステップＥ２０１）。この抽出領域幅ＷN は基本的には横移動物体の横移動速度ＶLAT,N に応じて決まるものとすることが望ましく、この抽出領域幅ＷN 内に当該横移動物体が存在している時には、車両と実際に衝突する危険性があると判断される。例えば、図１８に示すように、物体番号１と２の物体がある場合、物体１の横速度ＶLAT,1 が物体２の横速度ＶLAT,2 よりも十分に小さければ（あるいは距離が離れていれば）、車両から見た物体１の抽出領域幅Ｗ1 は物体２の抽出領域幅Ｗ2 によりも十分に小さくなる。
【００７１】
抽出領域幅ＷN の設定の方法としては例えば次の４つの方法が提案される。
▲１▼ ＷN ＝（ＬN ／ｖ0 ）×ＶLAT,N ＋（車両幅／２）
すなわち、車両がそのままブレーキをかけなければ横速度ＶLAT,N の物体に（ＬN ／ｖ）秒後に衝突すると考えて抽出領域幅ＷN を算出する。
【００７２】
▲２▼ 対象物体が道路の左側にあれば道路左端までの距離ｄL 、右側にあれば道路右端までの距離ｄR として、路上にある物体のみに作動を限定する。すなわち、
物体が進行路中心から右にあれば、ＷN ＝ｄR 、
物体が進行路中心から左にあれば、ＷN ＝ｄL
とする。
【００７３】
▲３▼ 図１１に示すように、物体の横速度ＶLAT,N が小さいきとは一定値、大きくなったら左側道路幅ｄL または右側道路幅ｄR に制限し、その中間速度では速度ｖ0 に比例して抽出領域幅ＷN を増加させる。
【００７４】
▲４▼ 抽出領域幅ＷN の上限は左右隣接車線の自車から遠い方の端までとし、道路上にある物体のみに作動を限定する。
【００７５】
次に、マスキング処理をする（ステップＥ２０２）。これは、上記で求めた抽出領域幅ＷN に基づいて、道路がカーブしている場合を含めて、自車両が対象物体と衝突する危険性があるか否かを判定する処理である。図１２に示すように、道路が道路曲率Ｒ（旋回Ｒ）でカーブしており、対象物体Ｎは（距離ＬN ，角度θN ）の位置にあるものとして車両側に検知されているものとする。物体Ｎが旋回Ｒの道路の上方側にあると仮定した時、見えるべき角度αは
α＝ＬN ／２Ｒ
となる。この旋回Ｒの道路上の自車両中心に対して±ＷN の領域内に物体Ｎが存在するか否かを、次の条件式
α−（ＷN ／ＬN ）＜θN ＜α＋（ＷN ／ＬN ）
（但し、θN は車両進行方向に対する物体Ｎの角度）
により判定する。この条件式を満たす時には、物体Ｎは同領域内にあり、車両との衝突の危険性があり、よって危険対象フラグＦＩN をオン（＝１）にする（ステップＥ２０３）。条件式を満たさない時には、物体Ｎは同領域内になく衝突の危険がないので、危険対象フラグＦＩN をオフ（＝０）にする（ステップＥ２０４）。
【００７６】
この危険対象フラグＦＩN が「ＦＩN ＝０」であれば（ステップＥ２０５）、この対象抽出処理を終了する。一方、「ＦＩN ＝１」であれば、対象物体Ｎと自車との衝突の危険性があるので、衝突を回避するために、単に警報を発するのか、あるいは更に緊急性のあるものとして自動ブレーキを作動させるのかの判定を行う。
【００７７】
この処理のために、まず、警報距離Ｌw とブレーキ距離ＬB を算出する。ここで、警報距離Ｌw は物体Ｎまでの距離ＬN がこの距離Ｌw 以内に達したら警報装置を作動させる距離であり、ブレーキ距離ＬB は距離ＬN がこの距離ＬB 以内に達したら自動ブレーキを作動させる距離である。これらの距離は次式
Ｌw ＝〔ｖ0 2 ／（２×９．８×μ）〕＋ｔ0 ｖ0 ＋ｄ
ＬB ＝〔ｖ0 2 ／（２×９．８×μ）〕＋ｔ1 ｖ0 ＋ｄ
（但し、ｔ0 、ｔ1 は余裕時間、ｄは余裕距離、μは路面摩擦係数）
で求める。
【００７８】
物体Ｎまでの距離ＬN が上記警報距離Ｌw 以内であれば（ステップＥ２０７）、警報判定フラグＦＷN をオン（＝１）にする（ステップＥ２０８）。さらに、距離ＬN が上記ブレーキ距離ＬB 以内であれば（ステップＥ２０９）、ブレーキ判定フラグＦＢN をオン（＝１）にする（ステップＥ２１０）。距離ＬN が警報距離Ｌw とブレーキ距離ＬB の何れよりも大きければ、フラグのオン設定はしない。
【００７９】
この後、
▲１▼物体までの距離ＬN が警報距離Ｌw より大きくなった
▲２▼ブレーキが踏まれてブレーキスイッチがオンになった
▲３▼車速ｖ0 が「０」近傍になった
のいずれかを満たしているかを判定する（ステップＥ２１１）。いずれか一つを満たしていれば、衝突の危険は去ったと判定できるので、警報判定フラグＦＷN をオフ（＝０）にする（ステップＥ２１２）。さらに、車速ｖ0 が「０」近傍である場合には（ステップＥ２１３）、ブレーキをかける必要は最早ないから、ブレーキ判定フラグＦＢN をオフ（＝０）にする（ステップＥ２１４）。
【００８０】
本発明の実施にあたっては上述したものの他にも種々の変形形態をとることが可能である。例えば、上述の実施例では衝突回避動作としては警報と自動ブレーキを用いたが、本発明はこれに限られるものではなく、例えば自動ステアリング、エンジンの自動スロットルオフ、自動シフトダウン等によるものであってもよい。
【図面の簡単な説明】
【図１】本発明の一実施例としての車両用の動体認識装置の全体的な動作手順を示すフローチャートである。
【図２】実施例装置の車両への搭載態様を説明する図である。
【図３】実施例装置においてレーザレーダ２のスキャンにより得たエコーデータを説明する図である。
【図４】実施例装置における物体認識処理の詳細な手順を示すフローチャートである。
【図５】実施例装置における横移動物体危険判断処理の概要を示す図である。
【図６】実施例装置における横移動物体危険判断処理中の危険度判定処理の詳細な手順を示すフローチャートである。
【図７】侵入危険度の判定しきい値ＳＨ（ＬN ）を説明する図である。
【図８】対象物体をロックオンするためのロックオン判定しきい値ＬＴ（ｖ0 ）を説明する図である。
【図９】実施例装置における横移動物体危険判断処理中の対象抽出処理の詳細な手順（１／２）を示すフローチャートである。
【図１０】実施例装置における横移動物体危険判断処理中の対象抽出処理の詳細な手順（２／２）を示すフローチャートである。
【図１１】対象抽出処理における抽出領域幅ＷN の設定法の一つを説明する図である。
【図１２】対象抽出処理におけるマスキング処理を説明するための図である。
【図１３】横断中の歩行者の前後距離バラツキを示す図である。
【図１４】図１３の前後距離バラツキの分布を示す図である。
【図１５】ガードレールの前後距離バラツキを示す図である。
【図１６】図１５の前後距離バラツキの分布を示す図である。
【図１７】前後距離バラツキおよび横距離バラツキの概念を示すための図である。
【図１８】抽出領域幅の概念を説明するための図である。
【符号の説明】
１ ＥＣＵ
２ レーザレーダ
３ ビデオカメラ
４ アクチュエータ
【発明の属する技術分野】
本発明は、車両に搭載された衝突回避システム等に用いられる動体認識装置に関する。
【０００２】
【従来の技術】
近年、事故防止システムとしてＡＳＶ(Advanced Safety Vehicle) が提唱されている。この事故防止システムのなかに、レーダと自動ブレーキを用いた衝突回避システムがあり，例えば特開平５−５４２９７号などに開示されている。
【０００３】
【発明が解決しようとする課題】
従来の衝突回避システムは道路上にある車両もしくは道路構造物などの固定物を衝突対象物体として検知して、対象物体と衝突の危険が有ることを検知した時に警報や自動ブレーキを作動させるものである。
【０００４】
しかしながら、交通死亡事故の多くは歩行者、特に道路横断中の歩行者との衝突事故によるものであることが統計的に分かっている。したがって、衝突回避システムにより横断歩行者との衝突を回避できれば、死亡事故の大幅な削減に貢献できる。
【０００５】
一方、従来の衝突回避システムでは歩行者も道路上にいるのならば衝突対象として認識され、衝突回避システムが作動して衝突を回避しえる。しかしながら、自動車側からみれば、道路を横断しようとする歩行者は突然に道路上に飛び出してくるものといえ、このため衝突回避システムが歩行者が道路上に飛び出した後にその歩行者を衝突対象として検知しても、その時には既に衝突回避システムの作動が間に合わないことが多いと予測される。
【０００６】
したがって、現在は道路上にいない歩行者であっても程無く道路を横断する可能性のある歩行者については、この歩行者がまだ道路上にいない場合でも、事前に衝突対象として認識できることが必要である。しかしながら、歩行者は車両や道路構造物に比べてレーダの反射波が小さいことが大部分であり、このためレーダの感度を上げると、周囲環境の外乱が増大することになって、レーダ反射波中から歩行者を抽出することは容易ではない。さらにガードレール等の構造物はレーダ反射波の態様が歩いている人と類似しており、これを歩行者と区別することも容易ではない。また道路外にいる歩行者全てに対して衝突回避システムが常に作動したのでは、その回数が頻繁すぎるため車両の走行は事実上困難になってしまうので、道路を横断し衝突する危険性の高い歩行者だけに対して衝突回避システムを作動することが必要となる。したがって、道路を横断し衝突の危険が高い歩行者を的確に検知する認識アルゴリズムが必要とされる。
【０００７】
したがって本発明は、車両の進行路に侵入して衝突等の危険性のある横移動物体を的確に認識できるようにすることを目的とする。
【０００８】
【課題を解決するための手段、作用および効果】
上述の課題を解決するために、本発明にかかる車両用の動体認識装置は、自車両の進行路の側方領域における該進行路に向かう横移動物体を認識するものであって、該側方領域にある物体の横移動速度を取得する物体情報取得手段と、該物体情報取得手段で取得した物体の横移動速度を所定のしきい値と比較し、該横移動速度が該しきい値を超える物体を自車両の進行路に侵入する危険性のある横移動物体であると認識する侵入危険性判断手段とを備え、該しきい値は、自車両からの距離が近距離の物体に対しては中距離の物体に対するに比して値が大きく設定される。
これにより、みかけ上の横移動速度やセンサ誤差等に起因して固定物体が横移動物体であると誤認識されることを防止しつつ、特に必要となる中距離領域の検出精度を向上できる。
【０００９】
上記しきい値は、自車両からの距離が遠距離の物体に対しては中距離の物体に対するに比して値が大きく設定され、かつ上記近距離の場合のしきい値よりも大きく設定されたよう構成できる。
これにより、遠距離物体の検出の不安定性に起因する遠方にある横移動物体の検出精度の低下を有効に防止できる。
【００１０】
また上記物体の横移動速度は自車両の進行方向に対して直交する方向の移動速度とすることができる。
これにより、進行路への物体侵入の検出が容易かつ正確に行える。
【００１１】
また上記物体情報取得手段は自車両の進行方向をスキャンするレーザレーダからのエコーデータを解析して物体の横移動速度を算出するように構成できる。
このレーザレーダは角度方向の分解能が高いので、より正確な横移動速度の計測が行える。
【００１２】
また上記各横移動物体の横移動速度に基づいて、現在の位置から横移動を続けると自車両と実際に衝突する危険性がある横移動物体を抽出する対象抽出手段を更に備えることができる。
これにより、より危険な横移動物体を抽出でき、危険判断がより的確になる。
【００１３】
また上記対象抽出手段は、自車両の速度および自車両から対象物体までの距離に基づいて上記衝突危険性の判断を行うように構成できる。
これにより、このまま制動をかけなければ衝突するとの判断をより正確に行え、危険判断がより的確になる。
【００１４】
また上記対象抽出手段は、衝突の危険性のある対象物体を、左右隣接車線の自車両から遠い方の路端までにあるものに限定することができる。
これにより、衝突危険性の対象物体を道路上のものに限定でき、横断物体をより確実に検出できる。
【００１５】
また上記対象抽出手段での抽出結果に基づき、衝突回避動作を自車両側でとらなくても衝突しないと予測される場合には運転者に警報する指示を与えるように構成できる。
これにより、運転者に対し侵入物体に対する認識を確実に行える。
【００１６】
また上記対象抽出手段での抽出結果に基づき、衝突回避動作を自車両側でとらないと衝突すると予測される場合には該衝突回避作動の指示を与えるように構成できる。
これにより、車両側で衝突回避が確実に行える。
【００１７】
また上記侵入危険性がある横移動物体として所定時間以上継続して認識された横移動物体は以後該しきい値を下回っても侵入危険性のある横移動物体であると認識し続けるロックオン手段を更に備えるよう構成できる。
これにより侵入危険性のある横移動物体を見失うことなく確実に補足し続けることができる。
【００１８】
また上記物体情報取得手段は進行路に対する物体の寸法情報を取得する手段を含み、該寸法情報を所定のガードレール判定しきい値と比較することで物体がガードレールであるか否かを認識し、ガードレールと認識された時は当該物体を横移動物体との判断から除外するように構成できる。
これにより、ガードレールを横移動物体と誤判断することを防止でき、横移動物体の検出をより正確に行える。
【００１９】
また上記物体情報取得手段は進行路に対する物体の寸法情報を取得する手段を含み、該寸法情報を所定の集団判定しきい値と比較することで物体が歩行者集団であるか否かを認識し、歩行者集団であると認識された時は該歩行者集団に対する上記侵入危険性判定のための所定のしきい値を通常よりも小さくするように構成できる。
これにより、突発的な侵入危険度の高いと考えられる歩行者集団に対して、より慎重に侵入危険性を判定できる。
【００２０】
また上記物体情報取得手段は物体の横移動速度に基づき横移動速度バラツキを取得する手段を含み、該横移動速度バラツキを所定のバラツキ評価しきい値と比較することで侵入危険性のより高い歩行者を認識し、当該歩行者であると認識された時は当該歩行者に対する上記侵入危険性判定のための所定のしきい値を通常よりも小さくするように構成できる。
これにより、突発的な侵入危険度の高いと考えられる歩行者に対して、より慎重に侵入危険性を判定できる。
【００２１】
また本発明に係る車両用の動体認識装置は、他の形態として、自車両の進行路の側方領域における該進行路に向かう横移動物体を認識するものであって、該側方領域にある物体の横移動速度を取得する物体情報取得手段と、該物体情報取得手段で取得した物体の横移動速度を所定のしきい値と比較し、該横移動速度が該しきい値を超える物体を横移動物体であると認識する横移動物体認識手段とを備え、該横移動物体認識手段は、上記横移動速度が所定時間継続して上記しきい値を超えた場合は、以後該しきい値を下回っても該物体を横移動物体であると認識し続けるように構成する。
これにより侵入危険性のある横移動物体を見失うことなく確実に補足し続けることができる。
【００２２】
上記所定時間は自車両の車速が大のときは小の時に比して短く設定されるようにできる。
これにより、自車両の車速が高い時に衝突等の危険があると判断される物体に対しても、当該物体を的確に捕捉でき、緊急時対応と捕捉判定の安定化を両立できる。
【００２３】
また本近距離の物体に対しては上記しきい値を超えた場合は、直ちに以降該しきい値を下回っても横移動体であると認識し続けるように構成できる。
このようにすれば緊急時対応が確実になる。
【００２４】
また本発明に係る車両用の動体認識装置は、また他の形態として、自車両の進行路の側方領域における該進行路に向かう横移動物体を認識する車両用の動体認識装置であって、該側方領域にある物体の寸法情報と横移動速度を取得する物体情報取得手段と、該物体情報取得手段で取得した物体の横移動速度を所定のしきい値と比較し、該横移動速度が該しきい値を超える物体を横移動物体であると認識する横移動物体認識手段と、該寸法情報を所定の寸法を定める寸法しきい値と比較し、該所定の寸法範囲を満たす物体が認識された場合には、該所定の寸法範囲を満たさない物体が認識された場合に比べて上記所定のしきい値を小さくするようにした。
このようにすれば、歩行者集団のような、より危険度の高い横移動物体を認識でき、突発的な侵入危険度の高いと考えられる物体に対して、より慎重に認識判定できる。
【００２５】
この動体認識装置は、上記所定の寸法範囲の物体を構成する個々の物体が認識でき、その個々の物体の個数が多い時は少ない時に比べて上記所定のしきい値を小さくするように構成できる。
これにより、より危険度の高い横移動物体の認識精度を向上できる。
【００２６】
また本発明に係る車両用の動体認識装置は、また他の形態として、自車両の進行路の側方領域における該進行路に向かう横移動物体を認識する車両用の動体認識装置であって、該側方領域にある物体の横移動速度を取得する物体情報取得手段と、該物体情報取得手段で取得した物体の横移動速度を所定のしきい値と比較し、該横移動速度が該しきい値を超える物体を横移動物体であると認識する横移動物体認識手段と、該横移動速度の速度バラツキを所定のバラツキしきい値と比較し、該所定のバラツキしきい値を超える物体が認識された場合には、該所定のバラツキしきい値を下回る物体が認識された場合に比べて上記所定のしきい値を小さくするようにした。
このようにすれば、よろついている歩行者のような、より危険度の高い横移動物体を認識でき、突発的な侵入危険度の高いと考えられる物体に対して、より慎重に認識判定できる。
【００２７】
この動体認識装置は、上記横移動速度の速度バラツキが特に大の物体は小の物体に比べて上記しきい値を小さくするように構成できる。
これにより、より危険度の高い横移動物体の認識精度を向上できる。
【００２８】
また進行路の前後方向における所定の寸法範囲から外れる物体が認識された場合には、当該物体を非横移動物体であると認識するように構成できる。
これにより、ガードレール等の固定物体の誤認の防止が有効に図れる。
【００２９】
【発明の実施の形態】
以下、図面を参照して本発明の実施の形態を説明する。
図２には本発明の一実施例としての動体認識装置の車両への搭載状態が示される。図示するように、車両の前端側にレーザレーダ２が取り付けられ、また車両の屋根側に車両前方を撮影するＣＣＤビデオカメラ３が取り付けられる。これらレーザレーダ２とＣＣＤビデオカメラ３は車両ダッシュパネル側に設けられたＥＣＵ（電子制御ユニット）１に接続されており、ＥＣＵ１は自動ブレーキを行うためのアクチュエータ４に接続される。
【００３０】
図１はＥＣＵ１で実行される処理手順の概略を示すフローチャートである。この処理フローはレーザレーダ２で１回のスキャンがされる毎に実行される。まず、各種データを取得する（ステップＡ）。この各種データとしてはレーザエコーデータ（Ｌi ，θi ）、車両状態量（ｖ0 ，ψ，θH ）、画像処理結果（Ｒ，ｄL ，ｄR ）がある。
【００３１】
レーザレーダ２は図３に示すようにその前方側をレーザビームで扇状にスキャンしてエコーデータを取得するもので、そのエコーデータは、
Ｌi ：距離
θi ：角度
Ｋ：反射強度
からなり、一回のスキャンで５００点程度（すなわちｉ＝１〜５００）のエコーデータを得る。
【００３２】
車両状態量は車両の各種センサから得られるパラメータであり、
ｖ0 ：車速
ψ：ヨーレート
θH ：ハンドル舵角
からなる。
【００３３】
画像処理結果はビデオカメラ３からの画像信号を画像処理して得られるパラメータであり、
Ｒ：道路曲率
ｄL ：左側道路幅（車両中心から左側路端までの幅）
ｄR ：右側道路幅（車両中心から右側路端までの幅）
からなる。これらのパラメータを得るには、例えば画像から自車走行レーン端の白線を検出しその白線を曲線近似して自車の旋回（道路曲率Ｒ）と白線の左右方向の距離を求める。
【００３４】
必要データが取得されると、次に物体認識処理を行う（ステップＢ）。物体認識処理は、レーザレーダ２からのエコーデータを個々の物体毎に纏め、車両、歩行者、ガードレール、標識、リフレクタなどを物体として分離し、物体レベルの情報に加工する処理である。認識された物体の属性としては、
Ｎ：物体番号
ＬN ：物体までの距離
θN ：車両進行方向に対する角度
ＶLONG,N：前後速度
ＶLAT,N ：横速度
ＤLONG,N：前後距離バラツキ
ＤLAT,N ：横距離バラツキ
Ｎum,N ：サンプルを取得し始めてからのサンプル数（＝経過時間）
物体を連続して認識しているか否かの検知状況
がある。なお各パラメータ中の添字Ｎは各物体番号毎のパラメータであることを示す。
【００３５】
ここで、前後方向の速度ＶLONG,Nは走行レーンに対して並行な方向（すなわち車両進行方向）の速度、横速度ＶLONG,Nは走行レーンに対して直交する方向（すなわち車両進行方向と直交方向）の速度であり、横速度ＶLONG,Nは走行レーンに侵入する方向を正とする。また、前後距離バラツキＤLONG,Nは、図１７に示されるように、レーザレーダ２で得られたエコーデータを物体としてグループ化する際に、ある物体であると認識された領域内に属するレーザレーダデータの前後方向の距離の上限値と下限値の差（すなわち物体の進行路前後方向の長さ）こであり、横距離バラツキＤLAT,N は横方向の幅の右端値と左端値の差（すなわち物体の進行路に直交する方向の長さ）であると定義する。
【００３６】
ついで、先行車認識処理（ステップＣ）、先行車危険判断処理（ステップＤ）が行われる。先行車認識処理は、画像もしくは車両状態量から推定された最も確からしい走行レーン上の物体を先行車もしくは障害物として他の物体と識別する処理であり、先行車危険判断処理は、先行車もしくは障害物と自車との関係、すなわち先行車に追従、先行車急減速、停止物等の関係に基づいて、危険判断アルゴリズムを適用し、警報または自動ブレーキを行うか否かを判定する処理である。これらの処理は本発明と直接に関係しないので詳細は省略する。
【００３７】
次に、横移動物体危険判断処理を行う（ステップＥ）。ここで、横移動物体とは道路を横断すると考えられる主に歩行者のことであり、ここでいう横移動は車両進行方向に対して直角方向（通常は道路に対して横方向）への移動である。この横移動物体危険判断処理は、物体認識処理（ステップＢ）で得られた物体の横速度ＶLAT,N から、物体の走行レーンへの侵入の危険度を求め、走行レーン上になくとも侵入の危険有りと認めた物体に対して危険判断を行い、それにより横断歩行者などのような走行レーンに侵入してくる可能性のある物体を事前に検知して、衝突回避処理の判断が遅れることを防止するものである。この横移動物体危険判断処理は、走行レーンへの侵入の危険性を判定する走行レーン侵入危険度判定処理（ステップＥ１）、車両と実際に衝突の危険性のある対象物体を抽出する危険判断対象の抽出処理（ステップＥ２）、危険判断処理（ステップＥ３）、先行車危険判断処理結果との競合解消処理（ステップＥ４）等からなる。
【００３８】
次いで、先行車危険判断処理（ステップＤ）と横移動物体危険判断処理（ステップＥ）などの結果に基づき、必要であれば警報装置や自動ブレーキ装置へのアクチュエータ指令を行う（ステップＦ）。
【００３９】
次に、上述の処理のうち重要なものについてさらに詳細に説明する。
図４は物体認識処理の手順を示すフローチャートである。この処理フローでは物体の属性データを算出する詳細な手順については省略してあり、レーザエコーデータから抽出される物体のうち、どの物体を危険判定の対象物体として残すかを決める処理手順が示されている。すなわち、レーザエコーデータから抽出される全ての物体について処理をすることはＥＣＵ１の処理能力上の限界があるので、処理対象とする物体の数を制限して衝突等の危険性のより高い物体を残し、衝突可能性の低い物体は削除する必要がある。この手法として、従来は走行レーン上になく車両により近い位置にある物体を削除していたが、この従来法では、歩行者に対する衝突回避を行うには、走行レーンに入ってくる可能性のある横断歩行者のデータを削除してしまうことになり問題がある。
【００４０】
そこで、本実施例では、ごく近くにある物体のデータが重要であるとの認識に基づいて、最遠距離にある物体のデータを削除するようにしている。このような最遠距離にある物体は車両の横揺れ等を考えると、もともとレーザレーダ２による測定結果の信頼性も悪く、また車両の進行に伴いいずれ近距離の物体として認識され考慮されるから削除しても問題は少ない。ただし、一度、危険判断対象の物体として認識された物体は例外として取り扱い、削除しないようにしている。
【００４１】
図４のフローチャートにおいて、レーザエコーデータを取得したら、レーザエコーデータにラベリングをして（ステップＢ２）、取得したレーザエコーがどの物体に属するかの判定を行う（ステップＢ３）。この処理を、入力されたレーザエコーデータの入力数（サンプリング数）全てについて繰り返して行う（ステップＢ１）。ついで、新たに入力されたエコーデータのうち、既に認識しているどの物体にも属さない物体のエコーデータが存在しているか否かを判定する（ステップＢ４）。
【００４２】
もし、そのような物体のエコーデータが存在している場合には、既に認識している物体の総数がシステムで処理可能な物体処理個数の最大値になっているか否かを判定する（ステップＢ５）。最大値になっていなければ、まだ割り当てられていない物体番号Ｎd を探し（ステップＢ７）、その物体番号Ｎd の属性データを初期化し、従前のどの物体にも属さない新たに認識された物体のエコーデータを割り当てる（ステップＢ８）。
【００４３】
一方、処理個数が最大値に達していたら（ステップＢ５）、後述する「警報判定フラグＦＷN ≠１」かつ「ブレーキ判定フラグＦＢ≠１」であり、かつ最も遠い位置にある物体の物体番号Ｎd を探す（ステップＢ６）。この「警報判定フラグＦＷN ≠１」かつ「ブレーキ判定フラグＦＢ≠１」とは、後述するように、当該物体がまで危険判断の対象とされたことがないことを意味している。物体番号Ｎd が探されたら、前述のステップＢ８の処理を行う。その後、今回のレーザエコーデータに基づいて、物体属性データの更新を行う（ステップＢ９）。
【００４４】
次に、横移動物体危険判断処理（ステップＥ）について説明する。図５は横移動物体危険判断処理における走行レーン侵入危険度判定処理（ステップＥ１）と危険判断対象の抽出処理（Ｅ２）、危険判断処理（Ｅ３）の概要を示すフローチャートである。この処理は物体認識処理で認識され物体番号Ｎが付された物体に対して順繰りに行われる（ステップＥ５１）。危険度判定処理（ステップＥ１）は、走行レーンへの侵入の危険性がある横移動物体を認識するための処理であり、その結果に基づいて判定フラグＦＶN 、ロックオン判定フラグＦＬN をオン／オフする。ここで、判定フラグＦＶN は“１”のときに対象物体番号Ｎが走行レーンに侵入する危険性があることを示す。ロックオン判定フラグＦＫN は“１”のときに、一度侵入危険性があると判定された物体番号Ｎについてその物体が立ち止まる等した場合でも継続して監視を続ける必要があることを示す。
【００４５】
判定フラグＦＶN が“１”であれば（ステップＥ５２）、次に対象抽出処理（ステップＥ２）を行い、危険判断対象物体の抽出を行う。この処理では、対象物体がそのまま横移動を続けると車両に衝突する危険性のある対象物体を抽出する処理であり、その危険の度合いに応じて、警報判定フラグＦＷN 、ブレーキ判定フラグＦＢN をオン／オフする。
【００４６】
そして、危険判断処理（ステップＥ３）として、「警報判定フラグＦＷN ＝１」かつ「ブレーキ判定フラグＦＢN ＝０」である場合には（ステップＥ５３）、警報装置を作動指示し（ステップＥ５４）、さらに「警報判定フラグＦＷN ＝１」かつ「ブレーキ判定フラグＦＢN ＝１」である場合にはブレーキ装置を作動指示する（ステップＥ５６）。
【００４７】
図６には走行レーン侵入危険度判定処理（ステップＥ１）の詳細な手順が示される。まず、物体番号Ｎの対象物体について、その横速度ＶLAT,N と判定しきい値ＳＨ（ＬN ）とを比較する（ステップＥ１０１）。横速度ＶLAT,N が判定しきい値ＳＨ（ＬN ）以上であれば、走行レーン侵入の危険性があるとして、判定フラグＦＶN をオン（＝１）にし（ステップＥ１０２）、小さければ侵入危険性はないものとして判定フラグＦＶN をオフ（＝０）にする（ステップＥ１０３）。
【００４８】
ここで、判定しきい値ＳＨ（ＬN ）は、図７に示すように、対象物体との距離ＬN の関数となっている。すなわち、判定しきい値ＳＨ（ＬN ）は、対象物体の距離ＬN が５０ｍ以上の遠距離の時には大きな値となって、侵入危険性があると判定する確率を減らし、また２０〜５０ｍ程度の中距離の場合には最も低い値となって、侵入危険性があると判定する確率を高め、２０ｍ以下の近距離（至近距離）の場合は中距離よりやや高い値となる。
【００４９】
このように判定しきい値ＳＨ（ＬN ）を設定するのは、遠くでは歩行者データであっても歩行者は車に比べて遅く歩くため重要でないためであり、また近距離ではレーザレーダ２の測定精度が低いため主にガードレール等の固定物体からのエコーをみかけ上の横速度ＶLAT,N を持っているように誤認識し、その物体（ガードレール等）が横速度で横移動している横方向移動物体であると誤認識する可能性が増大し、判定しきい値ＳＨ（ＬN ）を低くしたのではガートレールと横方向移動している歩行者を識別することが困難になるからであり、判定しきい値ＳＨ（ＬN ）をある程度高くすることで、ガードレール等を横方向移動物体と誤認識することを防止できる。
【００５０】
しかしながら、このように近距離での判定しきい値ＳＨ（ＬN ）を高くすると、最初２０〜５０ｍ範囲では横移動物体として捉えていた歩行者に車両が接近すると、歩行者として認識されないことになる可能性が生じる。そこで、本実施例では、歩行者ロックオン処理を導入しており、例えば走行レーンに侵入する危険があるとして一定時間（例えば０．３５sec ）継続して判断できる横移動物体を検知した時には、以降、横速度が判定しきい値ＳＨ（ＬN ）を下回っても横移動物体として認識し続けるようにしている。この歩行者ロックオン処理は、歩行者が一時的に立ち止まって再び歩きだす可能性に対しても適切に対処できる。
【００５１】
この歩行者ロックオン処理では、上記一定時間はロックオン判定しきい値ＬＴ（ｖ0 ）として実現され、このロックオン判定しきい値ＬＴ（ｖ0 ）は、図８に示すように、車両の車速ｖ0 に対する反比例関数となっている。すなわち、車速ｖ0 が速いほど歩行者をロックオンする確率を上げているもので、車速ｖ0 が速いほど歩行者の侵入に対する衝突回避の余裕が少なくなる事情に対応している。
【００５２】
また、遠い位置にある対象物体でも横速度ＶLAT,N が大きい場合には、上記判定しきい値ＳＨ（ＬN ）による侵入判定でも横移動物体として捉えられ、さらに自車の車速ｖ0 が速ければロックオンされる可能性も高まり、従って、自車の車速ｖ0 が速い故に遠くにあっても衝突の危険性がある横移動物体をロックオンして継続して監視し続け得る可能性が高まる。
【００５３】
図６において、判定フラグＦＶN のオン／オフ処理（ステップＥ１０２、Ｅ１０３）が終わったら、この判定しきい値ＳＨ（ＬN ）がオンか否かを判定し（ステップＥ１０４）、オンである場合にはロックオンカウンタＣＯＵＮＴN および速度バラツキカウンタＣＯＵＮＴＶN をインクリメントし（ステップＥ１０５）、オフである場合にはインクリメントは行わない。ここで、ロックオンカウンタＣＯＵＮＴN は物体番号Ｎについて上記ロックオンのために、侵入危険性がある横移動物体として認識されている継続時間をカウントするためのカウンタである。また速度バラツキカウンタＣＯＵＮＴＶN は物体番号Ｎについて速度バラツキを評価するためのカウンタである。
【００５４】
ロックオンカウンタＣＯＵＮＴN のインクリメント処理は、判定フラグＦＶN ＝１であればカウント値を一つインクリメントするものである。また、速度バラツキカウンＣＯＵＮＴＶN のインクリメント処理は、今回のエコーデータに基づいて得られた物体Ｎの横移動速度ＶLAT,N と、前回のエコーデータに基づいて得られた物体Ｎの横移動速度ＶLAT,N の偏差を求め、この偏差を所定のしきい値を比較し、偏差がこのしきい値を超えていたら、カウント値を１つインクリメントするものである。
【００５５】
ロックオンカウンタＣＯＵＮＴN のカウント値はロックオン判定しきい値ＬＴ（ｖ0 ）と比較され（ステップＥ１０６）、ロックオン判定しきい値ＬＴ（ｖ0 ）以上であれば、ロックオン判定フラグＦＬN がオン（＝１）される（ステップＥ１０７）。一方、ロックオン判定フラグＦＶN がオフ（＝０）で、かつロックオン判定しきい値ＬＴ（ｖ0 ）により小さければ、ロックオンカウンタＣＯＵＮＴN を「０」にリセットする（ステップＥ１０８）。
【００５６】
さらに、ロックオン判定フラグＦＬN がオンされている場合には（ステップＥ１０９）、判定フラグＦＶN をオンにする（ステップＥ１１０）。これにより一度ロックオンがかかった対象物体については、それ以降のエコーデータのサンプリングに基づくフロー処理サイクルにおいて、たとえステップＥ１０１で停止物体と判定された時（例えば歩行者が立ち止まった時）でも、継続して侵入危険性がある物体と認識される。
【００５７】
なお、この例では、物体が所定時間にわたり判定フラグ＝１である場合（すなわちロックオンカウンタＣＯＵＮＴN がしきい値ＬＴ（ｖ0 ）を超えた場合）にロックオン判定フラグＦＬN をオン（＝１）としたが、横移動物体が近距離にある場合には対処の緊急性が高く所定時間を待っていたのでは間に合わない事態が多いので、直ちにロックオン判定フラグＦＬN ＝１とするよう構成すると、より望ましい。
【００５８】
この後、「ＤLONG,N≧ａ」かつ「ＤLAT,N ≦ｂ」の判定を行う（ステップＥ１１１）。この判定は、対象物体がガードレールか、あるいは人の集団またはよろついて歩いている人か、あるいはその他のものかを判定するためのもので、物体の前後距離バラツキＤLONG,Nがガードレール判定しきい値ａ以上であり、かつ横距離バラツキＤLAT,N が集団判定しきい値ｂ以下であるかを判定する。
【００５９】
道路沿いに間隔を置いて配置されているガードレールは、走行している車両から見ると、物体認識処理においてこま切れの物体のように見え、特に近距離においては、レーザレーダ２の測定精度等との関係で、みかけ上、歩行者認識の認識目標下限値０．６ｍ／sec を含む横速度を有している物体のように捉えられる可能性が高く、歩行者の認識に対して大きな環境外乱となり、通常の方法ではガードレールと人との区別が難しい。したがってガードレールに沿って走行する場合、ガードレールと歩行者を横速度以外の何らかの手段で識別する必要がある。そこで、ここではガードレールが物体認識された時には、前後方向に長く、横方向に短い物体として認識されるという物理的特性に基づいて、物体認識の結果得られた対象物体の属性のうち、識別に役立つ情報として、認識物体の前後距離バラツキに着目する。
【００６０】
すなわち、図１３は横断中の歩行者の前後距離バラツキを示し、図１４はその分布を示している。図１３中、横軸は時間、縦軸は前後距離バラツキであり、図１４中、横軸は前後距離バラツキ、縦軸はサンプル数である。これによると、歩行者の前後距離バラツキは約１ｍ程度であることが分かる。次にガードレールに関する同様の前後距離バラツキを図１５に、その分布を図１６に示す。図１５中、横軸は時間、縦軸は前後距離バラツキであり、図１６中、横軸は前後距離バラツキ、縦軸はサンプル数である。なお図１６中の分布データにおいて、２ｍ以下のデータは比較のための歩行者のデータである。これによると、先の歩行者に比べオーダが１桁大きいことが分かる。分布を見ても明らかなように、２ｍ付近にしきい値を設ければ、歩行者とガードレールは識別可能である。このガードレール判定を導入することで歩行者を、ガードレールを含む環境外乱から浮かび上がらせることが可能である。
【００６１】
従って、前後距離バラツキＤLONG,Nが所定のしきい値（ここではガードレール判定しきい値ａ）以上であり、横距離バラツキＤLAT,N が所定のしきい値（ここでは集団判定しきい値ｂ）以下の物体はガードレールであると判定することができる。
【００６２】
なお、このガードレールか否かの判定は、ガードレールと歩行者との誤認識が特に起こりやすい近距離領域での認識精度を向上させるために、近距離領域における対象物体にのみ行うように構成することが望ましい。
【００６３】
ガードレールと判定された場合には、その物体の判定フラグＦＶN 、ロックオン判定フラグＦＬN をオフにし、ロックオンカウンタＣＯＵＮＴN を「０」にリセットする（ステップＥ１１２）。
【００６４】
一方、ステップＥ１１１でガードレールでないと判定された時には、さらにその対象物体が人の集団またはよろついて歩いている人かを判定する。これは人の集団である場合には、その中から走行レーンに飛び出す人がある虞があり、従ってかかる集団に対しては侵入危険性判定の判定しきい値ＳＨ（ＬN ）を下げて、危険と判定される確率を上げたほうがより安全であると考えられる。同様に、よろよろ歩いている人は、しっかりした歩調の人よりも道路に入り込む可能性が高く、この場合にも侵入危険性判定の判定しきい値ＳＨ（ＬN ）を下げて、危険と判定される確率を上げたほうがより安全であると考えられる。
【００６５】
そこで、まず集団か否かを判定するために、「ＤLONG,N＜ａ」かつ「ＤLAT,N ＞ｂ」の判定、すなわち「物体の前後距離バラツキＤLONG,Nがガードレール判定しきい値ａより小さく、かつ横距離バラツキＤLAT,N が集団判定しきい値ｂより小さい」という判定条件を用い、この条件を満たしていれば集団と判定する（ステップＥ１１３）。集団と判定された場合には、判定しきい値を通常の物体の場合の半分にした１／２ＳＨ（ＬN ）としてその集団の横速度ＶLAT,N と比較し（ステップＥ１１４）、１／２ＳＨ（ＬN ）以下であれば、侵入の危険性があるとして判定フラグＦＶN をオンにする（ステップＥ１１５）。
【００６６】
なお、この集団と認識された物体内において、さらにそれを構成する人の数も認識することができる時は、その集団の人数が多い時は少ないときに比べてさらに上記集団に対するしきい値を小さくするようにしてもよく、これにより一層危険度の高い集団（人数の多い集団）に対して安全性を確保できる。
【００６７】
同様に、よろついて歩いている人か否かを判定するために、「ＣＯＵＮＴＶN ／Ｎum,N＞ｃ」の判定、すなわち「物体の速度バラツキカウンタＣＯＵＮＴＶN の値をサンブル数Ｎum,Nで除した値（速度バラツキの平均値）が速度バラツキ判定しきい値ｃよりも大きい」という判定条件を用い、この条件を満たしていれば、よろついて歩いている人と判定する（ステップＥ１１６）。その場合には、判定しきい値を通常の物体の場合の半分にした１／２ＳＨ（ＬN ）として、その人の横速度ＶLAT,N と比較し（ステップＥ１１７）、１／２ＳＨ（ＬN ）以下であれば、侵入の危険性があるとして判定フラグＦＶN をオンにする（ステップＥ１１８）。
【００６８】
なお、上記速度バラツキが速度バラツキ判定しきい値ｃを超えたもののうちでも、さらに速度バラツキがとりわけ大きいものについては、上記しきい値を更に小さくするようにしてもよい。これにより一層危険度の高い歩行者（足取りがかなり危ない歩行者）に対して安全性を確保できる。
【００６９】
次に、危険判断対象の抽出処理（ステップＥ２）について説明する。図９と図１０にはこの対象抽出処理の詳細な手順が示される。この対象抽出処理では、危険度判定処理（ステップＥ１）で侵入危険があると判定された物体番号Ｎについて、さらに車両との衝突の危険があるかを判定して、その度合いに基づいて警報、自動ブレーキ等の指示設定を行う。
【００７０】
まず、ステップＥ２で侵入危険性がある（ＦＶ＝１）とされた横移動物体に対する抽出領域幅ＷN の設定を行う（ステップＥ２０１）。この抽出領域幅ＷN は基本的には横移動物体の横移動速度ＶLAT,N に応じて決まるものとすることが望ましく、この抽出領域幅ＷN 内に当該横移動物体が存在している時には、車両と実際に衝突する危険性があると判断される。例えば、図１８に示すように、物体番号１と２の物体がある場合、物体１の横速度ＶLAT,1 が物体２の横速度ＶLAT,2 よりも十分に小さければ（あるいは距離が離れていれば）、車両から見た物体１の抽出領域幅Ｗ1 は物体２の抽出領域幅Ｗ2 によりも十分に小さくなる。
【００７１】
抽出領域幅ＷN の設定の方法としては例えば次の４つの方法が提案される。
▲１▼ ＷN ＝（ＬN ／ｖ0 ）×ＶLAT,N ＋（車両幅／２）
すなわち、車両がそのままブレーキをかけなければ横速度ＶLAT,N の物体に（ＬN ／ｖ）秒後に衝突すると考えて抽出領域幅ＷN を算出する。
【００７２】
▲２▼ 対象物体が道路の左側にあれば道路左端までの距離ｄL 、右側にあれば道路右端までの距離ｄR として、路上にある物体のみに作動を限定する。すなわち、
物体が進行路中心から右にあれば、ＷN ＝ｄR 、
物体が進行路中心から左にあれば、ＷN ＝ｄL
とする。
【００７３】
▲３▼ 図１１に示すように、物体の横速度ＶLAT,N が小さいきとは一定値、大きくなったら左側道路幅ｄL または右側道路幅ｄR に制限し、その中間速度では速度ｖ0 に比例して抽出領域幅ＷN を増加させる。
【００７４】
▲４▼ 抽出領域幅ＷN の上限は左右隣接車線の自車から遠い方の端までとし、道路上にある物体のみに作動を限定する。
【００７５】
次に、マスキング処理をする（ステップＥ２０２）。これは、上記で求めた抽出領域幅ＷN に基づいて、道路がカーブしている場合を含めて、自車両が対象物体と衝突する危険性があるか否かを判定する処理である。図１２に示すように、道路が道路曲率Ｒ（旋回Ｒ）でカーブしており、対象物体Ｎは（距離ＬN ，角度θN ）の位置にあるものとして車両側に検知されているものとする。物体Ｎが旋回Ｒの道路の上方側にあると仮定した時、見えるべき角度αは
α＝ＬN ／２Ｒ
となる。この旋回Ｒの道路上の自車両中心に対して±ＷN の領域内に物体Ｎが存在するか否かを、次の条件式
α−（ＷN ／ＬN ）＜θN ＜α＋（ＷN ／ＬN ）
（但し、θN は車両進行方向に対する物体Ｎの角度）
により判定する。この条件式を満たす時には、物体Ｎは同領域内にあり、車両との衝突の危険性があり、よって危険対象フラグＦＩN をオン（＝１）にする（ステップＥ２０３）。条件式を満たさない時には、物体Ｎは同領域内になく衝突の危険がないので、危険対象フラグＦＩN をオフ（＝０）にする（ステップＥ２０４）。
【００７６】
この危険対象フラグＦＩN が「ＦＩN ＝０」であれば（ステップＥ２０５）、この対象抽出処理を終了する。一方、「ＦＩN ＝１」であれば、対象物体Ｎと自車との衝突の危険性があるので、衝突を回避するために、単に警報を発するのか、あるいは更に緊急性のあるものとして自動ブレーキを作動させるのかの判定を行う。
【００７７】
この処理のために、まず、警報距離Ｌw とブレーキ距離ＬB を算出する。ここで、警報距離Ｌw は物体Ｎまでの距離ＬN がこの距離Ｌw 以内に達したら警報装置を作動させる距離であり、ブレーキ距離ＬB は距離ＬN がこの距離ＬB 以内に達したら自動ブレーキを作動させる距離である。これらの距離は次式
Ｌw ＝〔ｖ0 2 ／（２×９．８×μ）〕＋ｔ0 ｖ0 ＋ｄ
ＬB ＝〔ｖ0 2 ／（２×９．８×μ）〕＋ｔ1 ｖ0 ＋ｄ
（但し、ｔ0 、ｔ1 は余裕時間、ｄは余裕距離、μは路面摩擦係数）
で求める。
【００７８】
物体Ｎまでの距離ＬN が上記警報距離Ｌw 以内であれば（ステップＥ２０７）、警報判定フラグＦＷN をオン（＝１）にする（ステップＥ２０８）。さらに、距離ＬN が上記ブレーキ距離ＬB 以内であれば（ステップＥ２０９）、ブレーキ判定フラグＦＢN をオン（＝１）にする（ステップＥ２１０）。距離ＬN が警報距離Ｌw とブレーキ距離ＬB の何れよりも大きければ、フラグのオン設定はしない。
【００７９】
この後、
▲１▼物体までの距離ＬN が警報距離Ｌw より大きくなった
▲２▼ブレーキが踏まれてブレーキスイッチがオンになった
▲３▼車速ｖ0 が「０」近傍になった
のいずれかを満たしているかを判定する（ステップＥ２１１）。いずれか一つを満たしていれば、衝突の危険は去ったと判定できるので、警報判定フラグＦＷN をオフ（＝０）にする（ステップＥ２１２）。さらに、車速ｖ0 が「０」近傍である場合には（ステップＥ２１３）、ブレーキをかける必要は最早ないから、ブレーキ判定フラグＦＢN をオフ（＝０）にする（ステップＥ２１４）。
【００８０】
本発明の実施にあたっては上述したものの他にも種々の変形形態をとることが可能である。例えば、上述の実施例では衝突回避動作としては警報と自動ブレーキを用いたが、本発明はこれに限られるものではなく、例えば自動ステアリング、エンジンの自動スロットルオフ、自動シフトダウン等によるものであってもよい。
【図面の簡単な説明】
【図１】本発明の一実施例としての車両用の動体認識装置の全体的な動作手順を示すフローチャートである。
【図２】実施例装置の車両への搭載態様を説明する図である。
【図３】実施例装置においてレーザレーダ２のスキャンにより得たエコーデータを説明する図である。
【図４】実施例装置における物体認識処理の詳細な手順を示すフローチャートである。
【図５】実施例装置における横移動物体危険判断処理の概要を示す図である。
【図６】実施例装置における横移動物体危険判断処理中の危険度判定処理の詳細な手順を示すフローチャートである。
【図７】侵入危険度の判定しきい値ＳＨ（ＬN ）を説明する図である。
【図８】対象物体をロックオンするためのロックオン判定しきい値ＬＴ（ｖ0 ）を説明する図である。
【図９】実施例装置における横移動物体危険判断処理中の対象抽出処理の詳細な手順（１／２）を示すフローチャートである。
【図１０】実施例装置における横移動物体危険判断処理中の対象抽出処理の詳細な手順（２／２）を示すフローチャートである。
【図１１】対象抽出処理における抽出領域幅ＷN の設定法の一つを説明する図である。
【図１２】対象抽出処理におけるマスキング処理を説明するための図である。
【図１３】横断中の歩行者の前後距離バラツキを示す図である。
【図１４】図１３の前後距離バラツキの分布を示す図である。
【図１５】ガードレールの前後距離バラツキを示す図である。
【図１６】図１５の前後距離バラツキの分布を示す図である。
【図１７】前後距離バラツキおよび横距離バラツキの概念を示すための図である。
【図１８】抽出領域幅の概念を説明するための図である。
【符号の説明】
１ ＥＣＵ
２ レーザレーダ
３ ビデオカメラ
４ アクチュエータ
Claims (21)
- 自車両の進行路の側方領域における該進行路に向かう横移動物体を認識する車両用の動体認識装置であって、
該側方領域にある物体の横移動速度を取得する物体情報取得手段と、
該物体情報取得手段で取得した物体の横移動速度を所定のしきい値と比較し、該横移動速度が該しきい値を超える物体を自車両の進行路に侵入する危険性のある横移動物体であると認識する侵入危険性判断手段とを備え、
該しきい値は、自車両からの距離が近距離の物体に対しては中距離の物体に対するに比して値が大きく設定された車両用の動体認識装置。 - 上記しきい値は、自車両からの距離が遠距離の物体に対しては中距離の物体に対するに比して値が大きく設定され、かつ上記近距離の場合のしきい値よりも大きく設定された請求項１記載の車両用の動体認識装置。
- 上記物体の横移動速度は自車両の進行方向に対して直交する方向の移動速度である請求項１または２記載の車両用の動体認識装置。
- 上記物体情報取得手段は自車両の進行方向をスキャンするレーザレーダからのエコーデータを解析して物体の横移動速度を算出するものである請求項１〜３のいずれかに記載の車両用の動体認識装置。
- 上記各横移動物体の横移動速度に基づいて、現在の位置から横移動を続けると自車両と実際に衝突する危険性がある横移動物体を抽出する対象抽出手段を更に備えた請求項１〜４のいずれかに記載の車両用の動体認識装置。
- 該対象抽出手段は、自車両の速度および自車両から対象物体までの距離に基づいて上記衝突危険性の判断を行うようにした請求項５記載の車両用の動体認識装置。
- 上記対象抽出手段は、衝突の危険性のある対象物体を、左右隣接車線の自車両から遠い方の路端までにあるものに限定するようにした請求項５または６記載の車両用の動体認識装置。
- 上記対象抽出手段での抽出結果に基づき、衝突回避動作を自車両側でとらなくても衝突しないと予測される場合には運転者に警報する指示を与えるように構成した請求項５〜７のいずれかに記載の車両用の動体認識装置。
- 上記対象抽出手段での抽出結果に基づき、衝突回避動作を自車両側でとらないと衝突すると予測される場合には該衝突回避作動の指示を与えるように構成した請求項５〜８のいずれかに記載の車両用の動体認識装置。
- 上記侵入危険性がある横移動物体として所定時間以上継続して認識された横移動物体は以後該しきい値を下回っても侵入危険性のある横移動物体であると認識し続けるロックオン手段を更に備えた請求項１〜９のいずれかに記載の車両用の動体認識装置。
- 上記物体情報取得手段は進行路に対する物体の寸法情報を取得する手段を含み、該寸法情報を所定のガードレール判定しきい値と比較することで物体がガードレールであるか否かを認識し、ガードレールと認識された時は当該物体を横移動物体との判断から除外するようにした請求項１〜１０のいずれかに記載の車両用の動体認識装置。
- 上記物体情報取得手段は進行路に対する物体の寸法情報を取得する手段を含み、該寸法情報を所定の集団判定しきい値と比較することで物体が歩行者集団であるか否かを認識し、歩行者集団であると認識された時は該歩行者集団に対する上記侵入危険性判定のための所定のしきい値を通常よりも小さくするようにした請求項１〜１１のいずれかに記載の車両用の動体認識装置。
- 上記物体情報取得手段は物体の横移動速度に基づき横移動速度バラツキを取得する手段を含み、該横移動速度バラツキを所定のバラツキ評価しきい値と比較することで侵入危険性のより高い歩行者を認識し、当該歩行者であると認識された時は当該歩行者に対する上記侵入危険性判定のための所定のしきい値を通常よりも小さくするようにした請求項１〜１２のいずれかに記載の車両用の動体認識装置。
- 自車両の進行路の側方領域における該進行路に向かう横移動物体を認識する車両用の動体認識装置であって、
該側方領域にある物体の横移動速度を取得する物体情報取得手段と、
該物体情報取得手段で取得した物体の横移動速度を所定のしきい値と比較し、該横移動速度が該しきい値を超える物体を横移動物体であると認識する横移動物体認識手段とを備え、
該横移動物体認識手段は、上記横移動速度が所定時間継続して上記しきい値を超えた場合は、以後該しきい値を下回っても該物体を横移動物体であると認識し続けるように構成した車両用の動体認識装置。 - 上記所定時間は自車両の車速が大のときは小の時に比して短く設定されるようにした請求項１４に記載の車両用の動体認識装置。
- 近距離の物体に対しては上記しきい値を超えた場合は、直ちに以降該しきい値を下回っても横移動物体であると認識し続けるようにした請求項１４または１５記載の車両用の動体認識装置。
- 自車両の進行路の側方領域における該進行路に向かう横移動物体を認識する車両用の動体認識装置であって、
該側方領域にある物体の寸法情報と横移動速度を取得する物体情報取得手段と、
該物体情報取得手段で取得した物体の横移動速度を所定のしきい値と比較し、該横移動速度が該しきい値を超える物体を横移動物体であると認識する横移動物体認識手段と、
該寸法情報を所定の寸法を定める寸法しきい値と比較し、該所定の寸法範囲を満たす物体が認識された場合には、該所定の寸法範囲を満たさない物体が認識された場合に比べて上記所定のしきい値を小さくするようにした車両用の動体認識装置。 - 上記所定の寸法範囲の物体を構成する個々の物体が認識でき、その個々の物体の個数が多い時は少ない時に比べて上記所定のしきい値を小さくするようにした請求項１７記載の車両用の動体認識装置。
- 自車両の進行路の側方領域における該進行路に向かう横移動物体を認識する車両用の動体認識装置であって、
該側方領域にある物体の横移動速度を取得する物体情報取得手段と、
該物体情報取得手段で取得した物体の横移動速度を所定のしきい値と比較し、該横移動速度が該しきい値を超える物体を横移動物体であると認識する横移動物体認識手段と、
該横移動速度の速度バラツキを所定のバラツキしきい値と比較し、該所定のバラツキしきい値を超える物体が認識された場合には、該所定のバラツキしきい値を下回る物体が認識された場合に比べて上記所定のしきい値を小さくするようにした車両用の動体認識装置。 - 上記横移動速度の速度バラツキが特に大の物体は小の物体に比べて上記しきい値を小さくするようにした請求項１９記載の車両用の動体認識装置。
- 進行路の前後方向における所定の寸法範囲から外れる物体が認識された場合には、当該物体を非横移動物体であると認識するようにした請求項１７〜２０のいずれかに記載の車両用の動体認識装置。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP25854396A JP3864465B2 (ja) | 1996-09-30 | 1996-09-30 | 車両用の動体認識装置 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP25854396A JP3864465B2 (ja) | 1996-09-30 | 1996-09-30 | 車両用の動体認識装置 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JPH10105891A JPH10105891A (ja) | 1998-04-24 |
| JP3864465B2 true JP3864465B2 (ja) | 2006-12-27 |
Family
ID=17321696
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP25854396A Expired - Fee Related JP3864465B2 (ja) | 1996-09-30 | 1996-09-30 | 車両用の動体認識装置 |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP3864465B2 (ja) |
Families Citing this family (33)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP3450189B2 (ja) * | 1998-06-16 | 2003-09-22 | ダイハツ工業株式会社 | 歩行者検知システム及びその制御方法 |
| JP3983404B2 (ja) * | 1999-01-13 | 2007-09-26 | 本田技研工業株式会社 | レーダ搭載車両用ゲート |
| JP4140118B2 (ja) * | 1999-03-02 | 2008-08-27 | マツダ株式会社 | 車両の障害物検出装置 |
| JP4253901B2 (ja) * | 1999-03-02 | 2009-04-15 | マツダ株式会社 | 車両の障害物検出装置 |
| JP4196469B2 (ja) * | 1999-03-02 | 2008-12-17 | マツダ株式会社 | 車両の障害物検出装置 |
| JP4267171B2 (ja) * | 1999-05-10 | 2009-05-27 | 本田技研工業株式会社 | 歩行者検知装置 |
| JP3649163B2 (ja) * | 2001-07-12 | 2005-05-18 | 日産自動車株式会社 | 物体種別判別装置及び物体種別判別方法 |
| JP2005056336A (ja) * | 2003-08-07 | 2005-03-03 | Denso Corp | 車両周辺監視装置 |
| JP2005071058A (ja) * | 2003-08-22 | 2005-03-17 | Fuji Heavy Ind Ltd | 車両用運転支援装置 |
| JP2005067426A (ja) * | 2003-08-26 | 2005-03-17 | Daihatsu Motor Co Ltd | 衝突回避装置 |
| JP4425642B2 (ja) | 2004-01-08 | 2010-03-03 | 富士重工業株式会社 | 歩行者抽出装置 |
| JP2005227947A (ja) * | 2004-02-12 | 2005-08-25 | Alpine Electronics Inc | ナビゲーション装置及び障害物表示方法 |
| JP4274054B2 (ja) * | 2004-06-08 | 2009-06-03 | 株式会社デンソー | 車両用歩行者検知システム、移動通信端末、車載通信装置およびプログラム |
| JP4252951B2 (ja) * | 2004-11-04 | 2009-04-08 | 本田技研工業株式会社 | 車両用制御対象判定装置 |
| EP1754621B1 (en) * | 2005-08-18 | 2009-10-14 | Honda Research Institute Europe GmbH | Driver assistance system |
| JP2007114831A (ja) * | 2005-10-18 | 2007-05-10 | Omron Corp | 物体検出装置 |
| JP4823753B2 (ja) * | 2006-04-24 | 2011-11-24 | 本田技研工業株式会社 | 車両の周辺監視装置 |
| JP2008117073A (ja) * | 2006-11-01 | 2008-05-22 | Fuji Heavy Ind Ltd | 割り込み車両検出装置 |
| JP4784523B2 (ja) * | 2007-01-30 | 2011-10-05 | マツダ株式会社 | 車両の物体検知装置 |
| JP5029436B2 (ja) * | 2008-03-12 | 2012-09-19 | オムロン株式会社 | 横断物体検知装置および横断物体検知方法、並びにプログラム |
| JP5150527B2 (ja) * | 2009-02-03 | 2013-02-20 | 株式会社日立製作所 | 車両用衝突回避支援装置 |
| JP2010257298A (ja) * | 2009-04-27 | 2010-11-11 | Honda Motor Co Ltd | 車両の走行安全装置 |
| CN102472817B (zh) * | 2009-07-31 | 2014-02-26 | 本田技研工业株式会社 | 车用物体探测装置和车用物体探测方法 |
| JP5269755B2 (ja) | 2009-12-10 | 2013-08-21 | 株式会社日立製作所 | 人横断支援車両システム及び人横断支援方法 |
| JP5505427B2 (ja) | 2010-01-12 | 2014-05-28 | トヨタ自動車株式会社 | 衝突位置予測装置 |
| JP5259647B2 (ja) * | 2010-05-27 | 2013-08-07 | 本田技研工業株式会社 | 車両の周辺監視装置 |
| JP5698597B2 (ja) * | 2011-05-10 | 2015-04-08 | 本田技研工業株式会社 | 車両用物体検知装置 |
| WO2014024336A1 (ja) | 2012-08-09 | 2014-02-13 | トヨタ自動車株式会社 | 物体検出装置及び運転支援装置 |
| JP5939224B2 (ja) * | 2013-10-03 | 2016-06-22 | 株式会社デンソー | 先行車選択装置 |
| WO2020116266A1 (ja) * | 2018-12-07 | 2020-06-11 | 日立オートモティブシステムズ株式会社 | 車両制御システム |
| JP6820958B2 (ja) * | 2019-01-22 | 2021-01-27 | 三菱電機株式会社 | 車両の制御装置および制御方法 |
| CN109814106B (zh) * | 2019-03-22 | 2023-07-18 | 河南理工大学 | 汽车安全预警方法 |
| CN112572462B (zh) | 2019-09-30 | 2022-09-20 | 阿波罗智能技术(北京)有限公司 | 自动驾驶的控制方法、装置、电子设备及存储介质 |
-
1996
- 1996-09-30 JP JP25854396A patent/JP3864465B2/ja not_active Expired - Fee Related
Also Published As
| Publication number | Publication date |
|---|---|
| JPH10105891A (ja) | 1998-04-24 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP3864465B2 (ja) | 車両用の動体認識装置 | |
| JP3843502B2 (ja) | 車両用動体認識装置 | |
| EP3416134B1 (en) | Surrounding environment recognition device for moving body | |
| CN107408345B (zh) | 物标存在判定方法以及装置 | |
| JP4558758B2 (ja) | 車両用障害物認識装置 | |
| US9008957B2 (en) | Method and device for avoiding and/or reducing the consequences of collisions | |
| US6775605B2 (en) | Remote sensing based pre-crash threat assessment system | |
| US7667636B2 (en) | Vehicle control system | |
| JP6855776B2 (ja) | 物体検出装置、及び物体検出方法 | |
| KR20180117207A (ko) | 자동주행 차량을 위한 시나리오 인지 인식 시스템 | |
| JPH09203780A (ja) | 車載走査型レーダ装置 | |
| CN101468630A (zh) | 碰撞减损装置 | |
| JP6601362B2 (ja) | 移動検出装置 | |
| JP2006284293A (ja) | 車両の物標検出装置及び物標検出方法 | |
| EP3410146B1 (en) | Determining objects of interest for active cruise control | |
| US11631255B2 (en) | Apparatus and method for controlling door opening | |
| JP2000132799A (ja) | 制御対象選別装置 | |
| US7130730B2 (en) | Sensing strategy for damage mitigation in compatability situations | |
| CN113788016B (zh) | 防误触发的自动紧急制动控制方法、系统、服务器及存储介质 | |
| Fuerstenberg et al. | Pedestrian detection and classification by laserscanners | |
| US20050004719A1 (en) | Device and method for determining the position of objects in the surroundings of a motor vehicle | |
| JP2003529085A (ja) | 車両のためのモデル支援される走行車線対応付け | |
| JP5309831B2 (ja) | 車両の障害物検知装置 | |
| Fuerstenberg et al. | Pedestrian Recognition in urban traffic using Laserscanners | |
| JP7370368B2 (ja) | 自動運転システム |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20050811 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20050927 |
|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20051111 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20060912 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20060925 |
|
| R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20091013 Year of fee payment: 3 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20101013 Year of fee payment: 4 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20111013 Year of fee payment: 5 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20111013 Year of fee payment: 5 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20121013 Year of fee payment: 6 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20131013 Year of fee payment: 7 |
|
| LAPS | Cancellation because of no payment of annual fees |