JP4214841B2

JP4214841B2 - 周囲状況認識システム

Info

Publication number: JP4214841B2
Application number: JP2003166438A
Authority: JP
Inventors: 一郎吉田
Original assignee: Denso Corp
Current assignee: Denso Corp
Priority date: 2003-06-11
Filing date: 2003-06-11
Publication date: 2009-01-28
Anticipated expiration: 2023-06-11
Also published as: JP2005005978A

Description

【０００１】
【発明の属する技術分野】
本発明は、自車の周囲の車両や人の状況を認識するようにした周囲状況認識システムに関する。
【０００２】
【従来の技術】
一般に、自動車を運転する際には、走行中の安全を確保するために、運転者は、車両の周囲をバックミラー、サイドミラー、ガラス越しの視覚、音、振動等で監視し、他車と衝突しないようにステアリング、アクセル、ブレーキ等を操作することが行われる。
【０００３】
しかし、運転中にこのように周囲の状況を確認するのは非常な注意力が必要であると共に、集中力が必要となるので、このような状況から運転者を解放させて疲労度を少なくして快適な運転を行うことができるようにするべく、種々の支援システムが提案されつつある。
【０００４】
自動車の走行や運転あるいは緊急事態が発生したときに支援するシステムとしては、例えば、ナンバープレートに交通事故を記録するための撮影手段と、記録手段を内蔵する構成のものがある（例えば、特許文献１参照）。
【０００５】
また、特許文献２に示されるような技術もある。これには、ナビゲーションの地図と、障害物検出部として、画像処理による車線検出、車両検出、レーザレーダ等による自車との相対位置、相対速度、相対加速度を測定し、地図と合成する技術が開示されている。
【０００６】
また、この特許文献２では、オブジェクトモデルとして、車両や従来の建物の地図に関して３Ｄオブジェクトや、２Ｄマップを３Ｄに変換することが記載されている。また、引例では車両を表示するために、モデルの重心を抽出した領域の重心に合わせてあてはめ、表示を行なっている。
【０００７】
さらには、運転者の運転を支援するために、前方車両の位置をレーザやミリ波を用いて計測し、前方車両の速度や位置（車間距離）を設定条件に保つためのＡＣＣ(Adaptive Cruise Control)の技術が用いられるようになってきた。この技術では、設定された条件を維持するように前方を走行する車両を追尾する方式であるので、その前方車両が急激に進行方向を変えたり、道路の起伏やカーブにより前車の進行方向が急激に変化すると、車両を追跡し損なってしまう可能性が高いものである。この理由は、ＡＣＣでは前述のように車間距離と速度程度しかわからないためである。
【０００８】
【特許文献１】
特開２００１−０９７２５１号公報
【０００９】
【特許文献２】
特開２００２−０４６５０６号公報
【００１０】
【発明が解決しようとする課題】
上記の点について改善するために種種の精度を向上させることが検討されている。例えば、カメラとしてステレオカメラを用い、画像だけで対象物までの距離を測定するようにしたものである。
【００１１】
しかし、この方法では、対象物を検知してその対象物までの距離をもとめるためには、莫大な画像データを取り扱う必要があり、その画像データから自車両の移動を考慮しながら、移動体をまず捕らえ、その移動体までの位置関係を２台のカメラ画像のピクセルデータをマッチングさせることで、最終的に距離のデータを得るため、データの処理能力が要求されることになる。
【００１２】
また、画像内に複数の移動体があり、それが画像で重なった状態で存在する場合は、それぞれを分離して、個々の移動体を解析する必要が出てくるため、このような場合には、解析に多大な時間が必要となるため、安全運転支援等のリアルタイム性を要求される用途に使用することは実用上で難しい。
【００１３】
本発明は、上記事情に鑑みてなされたもので、その目的は、カメラにより撮影した画像データについて行う処理の負担を軽減して迅速且つ正確に周囲に存在する移動体の認識をすることができるようにした安全な走行を支援するシステムとしての周囲状況認識システムを提供することにある。
【００１４】
【課題を解決するための手段】
【００１５】
請求項１の発明によれば、自車の周囲を撮影するための撮像手段と、前記撮像手段により撮影した画像から移動体としての車両もしくは人を抽出する移動体抽出手段と、自車に備えられ周囲に存在する移動体通信装置との間で通信が可能な移動体通信装置と、前記移動体通信装置の通信出力を変化させて通信可能な距離を測定することで前記移動体までの距離を測定する移動体距離測定手段と、前記移動体抽出手段および移動体距離測定手段により取得した情報とから自車の周囲に存在する前記移動体の存在範囲を算定する情報処理装置と、この情報処理手段により算定され利用者が知覚可能な情報に変換された情報を表示させる表示装置とを備えたので、撮像手段からの画像データだけでなく対象となる車両に搭載された移動体通信装置もしくは人が携帯している移動体通信装置との間の通信により得られた情報を用いて存在範囲を算定することができることで迅速且つ正確に周囲に存在する車両や人などの移動体の認識をすることができるようになる。
【００１８】
請求項３の発明によれば、上記各発明において、撮像手段を、自車の周囲を撮影する場合に自車の一部を含んだ状態で撮影するように設定しているので、周囲の画像データについて自車の位置との相対関係を認識しやすい状態で得ることができ、周囲の状況把握をしやすくなる。
【００２０】
請求項４の発明によれば、上記各発明において、情報処理装置により、自車の周囲に存在する車両もしくは人の存在範囲を示す算定結果の出力データとして、車両もしくは人の位置座標と進行方向を示すために、絶対座標データと絶対方向データもしくは自車位置を原点とした相対座標データと相対方向を出力するように構成したので、表示装置により、自車の位置と共に周囲に存在する車両や人を距離や方向を関係付けて的確に表示させることができ、これによって、周囲の状況を確実に認識することができるようになる。
【００２１】
請求項５の発明によれば、上記請求項４の発明において、情報処理装置を、算定した結果および周囲に存在する車両の移動体通信装置との間で得た車両の大きさ情報に基づいて周囲に存在する車両または人について表示装置に遠近法を用いた描画処理を行うように構成したので、使用者にとっては視覚的に認識しやすい状態で表示装置の画面を見ることができるようになり、周囲の状況の把握を迅速且つ的確に行うことができるようになる。
【００２２】
請求項６の発明によれば、上記請求項５の発明において、情報処理装置を、移動体通信装置により自車の周囲に存在する車両の電子ナンバープレートと通信を行って車両の大きさ情報を得るように構成したので、電子ナンバープレートに記憶されている情報を移動体通信装置により通信を行って得ることができるようになり、迅速且つ確実な情報を得ることができるようになる。
【００２３】
請求項７の発明によれば、上記各発明において、情報処理装置を、撮像手段の撮影条件により設定された標準ピクセルサイズと撮影対象物のピクセルサイズとを比較することでその撮影対象物の大きさを推定するように構成したので、概略的な大きさを迅速に推定することができると共に、距離情報などと関連付けることで距離と大きさとの関係を概略的に推定することができるようになる。
【００２７】
請求項８の発明によれば、上記請求項５ないし７の発明において、表示装置を、自車の周囲の状況を少なくとも左右に分けて表示可能とするように複数個設ける構成としているので、視覚的に左右に対応した位置に配置をすることで使用者にとって認識しやすい状態で確認することができるようになる。
【００２８】
請求項９の発明によれば、上記各発明において、撮像手段および移動体通信装置を、自車の前後に設けられるナンバープレートに一体に配設したので、ワイヤーハーネスの配設量を少なくしてコンパクトで信頼性の高い実装状態とすることができるようになる。
【００２９】
【発明の実施の形態】
（第１の実施形態）
以下、本発明を周辺監視システムに適用した場合の第１の実施形態について図１ないし図１０を参照して説明する。
図１は、対象としている自動車（車両）に搭載するシステムの概略的な構成を示すものである。全体の情報処理の統合的な処理を行う情報処理装置１は、ＣＰＵを主体としてＲＯＭ、ＲＡＭや各種入手出力インターフェースなどを備えた構成とされており、後述する周囲状況認識プログラムにしたがって自車の周囲の状況を把握することができるようにした画像表示を行うための処理を行う。
【００３０】
情報処理装置１には、車載周囲監視カメラシステム２、ＡＣＣ・レーダー３、位置情報取得装置４、自車情報提供装置５などが接続されると共に、Ｇ／Ｗ（Gateway）６を介して車車間通信装置７、路上道路監視システム８などが接続されている。また、情報処理装置１には、情報を表示するための表示手段として表示装置９が接続された構成とされている。また、カーナビゲーション装置と連動した動作をすることができるように、地図データ記憶部１０が接続されている。
【００３１】
車載周囲監視カメラシステム２は、例えば図２に示すように、撮像手段としての８台のカメラ１１ａ〜１１ｈを自動車１２の車体に設けた構成としている。それぞれは、前方右側カメラ１１ａ、前方左側カメラ１１ｂ、後方右側カメラ１１ｃ、後方左側カメラ１１ｄ、右側方前方向カメラ１１ｅ、右側方後ろ方向カメラ１１ｆ、左側方前方向カメラ１１ｇ、左側方後ろ方向カメラ１１ｈである。
【００３２】
図示のように、例えば、右側方前方向カメラ１１ｅでは、車体１２の右側方の前方を視野Ｖａとして撮影するように配置されており、右前方を走行する車両１３ａなどを車体１２の一部を含んだ画像として撮影することができる。また、同様に、右側方後ろ方向カメラ１１ｆでは、右後方を視野Ｖｂとして撮影するように配置され、右後方を走行する車両１３ｂなどを車体１２の一部を含んだ画像として撮影することができる。
【００３３】
そして、車載周囲監視カメラシステム２は、同様にして前方を走行する車両１３ｃや左側方を走行する車両１３ｄなども画像として撮影することができ、これら８台のカメラ１１ａ〜１１ｈにより撮影して得られた撮影データを適宜統合して得た映像を情報処理装置１に送るように構成されている。
【００３４】
ＡＣＣ・レーダー３は、レーザやミリ波を用いて前方車両との車間距離や前方車両の速度を測定するもので、上記したカメラ１１ａ〜１１ｄに付随して設けられており、前方右側、前方左側、後方右側、後方左側のそれぞれの方向に対して測定対象物までの距離あるいは速度を測定して情報処理装置１に送信する。
【００３５】
車車間通信装置７は、自車の周囲に存在する車両と直接通信を行い、周囲車両情報（車両サイズ、速度、ブレーキ、アクセル、位置座標、車種、型番）の送受信を行うように構成されている。通信により得られた周囲車両情報は、情報処理装置１に送信される。
【００３６】
また、この車車間通信装置７は、通信距離可変機能を備えていて、通信出力を変化させることで通信可能な距離を設定することにより、相手との距離を測定することができるように構成されている。
【００３７】
図３は車車間通信装置７の通信距離可変機能を利用して距離を測定する場合を説明するものである。ここでは、通信距離が出力に比例する特性のアンテナを用いることで、他の通信できる機器との間の距離を測定する。具体的には、アンテナ入力パワーを上げていくことで通信が可能となった時点でその機器との距離をアンテナ入力パワーから求めるのである。角度依存性についても、予めアンテナの指向性がわかっていれば求めることができる。
【００３８】
同図（ｂ）はアンテナ７ａの通信エリアをアンテナ入力パワーに対応して模式的に示しており、同図（ａ）では、アンテナ入力パワー（ｄＢ）に対するエリアサイズ（ｍ）を示す。また、パラメータθはアンテナの中心方向からの振れ角度である。このような関係をデータとして記憶しておくことで、通信相手との間の距離を推定することができるのである。
【００３９】
路上道路監視システム８は、走行中に路上に固定してある路上通信器との間で通信を行うように構成されている。これはたとえば、ＤＳＲＣ通信方式で通信を行うもので、通信距離を変更設定することができるように構成されている。これにより、出力レベルを変化させていって通信が可能となったときの出力レベルを測定することで距離を検出することができる。
【００４０】
位置情報取得装置４は、ＧＰＳ信号を受信して現在位置を特定する装置で、図示しないＧＰＳアンテナと受信装置とから構成される。ここでは、ＧＰＳ測位方式として例えばＲＴＫ（Real Time Kinematics）−ＧＰＳ方式を採用しており、高精度で自車の絶対位置を測定することができるようになっている。
【００４１】
自車情報提供装置５は、車両内に搭載されているＥＣＵなどと通信を行って自車の速度、加速度あるいは種々の状態を示す情報を取得し、これを情報処理装置１に送信するように構成されている。情報処理装置１は、自車の走行情報を得て、他車との相対的な位置関係や走行状態などを必要に応じて求めるように構成されている。
【００４２】
表示装置９は、例えば、図４に示すように、車室内の運転席上部の視野を妨げないようにして安全運転が確保できる条件で、左右の側部に対応した２つのディスプレイ９ａ，９ｂが配設されている。これらにディスプレイ９ａ，９ｂは、情報処理装置１により画像データが与えられて表示動作を行うが、情報処理装置１は、表示対象物である車両について、絶対位置と相対位置関係から、検知された物体を仮想空間に配置し、３Ｄレンダリング処理と呼ばれる描画処理を行うように構成されている。
【００４３】
表示の態様としては、これ以外にも自車１２を中心として上方から見た周囲の車両や人との関係を相対的に表示することができる。また、表示という方法で運転者に情報を伝達することに加えて、自車１２と周囲車両の位置関係から、どの周囲車両との位置関係が危険かを、乗員に音声で報知することもできる。
【００４４】
なお、この実施形態では２つのディスプレイ９ａ，９ｂを設ける構成で示しているが、さらに多くのディスプレイを設けるマルチディスプレイ方式の構成とすることもできる。これにより、運転者に多様な情報を的確に提供することができる。
【００４５】
上記のディスプレイ９ａ，９ｂの構成では、車両の右側と左側を死角なしに表示を行うために曲面ミラーを２つ用いてそのミラーの画像をＣＣＤカメラで撮影したものを表示する例を示している。このようにすると、車両の左右の死角がなくなるため、従来死角にある人を見逃して起こった事故を防止することができる。また、１つのディスプレイで前後の車両の存在がわかるため、画像を見慣れる必要はあるが、これによって視認性を向上させることも可能である。
【００４６】
図５は上記した構成を機能ブロックの構成図として示したものである。この周辺監視システムＡとしては、４つのシステムＢ〜Ｅから構成されている。車間距離計測システムＢ、画像認識システムＣ、車両認識システムＤ、歩行者認識システムＥの４つのシステムである。
【００４７】
この周辺監視システムＡには、位置情報取得装置４などの現在位置計測手段Ｆから現在位置情報が入力され、また、自車情報提供装置５などの車載機器Ｇから自車の走行状態に関する情報が入力される。地図データ記憶部１０に相当するデジタルマップ入出力部Ｈは、位置座標データを指定するとその位置に対応した地図情報を表示データとして出力する。
【００４８】
周辺監視システムＡが出力する表示用データに対応して表示制御器Ｊは表示装置９に対して表示動作を行わせる。この表示装置９は、ナビゲーションシステムからも表示用データが与えられて表示動作を行うようになっている。
【００４９】
さて、上記した周辺監視システムＡが備える４つのシステムＢ〜Ｅは、それぞれ次のようなデータを生成して出力するようになっている。車間距離計測システムＢは、前方車両車間距離データ、前方車両速度データなどを出力する。画像認識システムＣは、移動体有無データ、移動体推定位置データ、移動体分類データ、固定物有無データ、固定物推定位置データ、固定物分類データなどを出力する。
【００５０】
車両認識システムＤは、車両データ、車両位置座標データ、進行方向データ、車両移動速度データ、加速（アクセル)データ、減速（ブレーキ）データ、運転モードデータ、通信機能データなどを出力する。歩行者認識システムＥは、歩行者有無ＩＤデータ、歩行者位置座標データ、進行方向データ、歩行者移動速度データなどを出力する。
【００５１】
次に、本実施形態の作用について図６の制御プログラムのフローチャートおよび図７〜９を参照して周囲状況の認識処理について説明する。
【００５２】
情報処理装置１は、図６の制御プログラムを実行する。まず、８台のカメラ１１ａ〜１１ｈにより周囲の画像を撮影し、撮影した画像についてそのピクセルデータを解析し、自車の車速と周囲の固定物の動きから、固定物を画素データから取り除く。これにより、移動体を画面から抽出する（ステップＳ１）。
【００５３】
情報処理装置１は、この処理で、画面に移動体があると判定した場合（ステップＳ２で「ＹＥＳ」と判断）、移動体の存在位置をサーチターゲットに指定する（ステップＳ３）。この後、情報処理装置１は、ＡＣＣ・レーダ３によりサーチターゲットに指定した移動体までの距離を測定する（ステップＳ４）。
【００５４】
情報処理装置１は、ここで、距離測定がＯＫになるまでステップＳ３，Ｓ４を繰り返し実行する。距離測定がＯＫになると、情報処理装置１は、次に車車間通信装置７を用いて、通信距離を変化させながら物体との通信を試みる（ステップＳ６）。
【００５５】
ここでは、車車間通信装置７は、車車間通信あるいは人が持つ電子タグとの通信が行えた場合、その通信結果から対象物のＩＤを読み取って記憶する。もし複数の移動体があれば、複数の物体に同等の処理を繰り返す。渋滞や、人の混雑により、一定期間ですべての検知ができない場合は、車車間および車と人との通信距離を短くしたりして、設定時間内で通信が完了できる検知数に絞る。このようにして得られた通信結果は情報処理装置１に定期的に送信するようになっている。
【００５６】
情報処理装置１は、車車間通信装置７から上記したデータを受け取ると（ステップＳ６，Ｓ７，Ｓ８）、データに適合する仮想オブジェクトを選定し、それを自車を原点とした仮想空間へ配置する（ステップＳ９）。もし、他車の具体的オブジェクトＩＤ（形状モデルＩＤ）があれば、情報処理装置１はそのデータを選択する。また、ユーザが表示視野を設定している場合は、仮想空間内のカメラ位置を変更して、ユーザの視野にあった画像が描画されるように、描画処理が行われる（ステップＳ１０）。
【００５７】
次に、上記の処理を進めるのに際して採用している座標系について図７を参照して概略的に説明する。ここでは、自車１２の位置を原点（０,０）としてＡＣＣレーダー３,車車間通信装置７、カメラ１１ａ〜１１ｈの画像より、相対的な距離を求めることができるので、その値をもとに周囲の車両や人を表示するためのデータを作成することができる。
【００５８】
また、地図にマッピングするには、自車１２の緯度経度を示す絶対位置の座標データを原点Ｏ（０，０）にして地図データに対応させて表示すると共に、周囲の車両の相対的な位置座標データを原点Ｏを基準にして地図データに対応させて表示することができる。これにより、自車１２以外の表示対象物は全て相対座標で示すことができるようになる。
【００５９】
なお、この実施形態においては、道路の白線ではなく、道路両端の位置座標データ列をもとに道路が規定されるようになっている（図中△印で表示）。そして、車両の認識は画像だけではなく、ＡＣＣレーダ３や車車間通信装置７により、存在確率に対応した表示を行うようになっている。さらに、電子ナンバープレート等が配設されている場合にはそこに記憶される車両情報を読み出し、正確に車両の形やサイズを表示できるようになっている。
【００６０】
また、ガードレール、電柱、標識、樹木等の衝突も回避できるように、それらが３次元のオブジェクトで地図上に配置表示されるようになっており、それらのオブジェクトに接近しないようにすることで、物損事故の回避が行なえる。加えて、人の認識機能を合わせもち、人を発見した場合、最優先で人を避けることにも利用することができる。
【００６１】
情報処理装置１による表示装置９への表示制御は次のようにして行うようになっている。情報処理装置１は、自車１２の周囲を移動する物体として検知した対象物（車両、人）を仮想空間へ配置して、レンダリング描画することで、例えば図８に示すような表示画面を提供する。
【００６２】
ここでは、自車１２の運転席から前方を見たときの状況を簡易的なグラフィック描画で表示するようになっている。ディスプレイ９ａ，９ｂには、道路、横断歩道、歩道、建物、人物、車などを識別可能で且つ簡単な形状で示している。また、移動する人物や車などの表示においては、その移動方向がわかるように移動方向ベクトルも表示するようになっている。
【００６３】
表示装置９への表示の態様としては、三次元的な表示を行う場合で、例えば、図９に示すように、ターゲット車両までの距離を画面内にものさし（ルーラ）を表示することもできる。このように表示することにより、自車とターゲット車両との間の相対的な位置関係が距離で具体的に把握することができるようになり、車間距離等が安全か否かが明確にわかるようになる。
【００６４】
次に、図１０を参照して周囲車両の位置（距離、方向）を求める方法について説明する。周囲車両との距離の測定においては、自車１２の車車間通信装置７の送信電力を定期的に変更し、どの電力レベルで送信が行えなくなったかを測定することで、対応する距離を概略的に測定することができる。
【００６５】
このとき、正確な測定距離を測るために、たとえば前方車両と通信を行う場合は、車車間通信装置７を後方のランプの中央に設置する。このようにすると、レーザ方式のＡＣＣレーダー３の距離測定結果と車車間通信の結果をマッチングさせることが容易になる。
【００６６】
ＡＣＣレーダー３と車車間通信装置７とを比較すると、ＡＣＣレーダー３の方が測定可能な距離が長いので、これを利用して、通常はＡＣＣレーダー３で車車間通信を行う場合の距離と方向を設定して、目標を定めておいて車車間通信を行うようにする。つまり、車車間通信装置７の送信電力と通信方向を設定することができるのである。
【００６７】
ここで、車車間通信の通信方向を設定するために、アンテナ指向性をＡＣＣレーダー３の測定距離と方向に合わせることができる構成のアンテナか、あるいは機械的にアンテナ方向を変更できる機構をもつアンテナを用いることが有効である。
【００６８】
このような第１の実施形態によれば、車載周辺監視カメラシステム２を設けて自車１２の周囲を撮影して他車や人物を認識し、その位置や大きさなどをＡＣＣレーダー３や車車間通信装置７を用いて測定したり情報を得るなどして、情報処理装置１により、これを表示装置９に表示させるようにしたので、迅速且つ確実に周囲の状況を認識して表示させることができるようになり、安全な走行を支援することができるようになる。
【００６９】
カメラ１１ｆ〜１１ｈによる撮影では、自車１２の一部を画像内に含めるように周囲を撮影するので、自車との相対的な位置関係や大きさなどの把握をよりわかりやすい状態で行うことができるようになる。
【００７０】
車車間通信装置７により通信距離を変化させることができるようにしたので、通信相手との間の通信が可能となるときの出力レベルから概略的な通信距離を迅速に測定することができる。
【００７１】
（第２の実施形態）
図１１は本発明の第２の実施形態を示すもので、第１の実施形態と異なるところは、車載周辺監視カメラシステム２を構成しているカメラの配置状態である。すなわち、第１の実施形態で述べた車体１２の四隅に配設していたカメラ１１ａ〜１１ｄに代えて、カメラ１４ａ〜１４ｄを設ける構成としている。具体的には、カメラ１４ａ，１４ｂが前のナンバープレート１５に、カメラ１４ｃ，１４ｄが、後ろのナンバープレート１５ｂに一体に組み込まれた構成となっている。また、図示はしていないが、これらのナンバープレート１５ａ，１５ｂには車車間通信装置７やＡＣＣレーダー３も一体に組み込まれた構成とされている。
【００７２】
そして、これらのナンバープレート１５ａ，１５ｂは電子ナンバープレートと呼ばれるものとして構成されており、内部には自車１２に関する情報として、車両の大きさや車型等の車両を識別するデータを記憶する手段が組み込まれ、路上機などからの問いかけの通信に応じて車両情報を送信するなどの機能を持ったものである。
【００７３】
このようにナンバープレート１５ａ，１５ｂにカメラ１４ａ〜１４ｄや車車間通信装置７、ＡＣＣレーダー３などの車両や人の認識用の構成を一体に組み込むことで、ワイヤーハーネスが少なくなり、システム間の距離も短くなるため、画像データを迅速に処理するために都合がよい構成となる。これらのナンバープレート１５ａ，１５ｂの裏面には、画像情報処理装置１やディスプレイ９ａ，９ｂに送るための広帯域通信が可能なハーネス（ファイバ、同軸ケーブル）が配設されている。
【００７４】
そして、このような第２の実施形態によっても第１の実施形態と同様の作用効果を得る事ができると共に、上記したように、周囲を認識するための構成をコンパクトに収容してワイヤーハーネスも削減した構成とすることができるようになる。
【００７５】
（第３の実施形態）
図１２は本発明の第３の実施形態を示すもので、第１の実施形態と異なるところは、ディスプレイ９ａ，９ｂなどへの表示の仕方を簡素化したところである。図１２において、表示態様としては、ＬＣＤやプラズマディスプレイ等の平板ディスプレイへのピクセルによる表示を用いたが、簡易的に、自車１２や周囲の車両Ａ〜Ｅなどを適宜文字（「白，○○○（車種名）」あるいは「軽トラック」等）で表すようにしてもよい。
【００７６】
さらに、図示はしないが、簡易的な表示を補い、さらには運転手に対してディスプレイ９ａ，９ｂを見ないで状況の伝達を簡易的にすることができるように、音声により簡単な対話で報知する構成とすることもできる。この場合には、音声認識装置を設けると共に音声合成装置を設けてプログラムにより対話形式で応答することができるように構成するものである。
【００７７】
例えば、運転手の声による問いかけに対して、音声認識装置により問いかけの内容を認識する。このとき、問いかけの内容が認識できているか否かを「ＹＥＳ」あるいは「ＮＯ」の簡単な返事で確認できるように質問を確認するための応答を一度行うことで確実な処理を行うことができる。次に、問いかけに応える内容を情報提供処理装置１により作成し、これを音声合成装置で合成音声に変換してスピーカから応答として出力する。
【００７８】
このようなやり取りの具体例として例えば次のようなものである。
運転手「右後方を確認してほしい。」
応答「右後方の確認ですね。」
運転手「はい（そうだ、ＹＥＳ）」
応答「右後方１００ｍに白色の○○○が時速８０ｋｍで走行しています。」
といった応答例である。
【００７９】
このような第３の実施形態によっても第１の実施形態と同様の作用効果を得ることができると共に、簡易的な表示をすることで表示に要する時間を短縮したり、表示のためのコストを低減することができるようになる。
【００８０】
（他の実施形態）
本発明は、上記実施形態にのみ限定されるものではなく、次のように変形また拡張できる。
位置情報の取得は、ＧＰＳ信号を受信する方法以外に、外部から位置情報を直接取得する構成を取り入れることもできるし、それらを併用する構成とすることもできる。トンネルや高層ビルの立ち並ぶ領域などＧＰＳ信号の受信が難しくなる状況になるため、トンネル内で走行位置を送信する信号を受信して現在位置を知る方法や、高層ビル間ではギャップフィラーと呼ばれる機器から送られる位置信号を受信する機能を設けることが有効な手段となる。
【００８１】
表示装置９として、２つのディスプレイ９ａ，９ｂを設ける構成の場合で説明したが、３個以上設ける構成としても良いし、あるいは１つのディスプレイですべてが表示できるようにすることもできる。
【図面の簡単な説明】
【図１】本発明の第１の実施形態を示す電気的なブロック構成図
【図２】車載周辺監視カメラシステムのカメラの配置状態を示す図
【図３】車車間通信装置のアンテナの指向性と距離の判定を説明するための図
【図４】表示装置の配置状態を示す図
【図５】機能ブロックで示した構成図
【図６】認識プログラムのフローチャート
【図７】自車と周囲の車両との位置関係を表示するための説明図
【図８】表示装置の表示例を示す図
【図９】表示画面に距離の指標を示した図
【図１０】通信と距離測定との関係を示す説明図
【図１１】本発明の第２の実施形態を示す図２相当図
【図１２】本発明の第３の実施形態を示す図８相当図
【符号の説明】
１は情報処理装置、２は車載周辺監視カメラシステム、３はＡＣＣレーダー、４は位置情報取得装置、５は自動車情報提供装置、６はゲートウェイ（Ｇ／Ｗ）、７は車車間通信装置、８は路上道路監視システム、９は表示装置、９ａ，９ｂはディスプレイ、１０は地図データ記憶部、１１ａ〜１１ｈはカメラ、１２は自車、１３ａ〜１３ｄは他の車両である。

Claims

自車の周囲を撮影するための撮像手段と、
前記撮像手段により撮影した画像から移動体としての車両もしくは人を抽出する移動体抽出手段と、
自車に備えられ周囲に存在する移動体通信装置との間で通信が可能な移動体通信装置と、
前記移動体通信装置の通信出力を変化させて通信可能な距離を測定することで前記移動体までの距離を測定する移動体距離測定手段と、
前記移動体抽出手段および前記移動体距離測定手段により取得した情報から自車の周囲に存在する前記移動体の存在範囲を算定する情報処理装置と、
この情報処理手段により算定され利用者が知覚可能な情報に変換された情報を表示させる表示装置とを備えたことを特徴とする周囲状況認識システム。
請求項１に記載の周囲状況認識システムにおいて、
前記表示装置は、前記移動体の存在位置に対応した表示を行うように構成されていることを特徴とする周囲状況認識システム。
請求項１または２に記載の周囲状況認識システムにおいて、
前記撮像手段は、自車の周囲を撮影する場合に自車の一部を含んだ状態で撮影するように設定されていることを特徴とする周囲状況認識システム。
請求項１ないし３のいずれかに記載の周囲状況認識システムにおいて、
前記情報処理装置は、自車の周囲に存在する車両もしくは人の存在範囲を示す算定結果の出力データとして、車両もしくは人の位置座標と進行方向を示すために、絶対座標データと絶対方向データもしくは自車位置を原点とした相対座標データと相対方向を出力するように構成されていることを特徴とする周囲状況認識システム。
請求項４に記載の周囲状況認識システムにおいて、
前記情報処理装置は、前記算定した結果および周囲に存在する車両の移動体通信装置との間で得た車両の大きさ情報に基づいて周囲に存在する車両または人について前記表示装置に遠近法を用いた描画処理を行うように構成されていることを特徴とする周囲状況認識システム。
請求項５に記載の周囲状況認識システムにおいて、
前記情報処理装置は、前記移動体通信装置により自車の周囲に存在する車両の電子ナンバープレートと通信を行って車両の大きさ情報を得るように構成されていることを特徴とする周囲状況認識システム。
請求項１ないし６のいずれかに記載の周囲状況認識システムにおいて、
前記情報処理装置は、前記撮像手段の撮影条件により設定された標準ピクセルサイズと撮影対象物のピクセルサイズとを比較することでその撮影対象物の大きさを推定するように構成されていることを特徴とする周囲状況認識システム。
請求項５ないし７のいずれかに記載の周囲状況認識システムにおいて、
前記表示装置は、自車の周囲の状況を少なくとも左右に分けて表示可能とするように複数個設ける構成としたことを特徴とする周囲状況認識システム。
請求項１ないし８のいずれかに記載の周囲状況認識システムにおいて、
前記撮像手段および前記移動体通信装置は、自車の前後に設けられるナンバープレートに一体に配設されていることを特徴とする周囲状況認識システム。