JP2004295620A - 車両衝突可能性検出装置 - Google Patents
車両衝突可能性検出装置 Download PDFInfo
- Publication number
- JP2004295620A JP2004295620A JP2003088495A JP2003088495A JP2004295620A JP 2004295620 A JP2004295620 A JP 2004295620A JP 2003088495 A JP2003088495 A JP 2003088495A JP 2003088495 A JP2003088495 A JP 2003088495A JP 2004295620 A JP2004295620 A JP 2004295620A
- Authority
- JP
- Japan
- Prior art keywords
- vehicle
- auxiliary information
- information
- collision
- possibility
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- Traffic Control Systems (AREA)
- Radar Systems Or Details Thereof (AREA)
Abstract
【解決手段】対象物との相対位置と相対移動速度とを主情報として取得するレーダ装置2に加えて、補助情報取得装置4を、車両すなわち自車に搭載する。補助情報取得装置2を、撮像装置60と画像処理装置62とを備えたものとし、画像処理装置62に他車等対象物の輪郭線と自車の幅方向における変化とを補助情報として取得させる。レーダ装置2からの主情報と、補助情報取得装置4からの補助情報とに基づいて、判定装置6に衝突の可能性があるか否かを判定させる。レーダ装置2と撮像装置60との長所を組み合わせて利用することができ、車両衝突可能性検出装の信頼性を向上させることができる。補助情報取得装置4を、他車のターンシグナルランプの点滅情報を取得したり、通信装置により他車の走行関連情報を取得したりするものとすることもできる。
【選択図】 図1
Description
【発明の属する技術分野】
本発明は、車両が別の車両その他の物(対象物と総称する)と衝突する可能性の有無を検出する装置に関するものであり、特に、その信頼性の向上に関するものである。
【0002】
【従来の技術】
車両(自車と称する)に搭載したレーダ装置を使用して先行車,対向車,横断車等別の車両(他車と称する)等の移動物や、駐車中の車等道路内に存在し、あるいは電柱等路側に存在する静止物との相対位置や相対移動速度を取得し、衝突の可能性を検出することは既に知られている。例えば、下記特許文献1には、周波数変調された搬送波を送信および受信し、周波数上昇部分と周波数下降部分それぞれのビート信号のパワースペクトラムで対をなすピークの周波数から対象物との相対距離および相対速度を演算するレーダ装置が記載されている。この車載レーダ装置においては、対象物としての先行車が追越し等のために緩やかに車線変更をしたことを検出するために、確信度演算手段と確信度変更手段とが設けられている。確信度演算手段は、対象物の現在と過去との検出状況の関係から対象物の存在の確からしさを表す確信度を演算するものであり、確信度変更手段は、例えば、対象物が離れつつあり、かつ、対象物の検出強度の変化率が設定値以上で減少しつつある場合に対象物の存在の確信度を低下させるものとされる。
【0003】
また、交差点の信号機に距離測定装置を、各車両に被測距装置をそれぞれ設置し、ある車両(自車)に対して別の車両(他車)が所定距離まで接近した場合には、自車の運転者に対して警告を発するようにするシステムが知られている(特許文献2)。このシステムにおいては、距離測定装置も被測距装置も共に送受信アンテナを備え、距離測定装置がある周波数の電波を送信し、被測距装置がその電波を受信して別の周波数にシフトさせて返信する。その別の周波数の電波を距離測定装置が受信し、自身の送信時から被測距装置からの電波の受信時までの時間に基づいて、被測距装置までの距離を演算するようにされている。
【0004】
さらに、交差点近傍の路側に車両センサを、車両に情報提供装置あるいは制御装置をそれぞれ設置し、車両センサにより、2方向から交差点に接近する2台の車両が検出された場合に、それぞれの車両の進路を予測してそれら進路の交点を求めるとともに、その交点に到達する時刻を予測し、2台の車両の衝突の可能性を推定して、必要な場合にはそれら車両の運転者に警告を発したり、車両を自動的に制御して減速あるいは停止させるシステムも知られている(特許文献3)。
【0005】
【特許文献1】
特開平8−220220号公報
【特許文献2】
特開2001−167395号公報
【特許文献3】
特開2002−140799号公報
【0006】
【発明が解決しようとする課題,課題解決手段および効果】
レーダ装置は、対象物との相対距離や相対速度を検出する上では優れた機能を有しているが、他車が車線変更,右折,左折等、走行方向の変更を行う場合や、自車が走行方向の変更を行う場合における、自車と他車との相対位置の変化を早期に確実に検出する機能においてやや劣ることを否めない。また、すべての交差点に車両センサや距離測定装置を設置するには莫大な費用が必要となる。本発明は、以上の事情を背景として、車両衝突可能性検出装置の信頼性を向上させることを課題としてなされたものであり、本発明によって、下記各態様の回転伝達装置やパワーステアリング装置が得られる。各態様は請求項と同様に、項に区分し、各項に番号を付し、必要に応じて他の項の番号を引用する形式で記載する。これは、あくまでも本発明の理解を容易にするためであり、本明細書に記載の技術的特徴およびそれらの組合わせが以下の各項に記載のものに限定されると解釈されるべきではない。また、一つの項に複数の事項が記載されている場合、それら複数の事項を常に一緒に採用しなければならないわけではない。一部の事項のみを選択して採用することも可能なのである。
【0007】
なお、以下の各項において、 (1)項が請求項1に相当し、 (2)項が請求項2に、 (3)項が請求項3に、 (5)項が請求項4に、 (6)項が請求項5にそれぞれ相当する。
【0008】
(1)車両に搭載され、対象物を検出するレーダ装置と、
そのレーダ装置とは別に前記車両に設けられ、前記対象物の移動状態に関する補助情報を取得する補助情報取得装置と、
前記レーダ装置により検出された対象物の情報に基づいて前記車両と前記対象物との少なくとも相対位置および相対移動速度を含む主情報を取得し、その主情報に前記補助情報取得装置により取得された補助情報を加味して前記車両と前記対象物との衝突の可能性を判定する判定装置と
を含む車両衝突可能性検出装置。
本発明によれば、レーダ装置の、対象物との相対距離および相対速度を検出する優れた機能を利用しつつ、レーダ装置に不足する機能を補助情報取得装置により取得される情報により補い、全体として信頼性の高い車両衝突可能性検出装置を得ることができる。補助情報取得装置としては、例えば、後に説明する撮像装置,他車との通信により他車の方向変更情報を得る装置,他車のターンシグナルランプ等方向変更信号を自ら取得する装置、あるいはそれらの2つ以上の組合わせ等を採用することができる。また、対象物との相対距離および相対速度を少なくとも含む主情報に、補助情報を加味する形態としては、(a)当初から主情報と補助情報との両方に基づいて衝突の可能性を判定する形態、(b)主情報自体あるいは主情報に基づいて行われた衝突可能性の判定に対して、補助情報に基づく補正を行う形態、(c)主情報に基づく衝突可能性の判定と補助情報に基づく衝突可能性の判定との両方を別個に行い、両判定の結果を総合して最終的な判定を行う形態等、種々の形態を採用し得る。
(2)前記レーダと前記補助情報取得装置とが前記車両の進行方向前方に存在する前記対象物を検出可能な状態で前記車両に設けられた (1)項に記載の車両衝突可能性検出装置。
本発明は、車両が後退する際における衝突可能性の検出に適用することも可能である。しかし、前進する際における衝突可能性の検出に特に有効なものである。
(3)前記補助情報取得装置が、
前記車両に搭載され、前記対象物を撮像する撮像装置と、
その撮像装置により撮像された画像のデータ処理により、前記対象物の前記車両に対する相対位置変化を取得する相対位置変化取得装置と
を含む (1)項または (2)項に記載の車両衝突可能性検出装置。
撮像装置は、撮像領域内に存在する物体を検出する上では優れた機能を有するものであるが、それら物体の中で、特に必要な対象物を特定する機能においてやや劣ることを否めない。レーダ装置と撮像装置とは、互いの劣る機能を補足し合い得るものであり、撮像装置をレーダ装置の補助装置として採用することは有益である。
(4)前記対象物が、前記車両である自車とは別の少なくとも1台の他車を含む (3)項に記載の車両衝突可能性検出装置。
車両が衝突を回避すべき物には路側に設置されている静止物も含まれ、本発明における対象物に含まれる。しかし、一般に、最も強く衝突回避が望まれるのは他車であり、例えば、その対象物が移動していれば他車であると分かる。対象物を車両に限定すれば、静止物との衝突回避には利用できない情報の利用が可能になる。
(5)前記対象物が、前記車両である自車とは別の少なくとも1台の他車を含み、前記補助情報取得装置が、その少なくとも1台の他車から送信されるその少なくとも1台の他車の走行状態に関する情報を受信する他車情報受信装置を含む (1)項ないし (4)項のいずれかに記載の車両衝突可能性検出装置。
車両の走行方向や走行速度等走行状態の変更は、殆どの場合、運転者による操縦部材の操作あるいは自動制御装置の作動に起因して生じる。走行制御装置の誤作動,故障等に起因して走行状態が変化することが全くないわけではないが、その場合でも、誤作動、故障等を早期に発見することが可能である場合が多い。したがって、他車が他車自体の走行状態の変化を送信する走行状態送信装置を備えており、自車がその送信された情報を受信する他車情報受信装置を備えていれば、自車において他車の走行状態の変化を確実に取得することができる。そして、この走行状態の変化に関する情報を、レーダ装置により取得される主情報に加味すれば、車両衝突可能性検出装置の信頼性を向上させることができる。
(6)前記対象物が、前記車両である自車とは別の少なくとも1台の他車であり、前記補助情報取得装置が、その少なくとも1台の他車の方向指示装置の状態を取得する方向指示状態取得装置を含む (1)項ないし (5)項のいずれかに記載の車両衝突可能性検出装置。
車両には、ターンシグナルフラッシャにより点滅させられるターンシグナルランプ等、方向指示装置を設置すべきことが義務付けられている。したがって、この方向指示装置の状態を取得する方向指示状態取得装置を設ければ、他車が方向を変更しようとしているか否かの情報を容易に得ることができ、その補助情報を主情報に加味すれば、衝突可能性検出の信頼性を向上させることができる。
(7)前記車両としての自車に対して固定的に設定された座標系内における前記対象物の移動経路を予測する移動経路予測装置を含む (1)項ないし (6)項のいずれかに記載の車両衝突可能性検出装置。
自車が静止物と衝突するか否かは、自車の走行経路内に静止物が存在するか否かにより判定されるようにすることが望ましく、自車が他車等移動物と衝突するか否かは、移動物の移動経路と自車の走行経路とが干渉するか否かと、その干渉する位置へ移動物と自車とが到達するまでの時間が同じであるか否か(厳密には、到達時間の差が設定時間差以内であるか否か)とによって判定されるようにすることが望ましい。しかし、レーダ装置,撮像装置等、対象物(静止物や移動物)を検出する検出装置が自車に設けられることが多く、その場合には、検出装置により検出される対象物の運動は、自車に対して固定的に設定された座標系内における運動となるため、本項の構成を採用することが便利な場合が多い。そして、本項の構成が採用される場合には、判定装置が、移動経路予測装置により予測された対象物の移動経路に基づいて自車が対象物と衝突する可能性があるか否かの判定が行われることとなる。
(8)路面に対して固定的に設定された座標系内において、前記車両としての自車の走行経路である自車走行経路を予測する自車走行経路予測装置と、前記対象物としての自車以外の車両である他車の走行経路である他車走行経路を予測する他車走行経路予測装置とを含む (1)項ないし (6)項のいずれかに記載の車両衝突可能性検出装置。
前述のように、自車が他車と衝突するか否かは、他車の走行経路と自車の走行経路とが干渉するか否かと、その交差する位置へ他車と自車とが到達するまでの時間が同じであるか否かとによって判定されるようにすることが望ましく、本項の構成によれば、その通りの判定が行われるようにすることができる。その場合、自車走行経路予測装置としては、自車の操舵装置の状態に関連する情報である自車操舵関連情報取得装置と、自車の走行速度を検出する自車車速センサとを備えたものが好適であり、他車走行経路予測装置としては、少なくとも前記他車情報受信装置を備えたものが好適である。ただし、不可欠ではなく、例えば、自車走行経路予測装置により自車の走行経路を予測するとともに、レーダ装置により得られる主情報および補助情報取得装置により得られる補助情報と、自車走行経路予測装置により予測される自車走行経路の情報とに基づけいて、他車走行経路予測が行われるようにすることも可能である。
(9)前記自車走行経路予測装置が、自車の操舵に関連する操舵関連量を検出する自車操舵関連量検出装置と、自車の走行速度を検出する自車速検出装置とを含む (8)項に記載の車両衝突可能性検出装置。
(10)前記自車操舵関連量取得装置が、操舵角センサ,ジャイロメータ,ヨーレイトセンサ,横加速度センサの少なくとも1つを含む (9)項に記載の車両衝突可能性検出装置。
【0009】
【発明の実施の形態】
図1ないし図8に本発明の一実施形態である車両衝突可能性検出装置を備えた衝突回避装置を示す。
本衝突回避装置は、図1に示すように、レーダ装置2,補助情報取得装置4,判定装置6,警報装置8および自動制動装置10を含んでいる。レーダ装置2は、車両(自車12と称する。図3参照)の前部に設けられ、自車12の前方の設定領域内に存在する物のうち、設定寸法以上の物の、自車12に対する相対位置と相対速度とを検出するものである。補助情報取得装置4は、レーダ装置2によって取得される主情報としての相対位置および相対速度に対して、補助的な役割を果たす補助情報を取得するものである。判定装置6は、レーダ装置2および補助情報取得装置4に接続され、それらによって取得される主情報と補助情報とに基づいて、自車12が別の車両(他車と称する)等の移動物や路側に存在する電柱等の静止物と衝突する可能性があるか否かを判定するものである。警報装置8は、判定装置6が衝突の可能性があると判定した場合に、それの出力信号に応じて運転者に警報するものであり、自動制動装置10は判定装置6の出力信号に応じてブレーキを自動的に作動させて自車12を緊急に停止させるものである。以下、各装置をさらに詳細に説明する。なお、判定装置6には、自車12の走行速度を検出する車速センサ14も接続されている。
【0010】
レーダ装置2は、図3に示すように、自車12に対して固定的に設定されたXY座標面上に存在する移動物および静止物の中に、自車12と衝突する可能性のある対象物が存在するか否かを調べ、存在すれば、その対象物のXY座標面内における位置と移動速度とを取得するものである。XY座標面は、自車12の幅方向に平行なX軸と、前後方向に平行でかつ幅方向の中央を通るY軸とによって規定されており、そのXY座標面内の対象物の位置は自車12に対する相対位置であり、移動速度は自車12に対する相対速度であることになる。
【0011】
レーダ装置2は、図2に示すように、送信側回路16と受信側回路18とを備えている。送信側回路16は搬送波発生器20,周波数変調器22,変調電圧発生器24,方向性結合器26および送信アンテナ28を備えている。搬送波発生器20によって発生させられた搬送波が、変調電圧発生器24により発生させられた変調電圧に基づいて周波数変調器22により変調されるのであるが、変調電圧は本実施形態においては三角波とされているため、周波数変調器22の出力信号は、周波数が直線的に増加しては直線的に減少するものとなる。この出力信号は方向性結合器26を経て送信アンテナ28からミリ波の送信信号として送信される。
【0012】
一方、受信側回路18は、受信アンテナ36,ミキサ38,増幅器40,フィルタ42,高速フーリエ変換処理器(FFT)44,対象物認識器46およびアンテナ回動装置48を備えている。送信アンテナ28および受信アンテナ36は共に指向性の高いものとされているとともに、アンテナ回動装置48により、Y軸を中心線とする一定角度範囲の領域を往復回動させられる。この往復回動の間に、送信アンテナ28から送信され、自車12の前方に存在する移動物および静止物により反射された反射波が受信アンテナ36に受信される。送信アンテナ28および受信アンテナ36の回動につれて、送信アンテナ28から送信されたミリ波を反射する移動物および静止物が変わるため、それぞれの物によって反射された反射波がそれぞれ時間を異にして受信アンテナ36に受信され、ミキサ38に供給される。ただし、ミキサ38に供給される信号は設定レベル以上のもののみであり、それによって、移動物および静止物のうち、自車12との衝突を問題にすべき物のみが対象物として選定されることとなる。
【0013】
ミキサ38は、受信アンテナ36からの受信信号と、前記方向性結合器26から送られる信号、すなわち周波数変調器22の出力信号である送信信号とを差分演算により結合し、ビート信号を生成する。このビート信号は増幅器40により増幅され、フィルタ42を経てFFT44に供給される。FFT44は、増幅されたビート信号の周波数増大部分および周波数減少部分それぞれのパワースペクトラムを取得して対象物認識器46に供給する。対象物認識器46は、供給された周波数増大部分および周波数減少部分それぞれのパワースペクトラムのピークを検出してペアリングを行い、各対象物に対応するピーク対を形成する。このピーク対の周波数増大部分のピーク周波数fupと周波数減少部分のピーク周波数fdownとから次式により相対速度周波数frvおよび相対距離周波数frdを取得する。
frv=(fdown−fup)/2
frd=(fdown+fup)/2
さらに、これら相対速度周波数frvおよび相対距離周波数frdから次式に基づいて相対速度vおよび相対距離dを取得する。
frv=2・v/C・f0
frd=4・fm・Δf/C・d
ただし、C:光速,f0:中心周波数,fm:変調周波数,Δf:周波数変移幅
【0014】
対象物認識器46はさらに、上記のようにして取得した各対象物までの相対距離dと、アンテナ回動装置48から供給されるアンテナ回動角度θとの情報に基づいて、図3に示すように、自車12に対する各対象物(図示の例では他車50)の相対位置の座標(x1,y1)を取得する。
【0015】
なお、以上の説明から明らかなように、本実施形態においては対象物は点として認識され、その点の位置が対象物の位置とされるのであるが、対象物、例えば他車50が、大きさのあるもの、特に自車12の幅方向において寸法を有するものとして認識されるようすることも可能であり、そのようにすれば、自車12との衝突の可能性の有無をより正確に判定することが可能となる。対象物が自車12の幅方向に幅のあるものとして認識される場合には、例えば、対象物のうち幅方向において自車12に近い側の端の座標を対象物の位置の座標としたり、中央の座標を対象物の位置の座標としたりすることができる。
【0016】
補助情報取得装置4は、図1に示すように、撮像装置60および画像処理装置62を備えている。撮像装置62は自車12の前部に設けられ、自車前方の図4に例示するような画像を撮像するものであり、画像処理装置62は撮像された画像のデータを処理して、各対象物の像を抽出するものである。この対象物の抽出には、レーダ装置2から供給される各対象物の相対位置の座標が利用される。各対象物の自車12に対する相対位置が判れば、それら対象物の像が形成される画像内の位置が判るため、その位置にある対象物の画像の輪郭線が取得されるのである。画像処理装置62は、抽出した各対象物の、画像内における左右方向の移動速度を取得し、さらに、その移動速度と各対象物の相対位置とに基づいて、各対象物の自車12に対する自車12の幅方向の相対位置変化を取得する。相対位置変化は、本実施形態においては、相対位置変化の向きと大きさとで規定される。
【0017】
上記画像処理を行うために、画像処理装置62を構成するコンピュータのROMには画像処理プログラムが格納されている。この画像処理プログラムは、図5に示すフローチャートで表されるものであり、まず、ステップ1(S1と略記する。他のステップについても同様)において、撮像装置60からの画像データの読込みが行われ、S2において、レーダ装置2から、各対象物の相対位置の座標(ここでは他車50の位置の座標(x1,y1)とする)が読み込まれる。続いて、S3において他車50の輪郭線が取得され、S4において、他車50の像の画像内における幅と位置変化速度とが取得される。例えば、図4において二点鎖線で示されている他車50の像が実線で示されている像に変化するため、実線の像の幅が取得されるとともに、上記位置の、単位時間当たりの左右方向における変化量が位置変化速度として取得されるのである。そして、S5において、上記幅および位置変化速度と、他車50の自車12に対する前記相対位置の座標(x1,y1)とに基づいて、他車50の実際の幅と、他車50の自車12に対する自車12の幅方向(X軸方向)の相対位置変化とが取得される。
【0018】
画像処理装置62はさらに、撮像装置60により撮像された画像の中から、他車の方向指示装置としてのターンシグナルランプの像64を抽出する機能を備えている。ターンシグナルランプの像64は比較的明るい像であり、かつ、それぞれ一定の周期で点滅するため、画像処理装置62はこれら2つの条件に適合する像をターンシグナルランプの像64として抽出するようにされているのである。なお、本実施形態においては、撮像装置60としてモノクロカメラが使用されているが、フルカラーカメラを使用すれば、明るさの情報と共に、あるいは明るさの情報に代えて、色の情報を利用し得るため、ターンシグナルランプの像64の抽出が容易になる。
【0019】
上記ターンシグナルランプの像64の抽出は図6に示すフローチャートで表されるターンシグナルランプ抽出プログラムの実行により行われる。図7に示すように、位置P1、P2に明るい領域が存在するが、位置P1の領域はターンシグナルランプの像64ではないため点滅せず、位置P2の領域はターンシグナルランプの像64であって点滅すると仮定して、このフローチャートによるターンシグナルランプの像64の抽出を説明する。図7の (a)は、横軸を時間軸、縦軸を位置を表す軸として、明るい領域の変化を示したものであり、 (b)ないし (d)は以下の説明中における明/暗領域メモリ,暗/明領域メモリおよびランプ像候補メモリにおけるデータの格納をイメージ化して示したものである。なお、ターンシグナルランプ抽出プログラムは一定時間ごとに1回実行され、その一定微小時間はターンシグナルランプの点滅周期との関係において著しく短いのであるが、図7においては、図示の都合上実際より遙かに長くされている。また、自車12および他車50の走行につれて、明るい領域の位置は時々刻々変化するのであるが、図7はその位置の変化を無視しして描かれている。また、図7の (b)ないし (d)における (1), (2)・・・等の数字は、各メモリへのデータの格納順序を示している。
【0020】
ターンシグナルランプ抽出プログラムの実行時には、まず、S11において画像データが読み込まれ、S12で画像中の設定明るさ以上の明るさの領域が抽出されるとともに、その領域の位置の座標が明領域メモリに記憶される。上記設定明るさは、点灯状態にあるシグナルランプの像64の明るさよりやや暗い明るさに設定されている。また、抽出された各「明」の領域が前回抽出された「明」の領域と同じものであるか否かが判定され、同じものであると判定されれば、前回抽出された「明」の領域のデータが消去される。「明」の領域の位置を示す座標が更新されるのである。前回と今回との「明」の領域が同じものであるか否かは、両者の座標の差の絶対値が設定微小値以下であるか否かによって判定される。S12に続いてS13が実行され、「明」から「暗」に変化した領域があるか否かの判定が行われる。前回のS13の実行時に明るさが設定明るさ以上であった領域であって今回は設定明るさより暗くなった領域があるか否かが判定されるのであるが、当初はこの判定の結果はNOであり、S15が実行されて、「暗」から「明」に変化した領域があるか否かの判定が行われる。この判定は、S12で抽出された領域のうちに、前回は「明」の領域として抽出されなかった領域があるか否かの判定によって行われる。そして、「暗」から「明」に変化した領域があれば、S16において、その判定が行われた時間と、その領域の位置とが互いに対応付けられて、暗/明領域メモリに格納される。この格納が、図7の (c)に (1)で示されている。このデータは、後にS13において使用される。S16の実行後、S17において、上記暗/明領域メモリに格納された領域が前に「明」から「暗」に変化した領域であるか否かが判定される。この判定は、S16において暗/明領域メモリに格納された位置から設定範囲内の位置に、S14において明/暗領域メモリに格納された位置が存在するか否かを判定することにより行われる。この判定の結果がYESとなるのは、図7の (c)において (3)のデータ格納が行われた場合であり、S18において、S16でデータが格納された時間からS14でデータが格納された時間(図7の (b)において (2)のデータが格納された時間)が差し引かれ、「明」から「暗」に変化した時間と「暗」から「明」に変化した時間との時間間隔が取得される。そして、取得された時間間隔(図7の (d)において矢印で示す)が、ランプ像候補メモリに格納されるとともに、それに対応付けて「暗」から「明」に変化した領域の位置の座標が格納される。また、図7の (b)において格納された (2)のデータと図7の (c)において格納された (3)のデータとが消去される。
【0021】
続いて、S19において、ランプ像候補メモリに既にランプ像候補のデータが格納されているか否かが判定される。この判定結果がYESとなるのは、図7の (c)において (5)のデータ格納が行われた場合であり、S20において、その既にデータが格納されているランプ像候補が、S18で格納されたデータのランプ像候補と同じものであるか否かが判定される。この判定は、それら両ランプ像候補の時間間隔と位置との差が共に各設定差以内であるか否かによって行われる。そして、S20の判定結果がYESであれば、S21において、ランプ像候補メモリにS18で格納されたランプ像候補が点滅中のターンシグナルランプの像を示す領域64として確定される。例えば、ランプ像に確定されたことを示すデータが付加されるのである。また、図7の (d)で格納されたランプ像候補のデータが消去される。なお、上記「ランプ像に確定されたことを示すデータ」が付加された後も、時間間隔と位置との情報の更新は継続される。S21の実行後、S22において、明/暗領域メモリおよび暗/明領域メモリに格納されている時間のうちで現時点までの経過時間が設定経過時間より長いものがあるか否かの判定が行われる。例えば、図7の (c)において格納された (1)のデータがこれに相当し、S23においてそれのデータが消去され、もしあれば消去されたデータに対応するランプ像候補メモリのデータも消去される。ターンシグナルランプの「明」,「暗」の時間は、一定時間範囲に限られているため、その時間範囲の上限との比較において、ターンシグナルランプの像64である可能性がなくなったもののデータが消去されるのである。S22およびS23は、S15,S17,S19,S20の判定結果がNOになった場合にも実行される。
なお、本実施形態においてはS20の判定結果が1回YESであれば、ターンシグナルランプの像64として確定されるようになっているが、2回以上の設定回数YESであった場合に初めて、ターンシグナルランプの像64として確定されるようにすることも可能である。
【0022】
以上説明したレーダ装置2および補助情報取得装置4の情報に基づいて、判定装置6が図8に示すフローチャートで表される判定プログラムの実行により、自車12が他車50と衝突する可能性があるか否かを判定する。
まず、S31においてレーダ装置2から、他車50等対象物の各々の自車12に対する相対位置および相対速度のデータが読み込まれる。その読み込まれたデータに基づいて、S32で自車12と対象物のいずれかとが衝突する可能性があるか否かの判定が行われる。この判定は、図3に例示した状況においては、対象物としての他車50の自車12に対する相対位置の座標(x1,y1)と相対移動速度vとに基づいて行われる。具体的判定はいろいろな方法で行い得るが、本実施形態においては、XY座標面が複数の領域Aに区切られるとともに、各領域Aごとに相対移動速度vの下限値が設定されたマップが準備されており、レーダ装置2から読み込まれた他車50の自車12に対する相対移動速度vが、相対位置の座標(x1,y1)とマップとにより決まる設定下限値より大きければ、衝突の可能性があると判定される。
【0023】
その判定に基づいて、S33で第一警報が発せられる。本実施形態においては、判定装置6に接続された警報装置8のスピーカによって、運転者に衝突の可能性がある旨の音声報知が行われるのである。続いて、S34において、補助情報取得装置4の画像処理装置62から自車12の幅方向における他車50の幅と相対移動速度とが読み込まれ、S35において、それら幅および相対移動速度と、上記他車50の自車12に対する相対位置の座標(x1,y1)とに基づいて、衝突の可能性が確認される。レーダ装置2は自車12と対象物との相対距離や相対移動速度を正確に取得し得るものであるが、対象物の幅は取得できず、また、対象物の自車12の幅方向における相対位置、特に急激な相対位置の変化を正確に取得しにくいものである。それに対して、撮像装置60の撮像した画像のデータ処理によれば、対象物の幅や急激な相対位置の変化を正確に速やかに取得し得る。そこで、レーダ装置2により取得された情報に基づいて衝突の可能性があると判定された場合に、撮像装置60により取得された情報に基づいて、衝突の可能性のあることが確認されるのである。確認された場合には、S37において第二警報が発せられる。この第二警報は前記第一警報に比較して、緊急性の高さを運転者に知らせる形態で行われる。本実施形態においては、運転者に衝突の可能性があることを報知する音声が大きくされるが、ブザーが鳴動するようにしてもよい。
【0024】
さらに、S38において、未だ運転者の操舵によって衝突を回避し得る状況であるか否かが判定される。この判定は、前記自車12と対象物との相対位置および相対速度と、車速センサ14から読み込まれた自車12の走行速度とに基づいて行われるが、本発明を理解する上で必要がないため、詳細な説明は省略する。判定の結果、衝突回避不可能と判定された場合には、S39で自動制動装置10に作動指令が発せられ、車両がその路面上で実現可能な最大限の減速度で停止させられる。制動装置が最大の作動力で作動させられ、それによって車輪と路面とのスリップ率が過大になる場合にはアンチロック制御が行われるのである。
【0025】
それに対して、S35の判定結果がNOになった場合には、S36で他車50のターンシグナルランプの像64が、他車50が自車12と衝突する可能性のある方向に方向変更することを示しているか否かが判定される。そして、判定の結果がYESであれば、S37ないしS39が実行される。なお、上記判定は、図5の画像処理プログラムの実行により取得された他車50の輪郭線と、図6のターンシグナルランプ抽出プログラムの実行により抽出されたターンシグナルランプの像64との相対位置に基づいて行われるようにすることも可能である。しかし、本実施形態においては、ターンシグナルランプの像64のx座標の大きさに基づいて判定される。y座標が複数範囲に分割され、各範囲に対して判定値が予め設定されており、点滅中のターンシグナルランプの像64であるとされたもののx座標が上記判定値以下であれば、そのターンシグナルランプの像64が、他車50の自車側の端部に設けられているターンシグナルランプのものであり、したがって、そのターンシグナルランプが、他車50が自車12と衝突する可能性のある方向に方向変更することを示していると判定されるのである。
【0026】
本実施形態においては、補助情報取得装置4の画像処理装置62が、図5のフローチャートで表される画像処理プログラムを実行することにより、対象物の自車12に対する、自車12の幅方向における相対位置変化を取得する相対位置変化取得装置を構成している。また、撮像装置60と、画像処理装置62の図6のフローチャートで表されるターンシグナルランプ抽出プログラムを実行する部分とが、少なくとも1台の他車50の方向指示装置の一種であるターンシグナルランプの状態を取得する方向指示状態取得装置を構成している。そして、判定装置6が、それら相対位置変化取得装置および方向指示状態取得装置両装置により取得された相対位置変化とターンシグナルランプの状態との少なくとも一方が、対象物あるいは他車50と自車12とが衝突する可能性があることを示す場合に、衝突可能性確認を行うようになっている。そのため、相対位置変化とターンシグナルランプの状態とのいずれか一方の取得に支障があった場合でも、衝突可能性確認が確実に行われる利点がある。例えば、薄暮等においては他車50等の撮像が良好に行われにくい反面、ターンシグナルランプの検出はかえって良好に行われるため、両方の検出結果を使用することが望ましいのである。しかし、相対位置変化取得装置と方向指示状態取得装置とのいずれか一方を省略することも可能である。また、両装置のいずれか一方を、他の補助情報取得装置と併用することも可能である。
【0027】
本発明の別の実施形態を図9ないし図11に示す。本実施形態は、自車12に搭載された装置からの情報に基づいて自車の走行経路を予測する一方、レーダ装置2により取得した他車50の相対位置と他車50との通信によって取得した他車の情報とに基づいて他車50の走行経路を予測し、それら両走行経路に基づいて自車12と他車50とが衝突する可能性があるか否かを検出するものである。
【0028】
本実施形態においては、自車12と他車50とにそれらの走行経路を予測するための情報を取得する装置として、地磁気センサ80と、各車両の向きを検出するジャイロメータ82と、各車両の走行速度を検出するための車速センサ84とが設けられている。自車12の地磁気センサ80,ジャイロメータ82および車速センサ84は自車走行経路予測部86に接続されており、自車走行経路予測部86は、地磁気センサ80およびジャイロメータ82から供給される情報に基づいて現時点における自車12の方位およびその方位の変化速度を取得するとともに、車速センサ84から供給される車速を使用して、現時点から設定時間内における自車12の走行経路を予測する。なお、この走行経路は自車12に対して固定的に設定されたXY座標面上において予測されるため、自車12自体の走行経路を予測するためには、地磁気センサ80の情報は不要であり、他車50において必要であることになる。
【0029】
また、自車12にはさらに、レーダ装置2および他車情報受信装置90が設けられている。レーダ装置2は前記実施形態におけるレーダ装置2と同様のものであり、自車12に対する他車50の相対位置と相対移動速度とを取得する。また、他車情報受信装置90は、他車50に設けられた情報送信装置からの送信信号を受信するものである。情報送信装置は、他車50に設けられた地磁気センサ80,ジャイロメータ82および車速センサ84によって検出された他車50の方位,方位の変化速度および車速を他車情報として送信するものであり、その送信された他車情報を他車情報受信装置90が受信するのである。レーダ装置2および他車情報受信装置90には他車走行経路予測部92が接続されており、それらから供給される情報に基づいて他車50の走行経路を予測する。
【0030】
図10に、上記のように予測された自車12および他車50の走行経路の一例を示し、図11に、その予測に基づいて判定装置94において実行される自車12と他車50との判定プログラムのフローチャートを示す。以下、図10に示すように、自車12が直進し、他車50が右折するものと仮定して説明する。なお、本実施形態においては、単純化のために、自車12と他車50との車幅等の寸法は予め設定された一定値であるとされ、各車両の位置は車幅方向の中央の座標で表される。
【0031】
まず、S51において、自車12と他車50との相対移動速度が設定相対速度以上であるか否かが判定される。相対移動速度が設定値以下である場合には、運転者が既に他車50の近傍を慎重に通過しようとしていると考えられ、また、万が一衝突しても損害は小さいと考えられるため、相対移動速度が設定相対移動速度より小さい場合には、S52以下の実行が行われないようにされているのである。S51の判定結果がYESであった場合には、S52において、自車12と他車50との走行経路が互いに干渉するか否か、すなわち両走行経路間の最小距離が設定距離より小さいか否かが判定される。上記最小距離は、自車12および他車50の前記車幅よりやや大きい値に設定されている。また、自車12と他車50との走行経路が交差する場合には、最小距離が0となる。
【0032】
S52の判定結果がYESであった場合は、S53において、自車12と他車50とが衝突する可能性があるか否かが判定される。この判定は、自車12と他車50とがそれぞれ前記最小距離の地点へ到達する時間の差が予め設定された設定時間差以下であるか否かが判定される。上記設定時間差は、自車12と他車50との前記寸法を考慮して、自車12と他車50とのいずれの部分も互いに接触しないと考えられる大きさに設定されている。S53の判定結果がYESの場合には、S54で衝突の可能性がある旨の警報が発せられ、S55において、未だ、運転者による操舵により衝突を回避し得るか否かが判定される。そして、S55の判定結果がNOの場合には、S56で自動制動の指令が発せられる。これらS55およびS56は、前記実施形態におけるそれらと同じである。
【0033】
以上の説明から明らかなように、本実施形態においては、レーダ装置2によって取得される他車との相対位置および相対移動速度の情報が主情報であり、他車50との通信によって取得される他車情報が副情報である。これら主情報および副情報と、自車12において、ジャイロメータ82,車速センサ84等の自車走行関連情報取得装置により取得される自車12の走行に関連する自車走行関連情報とに基づいて、自車12と他車50との衝突可能性が検出されるのである。また、自車走行経路予測部86および他車走行経路予測部92がそれぞれ、自車走行経路予測装置および他車走行経路予測装置とを構成しており、他車走行経路予測装置が対象物移動経路予測装置の一例である。
【0034】
前記実施形態においては、撮像装置60が1つ設けられ、画像処理装置62がその1つの撮像装置60の画像データに基づいて対象物の情報を取得するものとされていたが、撮像装置を車幅方向等、車両の前後方向に対して直交する方向において間隔をあけて2つ設け、画像処理装置をそれら2つの撮像装置62により取得される画像に基づいて、すなわち視差に基づいて対象物までの距離を取得するものとすることも可能である。この場合には、レーダ装置と画像処理装置との両方において、対象物までの距離や相対移動速度が取得可能となるため、衝突可能性検出の信頼性を高くすることができる。
【0035】
以上、本発明のいくつかの実施形態を詳細に説明したが、これらは例示に過ぎず、本発明は、前記〔発明が解決しようとする課題,課題解決手段および効果〕の項に記載された態様を始めとして、当業者の知識に基づいて種々の変更、改良を施した形態で実施することができる。
【図面の簡単な説明】
【図1】本発明の一実施形態である車両衝突可能性検出装置を示すブロック図である。
【図2】上記車両衝突可能性検出装置の一構成要素であるレーダ装置を示すブロック図である。
【図3】上記レーダ装置からの情報に基づいて判定装置により行われる衝突可能性の判定を説明するための図である。
【図4】前記車両衝突可能性検出装置の別の構成要素である撮像装置により取得される画像の一例を示す図である。
【図5】上記画像に基づいて画像処理装置において行われる画像処理プログラムを表すフローチャートである。
【図6】上記画像に基づいて画像処理装置において行われるターンシグナルランプ抽出プログラムを表すフローチャートである。
【図7】上記ターンシグナルランプの抽出を説明するための図である。
【図8】前記レーダ装置および画像処理装置により取得された情報に基づいて判定装置において実行される判定プログラムを表すスローチャートである。
【図9】本発明の別の実施形態である車両衝突可能性検出装置を示すブロック図である。
【図10】上記車両衝突可能性検出装置の一構成要素である判定装置における衝突可能性判定を説明するための図である。
【図11】上記判定装置において実行される判定プログラムを表すフローチャートである。
【符号の説明】
2:レーダ装置 4:補助情報取得装置 6:判定装置 8:警報装置 10:自動制動装置 12:自車 14:車速センサ 16:送信側回路 18:受信側回路 50:他車 60:撮像装置 62:画像処理装置 64:ターンシグナルランプの像 80:地磁気センサ 82:ジャイロメータ 84:車速センサ 86:自車走行経路予測部 90:他車情報受信装置 92:他車走行経路予測部 94:判定装置
Claims (5)
- 車両に搭載され、対象物を検出するレーダ装置と、
そのレーダ装置とは別に前記車両に設けられ、前記対象物の移動状態に関する補助情報を取得する補助情報取得装置と、
前記レーダ装置により検出された対象物の情報に基づいて前記車両と前記対象物との少なくとも相対位置および相対移動速度を含む主情報を取得し、その主情報に前記補助情報取得装置により取得された補助情報を加味して前記車両と前記対象物との衝突の可能性を判定する判定装置と
を含む車両衝突可能性検出装置。 - 前記レーダと前記補助情報取得装置とが前記車両の進行方向前方に存在する前記対象物を検出可能な状態で前記車両に設けられた請求項1に記載の車両衝突可能性検出装置。
- 前記補助情報取得装置が、
前記車両に搭載され、前記対象物を撮像する撮像装置と、
その撮像装置により撮像された画像のデータ処理により、前記対象物の前記車両に対する相対位置変化を取得する相対位置変化取得装置と
を含む請求項1または2に記載の車両衝突可能性検出装置。 - 前記対象物が、前記車両である自車とは別の少なくとも1台の他車を含み、前記補助情報取得装置が、その少なくとも1台の他車から送信されるその少なくとも1台の他車の走行状態に関する情報を受信する他車情報受信装置を含む請求項1ないし3のいずれかに記載の車両衝突可能性検出装置。
- 前記対象物が、前記車両である自車とは別の少なくとも1台の他車であり、前記補助情報取得装置が、その少なくとも1台の他車の方向指示装置の状態を取得する方向指示状態取得装置を含む請求項1ないし4のいずれかに記載の車両衝突可能性検出装置。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2003088495A JP2004295620A (ja) | 2003-03-27 | 2003-03-27 | 車両衝突可能性検出装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2003088495A JP2004295620A (ja) | 2003-03-27 | 2003-03-27 | 車両衝突可能性検出装置 |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2004295620A true JP2004295620A (ja) | 2004-10-21 |
Family
ID=33402606
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2003088495A Pending JP2004295620A (ja) | 2003-03-27 | 2003-03-27 | 車両衝突可能性検出装置 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP2004295620A (ja) |
Cited By (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2007249911A (ja) * | 2006-03-20 | 2007-09-27 | Toshiba Corp | 衝突防止装置 |
JP2007304034A (ja) * | 2006-05-15 | 2007-11-22 | Alpine Electronics Inc | 車載道路形状識別装置 |
JP2008026095A (ja) * | 2006-07-20 | 2008-02-07 | Fujitsu Ten Ltd | 車載レーダ制御方法及び車載レーダ制御装置 |
JP2008114672A (ja) * | 2006-11-02 | 2008-05-22 | Aisin Aw Co Ltd | 運転支援装置および運転支援方法 |
JP2009085760A (ja) * | 2007-09-28 | 2009-04-23 | Toyota Motor Corp | 物体検出装置 |
JP2010015337A (ja) * | 2008-07-02 | 2010-01-21 | Fujitsu Ten Ltd | 運転支援装置、運転支援制御方法および運転支援制御処理プログラム |
US7986261B2 (en) | 2009-02-25 | 2011-07-26 | Toyota Jidosha Kabushiki Kaisha | Collision prediction system and collision predicting method |
KR20170049927A (ko) * | 2015-10-29 | 2017-05-11 | 주식회사 만도 | 차량의 충돌 회피 시스템 및 방법 |
KR20200040149A (ko) * | 2018-10-08 | 2020-04-17 | 주식회사 만도 | 타깃 탐지 장치 및 방법과, 차량 제어 장치 및 방법 |
CN112130136A (zh) * | 2020-09-11 | 2020-12-25 | 中国重汽集团济南动力有限公司 | 一种交通目标综合感知系统及方法 |
US11571814B2 (en) | 2018-09-13 | 2023-02-07 | The Charles Stark Draper Laboratory, Inc. | Determining how to assemble a meal |
-
2003
- 2003-03-27 JP JP2003088495A patent/JP2004295620A/ja active Pending
Cited By (24)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2007249911A (ja) * | 2006-03-20 | 2007-09-27 | Toshiba Corp | 衝突防止装置 |
JP2007304034A (ja) * | 2006-05-15 | 2007-11-22 | Alpine Electronics Inc | 車載道路形状識別装置 |
US8594919B2 (en) | 2006-05-15 | 2013-11-26 | Alpine Electronics, Inc. | On-vehicle road configuration identifying device |
JP2008026095A (ja) * | 2006-07-20 | 2008-02-07 | Fujitsu Ten Ltd | 車載レーダ制御方法及び車載レーダ制御装置 |
JP2008114672A (ja) * | 2006-11-02 | 2008-05-22 | Aisin Aw Co Ltd | 運転支援装置および運転支援方法 |
JP2009085760A (ja) * | 2007-09-28 | 2009-04-23 | Toyota Motor Corp | 物体検出装置 |
JP2010015337A (ja) * | 2008-07-02 | 2010-01-21 | Fujitsu Ten Ltd | 運転支援装置、運転支援制御方法および運転支援制御処理プログラム |
US7986261B2 (en) | 2009-02-25 | 2011-07-26 | Toyota Jidosha Kabushiki Kaisha | Collision prediction system and collision predicting method |
KR102276410B1 (ko) | 2015-10-29 | 2021-07-12 | 주식회사 만도 | 차량의 충돌 회피 시스템 및 방법 |
KR20170049927A (ko) * | 2015-10-29 | 2017-05-11 | 주식회사 만도 | 차량의 충돌 회피 시스템 및 방법 |
US11571814B2 (en) | 2018-09-13 | 2023-02-07 | The Charles Stark Draper Laboratory, Inc. | Determining how to assemble a meal |
US11607810B2 (en) | 2018-09-13 | 2023-03-21 | The Charles Stark Draper Laboratory, Inc. | Adaptor for food-safe, bin-compatible, washable, tool-changer utensils |
US11872702B2 (en) * | 2018-09-13 | 2024-01-16 | The Charles Stark Draper Laboratory, Inc. | Robot interaction with human co-workers |
US11597084B2 (en) | 2018-09-13 | 2023-03-07 | The Charles Stark Draper Laboratory, Inc. | Controlling robot torque and velocity based on context |
US11597087B2 (en) | 2018-09-13 | 2023-03-07 | The Charles Stark Draper Laboratory, Inc. | User input or voice modification to robot motion plans |
US11597085B2 (en) | 2018-09-13 | 2023-03-07 | The Charles Stark Draper Laboratory, Inc. | Locating and attaching interchangeable tools in-situ |
US11597086B2 (en) | 2018-09-13 | 2023-03-07 | The Charles Stark Draper Laboratory, Inc. | Food-safe, washable interface for exchanging tools |
US11673268B2 (en) | 2018-09-13 | 2023-06-13 | The Charles Stark Draper Laboratory, Inc. | Food-safe, washable, thermally-conductive robot cover |
US11628566B2 (en) | 2018-09-13 | 2023-04-18 | The Charles Stark Draper Laboratory, Inc. | Manipulating fracturable and deformable materials using articulated manipulators |
US11648669B2 (en) | 2018-09-13 | 2023-05-16 | The Charles Stark Draper Laboratory, Inc. | One-click robot order |
KR102612335B1 (ko) * | 2018-10-08 | 2023-12-12 | 주식회사 에이치엘클레무브 | 타깃 탐지 장치 및 방법과, 차량 제어 장치 및 방법 |
KR20200040149A (ko) * | 2018-10-08 | 2020-04-17 | 주식회사 만도 | 타깃 탐지 장치 및 방법과, 차량 제어 장치 및 방법 |
CN112130136A (zh) * | 2020-09-11 | 2020-12-25 | 中国重汽集团济南动力有限公司 | 一种交通目标综合感知系统及方法 |
CN112130136B (zh) * | 2020-09-11 | 2024-04-12 | 中国重汽集团济南动力有限公司 | 一种交通目标综合感知系统及方法 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US9463796B2 (en) | Driving assistance apparatus | |
JP4740449B2 (ja) | 車載用レーダの上下軸ずれ検出装置 | |
KR20200102004A (ko) | 충돌 방지 장치, 시스템 및 방법 | |
US10302760B2 (en) | Vehicle water detection system | |
US20150353078A1 (en) | Driving assistance apparatus | |
JPWO2007111130A1 (ja) | レーダ装置および移動体 | |
JP2006349456A (ja) | 車載レーダ装置、車両制御システム | |
JP2014227000A (ja) | 車両制御装置、その方法およびそのプログラム | |
JP2001124848A (ja) | ミリ波レーダ装置 | |
WO2020166338A1 (ja) | 運転支援装置 | |
JP7111181B2 (ja) | 検知装置、移動体システム、及び検知方法 | |
EP3690484B1 (en) | Radar device and target detection method | |
JP2014241115A (ja) | 周辺物体検知装置 | |
JP2014102165A (ja) | 物標判定装置 | |
JP2004295620A (ja) | 車両衝突可能性検出装置 | |
JP2005049281A (ja) | 物体認識装置、及び物体認識方法 | |
JP2008064743A (ja) | 車載レーダ装置 | |
JP6881001B2 (ja) | 自動走行制御装置 | |
JP2002207077A (ja) | 車載レーダ走行支援装置 | |
JP2019021120A (ja) | 合流支援装置および合流支援方法 | |
JP2011086139A (ja) | 車両の衝突を回避するための装置 | |
JP2014211332A (ja) | レーダ装置、レーダ装置の制御方法 | |
JP4684876B2 (ja) | レーダー装置及びレーダー装置の対象物検出方法 | |
JP2005164492A (ja) | 天候判定装置及び天候判定方法 | |
JP2014109944A (ja) | 物標検出装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20050915 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20070618 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20070703 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20070903 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20071120 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20080325 |