JP6192228B2 - Object recognition device - Google Patents
Object recognition device Download PDFInfo
- Publication number
- JP6192228B2 JP6192228B2 JP2014107171A JP2014107171A JP6192228B2 JP 6192228 B2 JP6192228 B2 JP 6192228B2 JP 2014107171 A JP2014107171 A JP 2014107171A JP 2014107171 A JP2014107171 A JP 2014107171A JP 6192228 B2 JP6192228 B2 JP 6192228B2
- Authority
- JP
- Japan
- Prior art keywords
- support control
- control device
- vehicle
- imaging device
- detection
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Description
この発明は、物体認識装置に関する。 The present invention relates to an object recognition apparatus.
従来、車両に搭載されるステレオカメラおよびレーザレーダによって同一の先行車両を認識して、追従走行などの各種の走行制御を行なう装置が知られている（例えば、特許文献１参照）。 2. Description of the Related Art Conventionally, there has been known a device that recognizes the same preceding vehicle by a stereo camera and a laser radar mounted on the vehicle and performs various traveling controls such as follow-up traveling (for example, see Patent Document 1).
ところで、上記従来技術に係る物体認識装置によれば、車両および検知対象の状態に応じてカメラの検出精度が異なる場合があり、この検出精度の変化に応じて適切な制御を行なうことが望まれている。 By the way, according to the object recognition apparatus according to the above prior art, the detection accuracy of the camera may differ depending on the state of the vehicle and the detection target, and it is desired to perform appropriate control according to the change in the detection accuracy. ing.
本発明は上記事情に鑑みてなされたもので、カメラの検出精度の変化に応じて適切な制御を行なうことが可能な物体認識装置を提供することを目的としている。 The present invention has been made in view of the above circumstances, and an object of the present invention is to provide an object recognition apparatus capable of performing appropriate control according to a change in detection accuracy of a camera.
上記課題を解決して係る目的を達成するために、本発明は以下の態様を採用した。
（１）本発明の一態様に係る物体認識装置は、移動体（例えば、実施形態での車両１）に搭載され、物体を検出する検出装置（例えば、実施形態での撮像装置１２）と、前記検出装置で検出された前記物体に対応する支援制御を行う支援制御装置（例えば、実施形態での支援制御装置１４）と、を備え、前記支援制御装置は、前記移動体が停止している場合には、前記支援制御を抑制する。
In order to solve the above problems and achieve the object, the present invention employs the following aspects.
(1) An object recognition device according to an aspect of the present invention is mounted on a moving body (for example, the
（２）上記（１）に記載の物体認識装置では、前記支援制御装置は、前記移動体および前記検出装置により検出された前記物体の両方が停止している場合には、前記支援制御を抑制してもよい。 (2) In the object recognition device according to (1), the support control device suppresses the support control when both the moving object and the object detected by the detection device are stopped. May be.
（３）上記（１）または（２）に記載の物体認識装置は、前記移動体に搭載されたレーダ装置（例えば、実施形態でのレーダ装置１１）を備え、前記検出装置は、撮像装置（例えば、実施形態での撮像装置１２）であり、前記支援制御装置は、前記移動体が停止し、前記レーダ装置により前記物体が移動していることが検出されない場合に、前記支援制御を抑制してもよい。
(3) The object recognition device according to (1) or (2) includes a radar device (for example, the
（４）上記（１）から（３）の何れか１つに記載の物体認識装置では、前記支援制御装置は、前記支援制御を抑制するために、前記検出装置により検出された前記物体の信頼性を低下させる。 (4) In the object recognition device according to any one of (1) to (3), the support control device is configured to trust the object detected by the detection device in order to suppress the support control. Reduce sex.
上記（１）または（２）に記載の態様に係る物体認識装置によれば、検出装置による時系列での物体の検出精度が低下する場合に、支援制御を抑制することができ、不要または過剰な支援制御の実行を防ぐことができる。 According to the object recognition device according to the aspect described in (1) or (2) above, when the detection accuracy of the object in time series by the detection device is reduced, it is possible to suppress the support control, which is unnecessary or excessive. It is possible to prevent the execution of various support controls.
さらに、上記（３）の場合、レーダ装置により検出される物体の移動有無に応じて、検出装置による時系列での物体の検出精度の低下有無を適正に判断することができ、物体の検出精度が低下する場合に、支援制御を抑制することができる。 Furthermore, in the case of (3) above, it is possible to appropriately determine whether or not the detection accuracy of the object in the time series is decreased by the detection device according to the presence or absence of the movement of the object detected by the radar device. Assistance control can be suppressed in the case of a decrease.
さらに、上記（４）の場合、検出装置による物体の検出信頼性を低下させることによって、支援制御を適正に抑制することができる。 Furthermore, in the case of the above (4), the support control can be appropriately suppressed by reducing the detection reliability of the object by the detection device.
以下、本発明の一実施形態に係る物体認識装置について添付図面を参照しながら説明する。 Hereinafter, an object recognition apparatus according to an embodiment of the present invention will be described with reference to the accompanying drawings.
本実施形態による物体認識装置１０は、図１に示すように、レーダ装置１１と、撮像装置１２と、車両状態センサ１３と、支援制御装置１４とを備えている。物体認識装置１０は、例えば、全体が車両１に搭載されてもよいし、一部が車両１に搭載されて一部以外が車両１の外部（例えば、路側機などの公共設備、他車両など）に設けられてもよい。例えば、車両１の外部の路側機などに設けられたレーダ装置１１および撮像装置１２と、車両１に搭載された車両状態センサ１３と、車両１または車両１の外部の施設などに設けられた支援制御装置１４とによって物体認識装置１０が構成されてもよい。
以下に説明する実施形態では、物体認識装置１０は車両１に搭載されている。
As shown in FIG. 1, the
In the embodiment described below, the
レーダ装置１１は、車両１の外界に設定された検出範囲１１ａを複数の角度領域に分割し、各角度領域を走査するようにして、電磁波の発信信号を発信する。レーダ装置１１は、各発信信号が車両１の外部の物体（例えば、歩行者、他車両、および路面上または路面上方の各種の静止物など）によって反射されることで生じた反射波の反射信号を受信する。レーダ装置１１は、発信信号および反射信号に応じた検知信号、例えば、レーダ装置１１から物体までの距離、物体の位置（少なくとも方位角および高低角など）、および車両１に対する物体の相対速度などに係る検知信号を生成し、これらの検知信号を出力する。
The
撮像装置１２は、車両１の外界に設定された撮像範囲１２ａを撮像する。撮像装置１２は、撮像によって得られた画像に適宜の画像処理を行なうことによって画像データを生成し、この画像データを出力する。
The
レーダ装置１１は、撮像装置１２に比べて、物体を検出する縦方向の検出精度が高くなっている。撮像装置１２は、レーダ装置１１に比べて、物体を検出する横方向の検出精度が高くなっている。
The
車両状態センサ１３は、車両１の各種の車両情報を検知し、検知した車両情報の信号を出力する。車両状態センサ１３は、例えば、車速センサ、加速度センサ、ジャイロセンサ、ヨーレートセンサ、操舵角センサ、および操舵トルクセンサなどを備えている。車速センサは、車両１の駆動輪の回転速度（車輪速）を検出し、この車輪速に基づいて車体の速度（車速）を検知する。加速度センサは、車体に作用する加速度を検知する。ジャイロセンサは、車体の姿勢や進行方向を検知する。ヨーレートセンサは、車体のヨーレート（車両重心の上下方向軸回りの回転角速度）を検知する。操舵角センサは、ステアリングホイールの操舵角度の方向および大きさを検知する。操舵トルクセンサは、ステアリングホイールに入力される操舵トルクの方向および大きさを検出する。車両状態センサ１３は、人工衛星を利用して車両１の位置を測定するための測位システム（例えば、Global Positioning System：ＧＰＳまたはGlobal Navigation Satellite System：ＧＮＳＳなど）の測位信号を受信する受信機を備えている。車両状態センサ１３は、測位信号に基づいて車両１の現在位置を検出する。車両状態センサ１３は、測位信号に加えて、車両１の車速およびヨーレートなどを用いた自律航法の演算処理を併用して、車両１の現在位置を検出してもよい。
The
支援制御装置１４は、ＣＰＵ（Central Processing Unit）と、ＲＡＭ（Random Access Memory）などの各種の記憶媒体と、タイマーとなどの電子回路により構成されている。支援制御装置１４は、レーダ装置１１から出力される検知信号と、撮像装置１２から出力される画像データとを用いて、車両１の周辺に存在する物体を検知する。支援制御装置１４は、撮像装置１２から出力される画像データに所定の認識処理を行なうことによって、画像データ上の物体を認識する。支援制御装置１４は、物体の属性を認識し、車両１の周辺の物体として、例えば、歩行者、他車両、構造物、および落下物などを識別する。支援制御装置１４は、認識した物体の撮像装置１２に対する相対的な位置、速度、および加速度などを算出する。
The
支援制御装置１４は、レーダ装置１１および撮像装置１２の少なくとも何れかで検出された物体に対応して、車両１の運転を支援する各種の支援制御を実行する。支援制御装置１４は、例えば静止した物体については、レーダ装置１１および撮像装置１２の両方で検出された場合に、各種の支援制御の制御対象とする。支援制御装置１４は、例えば移動する物体については、少なくともレーダ装置１１で検出された場合に、各種の支援制御の制御対象とする。また、支援制御装置１４は、例えば静止した物体であっても、近距離であれば、少なくともレーダ装置１１で検出された場合に、各種の支援制御の制御対象としてもよい。
支援制御装置１４は、各種の支援制御として、例えば、先行車両に追従する追従走行制御と、外部の物体に対する接触回避および接触時の衝撃軽減などを行なう接触回避制御となどを実行する。支援制御装置１４は、各種の運転支援制御の実行において、例えば、報知装置による報知動作、ブレーキ装置による制動動作、および操舵装置による操舵動作などを制御する制御信号を出力する。
報知装置は、シートベルトによる締め付けおよびステアリングの振動などによって触覚的に報知するシートベルト装置および操舵装置などを備えている。報知装置は、表示および点灯などによって視覚的に報知する表示装置および灯体などを備えている。報知装置は、電子音および音声などによって聴覚的に報知するスピーカなどを備えている。
The
As various types of support control, the
The notification device includes a seat belt device, a steering device, and the like that notify tactilely by fastening with a seat belt, vibration of a steering, and the like. The notification device includes a display device, a lamp, and the like for visual notification by display and lighting. The notification device includes a speaker for audibly informing through electronic sounds and voices.
支援制御装置１４は、レーダ装置１１により物体が検出開始されたときの物体までの距離および撮像装置１２により物体が検出開始されたときの物体までの距離に応じて支援制御を抑制する。支援制御装置１４は、例えば、支援の大きさの変更、または支援開始もしくは支援終了に係る物体までの距離およびタイミングに関する閾値の変更などによって、支援制御を抑制する。支援制御装置１４は、例えば接触回避制御において、報知動作または制動動作の作動を許可する相対距離、または衝突余裕時間（Time To Collision：ＴＴＣ＝相対距離／相対速度）を、通常制御時よりも短くすることによって支援制御を抑制する。支援制御装置１４は、例えば追従走行制御において、発進のタイミング、発進時の速度および加速度、並びに停止の保持時間などを変更することによる発進の抑制または停止の保持によって、支援制御を抑制する。
支援制御装置１４は、支援制御を抑制するために、撮像装置１２により検出される物体の信頼性を判断し、撮像装置１２により検出される物体の信頼性を必要に応じて低下させる。支援制御装置１４は、例えば、撮像装置１２による物体の検出を確証するのに要する確証時間の変更、または撮像装置１２により検出された物体の除外有無などによって、信頼性を低下させる。支援制御装置１４は、例えば接触回避制御において、確証時間を通常制御時よりも長くする、または撮像装置１２により検出された物体を制御対象から除外する。
The
The
支援制御装置１４は、レーダ装置１１により第１所定距離Ｌ１以内で物体が検出開始され、撮像装置１２により第１所定距離Ｌ１よりも遠くで物体が検出開始された場合に、後述する第４フラグＦ４のフラグ値に「１」を設定して、支援制御を抑制する。支援制御装置１４は、図２に示すように、レーダ装置１１により第１所定距離Ｌ１以内で下方物Ｑ１が検出開始されることに先立ち、撮像装置１２により第２所定距離Ｌ２（＞Ｌ１）以上で先行車両Ｐが検出開始される場合、撮像装置１２の検出信頼性が低いと判断する。
支援制御装置１４は、例えば車両１の走行路上の落下物、輪止め、および道路鋲などの下方物Ｑ１は、他車両などに比べて電磁波の反射強度が低いので、遠方に存在する状態ではレーダ装置１１により検出され難いと判断する。支援制御装置１４は、第２所定距離Ｌ２以上でレーダ装置１１によって物体が検出されず、撮像装置１２のみによって先行車両Ｐなどの物体が検出され、第１所定距離Ｌ１以内でレーダ装置１１によって物体が検出されると、この物体は下方物Ｑ１であると判断する。これにより支援制御装置１４は、撮像装置１２による遠距離の物体の検出信頼性を低下させ、撮像装置１２による遠距離の物体の検出結果を誤りであるとみなすとともに、レーダ装置１１によって検出された近距離の物体に対応した支援制御を抑制する。
When the
For example, the object Q1 such as a fallen object, a wheel stopper, and a roadside on the roadway of the
なお、例えば図２に示す場合において、支援制御装置１４は、第１所定距離Ｌ１以内でレーダ装置１１によって物体が検出開始された後に、より近距離でレーダ装置１１によって物体が先行車両Ｐであると検出される場合、撮像装置１２の検出結果を正しいと判断し直す。これにより支援制御装置１４は、撮像装置１２による遠距離の物体に対する検出信頼性の低下を解除するとともに、レーダ装置１１によって検出された近距離の物体に対応した支援制御の抑制を解除する。
For example, in the case shown in FIG. 2, after the object is started to be detected by the
支援制御装置１４は、レーダ装置１１により第４所定距離Ｌ４（＞Ｌ３）以上で物体が検出開始された後に、撮像装置１２により第３所定距離Ｌ３以下で物体が検出開始された場合に、物体の種別に応じて、後述する第５フラグＦ５のフラグ値に「１」を設定して、支援制御を抑制する。支援制御装置１４は、図３に示すように、撮像装置１２により第３所定距離Ｌ３以内で歩行者Ｒが検出開始されることに先立ち、レーダ装置１１により第４所定距離Ｌ４（＞Ｌ３）以上で上方物Ｑ２が検出開始される場合、撮像装置１２の検出信頼性が低いと判断する。
支援制御装置１４は、例えば車両１の走行路上方のゲート、および案内板などの上方物Ｑ２に比べて、歩行者は電磁波の反射強度が低いので、遠方に存在する状態ではレーダ装置１１により検出され難いと判断する。支援制御装置１４は、第４所定距離Ｌ４以上でレーダ装置１１によって物体が検出されると、この物体は上方物Ｑ２であると判断し、第３所定距離Ｌ３以内で撮像装置１２によって歩行者Ｒなどの物体が検出されると、この検出結果を誤りであるとみなす。これにより支援制御装置１４は、撮像装置１２による近距離の物体の検出信頼性を低下させ、撮像装置１２による近距離の物体の検出結果を誤りであるとみなすとともに、レーダ装置１１によって検出された遠距離の物体に対応した支援制御を抑制する。
The
The
支援制御装置１４は、車両状態センサ１３から出力される車両情報の信号に基づき、車両１を直進走行状態から非直進走行状態へと遷移させる運転者の意思を検知した場合に、後述する第２フラグＦ２のフラグ値に「１」を設定して、支援制御を抑制する。支援制御装置１４は、実際に車両１にヨーレートが発生するより前のタイミングにおいて、カーブへの進入、旋回開始、または車線変更開始などの運転者による運転意思を、操舵角度または操舵トルクの変化に基づいて検知する。支援制御装置１４は、例えば、車両１の直進走行状態での運転者の運転操作に応じた操舵角度および操舵トルクの変化（例えば、修正舵の履歴など）を予め記憶している。支援制御装置１４は、予め記憶している操舵角度および操舵トルクの変化とは異なる変化（例えば、より大きな変化など）を検知した場合に非直進走行の運転意思ありと判断する。支援制御装置１４は、車両１が直進走行状態から非直進走行状態へと遷移する可能性がある場合には、直進走行状態で検出される物体が非直進走行状態で制御対象にならない可能性があると判断して、支援制御を抑制する。
When the
図４に示すように、支援制御装置１４は、車両１の走行路Ｓの進行方向前方に存在するカーブの入口位置ＣＳよりも所定距離Ｌａ以上手前の領域Ａ１では、操舵角度および操舵トルクの変化が予め記憶している変化の範囲内であるので、直進走行の運転意思ありと判断する。支援制御装置１４は、カーブの入口位置ＣＳよりも所定距離Ｌａ未満手前の領域Ａ２では、操舵角度および操舵トルクの変化が予め記憶している変化の範囲を超えるので、非直進走行（つまりカーブへの進入）の運転意思ありと判断する。これにより支援制御装置１４は、領域Ａ２およびカーブ進入後の領域Ａ３において、レーダ装置１１および撮像装置１２による物体の検出信頼性を低下させる。支援制御装置１４は、レーダ装置１１または撮像装置１２により実際に検出される物体（例えば、カーブの外に存在する道路標示および路側構造物などの物体Ｑ３）に対応した支援制御を抑制する。
As shown in FIG. 4, the
支援制御装置１４は、車両状態センサ１３から出力される車両情報の信号に基づき、車両１が非直進走行状態であることを検知した場合に、後述する第２フラグＦ２のフラグ値に「１」を設定して、支援制御を抑制する。支援制御装置１４は、車両１のヨーレート、操舵角、および操舵トルクの少なくとも何れかが所定以上である場合に非直進走行状態であると判断する。支援制御装置１４は、車両１が非直進走行状態である場合には、制御対象にならない物体を検出する可能性があるとともに、物体の検出が不安定になる可能性があると判断して、支援制御を抑制する。
When the
例えば、図５に示すように、支援制御装置１４は、車両１が走行路Ｓのカーブを走行する場合には、制御対象とすべき物体（例えば、先行車両Ｐなど）を検出できずに、制御対象にならない物体（例えば、走行路Ｓ外の物体Ｑ３）を検出する可能性があると判断する。これにより支援制御装置１４は、走行路Ｓのカーブを走行する状態で、レーダ装置１１および撮像装置１２による物体の検出信頼性を低下させ、実際に検出される物体（例えば、カーブ外の道路標識および路側構造物などの物体Ｑ３）に対応した支援制御を抑制する。
例えば、図６に示すように、支援制御装置１４は、車両１が走行路Ｓのカーブを走行する場合には、レーダ装置１１の検出範囲１１ａおよび撮像装置１２の撮像範囲１２ａが車両１の移動に伴って過渡的に変化し、物体の検出が不安定になる可能性があると判断する。これにより支援制御装置１４は、走行路Ｓのカーブを走行する状態で、レーダ装置１１および撮像装置１２による物体の検出信頼性を低下させ、実際に検出される物体に対応した支援制御を抑制する。
For example, as illustrated in FIG. 5, when the
For example, as illustrated in FIG. 6, when the
支援制御装置１４は、少なくとも車両１が停止状態またはほぼ停止状態であることを検知した場合に、後述する第３フラグＦ３のフラグ値に「１」を設定して、支援制御を抑制するために、撮像装置１２により検出される物体の信頼性を判断する。支援制御装置１４は、例えば、車両状態センサ１３から出力される車両情報の信号に基づき、車両１が停止状態またはほぼ停止状態であるか否かを検知する。支援制御装置１４は、例えば、車両１の車速が所定速度未満である場合、車両１の発進中もしくは停止直前、または発進後の所定時間以内などにおいて、車両１がほぼ停止状態であると判断する。支援制御装置１４は、例えば、レーダ装置１１から出力される検知信号から得られる物体の位置の変化などに基づき、撮像装置１２により検出される物体が停止状態またはほぼ停止状態であるか否かを検知する。支援制御装置１４は、例えば、車両１と撮像装置１２により検出される物体との両方が停止状態またはほぼ停止状態であることを検知した場合に、撮像装置１２から出力される時系列の画像データにおいて物体の認識精度が低下する可能性があると判断する。これにより支援制御装置１４は、撮像装置１２の検出信頼性を低下させる、または撮像装置１２から出力される画像データを用いた物体の検出を停止させ、撮像装置１２により検出される物体に対応した支援制御を抑制する。
なお、支援制御装置１４は、車両１が停止状態またはほぼ停止状態であり、撮像装置１２により検出される物体がレーダ装置１１の検知信号に基づいて移動状態であることを検知した場合には、支援制御の抑制を解除または支援制御の抑制量を低下させてもよい。
The
When the
支援制御装置１４は、車両１の進行方向前方の前方車両が、例えば追従対象を設定するためなどの所定の位置範囲から相対的に逸脱または逸脱し始めることを検知した場合に、後述する第１フラグＦ１のフラグ値に「１」を設定して、支援制御を抑制する。図７に示すように、支援制御装置１４は、追従走行制御の実行時などにおいて、少なくともレーダ装置１１から出力される検知信号に基づき、車両１が走行路Ｓにて先行車両Ｐに追従していることを検知する。さらに、支援制御装置１４は、車両１が追従している先行車両Ｐが走行路Ｓの外に移動すること、または追従対象である先行車両Ｐに対して車両１が走行路Ｓの外に移動することなどを検知する。支援制御装置１４は、例えば、車両１と先行車両Ｐとの相対速度がほぼゼロに近い状態で車両１と先行車両Ｐとの相対位置が横方向に移動することを検知した場合に、先行車両Ｐが相対的に逸脱または逸脱し始めると判断する。支援制御装置１４は、先行車両Ｐが相対的に逸脱または逸脱し始めることを検知した場合に、撮像装置１２から出力される画像データが過渡的に変化し、物体の検出が不安定になる可能性があると判断する。これにより支援制御装置１４は先行車両Ｐの相対的な逸脱または逸脱し始めから所定時間に亘って、撮像装置１２による物体の検出信頼性を低下させ、実際に検出される物体に対応した支援制御を抑制する。
When the
支援制御装置１４は、撮像装置１２により第３所定距離Ｌ３以内で物体が検出開始された場合に、後述する第６フラグＦ６のフラグ値に「１」を設定して、支援制御を抑制する。図８に示すように、支援制御装置１４は、撮像装置１２により第３所定距離Ｌ３よりも遠くの領域Ｂ３で物体が検出開始される場合には、所定の認識処理に対するノイズが少ないので、誤検知が発生する可能性が小さいと判断する。支援制御装置１４は、撮像装置１２から出力される画像データにおいて、領域Ｂ３の道路標示、わだち、および路上の凹み、およびタイヤ痕などの高さが小さい物体は、対応する縦ピクセル数が少ないので、歩行者または他車両などの物体に誤検知される可能性が小さいと判断する。
支援制御装置１４は、撮像装置１２により第５所定距離Ｌ５以内かつ第６所定距離Ｌ６（＜Ｌ５）よりも遠くの領域Ｂ２で物体が検出開始される場合には、所定の認識処理に対するノイズが多いので、認識処理が不安定であり、誤検知が発生する可能性が大きいと判断する。
支援制御装置１４は、撮像装置１２により第６所定距離Ｌ６以内かつ所定距離Ｌ０（＜Ｌ６）よりも遠くの領域Ｂ１で物体が検出開始される場合には、画像データにおいて物体に対応するピクセル数が多いので、誤検知の可能性が小さいと判断する。
支援制御装置１４は、撮像装置１２により所定距離Ｌ０以内で物体が検出開始される場合には、物体が撮像範囲１２ａからはみ出るので、検知精度が低下すると判断する。
When the
If the object is started to be detected in the region B2 within the fifth predetermined distance L5 and farther than the sixth predetermined distance L6 (<L5) by the
When the object is started to be detected in the region B1 within the sixth predetermined distance L6 and far from the predetermined distance L0 (<L6) by the
When the
本実施の形態による物体認識装置１０は上記構成を備えており、次に、この物体認識装置１０の動作について説明する。
The
以下に、支援制御装置１４が実行する接触回避制御、つまり外部の物体に対する接触回避および接触時の衝撃軽減などを行なう制御について説明する。
先ず、支援制御装置１４は、図９に示すように、レーダ装置１１から出力される検知信号を用いて、車両１の周辺に存在する物体の位置、速度、および加速度などを検出する（ステップＳ０１）。
次に、支援制御装置１４は、撮像装置１２から出力される画像データに所定の認識処理を行なうことによって、車両１の周辺に存在する歩行者および他車両などの物体を検出し、歩行者および物体の位置、速度、および加速度などを検出する（ステップＳ０２）。
次に、支援制御装置１４は、レーダ装置１１により検出された物体と、撮像装置１２により検出された物体とのマッチング行ない、制御対象の物体を選別する（ステップＳ０３）。
Hereinafter, the contact avoidance control executed by the
First, as shown in FIG. 9, the
Next, the
Next, the
次に、支援制御装置１４は、車両１の進行方向前方の前方車両が所定の位置範囲から相対的に逸脱または逸脱し始めることを検知したか否かを判定する（ステップＳ０４）。
この判定結果が「ＹＥＳ」の場合、支援制御装置１４は、処理をステップＳ０５に進める（ステップＳ０４のＹＥＳ側）。
一方、この判定結果が「ＮＯ」の場合、支援制御装置１４は、処理をステップＳ０６に進める（ステップＳ０４のＮＯ側）。
そして、支援制御装置１４は、第１フラグＦ１のフラグ値に「１」を設定する（ステップＳ０５）。
Next, the
When the determination result is “YES”, the
On the other hand, when the determination result is “NO”, the
Then, the
次に、支援制御装置１４は、車両１が直進走行状態から非直進走行状態へと遷移する直前（例えば、カーブ進入直前など）または非直進走行状態（例えば、カーブ走行中など）であることを検知したか否かを判定する（ステップＳ０６）。
この判定結果が「ＹＥＳ」の場合、支援制御装置１４は、処理をステップＳ０７に進める（ステップＳ０６のＹＥＳ側）。
一方、この判定結果が「ＮＯ」の場合、支援制御装置１４は、処理をステップＳ０８に進める（ステップＳ０６のＮＯ側）。
そして、支援制御装置１４は、第２フラグＦ２のフラグ値に「１」を設定する（ステップＳ０７）。
Next, the
When the determination result is “YES”, the
On the other hand, when the determination result is “NO”, the
Then, the
次に、支援制御装置１４は、車両１が停止状態またはほぼ停止状態（例えば、発進中もしくは停止直前、または発進後の所定時間以内など）であることを検知したか否かを判定する（ステップＳ０８）。
この判定結果が「ＹＥＳ」の場合、支援制御装置１４は、処理をステップＳ０９に進める（ステップＳ０８のＹＥＳ側）。
一方、この判定結果が「ＮＯ」の場合、支援制御装置１４は、処理をステップＳ１０に進める（ステップＳ０８のＮＯ側）。
そして、支援制御装置１４は、第３フラグＦ３のフラグ値に「１」を設定する（ステップＳ０９）。
Next, the
When the determination result is “YES”, the
On the other hand, when the determination result is “NO”, the
Then, the
次に、支援制御装置１４は、撮像装置１２により歩行者が検出されたか否かを判定する（ステップＳ１０）。
この判定結果が「ＹＥＳ」の場合、支援制御装置１４は、処理をステップＳ１３に進める（ステップＳ１０のＹＥＳ側）。
一方、この判定結果が「ＮＯ」の場合、支援制御装置１４は、処理をステップＳ１１に進める（ステップＳ１０のＮＯ側）。
Next, the
When the determination result is “YES”, the
On the other hand, when the determination result is “NO”, the
次に、支援制御装置１４は、レーダ装置１１により第１所定距離Ｌ１以内で物体が検出開始されたか否かを判定する（ステップＳ１１）。
この判定結果が「ＹＥＳ」の場合、支援制御装置１４は、処理をステップＳ１２に進める（ステップＳ１１のＹＥＳ側）。
一方、この判定結果が「ＮＯ」の場合、支援制御装置１４は、処理をステップＳ１５に進める（ステップＳ１１のＮＯ側）。
そして、支援制御装置１４は、第４フラグＦ４のフラグ値に「１」を設定する（ステップＳ１２）。
Next, the
When the determination result is “YES”, the
On the other hand, when the determination result is “NO”, the
Then, the
次に、支援制御装置１４は、レーダ装置１１により第４所定距離Ｌ４（＞Ｌ３）以上で物体が検出開始されたか否かを判定する（ステップＳ１３）。
この判定結果が「ＹＥＳ」の場合、支援制御装置１４は、処理をステップＳ１４に進める（ステップＳ１３のＹＥＳ側）。
一方、この判定結果が「ＮＯ」の場合、支援制御装置１４は、処理をステップＳ１５に進める（ステップＳ１３のＮＯ側）。
そして、支援制御装置１４は、第５フラグＦ５のフラグ値に「１」を設定する（ステップＳ１４）。
Next, the
When the determination result is “YES”, the
On the other hand, when the determination result is “NO”, the
Then, the
次に、支援制御装置１４は、撮像装置１２により第５所定距離Ｌ５以内で物体が検出開始されたか否かを判定する（ステップＳ１５）。
この判定結果が「ＹＥＳ」の場合、支援制御装置１４は、処理をステップＳ１６に進める（ステップＳ１５のＹＥＳ側）。
一方、この判定結果が「ＮＯ」の場合、支援制御装置１４は、処理をステップＳ１７に進める（ステップＳ１５のＮＯ側）。
そして、支援制御装置１４は、第６フラグＦ６のフラグ値に「１」を設定する（ステップＳ１６）。
Next, the
When the determination result is “YES”, the
On the other hand, when the determination result is “NO”, the
Then, the
次に、支援制御装置１４は、図１０に示すように、第１フラグＦ１のフラグ値に「１」が設定されているか否かを判定する（ステップＳ１７）。
この判定結果が「ＹＥＳ」の場合、支援制御装置１４は、処理をステップＳ１８に進める（ステップＳ１７のＹＥＳ側）。
一方、この判定結果が「ＮＯ」の場合、支援制御装置１４は、処理をステップＳ１９に進める（ステップＳ１７のＮＯ側）。
そして、支援制御装置１４は、接触回避および接触時の衝撃軽減としてのブレーキ装置による制動動作の作動を不許可とする（ステップＳ１８）。そして、一連の処理を終了させる。
Next, as shown in FIG. 10, the
When the determination result is “YES”, the
On the other hand, when the determination result is “NO”, the
Then, the
また、支援制御装置１４は、第１〜第６フラグＦ１〜Ｆ６のフラグ値に応じて、支援制御の抑制有無に関する各種のパラメータを設定する（ステップＳ１９）。支援制御装置１４は、図１１に示すように、第１〜第６フラグＦ１〜Ｆ６のフラグ値に応じて、制動動作の作動を許可する相対距離または衝突余裕時間に対する作動許可閾値と、レーダ装置１１および撮像装置１２による物体の検出に対する確証時間とを設定する。支援制御装置１４は、第１〜第６フラグＦ１〜Ｆ６のフラグ値が「０」である場合には、作動許可閾値ＴＨ０および確証時間Ｔ０を設定する。支援制御装置１４は、第２〜第６フラグＦ２〜Ｆ６の各フラグ値が「１」である場合には、作動許可閾値ＴＨ２〜ＴＨ６および確証時間Ｔ２〜Ｔ６を設定する。支援制御装置１４は、図１２および図１３に示すように、例えば第１フラグＦ１のフラグ値が「１」である場合の所定の作動許可閾値ＴＨ１および確証時間Ｔ１を採用するとともに、第２〜第６フラグＦ２〜Ｆ６では同様にそれぞれ相対速度に依存する作動許可閾値ＴＨ２〜ＴＨ６および確証時間Ｔ２〜Ｔ６を設定する。
Moreover, the
支援制御装置１４は、例えば図１２および図１３において、第１〜第６フラグＦ１〜Ｆ６のフラグ値が「０」である場合を通常の支援制御を行なう状態とし、作動許可閾値ＴＨ０および確証時間Ｔ０を基準とする。
支援制御装置１４は、第２および第４〜第６フラグＦ２、Ｆ４〜Ｆ６のフラグ値が「１」である場合に、通常時よりも撮像装置１２による物体の検出信頼性を低下させ、作動許可閾値ＴＨ２、ＴＨ４〜ＴＨ６を、作動許可閾値ＴＨ０よりも小さくする。支援制御装置１４は、第３フラグＦ３のフラグ値が「１」である場合に、作動許可閾値ＴＨ３を、作動許可閾値ＴＨ２、ＴＨ４〜ＴＨ６よりも小さくする。支援制御装置１４は、第１フラグＦ１のフラグ値が「１」である場合に、作動許可閾値ＴＨ１を最も小さくする。
支援制御装置１４は、第３〜第６フラグＦ３〜Ｆ６のフラグ値が「１」である場合に、通常時よりも撮像装置１２による物体の検出信頼性を低下させ、確証時間Ｔ３〜Ｔ６を、確証時間Ｔ０よりも長くする。支援制御装置１４は、第２フラグＦ２のフラグ値が「１」である場合に、確証時間Ｔ２を、確証時間Ｔ３〜Ｔ６よりも長くする。支援制御装置１４は、第１フラグＦ１のフラグ値が「１」である場合に、確証時間Ｔ１を最も長くする。
For example, in FIG. 12 and FIG. 13, the
When the flag values of the second and fourth to sixth flags F2 and F4 to F6 are “1”, the
When the flag values of the third to sixth flags F3 to F6 are “1”, the
支援制御装置１４は、第１〜第６フラグＦ１〜Ｆ６のフラグ値に応じて、複数の作動許可閾値および確証時間が設定される場合には、複数の作動許可閾値および確証時間のうちから支援制御を最も抑制する作動許可閾値および確証時間を選択する。
When the plurality of operation permission thresholds and confirmation times are set according to the flag values of the first to sixth flags F1 to F6, the
次に、支援制御装置１４は、図１０に示すように、レーダ装置１１および撮像装置１２による物体の検出が連続する時間（同時検出連続時間）が、上述したステップＳ１９で設定した確証時間未満であるか否かを判定する（ステップＳ２０）。
この判定結果が「ＹＥＳ」の場合、支援制御装置１４は、処理をステップＳ１８に進める（ステップＳ２０のＹＥＳ側）。
一方、この判定結果が「ＮＯ」の場合、支援制御装置１４は、処理をステップＳ２１に進める（ステップＳ２０のＮＯ側）。
次に、支援制御装置１４は、レーダ装置１１および撮像装置１２により検出された物体の車両１に対する相対距離（または衝突余裕時間）が、上述したステップＳ１９で設定した作動許可閾値未満であるか否かを判定する（ステップＳ２１）。
この判定結果が「ＹＥＳ」の場合、支援制御装置１４は、処理をステップＳ２３に進める（ステップＳ２１のＹＥＳ側）。
一方、この判定結果が「ＮＯ」の場合、支援制御装置１４は、処理をステップＳ２２に進める（ステップＳ２１のＮＯ側）。
Next, as shown in FIG. 10, the
When the determination result is “YES”, the
On the other hand, when the determination result is “NO”, the
Next, the
When the determination result is “YES”, the
On the other hand, when the determination result is “NO”, the
そして、支援制御装置１４は、接触回避および接触時の衝撃軽減としてのブレーキ装置による制動動作を非作動とする（ステップＳ２２）。そして、一連の処理を終了させる。
また、支援制御装置１４は、接触回避および接触時の衝撃軽減としてのブレーキ装置による制動動作を作動させる（ステップＳ２３）。そして、一連の処理を終了させる。
Then, the
Further, the
上述したように、本実施形態による物体認識装置１０によれば、少なくとも車両１が停止状態またはほぼ停止状態である場合に、支援制御を抑制するために撮像装置１２の検出信頼性を判断するので、撮像装置１２による物体の認識精度が低下する可能性がある場合には、撮像装置１２の検出信頼性を適正に低下させることができる。さらに、レーダ装置１１から出力される検知信号に応じて、撮像装置１２による物体の認識精度が低下する可能性を適正に判断することができ、支援制御を抑制するために撮像装置１２の検出信頼性を適正に判断することができる。
As described above, according to the
さらに、レーダ装置１１により第１所定距離Ｌ１よりも遠くで検出開始されない物体には支援制御を抑制するので、電磁波の反射強度が低い下方物Ｑ１などに対して過剰な支援制御の実行を防ぐことができる。さらに、レーダ装置１１による第１所定距離Ｌ１以内での物体の検出開始に先立ち、撮像装置１２により第２所定距離Ｌ２（＞Ｌ１）以上で物体が検出開始される場合には、撮像装置１２の検出信頼性を適正に低下させることができる。
さらに、レーダ装置１１により第４所定距離Ｌ４以上で検出開始されていながら、撮像装置１２により第４所定距離Ｌ４未満で検出開始される物体には支援制御を抑制するので、走行路の上方物Ｑ２などに対して過剰な支援制御の実行を防ぐことができる。さらに、撮像装置１２により第３所定距離Ｌ３（＜Ｌ４）以内で制御対象とすべき物体が検出開始される場合には、撮像装置１２の検出信頼性を適正に低下させることができる。
Further, since the
Further, since the detection is started by the
さらに、少なくともレーダ装置１１により検出される物体が制御対象から外れる場合に、撮像装置１２による物体の検出が過渡的かつ不安定になると判断して、撮像装置１２による物体の検出信頼性を低下させるので、支援制御を適正に抑制することができる。
さらに、撮像装置１２による物体の検出に対してノイズが増大し、物体の検出が不安定になる第５所定距離Ｌ５以内において支援制御を抑制するので、不要または過剰な支援制御の実行を防ぐことができる。
Furthermore, when at least an object detected by the
Furthermore, since the noise is increased with respect to the detection of the object by the
さらに、第１〜第６フラグＦ１〜Ｆ６のフラグ値に応じて、複数の作動許可閾値および確証時間が設定される場合には、複数の作動許可閾値および確証時間のうちから支援制御を最も抑制する作動許可閾値および確証時間を選択するので、支援制御を適正に抑制することができる。 Further, when a plurality of operation permission thresholds and confirmation times are set according to the flag values of the first to sixth flags F1 to F6, the support control is most suppressed from the plurality of operation permission thresholds and confirmation times. Since the operation permission threshold value and the confirmation time to be selected are selected, the support control can be appropriately suppressed.
なお、上述した実施形態において物体認識装置１０は、車両１に搭載されるとしたが、これに限定されない。レーダ装置１１および撮像装置１２の少なくとも何れかは、車両１以外の他の移動体、例えば歩行者が携帯する携帯端末などに搭載されてもよい。
In the above-described embodiment, the
なお、上述した実施形態において支援制御装置１４は、第１〜第６フラグＦ１〜Ｆ６のフラグ値に応じて、作動許可閾値ＴＨ２〜ＴＨ６および確証時間Ｔ２〜Ｔ６を設定するとしたが、これに限定されない。例えば、支援制御装置１４は、さらに物体の種別（例えば、歩行者、先行車両、横移動する他車両など）に応じて細分化して作動許可閾値および確証時間を詳細に設定してもよい。
また、上述した実施形態において支援制御装置１４は、第１〜第６フラグＦ１〜Ｆ６の全てに対して判定を行なうとしたが、これに限定されず、第１〜第６フラグＦ１〜Ｆ６の少なくとも何れか１つに対して判定を行ってもよい。
In the above-described embodiment, the
In the above-described embodiment, the
なお、上述した実施形態において支援制御装置１４は、第１所定距離Ｌ１を第３所定距離Ｌ３と同一としてもよいし、異ならせてもよい。また、上述した実施形態において支援制御装置１４は、第２所定距離Ｌ２を第４所定距離Ｌ４と同一としてもよいし、異ならせてもよい。
In the above-described embodiment, the
上述の実施形態は、例として提示したものであり、発明の範囲を限定することは意図していない。上述の新規な実施形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。上述の実施形態やその変形は、発明の範囲や要旨に含まれるとともに、特許請求の範囲に記載された発明とその均等の範囲に含まれる。 The above-described embodiments are presented as examples, and are not intended to limit the scope of the invention. The above-described novel embodiments can be implemented in various other forms, and various omissions, replacements, and changes can be made without departing from the spirit of the invention. The above-described embodiments and modifications thereof are included in the scope and gist of the invention, and are included in the invention described in the claims and the equivalents thereof.
１０…物体認識装置、１１…レーダ装置、１２…撮像装置、１３…車両状態センサ、１４…支援制御装置
DESCRIPTION OF
Claims (5)
前記撮像装置によって前記物体が連続して検出された検出連続時間が、前記撮像装置によって前記物体の検出が確証されるのに要する確証時間以上となる第１条件と、前記移動体と前記撮像装置により検出された物体との相対距離および相対速度に基づく衝突余裕時間、または前記相対距離のいずれか一方が閾値未満となる第２条件と、のうち少なくとも一方を満たす場合に、前記物体に対応する支援制御を行う支援制御装置と、
を備え、
前記支援制御装置は、前記移動体が停止している場合には、前記確証時間および前記閾値の少なくとも一方を変更することにより、前記支援制御を抑制する、
ことを特徴とする物体認識装置。 An imaging device mounted on a moving body for detecting an object;
Said imaging device said object detection continuous time which is continuously detected by the, the first condition to be a necessary confirmation time or more of the detection of the object is confirmed by the imaging device, the moving object and the imaging apparatus If at least one of the collision margin time based on the relative distance and the relative speed detected by the object and the second condition in which either one of the relative distances is less than the threshold is satisfied, the object is handled. A support control device for performing support control;
With
The support control device suppresses the support control by changing at least one of the verification time and the threshold when the moving body is stopped.
An object recognition apparatus characterized by that.
前記第１条件および前記第２条件の双方を満たす場合に、前記物体に対応する支援制御を行い、 When both the first condition and the second condition are satisfied, support control corresponding to the object is performed,
前記移動体が停止し、且つ前記第１条件を満たさない場合、または、前記移動体が停止し、前記第１条件を満たし、且つ前記第２条件を満たさない場合に、前記支援制御を抑制する、 The support control is suppressed when the moving body stops and does not satisfy the first condition, or when the moving body stops and satisfies the first condition and does not satisfy the second condition. ,
ことを特徴とする請求項１に記載の物体認識装置。The object recognition apparatus according to claim 1.
前記移動体および前記撮像装置により検出された前記物体の両方が停止している場合には、前記支援制御を抑制する、
ことを特徴とする請求項１または請求項２に記載の物体認識装置。 The support control device includes:
When both the moving object and the object detected by the imaging device are stopped, the support control is suppressed.
The object recognition apparatus according to claim 1 , wherein the object recognition apparatus is an object recognition apparatus.
前記移動体が停止し、前記レーダ装置により前記物体が移動していることが検出されない場合に、前記支援制御を抑制する、
ことを特徴とする請求項１から請求項３の何れか１つに記載の物体認識装置。 Before Symbol support control device further includes a radar device,
When the moving body is stopped and the radar device does not detect that the object is moving, the support control is suppressed.
The object recognition apparatus according to any one of claims 1 to 3, wherein
ことを特徴とする請求項１から請求項４の何れか１つに記載の物体認識装置。 The assistance control device, by decreasing the reliability of the object detected by the image pickup device, suppressing the assist control,
The object recognition apparatus according to any one of claims 1 to 4 , wherein the object recognition apparatus is characterized in that:
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2014107171A JP6192228B2 (en) | 2014-05-23 | 2014-05-23 | Object recognition device |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2014107171A JP6192228B2 (en) | 2014-05-23 | 2014-05-23 | Object recognition device |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2015222224A JP2015222224A (en) | 2015-12-10 |
| JP6192228B2 true JP6192228B2 (en) | 2017-09-06 |
Family
ID=54785312
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2014107171A Active JP6192228B2 (en) | 2014-05-23 | 2014-05-23 | Object recognition device |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP6192228B2 (en) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP7210278B2 (en) | 2016-05-11 | 2023-01-23 | あすか製薬株式会社 | Crystal Polymorph of 15β-Hydroxy-Osaterone Acetate |
Families Citing this family (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR101967315B1 (en) * | 2017-06-05 | 2019-04-10 | 현대오트론 주식회사 | Apparatus for detecting forward object of vehicle and method thereof |
| JP7155645B2 (en) * | 2018-06-19 | 2022-10-19 | トヨタ自動車株式会社 | Collision avoidance support device |
Family Cites Families (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2003226154A (en) * | 2002-02-01 | 2003-08-12 | Hitachi Ltd | Vehicle traveling control device |
| JP4193765B2 (en) * | 2004-01-28 | 2008-12-10 | トヨタ自動車株式会社 | Vehicle travel support device |
| JP2006021578A (en) * | 2004-07-06 | 2006-01-26 | Toyota Motor Corp | Inter-vehicle distance controlling device |
| JP4558623B2 (en) * | 2004-11-04 | 2010-10-06 | 本田技研工業株式会社 | Travel control device |
| WO2013145274A1 (en) * | 2012-03-30 | 2013-10-03 | トヨタ自動車株式会社 | Driving assistance system |
| JP5892038B2 (en) * | 2012-10-30 | 2016-03-23 | 株式会社デンソー | Driving assistance device |
-
2014
- 2014-05-23 JP JP2014107171A patent/JP6192228B2/en active Active
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP7210278B2 (en) | 2016-05-11 | 2023-01-23 | あすか製薬株式会社 | Crystal Polymorph of 15β-Hydroxy-Osaterone Acetate |
Also Published As
| Publication number | Publication date |
|---|---|
| JP2015222224A (en) | 2015-12-10 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US10676093B2 (en) | Vehicle control system, vehicle control method, and storage medium | |
| CN107082062B (en) | The control device of vehicle | |
| JP6190758B2 (en) | Object recognition device and vehicle | |
| US9889847B2 (en) | Method and system for driver assistance for a vehicle | |
| US10977944B2 (en) | Apparatus and method for supporting collision avoidance of vehicle | |
| US9669760B2 (en) | Warning device | |
| US20180253968A1 (en) | Systems and methods for triggering traffic light sensors | |
| US10940856B2 (en) | Driving assistance system | |
| JP6134687B2 (en) | Object recognition device | |
| JP6190958B2 (en) | Collision possibility judgment device | |
| US20190073540A1 (en) | Vehicle control device, vehicle control method, and storage medium | |
| US10926696B2 (en) | Out-of-vehicle notification device | |
| KR20200029050A (en) | Driving control method and driving control device for driving support vehicles | |
| JP2019182093A (en) | Behavior prediction device | |
| US10908605B2 (en) | Driving assist device | |
| JP6209797B2 (en) | Travel control device | |
| JP2012104029A (en) | Danger degree calculation device | |
| JP2019151185A (en) | Driving support device | |
| KR102304018B1 (en) | Method, apparatus and computer program for preventing collision of automatic driving vehicle | |
| JP6175025B2 (en) | Object recognition device | |
| JP2018156290A (en) | Collision avoidance device | |
| JP6192228B2 (en) | Object recognition device | |
| JP2012243069A (en) | Driving support device | |
| JP2015103115A (en) | Lane change support device | |
| WO2018070335A1 (en) | Movement detection device, movement detection method |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20160226 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20170126 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20170131 |
|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20170403 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20170711 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20170807 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 6192228 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |