JP4992789B2 - Driving support device, driving support display control method and program - Google Patents

Driving support device, driving support display control method and program Download PDF

Info

Publication number
JP4992789B2
JP4992789B2 JP2008085398A JP2008085398A JP4992789B2 JP 4992789 B2 JP4992789 B2 JP 4992789B2 JP 2008085398 A JP2008085398 A JP 2008085398A JP 2008085398 A JP2008085398 A JP 2008085398A JP 4992789 B2 JP4992789 B2 JP 4992789B2
Authority
JP
Japan
Prior art keywords
vehicle
camera
type
display
unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2008085398A
Other languages
Japanese (ja)
Other versions
JP2009239782A (en
Inventor
侑太 小林
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
JVCKenwood Corp
Original Assignee
JVCKenwood Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by JVCKenwood Corp filed Critical JVCKenwood Corp
Priority to JP2008085398A priority Critical patent/JP4992789B2/en
Publication of JP2009239782A publication Critical patent/JP2009239782A/en
Application granted granted Critical
Publication of JP4992789B2 publication Critical patent/JP4992789B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Description

本発明は、運転支援装置、運転支援表示の制御方法およびプログラムに関する。   The present invention relates to a driving assistance device, a driving assistance display control method, and a program.

特許文献1は、初心者でも安心して駐車操作が行なえる駐車支援装置を開示する。この駐車支援装置は、車両の後方をカメラで撮像し、走行予測軌跡を後方画像に重ねてディスプレイに表示させる。また、この駐車支援装置は、後方との近接距離の目安となる注意領域を後方画像に重ねてディスプレイに表示させることで、運転者に注意喚起を行なう。   Patent Document 1 discloses a parking assistance device that can be used even by a beginner to perform a parking operation with peace of mind. This parking assist device captures the rear of the vehicle with a camera and displays the travel prediction trajectory on the rear image on the display. In addition, the parking assist device alerts the driver by displaying a caution area, which is a measure of the proximity distance to the rear, on the rear image on the display.

また、このような後方との近接距離の目安となる表示としては、車幅や車両からの距離の目安となるガイド線(以下、単に「ガイド線」という)を画像と共にディスプレイに表示させることも知られている。   In addition, as an indication of the proximity distance to the rear, a guide line (hereinafter simply referred to as “guide line”) that is an indication of the vehicle width and the distance from the vehicle may be displayed on the display together with an image. Are known.

特開2000―78566号公報(特許請求の範囲、図13等)JP 2000-78566 A (Claims, FIG. 13 etc.)

特許文献1に記載の駐車支援装置と共に車両に取付けられるカメラは、車両の種別、車体の形状などの関係によってその取付け位置が異なる。そのため、上述した注意領域やガイド線の表示位置の設定もカメラの取付け位置に伴って、変更する必要が生ずる。   The camera attached to the vehicle together with the parking assist device described in Patent Document 1 has different attachment positions depending on the type of vehicle, the shape of the vehicle body, and the like. Therefore, it is necessary to change the setting of the above-described attention area and guide line display position according to the camera mounting position.

これらの設定は、たとえば図8に示すように、ユーザ(運転者)が直接操作できないディスプレイ画面に表示されるダイアグ画面70を用いて、車両の製造ライン工程の中で行なうことができる。たとえば、運転支援装置を搭載する車両の種別がセダンである場合には、このダイアグ画面70に表示されるパターン選択キー71を押下して、現在選択しているNマーク72をSマーク73に指定を変更する必要がある。そして、このSマーク73を指定すると、自動的に上述した各要素についてセダン用の設定が反映される。なお、車両の種別が「ワゴン」である場合には、Wマーク74を指定し、上述した以外の車種で標準の設定である場合にはNマーク72をそのまま指定することで、それぞれの設定が反映される。   For example, as shown in FIG. 8, these settings can be performed in a vehicle production line process using a diagnosis screen 70 displayed on a display screen that cannot be directly operated by a user (driver). For example, when the type of vehicle on which the driving support device is mounted is a sedan, the pattern selection key 71 displayed on the diagnosis screen 70 is pressed to designate the currently selected N mark 72 as the S mark 73. Need to be changed. When the S mark 73 is designated, the setting for sedan is automatically reflected for each element described above. If the vehicle type is “wagon”, the W mark 74 is designated. If the vehicle type other than the above is the standard setting, the N mark 72 is designated as it is. Reflected.

しかし、ガイド線の表示位置が、上述したキー操作で適切に設定できる場合であっても、その設定が反映されたのか否かを一見して確認することは困難である。更に、車両の製造ライン工程において車両毎に上述したキー操作による設定作業と目視確認を行なうことは、非常に手間と時間がかかるものである。   However, even if the display position of the guide line can be appropriately set by the key operation described above, it is difficult to confirm at a glance whether or not the setting has been reflected. Furthermore, it is very time-consuming and time-consuming to perform the setting operation and the visual confirmation by the key operation described above for each vehicle in the vehicle production line process.

そこで、本発明は、上述した課題を鑑み、ガイド線の設定を簡単に行ない、かつ設定結果が目視で容易に確認できる運転支援装置、運転支援表示の制御方法およびプログラムを提供することを目的とする。   Therefore, in view of the above-described problems, the present invention has an object to provide a driving support device, a driving support display control method, and a program in which a guide line can be easily set and the setting result can be easily confirmed visually. To do.

本発明に係る運転支援装置は、車両の種別を判別する車両種別判別部と、車両の幅および/または車両からの距離の目安としてのガイド線を車両の種別毎に保存する記憶部と、車両種別判別部が判別した車両種別情報と、車両の種別によってあらかじめ車両に設定されたカメラの取付け位置、カメラの取付け位置から車両の車体中央までの距離、カメラの撮像する角度、カメラの取付け位置から車両の車幅左端または車幅右端までの距離のいずれかひとつまたはこれらの複数の要素とに基づいて、ガイド線の表示位置を調節する表示位置調整部と、カメラで撮像した映像と共に表示位置調整部により調整されたガイド線を表示する表示部とを有するものである。 A driving support apparatus according to the present invention includes a vehicle type determination unit that determines the type of a vehicle , a storage unit that stores a guide line as a guide for the width of the vehicle and / or the distance from the vehicle for each type of vehicle, From the vehicle type information determined by the type determination unit, the camera installation position set in advance in the vehicle according to the vehicle type, the distance from the camera installation position to the center of the vehicle body, the imaging angle of the camera, and the camera installation position A display position adjustment unit that adjusts the display position of the guide line based on either one of the distance to the left end of the vehicle or the right end of the vehicle width or a plurality of these elements, and the display position adjustment together with the image captured by the camera And a display unit for displaying the guide line adjusted by the unit .

本発明に係る運転支援装置は、上述した発明の構成に加えて以下の特徴を有するものである。すなわち、ガイド線の形状は、車両の種別毎に十字線の中央部分に図形が重ねて配置されている形状、十字線のみの形状として記憶部に保存されているものである。   The driving support device according to the present invention has the following features in addition to the above-described configuration of the invention. That is, the shape of the guide line is stored in the storage unit as a shape in which a figure is arranged in the center of the cross line for each type of vehicle, or a shape of only the cross line.

本発明に係る運転支援装置は、上述した発明の構成に加えて以下の特徴を有するものである。すなわち、車両種別判別部は、車両を制御するECUから取得した車両の種別情報に基づいて判別するものである。   The driving support device according to the present invention has the following features in addition to the above-described configuration of the invention. In other words, the vehicle type determination unit is configured to determine based on the vehicle type information acquired from the ECU that controls the vehicle.

本発明に係る運転支援表示の制御方法は、車両の種別を判別する車両種別判別ステップと、車両種別判別ステップで判別された車両種別情報と、車両の種別によってあらかじめ車両に設定されたカメラの取付け位置、カメラの取付け位置から車両の車体中央までの距離、カメラの撮像する角度、カメラの取付け位置から車両の車幅左端または車幅右端までの距離のいずれかひとつまたはこれらの複数の要素とに基づいて、車両の幅および/または車両からの距離の目安としてのガイド線の表示位置を調節する表示位置調整ステップと、カメラで撮像した映像と共に表示位置調整ステップにより調整されたガイド線を表示する表示ステップと、を有するものである。 The driving support display control method according to the present invention includes a vehicle type determination step for determining a vehicle type, vehicle type information determined in the vehicle type determination step, and attachment of a camera set in advance in the vehicle based on the vehicle type. Position, the distance from the camera mounting position to the center of the vehicle body, the angle at which the camera captures, the distance from the camera mounting position to the vehicle width left end or vehicle width right end, or one or more of these elements Based on the display position adjustment step for adjusting the display position of the guide line as a guide for the width of the vehicle and / or the distance from the vehicle, and the guide line adjusted by the display position adjustment step together with the image captured by the camera is displayed. And a display step .

本発明に係るプログラムは、コンピュータを上述した運転支援装置として機能させるものである。   The program according to the present invention causes a computer to function as the above-described driving support device.

本発明により、ガイド線の設定を簡単に行ない、かつ設定結果が目視で容易に確認できる運転支援装置、運転支援表示の制御方法およびプログラムを提供することができる。   According to the present invention, it is possible to provide a driving support device, a driving support display control method, and a program that can easily set a guide line and can easily check the setting result visually.

以下、本発明の実施の形態に係る運転支援装置、運転支援表示の制御方法およびプログラムを図面に基づいて説明する。なお、運転支援装置およびプログラムは、ナビゲーションユニット10を例に説明する。運転支援表示の制御方法は、ナビゲーションユニット10の動作と共に説明する。   Hereinafter, a driving assistance device, a driving assistance display control method, and a program according to an embodiment of the present invention will be described with reference to the drawings. The driving support device and the program will be described using the navigation unit 10 as an example. A method for controlling the driving assistance display will be described together with the operation of the navigation unit 10.

図1は、本発明の実施の形態に係るナビゲーションユニット10と、車両の後方を撮像できるカメラ20と、車両全体を制御するECU(Engine Contorol Unit)30と、を含む安全運転支援システムの構成を示す図である。   FIG. 1 shows a configuration of a safe driving support system including a navigation unit 10 according to an embodiment of the present invention, a camera 20 that can capture the rear of a vehicle, and an ECU (Engine Control Unit) 30 that controls the entire vehicle. FIG.

ナビゲーションユニット10は、主に車両の走行を支援する機能を有しており、たとえばGPS(Global Positioning System)機能やカメラ20で撮像した映像を後述する表示部18(図2参照)としてのディスプレイに映し出して安全運転支援を行なう機器である。また、ナビゲーションユニット10は、ECU30から出力される車両信号S1により、車両のギアがリバース(後退)に入ったことを検出することができる。ナビゲーションユニット10は、この車両信号S1により表示部18に表示されている画面を、通常のナビゲーション映像から車両の後方を撮像した映像へ切替えて、運転支援を自動的に行なうことができる。また、ナビゲーションユニット10は、EUC30から車両タイプを示す情報、すなわち車両の種別情報となる車両信号S2を受信する。また、ナビゲーションユニット10は、カメラ20の接続状態を検出するカメラ検出端子T1と接続されている。また、ナビゲーションユニット10は、カメラ20に対して電力W(この実施の形態では6V)を供給する。   The navigation unit 10 mainly has a function of supporting driving of the vehicle. For example, a GPS (Global Positioning System) function or an image captured by the camera 20 is displayed on a display as a display unit 18 (see FIG. 2) described later. It is a device that projects and supports safe driving. Further, the navigation unit 10 can detect that the gear of the vehicle has entered reverse (reverse) based on the vehicle signal S1 output from the ECU 30. The navigation unit 10 can automatically perform driving support by switching the screen displayed on the display unit 18 by the vehicle signal S1 from a normal navigation image to an image obtained by imaging the rear of the vehicle. Further, the navigation unit 10 receives information indicating the vehicle type from the EUC 30, that is, the vehicle signal S2 that is vehicle type information. The navigation unit 10 is connected to a camera detection terminal T1 that detects a connection state of the camera 20. The navigation unit 10 supplies power W (6 V in this embodiment) to the camera 20.

カメラ20は、ナビゲーションユニット10から電力Wを得て、車両の後方を撮像する機能を有する。また、カメラ20は、撮像した映像信号U1をナビゲーションユニット10へ出力する機能を有する。なお、カメラ20は、車両の後方を撮像するために後方に取付けられている。しかし、カメラ20の取付け位置は、車両の後方に限らず、車両の右側面、左側面など車両の外周のどの位置に取付けてもよい。   The camera 20 has a function of obtaining power W from the navigation unit 10 and imaging the rear of the vehicle. The camera 20 has a function of outputting the captured video signal U1 to the navigation unit 10. In addition, the camera 20 is attached to the rear in order to image the rear of the vehicle. However, the attachment position of the camera 20 is not limited to the rear side of the vehicle, and may be attached to any position on the outer periphery of the vehicle such as the right side surface and the left side surface of the vehicle.

ECU30は、車両全体の電子的な制御を行なう機能を有する。なお、本実施の形態に係るECU30は、特に車両の種別を示す情報である「車両タイプ」を、後述するナビゲーションユニット10の制御部11(図2参照)に通知する機能を有する。   The ECU 30 has a function of performing electronic control of the entire vehicle. The ECU 30 according to the present embodiment has a function of notifying a control unit 11 (see FIG. 2) of the navigation unit 10 described later, in particular, a “vehicle type” that is information indicating the type of vehicle.

図2は、図1に示すナビゲーションユニット10の主要な構成を示すブロック図である。   FIG. 2 is a block diagram showing a main configuration of the navigation unit 10 shown in FIG.

ナビゲーションユニット10は、制御部11を有する。この制御部11は、記憶部12と、車両種別判別部16と、表示位置調整部17と、表示部18と、これらの各部を制御する制御機能部19と、を主要な構成要素としている。なお、その他にもナビゲーションユニット10は、車両の移動の加速度を検出するジャイロセンサ、衛星からの電波を受信するGPS受信機、キーデバイス、USBケーブルが接続できるUSBI/Fなどを有していてもよい。   The navigation unit 10 includes a control unit 11. The control unit 11 includes a storage unit 12, a vehicle type determination unit 16, a display position adjustment unit 17, a display unit 18, and a control function unit 19 that controls these units as main components. In addition, the navigation unit 10 may have a gyro sensor that detects acceleration of movement of the vehicle, a GPS receiver that receives radio waves from a satellite, a key device, a USB I / F that can be connected to a USB cable, and the like. Good.

制御部11は、CPU(Central Processing Unit)などで構成され、ナビゲーションユニット10全体を制御する機能を有している。すなわち、制御部11は、行なう機能によって記憶部12、車両種別判別部16、表示位置調整部17、表示部18、制御機能部19などの機能に分けることができる。制御部11は、上述した各部が行なう機能であるより行なうソフトウェアとしての情報処理を、ハードウェア資源であるCPU、HDD(Hard Disk Drive)、液晶ディスプレイなどを用いて実現することができる。   The control unit 11 includes a CPU (Central Processing Unit) and the like, and has a function of controlling the entire navigation unit 10. That is, the control unit 11 can be divided into functions such as the storage unit 12, the vehicle type determination unit 16, the display position adjustment unit 17, the display unit 18, and the control function unit 19 according to functions to be performed. The control unit 11 can realize information processing as software, which is a function performed by each unit described above, using a CPU, HDD (Hard Disk Drive), a liquid crystal display, or the like as hardware resources.

記憶部12は、たとえばHDDや不揮発性メモリから構成され、制御機能部19がナビゲーションユニット10を動作させるための不図示の各種プログラムや、ガイド線64の形状データ13、車種データ14、後述するガイド線61〜64(図5参照)の表示位置データ15などの各種データを保存している。また、制御機能部19が演算するための一時的なデータ領域としての機能も有する。   The storage unit 12 includes, for example, an HDD or a non-volatile memory, and various programs (not shown) for the control function unit 19 to operate the navigation unit 10, the shape data 13 of the guide line 64, the vehicle type data 14, and a guide described later. Various data such as display position data 15 of lines 61 to 64 (see FIG. 5) are stored. Moreover, it also has a function as a temporary data area for the control function unit 19 to calculate.

図3は、図2に示すナビゲーションユニット10の記憶部12に保存されているガイド線64の形状データ13の一例を示す図である。図3に示すように、セダン用ガイド線64Aは、十字線の中央部分に黒色の四角形が重ねて配置されている。また、クーペ用ガイド線64Bは、十字線の中央部分に黒色の円が配置されている。なお、ミニバン用ガイド線64Cは、十字線の中央部分にマークを配置していない。   FIG. 3 is a diagram illustrating an example of the shape data 13 of the guide line 64 stored in the storage unit 12 of the navigation unit 10 illustrated in FIG. As shown in FIG. 3, the sedan guide line 64 </ b> A is arranged such that a black square is superimposed on the center portion of the crosshair. The coupe guide line 64B has a black circle disposed at the center of the crosshair. In the minivan guide line 64C, no mark is arranged at the center of the crosshair.

車種データ14は、上述した形状データ13と対応づけられて保存されているデータであり、たとえば、セダン、クーペ、ミニバンなどの車種データである。表示位置データ15は、ガイド線64の形状データ13および車種データ14と関連付けられて保存されている。なお、表示位置データ15の詳細については、表示位置調整部17と共に後述する。   The vehicle type data 14 is data stored in association with the shape data 13 described above, and is, for example, vehicle type data such as a sedan, a coupe, and a minivan. The display position data 15 is stored in association with the shape data 13 and the vehicle type data 14 of the guide line 64. Details of the display position data 15 will be described later together with the display position adjustment unit 17.

また、車両の種別によって表示を変えても良い。例えば、セダンの場合は画面端に「S」という文字やセダンの絵のマークを表示したり、予め車両の種別毎にガイド線61〜64の色や輝度を変更するように設定しておいても良い。   The display may be changed depending on the type of vehicle. For example, in the case of a sedan, a character “S” or a sedan picture mark is displayed at the end of the screen, or the color and brightness of the guide lines 61 to 64 are changed in advance for each type of vehicle. Also good.

車両種別判別部16は、ソフトウェアによる情報処理プログラムなどで実現され、車両の種別を判別する機能を有する。具体的には、車両全体を制御するECU30から車両タイプを示す情報である車両信号S2を取得して、その情報から車両種別の判別を行なうプログラムである。車両種別判別部16は、車両信号S1からガイド線64を図3に示したガイド線64A〜64Cのいずれにするかの決定を行なう。   The vehicle type determination unit 16 is realized by an information processing program using software, and has a function of determining the type of vehicle. Specifically, this is a program that obtains a vehicle signal S2, which is information indicating the vehicle type, from the ECU 30 that controls the entire vehicle, and determines the vehicle type from the information. The vehicle type determination unit 16 determines which of the guide lines 64A to 64C shown in FIG.

表示位置調整部17は、ソフトウェアによる情報処理プログラムなどで実現され、記憶部12に保存されている表示位置データ15であるカメラ20の取付け位置情報、カメラ20の撮像する角度情報を参照して、表示部18内でのガイド線61〜64の表示位置を調整する機能を有する。具体的には、ガイド線61〜64を記憶部12に保存されている表示位置データ15に基づいて表示部18のどの座標位置に描画するかを算出するプログラムである。   The display position adjustment unit 17 is realized by an information processing program using software, and refers to the mounting position information of the camera 20 and the angle information captured by the camera 20 as the display position data 15 stored in the storage unit 12. It has a function of adjusting the display positions of the guide lines 61 to 64 in the display unit 18. Specifically, this is a program for calculating at which coordinate position of the display unit 18 the guide lines 61 to 64 are drawn based on the display position data 15 stored in the storage unit 12.

以下、表示位置調整部17が行なう具体的な調整内容について説明する。図4から図7は、本発明を採用した安全運転支援システムにおいて使用されるカメラの取付け位置とディスプレイ画面例と制御処理のフローチャートを示している。   Hereinafter, specific adjustment contents performed by the display position adjustment unit 17 will be described. FIGS. 4 to 7 show a flowchart of a camera mounting position, a display screen example, and control processing used in the safe driving support system adopting the present invention.

図4は、図1に示す安全運転支援システムにおいて使用されるカメラ40Aが、セダン車両X1の後方に取付けられた図である。この図4に示すように、セダン車両X1の車体中央Z1から所定の距離Aだけ左にずれ、かつ地面からの高さBの位置であるZ2にカメラ40Aが取付けられた場合を想定している。   FIG. 4 is a diagram in which the camera 40A used in the safe driving support system shown in FIG. 1 is attached to the rear of the sedan vehicle X1. As shown in FIG. 4, it is assumed that the camera 40A is attached to Z2 which is shifted to the left by a predetermined distance A from the vehicle body center Z1 of the sedan vehicle X1 and is at a height B from the ground. .

図5は、図4に示すカメラ40Aで撮像した画像を表示するディスプレイ画面60を示す図で、ディスプレイ画面60中に後方画像とガイド線が含まれていることを示す図である。この図5に示すように、このカメラ40Aで撮像した映像と共に、セダン車両X1の車幅と車両X1からの距離を示すガイド線61,62,63および車両X1の中央を示す中央十字ガイド線64がディスプレイ画面60に表示される。   FIG. 5 is a diagram illustrating a display screen 60 that displays an image captured by the camera 40 </ b> A illustrated in FIG. 4, and illustrates that the display screen 60 includes a rear image and a guide line. As shown in FIG. 5, together with the video imaged by the camera 40A, guide lines 61, 62, 63 indicating the width of the sedan vehicle X1 and the distance from the vehicle X1, and a central cross guide line 64 indicating the center of the vehicle X1. Is displayed on the display screen 60.

表示位置調整部17は、このガイド線61〜64の表示位置が、車体中央Z1から所定の距離A(図4参照)に対応するAA分だけ移動させた表示位置、つまりディスプレイ画面60の中央位置をZ2とした場合に、Z2からAA分だけ左に移動させた位置に図5に示すZ1が位置するようにガイド線61〜64のそれぞれの表示位置を調整する。なお、最も手前のガイド線61と、中央のガイド線62と、最も後方のガイド線63のそれぞれは、最も後方からの距離により位置が予め決められている。たとえば、ガイド線61は、最も後方からの距離が1m手前の位置を目安とし、ガイド線62は、3m手前の位置を目安とし、ガイド線63は、6m手前の位置を目安として決められている。このため、表示位置調整部17は、カメラ40Aが取付けられる高さBによっても、そのガイド線61,62,63の表示位置を変更する。   The display position adjustment unit 17 moves the display positions of the guide lines 61 to 64 by an amount AA corresponding to a predetermined distance A (see FIG. 4) from the vehicle body center Z1, that is, the center position of the display screen 60. When Z2 is Z2, the display positions of the guide lines 61 to 64 are adjusted so that Z1 shown in FIG. 5 is positioned at a position moved to the left by AA from Z2. Note that the positions of the frontmost guide line 61, the center guide line 62, and the rearmost guide line 63 are determined in advance by the distance from the rearmost position. For example, the guide line 61 is determined with a position 1 m before the distance from the rear as a guide, the guide line 62 is determined with a position 3 m before, and the guide line 63 is determined with a position 6 m before. . For this reason, the display position adjustment unit 17 also changes the display positions of the guide lines 61, 62, 63 depending on the height B at which the camera 40A is attached.

図6は、図1に示す安全運転支援システムにおいて使用されるカメラ40B、40Cの撮像する角度を示す図であり、(A)は、セダン車両X2の地表面71からの上下への傾きである角度αとなっている場合であり、(B)は、セダン車両X3の後方に対しての平行線72を基準とした場合の左右への傾きを示す角度βとなっている場合を示す図である。   FIG. 6 is a diagram showing angles taken by the cameras 40B and 40C used in the safe driving support system shown in FIG. 1, and FIG. 6A is a vertical inclination from the ground surface 71 of the sedan vehicle X2. This is a case where the angle is α, and (B) is a diagram showing a case where the angle β is an angle β indicating a left-right inclination with respect to the parallel line 72 with respect to the rear of the sedan vehicle X3. is there.

この図6(A)に示すように、セダン車両X2に取付けられたカメラ40Bの撮像する角度が地表面71からの上下への傾きである所定の角度αとなっている場合や、図6(B)に示すように、セダン車両X3の後方に対しての平行線72を基準とした場合の左右への傾きを示す所定の角度βとなっている場合も同様に、表示位置調整部17は、ガイド線61〜64が適切に表示されるように、これらの要素を考慮して変更する。   As shown in FIG. 6 (A), when the image captured by the camera 40B attached to the sedan vehicle X2 is a predetermined angle α that is an upward / downward tilt from the ground surface 71, FIG. Similarly, as shown in B), the display position adjustment unit 17 is also the same when the predetermined angle β indicating the left-right inclination with respect to the parallel line 72 with respect to the rear of the sedan vehicle X3 is used. The guide lines 61 to 64 are changed in consideration of these elements so that they are appropriately displayed.

つまり、上述した各要素である表示位置データ15(所定の距離A、所定の高さB、所定の角度α、所定の角度β)は、車両の種別によってそれぞれ異なる。したがって、表示位置調整部17は、車両の種別によりガイド線61〜64の表示位置をそれぞれ変更することができる。   That is, the display position data 15 (the predetermined distance A, the predetermined height B, the predetermined angle α, and the predetermined angle β) that are the above-described elements are different depending on the type of vehicle. Therefore, the display position adjustment unit 17 can change the display positions of the guide lines 61 to 64 depending on the type of vehicle.

表示部18は、液晶ディスプレイ、タッチパネルなどで構成され、車両種別判別部16と表示位置調整部17により決定された形状データ13とその表示位置データ15に基づいたガイド線61〜64を出力する機能を有する。また、このガイド線61〜64は、カメラ20で撮像されている画像と共に重ねて表示される。   The display unit 18 is composed of a liquid crystal display, a touch panel, and the like, and functions to output the shape data 13 determined by the vehicle type determination unit 16 and the display position adjustment unit 17 and guide lines 61 to 64 based on the display position data 15. Have In addition, the guide lines 61 to 64 are displayed so as to overlap with the image captured by the camera 20.

このように、形状データ13を、車種別にそれぞれ異なるものに設定することで、設定結果が反映されたことを目視で簡単に確認することができる。また、車種データ14とECU30から取得した車種タイプを比較することで、車両の種別を判別して決定することができる。また、その判別した車両の種別に関連付けられた形状データ13を求め、更にその形状データ13に関連付けられた表示位置データ15に従って表示部18の適切な位置にガイド線61〜64を設定することができる。   Thus, by setting the shape data 13 to be different for each vehicle type, it is possible to easily confirm visually that the setting result has been reflected. Further, the vehicle type can be determined and determined by comparing the vehicle type data 14 and the vehicle type acquired from the ECU 30. Further, the shape data 13 associated with the determined vehicle type is obtained, and the guide lines 61 to 64 are set at appropriate positions on the display unit 18 in accordance with the display position data 15 associated with the shape data 13. it can.

続いて、ナビゲーションユニット10の動作について図を参照しながら説明を行なう。図7は、図1に示すナビゲーションユニット10の運転支援表示を制御する処理を示すフローチャート図である。   Subsequently, the operation of the navigation unit 10 will be described with reference to the drawings. FIG. 7 is a flowchart showing a process for controlling the driving support display of the navigation unit 10 shown in FIG.

ナビゲーションユニット10の制御部11は、電源が投入されるまたはガイド線61〜64の表示位置を設定するモードになると、運転支援表示を制御する処理を開始する(START)。   The control unit 11 of the navigation unit 10 starts a process for controlling the driving support display when the power is turned on or the display position of the guide lines 61 to 64 is set (START).

制御機能部19は、車両種別判別部16が車両の種別を受信したか否かを判定する(ステップS100)。具体的には、車両のECU30から「車両タイプ」を表す情報である車両信号S2を受信したか否かを判定する。   The control function unit 19 determines whether or not the vehicle type determination unit 16 has received the vehicle type (step S100). Specifically, it is determined whether or not a vehicle signal S2 that is information indicating “vehicle type” is received from the ECU 30 of the vehicle.

制御機能部19は、車両のECU30から車両信号S2を受信した場合には(ステップS100でYes)、その受信した車両の種別を判定し、その車種に合ったガイド線61〜64を決定する。すなわち、制御機能部19は、記憶部12に保存してある各車種に合ったガイド線の中から車両の幅および/または車両からの距離の目安としてのガイド線61〜64であって車両信号S2と一致する車両のガイド線を決定する(ステップS101)。なお、車両のECU30から車両信号S2を受信できなかった場合には(ステップS100でNo)、ステップS100の判定処理を繰り返す。   When receiving the vehicle signal S2 from the ECU 30 of the vehicle (Yes in step S100), the control function unit 19 determines the type of the received vehicle and determines the guide lines 61 to 64 that match the vehicle type. That is, the control function unit 19 includes guide lines 61 to 64 as guides for the width of the vehicle and / or the distance from the vehicle among the guide lines suitable for each vehicle type stored in the storage unit 12, and the vehicle signal A guide line for the vehicle that matches S2 is determined (step S101). If the vehicle signal S2 cannot be received from the ECU 30 of the vehicle (No in step S100), the determination process in step S100 is repeated.

制御部11の表示位置調整部17は、ステップS101で決定したガイド線61〜64に関連付けられた表示位置情報を取得して、表示位置を調節する(ステップS102)。   The display position adjustment unit 17 of the control unit 11 acquires the display position information associated with the guide lines 61 to 64 determined in step S101, and adjusts the display position (step S102).

制御機能部19は、車両の外部に取付けられたカメラ20で撮像した映像と共にステップS102で調節されたガイド線61〜64を表示部18に出力し(ステップS103)、運転支援表示を制御する処理を終了する(END)。   The control function unit 19 outputs the guide lines 61 to 64 adjusted in step S102 to the display unit 18 together with the video imaged by the camera 20 attached to the outside of the vehicle (step S103), and controls the driving support display. End (END).

つまり、ナビゲーションユニット10は、車両の種別を示す種別情報を受信するステップ(ステップS100)と、車両の種別を判別するステップ(ステップS101)と、車両の種別によって、車両の幅および/または車両からの距離の目安としてのガイド線61〜64を決定するステップ(ステップS101)と、決定されたガイド線61〜64の表示位置を調節するステップ(ステップS102)と、車両の外部に取付けられたカメラで撮像した映像と共にガイド線61〜64を出力するステップ(ステップS103)と、により運転支援表示を制御する処理を行なう。   That is, the navigation unit 10 receives the vehicle width and / or the vehicle according to the step of receiving the type information indicating the type of the vehicle (step S100), the step of determining the type of the vehicle (step S101), and the type of the vehicle. A step of determining guide lines 61 to 64 as a guide of the distance (step S101), a step of adjusting the display positions of the determined guide lines 61 to 64 (step S102), and a camera attached to the outside of the vehicle The step of outputting the guide lines 61 to 64 together with the video imaged in (Step S103), and the process of controlling the driving support display.

このような制御処理を行なうことにより、ガイド線61〜64の設定を簡単に行ない、かつ設定結果を目視で容易に確認することができる。また、ステップS100で、ECU30から車両の種別情報である車両信号S2を取得してガイド線61〜64を決定することで、車両の種別により定められたガイド線61〜64に自動的に変更することができる。また、自動的に決定されたガイド線64は、車両の種別により形状が異なるため、目視による設定確認を容易に行なうことができる。また、ステップS102で、あらかじめ記憶部12に保存されているガイド線61〜64の表示位置に従って調節することで、ガイド線の表示位置を調節することができる。たとえば、図4で示したカメラ40Aの取付け位置から車両の車体中央Z1までの距離A、地面からの高さB、カメラ40Aの取付け位置から車両の車幅右端までの距離Cまたは車幅右端までの距離D、図6(A),(B)で示した車両の種別毎に設定されたカメラ40B,40Cの車両後方からの距離W1,W2、およびカメラ40B,40Cの撮像する角度αおよびβ、のいずれかひとつまたはこれらの複数の要素に基づいてガイド線の表示位置を調節することができる。したがって、カメラ40A〜40Cのように、車両の種別毎に異なる位置にカメラが取付けられても、それぞれ適切にガイド線61〜64を自動的に調整して設定することができる。   By performing such control processing, the guide lines 61 to 64 can be easily set, and the setting result can be easily confirmed visually. In step S100, the vehicle signal S2 that is the vehicle type information is acquired from the ECU 30 and the guide lines 61 to 64 are determined, so that the guide lines 61 to 64 determined by the type of the vehicle are automatically changed. be able to. Further, since the automatically determined guide line 64 has a different shape depending on the type of vehicle, it is possible to easily confirm the setting visually. Moreover, the display position of a guide line can be adjusted by adjusting according to the display position of the guide lines 61-64 previously preserve | saved in the memory | storage part 12 by step S102. For example, the distance A from the attachment position of the camera 40A shown in FIG. 4 to the center Z1 of the vehicle body, the height B from the ground, the distance C from the attachment position of the camera 40A to the right end of the vehicle width or the right end of the vehicle width. , Distances W1 and W2 from the rear of the cameras 40B and 40C set for each type of vehicle shown in FIGS. 6A and 6B, and angles α and β taken by the cameras 40B and 40C. The display position of the guide line can be adjusted based on any one of these or a plurality of these elements. Therefore, even if the cameras are mounted at different positions for each type of vehicle, such as the cameras 40A to 40C, the guide lines 61 to 64 can be automatically adjusted and set appropriately.

以上、ナビゲーションユニット10を本発明の実施の形態例として説明したが、本発明は、これに限定されるものではなく、発明の要旨を逸脱しない範囲において種々の変形や変更が可能である。   The navigation unit 10 has been described as an embodiment of the present invention. However, the present invention is not limited to this, and various modifications and changes can be made without departing from the spirit of the invention.

たとえば、上記実施の形態では、車両の後方画像を映し出すカメラ20を例に説明した。この他にもたとえば、車両の側面を映し出すサイドカメラまたは前方を映し出すフロントカメラに対して本発明を適用してもよい。   For example, in the above-described embodiment, the camera 20 that displays the rear image of the vehicle has been described as an example. In addition to this, for example, the present invention may be applied to a side camera that projects the side of the vehicle or a front camera that projects the front.

また、上記実施の形態では、カメラ20の取付け位置が固定され、撮像する角度も固定されているものである。この他にもたとえば、カメラ20の取付け位置を運転者が所定の範囲内で調整できる場合や撮像する角度を自由に変更できる場合には、それに伴い、表示部18に表示するガイド線61〜64の表示位置を調節する必要がある。その場合には、カメラ20の角度を定期的に検出するセンサを設けて、該センサで検出した角度からガイド線61〜64の表示位置を補正して表示させることとしてもよい。   Moreover, in the said embodiment, the attachment position of the camera 20 is fixed and the angle which images is also fixed. In addition to this, for example, when the driver can adjust the mounting position of the camera 20 within a predetermined range or when the imaging angle can be freely changed, the guide lines 61 to 64 displayed on the display unit 18 accordingly. It is necessary to adjust the display position. In that case, a sensor that periodically detects the angle of the camera 20 may be provided, and the display positions of the guide lines 61 to 64 may be corrected and displayed from the angle detected by the sensor.

また、上記実施の形態では、あらかじめ上述したナビゲーションユニット10の記憶部12に各機能を実現するためのプログラムが記録されている。この他にもたとえば、これらのプログラムが、これらの機器の出荷前に記憶部12に記憶されたものであっても、これらの機器の出荷後に記憶部12に記憶されたものであってもよい。また、記憶部12に記憶されるプログラムの一部が、これらの機器の出荷後に記憶されたものであってもよい。このように出荷後に記憶部12に記憶されるプログラムは、たとえばCD−ROM(Compact Disc Read Only Memory)や半導体メモリなどのコンピュータ読取可能な記録媒体に記憶されているものをインストールしたものであっても、インターネットなどの伝送媒体を介してサーバ装置などからダウンロードしたものであってもよい。また、これらのプログラムの一部あるいは全部が、記憶部12以外のたとえばHDDなどの外部記憶デバイスや、ナビゲーションユニット10と着脱可能なデバイス、たとえばメモリカードやCD−ROMに記憶されていてもよい。特に、ガイド線64の形状データ13、車種データ14、表示位置データ15に関しては、車両の種別と密接に関連するデータであるため、ナビゲーションユニット10から着脱可能なメモリカードに記憶され、ナビゲーションユニット10とともに提供されるようにするとよい。これにより、ナビゲーションユニット10は、メモリカードが交換して装着されることで、様々な車両の種別に対応することができる。   In the above embodiment, a program for realizing each function is recorded in advance in the storage unit 12 of the navigation unit 10 described above. In addition, for example, these programs may be stored in the storage unit 12 before the shipment of these devices, or may be stored in the storage unit 12 after the shipment of these devices. . Moreover, a part of program memorize | stored in the memory | storage part 12 may be memorize | stored after shipment of these apparatuses. As described above, the program stored in the storage unit 12 after shipment is a program installed on a computer-readable recording medium such as a CD-ROM (Compact Disc Read Only Memory) or a semiconductor memory. Alternatively, it may be downloaded from a server device or the like via a transmission medium such as the Internet. Some or all of these programs may be stored in an external storage device other than the storage unit 12, such as an HDD, or a device detachable from the navigation unit 10, such as a memory card or a CD-ROM. In particular, since the shape data 13, the vehicle type data 14, and the display position data 15 of the guide line 64 are data closely related to the type of vehicle, they are stored in a memory card that is removable from the navigation unit 10, and are stored in the navigation unit 10. It is good to be provided with. Thereby, the navigation unit 10 can respond | correspond to the classification of various vehicles by replacing | exchanging and mounting a memory card.

本発明は、すべての運転支援装置、運転支援表示の制御方法およびプログラムに適用できる。すなわち、運転支援装置としてのナビゲーションユニットに適用することができる。   The present invention can be applied to all driving support apparatuses, driving support display control methods, and programs. That is, it can be applied to a navigation unit as a driving support device.

本発明の実施の形態に係るナビゲーションユニットを含む安全運転支援システムの構成を示す図である。It is a figure which shows the structure of the safe driving assistance system containing the navigation unit which concerns on embodiment of this invention. 図1に示すナビゲーションユニットの主要な構成を示す図である。It is a figure which shows the main structures of the navigation unit shown in FIG. 図2に示すナビゲーションユニットの記憶部に保存されているガイド線の一例を示す図である。It is a figure which shows an example of the guide line preserve | saved at the memory | storage part of the navigation unit shown in FIG. 図1に示す安全運転支援システムにおいて使用されるカメラが、セダン車両の後方に取付けられた図である。FIG. 2 is a view in which a camera used in the safe driving support system shown in FIG. 1 is attached to the rear of a sedan vehicle. 図4に示すセダン車両のカメラで撮像した後方画像とガイド線を示す図である。It is a figure which shows the back image and guide line which were imaged with the camera of the sedan vehicle shown in FIG. 図1に示す安全運転支援システムにおいて使用されるカメラの撮像する角度を示す図であり、(A)は、セダン車両の地表面からの上下への傾きである角度αとなっている場合であり、(B)は、セダン車両の後方に対しての平行線を基準とした場合の左右への傾きを示す角度βとなっている場合を示す図である。It is a figure which shows the angle which the camera used in the safe driving assistance system shown in FIG. 1 images, (A) is a case where it is the angle (alpha) which is the up-down inclination from the ground surface of a sedan vehicle. (B) is a figure which shows the case where it is the angle (beta) which shows the inclination to the left and right when the parallel line with respect to the back of a sedan vehicle is made into a reference | standard. 図1に示すナビゲーションユニットの運転支援表示を制御する処理を示すフローチャート図である。It is a flowchart figure which shows the process which controls the driving assistance display of the navigation unit shown in FIG. 本出願人が先に開発した内容を示す図で、車両の製造ライン工程の中で操作するダイアグ画面を示す図である。It is a figure which shows the content which this applicant developed previously, and is a figure which shows the diagnosis screen operated in the manufacturing line process of a vehicle.

符号の説明Explanation of symbols

10 ナビゲーションユニット(運転支援装置)、11 制御部、12 記憶部、16 車両種別判別部、17 表示位置調整部、18 表示部、19 制御機能部20、40A,40B,40C カメラ、30 ECU、61,62,63 ガイド線、64 ガイド線、S2 車両信号(車両の種別情報) DESCRIPTION OF SYMBOLS 10 Navigation unit (driving support device), 11 Control part, 12 Storage part, 16 Vehicle classification determination part, 17 Display position adjustment part, 18 Display part, 19 Control function part 20, 40A, 40B, 40C Camera, 30 ECU, 61 , 62, 63 Guide line, 64 Guide line, S2 Vehicle signal (vehicle type information)

Claims (5)

車両の種別を判別する車両種別判別部と、
前記車両の幅および/または車両からの距離の目安としてのガイド線を前記車両の種別毎に保存する記憶部と、
前記車両種別判別部が判別した車両種別情報と、前記車両の種別によってあらかじめ前記車両に設定されたカメラの取付け位置、前記カメラの取付け位置から前記車両の車体中央までの距離、前記カメラの撮像する角度、前記カメラの取付け位置から前記車両の車幅左端または車幅右端までの距離のいずれかひとつまたはこれらの複数の要素とに基づいて、前記ガイド線の表示位置を調節する表示位置調整部と、
前記カメラで撮像した映像と共に前記表示位置調整部により調整されたガイド線を表示する表示部と、
を有することを特徴とする運転支援装置。
A vehicle type determination unit for determining the type of vehicle;
A storage unit for storing the guide wire as a guide of the distance from the width and / or vehicles of the vehicle for each type of the vehicle,
The vehicle type information determined by the vehicle type determination unit, the camera mounting position set in advance in the vehicle according to the vehicle type, the distance from the camera mounting position to the center of the vehicle body, and the imaging of the camera A display position adjusting unit that adjusts the display position of the guide line based on one or a plurality of elements of an angle, a distance from the camera mounting position to a vehicle width left end or a vehicle width right end of the vehicle ,
A display unit that displays a guide line adjusted by the display position adjustment unit together with an image captured by the camera;
A driving support device comprising:
前記ガイド線の形状は、
前記車両の種別毎に十字線の中央部分に図形が重ねて配置されている形状、十字線のみの形状として前記記憶部に保存されていることを特徴とする請求項1に記載の運転支援装置。
The shape of the guide wire is
The driving support device according to claim 1, wherein the storage unit stores a shape in which a figure is superimposed on a center portion of a crosshair for each type of vehicle, or a shape of only a crosshair. .
前記車両種別判別部は、
前記車両を制御するECUから取得した前記車両の前記種別情報に基づいて前記車両の種別を判別することを特徴とする請求項1または2に記載の運転支援装置。
The vehicle type determination unit
Driving support apparatus according to claim 1 or 2, characterized in that determining the type of the vehicle based on the type information of the vehicle acquired from the ECU to control the vehicle.
車両の種別を判別する車両種別判別ステップと、Vehicle type determination step for determining the type of vehicle;
前記車両種別判別ステップで判別された車両種別情報と、前記車両の種別によってあらかじめ前記車両に設定されたカメラの取付け位置、前記カメラの取付け位置から前記車両の車体中央までの距離、前記カメラの撮像する角度、前記カメラの取付け位置から前記車両の車幅左端または車幅右端までの距離のいずれかひとつまたはこれらの複数の要素とに基づいて、前記車両の幅および/または前記車両からの距離の目安としてのガイド線の表示位置を調節する表示位置調整ステップと、Vehicle type information discriminated in the vehicle type discriminating step, a camera mounting position set in advance in the vehicle according to the vehicle type, a distance from the camera mounting position to the center of the vehicle body, and imaging of the camera The width of the vehicle and / or the distance from the vehicle based on one or a plurality of factors from the mounting angle of the camera to the left end of the vehicle width or the right end of the vehicle width. A display position adjustment step for adjusting the display position of the guide line as a guide,
前記カメラで撮像した映像と共に前記表示位置調整ステップにより調整されたガイド線を表示する表示ステップと、A display step of displaying a guide line adjusted by the display position adjustment step together with an image captured by the camera;
を有することを特徴とする運転支援表示の制御方法。A method for controlling driving assistance display, comprising:
コンピュータを前記請求項1から請求項3のいずれか1項に記載の運転支援装置として機能させるためのプログラム。A program for causing a computer to function as the driving support device according to any one of claims 1 to 3.
JP2008085398A 2008-03-28 2008-03-28 Driving support device, driving support display control method and program Active JP4992789B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2008085398A JP4992789B2 (en) 2008-03-28 2008-03-28 Driving support device, driving support display control method and program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2008085398A JP4992789B2 (en) 2008-03-28 2008-03-28 Driving support device, driving support display control method and program

Publications (2)

Publication Number Publication Date
JP2009239782A JP2009239782A (en) 2009-10-15
JP4992789B2 true JP4992789B2 (en) 2012-08-08

Family

ID=41253164

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2008085398A Active JP4992789B2 (en) 2008-03-28 2008-03-28 Driving support device, driving support display control method and program

Country Status (1)

Country Link
JP (1) JP4992789B2 (en)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5464342B2 (en) * 2009-12-24 2014-04-09 京セラ株式会社 In-vehicle imaging device
JP2013153399A (en) * 2011-11-24 2013-08-08 Kyocera Corp Imaging module for vehicle and parking support device
DE102014225875A1 (en) * 2014-12-15 2016-06-16 Robert Bosch Gmbh Camera system and method for operating a camera system

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3448443B2 (en) * 1996-12-20 2003-09-22 アルパイン株式会社 Vehicle periphery confirmation system
JP2001322491A (en) * 2000-05-15 2001-11-20 Mitsubishi Electric Corp On-vehicle display method and on-vehicle display
JP2003131885A (en) * 2001-10-24 2003-05-09 Denso Corp Program writing system of vehicle mounted electronic control unit

Also Published As

Publication number Publication date
JP2009239782A (en) 2009-10-15

Similar Documents

Publication Publication Date Title
US9973734B2 (en) Vehicle circumference monitoring apparatus
US8542129B2 (en) Parking aid system
JP6958117B2 (en) Parking support device
JP2008195393A (en) Vehicle display device, vehicle display system and vehicle
JP2012105122A5 (en)
JP4321357B2 (en) Parking assistance device
JP2012217000A (en) Image display system, image generation apparatus, and image generation method
JP2008279875A (en) Parking support device
JP4992789B2 (en) Driving support device, driving support display control method and program
JP4650687B2 (en) Perimeter monitoring device
JP2007181129A (en) Vehicle-mounted movable body detection instrument
JP6694695B2 (en) Image processing apparatus and image processing method
JP2007237764A (en) On-vehicle situation storing device
JP2007237954A (en) Navigation system
JP5208790B2 (en) Image processing apparatus, image processing method, and program
JP2009119895A (en) Vehicle driving support device and vehicle driving support method
JP2007088577A (en) Vehicle surrounding image processing system
JP2010233080A (en) Driving support device, driving support method, and driving support program
JP4650252B2 (en) Parking assistance device
JP2009062020A (en) Surrounding vehicle display device
JP4459869B2 (en) Car navigation system
JP2006276964A (en) Display device for vehicle
JP6929146B2 (en) Threshold setting device, threshold setting method, and threshold setting program
KR101659606B1 (en) Rear-View Camera System
JP5160753B2 (en) In-vehicle equipment

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20100827

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20110715

A711 Notification of change in applicant

Free format text: JAPANESE INTERMEDIATE CODE: A712

Effective date: 20111012

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20120117

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20120124

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20120322

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20120410

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20120423

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20150518

Year of fee payment: 3

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

Ref document number: 4992789

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150