JP6939147B2 - Driving information guidance device and computer program - Google Patents

Driving information guidance device and computer program Download PDF

Info

Publication number
JP6939147B2
JP6939147B2 JP2017127744A JP2017127744A JP6939147B2 JP 6939147 B2 JP6939147 B2 JP 6939147B2 JP 2017127744 A JP2017127744 A JP 2017127744A JP 2017127744 A JP2017127744 A JP 2017127744A JP 6939147 B2 JP6939147 B2 JP 6939147B2
Authority
JP
Japan
Prior art keywords
information
vehicle
driver
items
line
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2017127744A
Other languages
Japanese (ja)
Other versions
JP2019011983A (en
Inventor
広之 三宅
広之 三宅
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Aisin Corp
Original Assignee
Aisin Seiki Co Ltd
Aisin Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Aisin Seiki Co Ltd, Aisin Corp filed Critical Aisin Seiki Co Ltd
Priority to JP2017127744A priority Critical patent/JP6939147B2/en
Publication of JP2019011983A publication Critical patent/JP2019011983A/en
Application granted granted Critical
Publication of JP6939147B2 publication Critical patent/JP6939147B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Traffic Control Systems (AREA)
  • Instructional Devices (AREA)
  • Navigation (AREA)
  • Instrument Panels (AREA)

Description

本発明は、車両の走行に関する情報を案内する走行情報案内装置及びコンピュータプログラムに関する。 The present invention relates to a traveling information guidance device and a computer program for guiding information on traveling of a vehicle.

従来より、車両の運転者に対して車両の走行に関する各種情報を提供する情報提供手段として、様々な手段が用いられている。例えば、車両に設置された液晶ディスプレイによる表示や、スピーカから出力する音声等である。そして、近年、車両の機能が多機能化するのに伴って、運転者に対して提供すべき情報の量も増加することとなっている。例えば、車速やシフト位置以外に、ACC(Adaptive Cruise Control)の設定値、エコインジケータ、レーン案内、交差点拡大図等である。 Conventionally, various means have been used as information providing means for providing various information regarding the running of the vehicle to the driver of the vehicle. For example, a display on a liquid crystal display installed in a vehicle, a sound output from a speaker, or the like. In recent years, as the functions of vehicles have become multifunctional, the amount of information to be provided to drivers has also increased. For example, in addition to the vehicle speed and shift position, ACC (Adaptive Cruise Control) set values, eco-indicators, lane guidance, intersection enlarged views, and the like.

しかしながら、このような多量の情報を走行中の運転者に対して同時に提供することは難しい。従って、運転者の操作によって情報提供対象となる情報の種類を選択することが行われている。また、例えば特開2016−190634号公報には、提供する情報の種類や提供方法が異なる複数の情報提供フォーマットを備え、所定時間間隔で情報提供フォーマットを順次切り替えることによって、多量の情報を運転者に提供する技術について開示されている。 However, it is difficult to simultaneously provide such a large amount of information to a driving driver. Therefore, the type of information to be provided is selected by the operation of the driver. Further, for example, Japanese Patent Application Laid-Open No. 2016-190634 includes a plurality of information providing formats in which the types and methods of providing information are different, and by sequentially switching the information providing formats at predetermined time intervals, a large amount of information can be obtained by the driver. The technology provided to is disclosed.

特開2016−190634号公報(図5~図12)Japanese Unexamined Patent Publication No. 2016-190634 (FIGS. 5 to 12)

ここで、運転者が必要とする情報の種類は、現在の車両の状況によって予め絞られる。例えば、高速道路の走行中であれば交差点拡大図はあまり必要とされず、ACCによる走行が一般的に行われない一般道の走行中であればACCの設定値はあまり必要とされない。しかしながら、運転者の操作によって情報提供対象となる情報の種類を選択する方法では、車両の状況が変わる度に運転者が提供対象となる情報を切り替える為の操作を行う必要があった。一方、上記特許文献1に記載の技術では、フォーマットが切り替わる過程で運転者にとって必要な情報が表示されない期間や、あまり必要でない情報が表示される期間が生じる。 Here, the types of information required by the driver are narrowed down in advance according to the current situation of the vehicle. For example, when traveling on a highway, an enlarged view of an intersection is not required so much, and when traveling on a general road where traveling by ACC is not generally performed, a set value of ACC is not required so much. However, in the method of selecting the type of information to be provided by the driver's operation, it is necessary for the driver to perform an operation for switching the information to be provided every time the situation of the vehicle changes. On the other hand, in the technique described in Patent Document 1, there is a period in which information necessary for the driver is not displayed or a period in which information that is not so necessary is displayed in the process of switching the format.

本発明は前記従来における問題点を解消するためになされたものであり、車両の走行に関する情報を表示領域に表示することによって提供する場合において、車両の状況に応じて項目間で表示態様に差を設けて表示することにより、運転者に必要な情報を適切に提供することを可能にした走行情報案内装置及びコンピュータプログラムを提供することを目的とする。 The present invention has been made to solve the above-mentioned conventional problems, and when providing information on the running of a vehicle by displaying it in a display area, the display mode differs between items according to the situation of the vehicle. It is an object of the present invention to provide a driving information guidance device and a computer program that can appropriately provide necessary information to the driver by providing and displaying the information.

前記目的を達成するため本発明に係る走行情報案内装置は、現在の車両状況を取得する状況取得手段と、運転者の視線位置を取得する視線位置取得手段と、車両の走行に関する情報を運転者が視認可能な表示領域に表示する情報表示手段と、を有し、前記車両の走行に関する情報として前記表示領域に表示対象となる項目が複数あって、車両状況毎に前記表示領域に表示された複数の項目を対象として、運転者の視線位置が滞在する割合を項目間での相対評価により学習する学習手段を備え、前記情報表示手段は、前記現在の車両状況に対応する前記学習手段の学習結果に基づいて、前記複数の項目の表示態様に差を設けて表示する。
尚、「運転者の視線位置」とは、運転者の視線が位置する地点であり、運転者が視認する対象物(例えば表示領域)と運転者の視線(視軸)とが交わる地点とする。また、「運転者の視線位置」としては、運転者の視線位置そのものに加えて、運転者の視線位置を特定し得るものであれば良く、運転者の目元の画像等についても含む。
In order to achieve the above object, the driving information guidance device according to the present invention provides a situation acquisition means for acquiring the current vehicle condition, a line-of-sight position acquisition means for acquiring the driver's line-of-sight position, and information on the vehicle's running. Has an information display means for displaying in a visible display area, and there are a plurality of items to be displayed in the display area as information related to the driving of the vehicle, and the items are displayed in the display area for each vehicle condition. A learning means for learning the ratio of the driver's line of sight staying for a plurality of items by relative evaluation between the items is provided, and the information display means learns the learning means corresponding to the current vehicle situation. Based on the result, the display modes of the plurality of items are displayed with a difference.
The "driver's line of sight position" is a point where the driver's line of sight is located, and is a point where an object (for example, a display area) that the driver sees intersects with the driver's line of sight (line of sight). .. Further, the "driver's line-of-sight position" may be any one that can specify the driver's line-of-sight position in addition to the driver's line-of-sight position itself, and includes an image of the driver's eyes and the like.

また、本発明に係るコンピュータプログラムは、車両に対して走行に関する各種情報を提供するプログラムである。具体的には、コンピュータを、現在の車両状況を取得する状況取得手段と、運転者の視線位置を取得する視線位置取得手段と、車両の走行に関する情報を運転者が視認可能な表示領域に表示する情報表示手段と、前記車両の走行に関する情報として前記表示領域に表示対象となる項目が複数あり、車両状況毎に前記表示領域に表示された複数の項目を対象として、運転者の視線位置が滞在する割合を項目間での相対評価により学習する学習手段と、して機能させる為のコンピュータプログラムである。また、前記情報表示手段は、前記現在の車両状況に対応する前記学習手段の学習結果に基づいて、前記複数の項目の表示態様に差を設けて表示する。 Further, the computer program according to the present invention is a program that provides various information regarding traveling to the vehicle. Specifically, the computer displays a status acquisition means for acquiring the current vehicle status, a line-of-sight position acquisition means for acquiring the driver's line-of-sight position, and information on the driving of the vehicle in a display area visible to the driver. There are a plurality of items to be displayed in the display area as information related to the traveling of the vehicle and the information display means to be used, and the line-of-sight position of the driver is determined for the plurality of items displayed in the display area for each vehicle condition. It is a computer program for functioning as a learning means for learning the ratio of staying by relative evaluation between items. Further, the information display means displays the plurality of items with a difference in the display mode based on the learning result of the learning means corresponding to the current vehicle situation.

前記構成を有する本発明に係る走行情報案内装置及びコンピュータプログラムによれば、車両の走行に関する情報を表示領域に表示することによって提供する場合において、車両の状況に応じて項目間で表示態様に差を設けて表示することにより、提供する対象となる情報が多数ある場合においても、運転者に必要な情報を適切に提供することが可能となる。また、運転者毎且つ車両状況毎にどのような情報を必要としているかを学習結果から把握することが可能となる。その結果、提供する対象となる情報が多数ある場合においても、運転者に必要な情報を適切に提供することが可能となる。 According to the traveling information guidance device and the computer program according to the present invention having the above-described configuration, when the information related to the traveling of the vehicle is provided by displaying it in the display area, the display mode differs between the items according to the situation of the vehicle. By providing and displaying the information, it is possible to appropriately provide the necessary information to the driver even when there is a large amount of information to be provided. In addition, it is possible to grasp what kind of information is required for each driver and each vehicle situation from the learning result. As a result, even when there is a large amount of information to be provided, it is possible to appropriately provide the necessary information to the driver.

本実施形態に係る走行情報案内装置の概略構成図である。It is a schematic block diagram of the traveling information guidance device which concerns on this embodiment. 本実施形態に係るナビゲーション装置を示したブロック図である。It is a block diagram which showed the navigation device which concerns on this embodiment. 本実施形態に係る走行情報案内処理プログラムのフローチャートである。It is a flowchart of the traveling information guidance processing program which concerns on this embodiment. 基本表示データテーブルの一例を示した図である。It is a figure which showed an example of the basic display data table. 学習DBに格納される学習結果の一例を示した図である。It is a figure which showed an example of the learning result stored in a learning DB. 輝度差を設けずに走行に係る情報を表示した表示例を示した図である。It is a figure which showed the display example which displayed the information which concerns on running without providing the luminance difference. 乗員の視線位置の特定方法を説明した図である。It is a figure explaining the method of specifying the line-of-sight position of an occupant. 輝度差を設けて走行に係る情報を表示した表示例を示した図である。It is a figure which showed the display example which displayed the information which concerns on running by providing the luminance difference.

以下、本発明に係る走行情報案内装置を具体化した一実施形態に基づき図面を参照しつつ詳細に説明する。先ず、本実施形態に係る走行情報案内装置1の概略構成について図1を用いて説明する。図1は本実施形態に係る走行情報案内装置1の概略構成図である。 Hereinafter, a detailed description will be given with reference to the drawings based on an embodiment embodying the traveling information guidance device according to the present invention. First, the schematic configuration of the traveling information guidance device 1 according to the present embodiment will be described with reference to FIG. FIG. 1 is a schematic configuration diagram of a traveling information guidance device 1 according to the present embodiment.

図1に示すように走行情報案内装置1は、車両2に搭載されたナビゲーション装置3と、同じく車両2に搭載されるとともにナビゲーション装置3と接続されたヘッドアップディスプレイ装置(以下、HUDという)4とを基本的に有する。 As shown in FIG. 1, the traveling information guidance device 1 includes a navigation device 3 mounted on the vehicle 2 and a head-up display device (hereinafter referred to as HUD) 4 mounted on the vehicle 2 and connected to the navigation device 3. And basically have.

ここで、ナビゲーション装置3は、目的地までの推奨経路を探索したり、サーバから取得したりメモリに格納された地図データに基づいて車両2の現在位置周辺の地図画像を表示したり、設定された案内経路に沿った移動案内や車両2の走行に関する各種情報の案内をHUD4とともに行う機能を有する。尚、上記機能の全てをナビゲーション装置3が備えている必要はなく、少なくとも車両2の走行に関する各種情報の案内を行う機能を有していれば本願発明を構成することが可能である。尚、ナビゲーション装置3の構造の詳細については後述する。 Here, the navigation device 3 is set to search for a recommended route to the destination, display a map image around the current position of the vehicle 2 based on the map data acquired from the server or stored in the memory. It has a function of providing movement guidance along the guide route and guidance of various information related to the running of the vehicle 2 together with the HUD4. It should be noted that it is not necessary for the navigation device 3 to have all of the above functions, and the present invention can be configured as long as it has at least a function of guiding various information related to the traveling of the vehicle 2. The details of the structure of the navigation device 3 will be described later.

一方、HUD4は、車両2のダッシュボード5内部に設置されており、内部には映像が表示される映像表示面である液晶ディスプレイ6を有する。そして、液晶ディスプレイ6に投射された映像を、後述のようにHUD4が備える凹面鏡7等を介し、更に運転席の前方のフロントウィンドウ8に反射させて車両2の乗員9に視認させるように構成されている。尚、液晶ディスプレイ6に表示される映像としては、車両2に関する情報や乗員9の運転の支援の為に用いられる各種情報がある。例えば乗員9に対して警告対象となる対象物(他車両や歩行者)に対する警告、ナビゲーション装置3で設定された案内経路や案内経路に基づく案内情報(右左折方向を示す矢印等)、路面に表示する警告(追突注意、制限速度等)、現在車速、シフト位置、レーン案内、交差点拡大図、ACC(Adaptive Cruise Control)の設定値、エコインジケータ、案内標識、地図画像、交通情報、ニュース、天気予報、時刻、接続されたスマートフォンの画面、テレビ番組等がある。 On the other hand, the HUD 4 is installed inside the dashboard 5 of the vehicle 2, and has a liquid crystal display 6 which is an image display surface on which an image is displayed. Then, the image projected on the liquid crystal display 6 is reflected on the front window 8 in front of the driver's seat via the concave mirror 7 and the like provided in the HUD 4 as described later, and is configured to be visually recognized by the occupant 9 of the vehicle 2. ing. The images displayed on the liquid crystal display 6 include information on the vehicle 2 and various information used to support the driving of the occupant 9. For example, a warning to an object (another vehicle or a pedestrian) to be warned to the occupant 9, a guidance route set by the navigation device 3, guidance information based on the guidance route (arrow indicating the right / left turn direction, etc.), on the road surface. Warnings to be displayed (rear-end collision caution, speed limit, etc.), current vehicle speed, shift position, lane guidance, crossroads enlarged map, ACC (Adaptive Cruise Control) setting values, eco-indicators, guidance signs, map images, traffic information, news, weather There are forecasts, times, connected smartphone screens, TV programs, etc.

また、本実施形態のHUD4では、フロントウィンドウ8を反射して乗員9が液晶ディスプレイ6に表示された映像を視認した場合に、乗員9にはフロントウィンドウ8の位置ではなく、フロントウィンドウ8の先の遠方の位置に液晶ディスプレイ6に表示された映像が虚像10として視認されるように構成される。また、虚像10は乗員9の視野に重畳して表示されることとなり、例えば乗員9の視野領域内に位置する任意の対象物(警告対象となる物等)に重畳させて表示させることも可能である。尚、乗員9が視認できる虚像10は液晶ディスプレイ6に表示された映像であるが、凹面鏡7やその他のミラーを介することによって上下方向や左右方向が反転する場合があり、それらの反転を考慮して液晶ディスプレイ6の映像の表示を行う必要がある。また、凹面鏡7を介することによってサイズも変更する。 Further, in the HUD 4 of the present embodiment, when the occupant 9 reflects the front window 8 and visually recognizes the image displayed on the liquid crystal display 6, the occupant 9 is not at the position of the front window 8 but at the tip of the front window 8. The image displayed on the liquid crystal display 6 at a distant position is visually recognized as a virtual image 10. Further, the virtual image 10 is displayed by superimposing it on the visual field of the occupant 9, and can be displayed by superimposing it on an arbitrary object (such as an object to be warned) located in the visual field area of the occupant 9, for example. Is. The virtual image 10 that can be visually recognized by the occupant 9 is an image displayed on the liquid crystal display 6, but the vertical direction and the horizontal direction may be reversed by passing through the concave mirror 7 and other mirrors. It is necessary to display the image of the liquid crystal display 6. The size is also changed via the concave mirror 7.

ここで、虚像10を生成する位置、より具体的には乗員9から虚像10までの距離(以下、虚像生成距離という)Lについては、HUD4が備える凹面鏡7の曲率、液晶ディスプレイ6と凹面鏡7との相対位置等によって適宜設定することが可能である。例えば、凹面鏡7の曲率が固定であれば、液晶ディスプレイ6において映像の表示された位置から凹面鏡7までの光路に沿った距離(光路長)によって虚像生成距離Lが決定される。例えば虚像生成距離Lが25mとなるように光路長が設定されている。 Here, regarding the position where the virtual image 10 is generated, more specifically, the distance L from the occupant 9 to the virtual image 10 (hereinafter referred to as the virtual image generation distance) L, the curvature of the concave mirror 7 provided in the HUD 4, the liquid crystal display 6 and the concave mirror 7 It is possible to set appropriately according to the relative position of. For example, if the curvature of the concave mirror 7 is fixed, the virtual image generation distance L is determined by the distance (optical path length) along the optical path from the position where the image is displayed on the liquid crystal display 6 to the concave mirror 7. For example, the optical path length is set so that the virtual image generation distance L is 25 m.

また、本実施形態では乗員9の視野に重畳する画像を表示する手段としてHUD4を用いているが、他の手段を用いても良い。例えば、フロントウィンドウ8に対して映像を表示するウインドウシールドディスプレイ(WSD)を用いても良い。例えば、フロントウィンドウ8をスクリーンとしてプロジェクタから映像を表示しても良いし、フロントウィンドウ8を透過液晶ディスプレイとしても良い。WSDによってフロントウィンドウ8に対して表示された画像は、HUD4と同様に乗員9の視野に重畳する画像となる。 Further, in the present embodiment, HUD4 is used as a means for displaying an image superimposed on the field of view of the occupant 9, but other means may be used. For example, a window shield display (WSD) that displays an image on the front window 8 may be used. For example, the front window 8 may be used as a screen to display an image from the projector, or the front window 8 may be used as a transmissive liquid crystal display. The image displayed on the front window 8 by the WSD is an image superimposed on the field of view of the occupant 9 as in the HUD4.

また、車両のフロントバンパの上方やルームミラーの裏側等にはフロントカメラ11が設置される。フロントカメラ11は、例えばCCD等の固体撮像素子を用いたカメラを有する撮像装置であり、光軸方向を車両の進行方向前方に向けて設置される。そして、フロントカメラ11により撮像された撮像画像に対して画像処理が行われることによって、フロントウィンドウ8越しに乗員9に視認される前方環境(即ち虚像10が重畳される環境)の状況等が検出される。尚、フロントカメラ11の代わりにミリ波レーダ等のセンサを用いても良い。 Further, the front camera 11 is installed above the front bumper of the vehicle, behind the rearview mirror, and the like. The front camera 11 is an image pickup device having a camera using a solid-state image sensor such as a CCD, and is installed with the optical axis direction facing forward in the traveling direction of the vehicle. Then, by performing image processing on the captured image captured by the front camera 11, the situation of the front environment (that is, the environment in which the virtual image 10 is superimposed) visually recognized by the occupant 9 through the front window 8 is detected. Will be done. A sensor such as a millimeter wave radar may be used instead of the front camera 11.

また、車両のインストルメントパネルの上面には車内カメラ12が設置される。車内カメラ12は、例えばCCD等の固体撮像素子を用いたカメラを有する撮像装置であり、光軸方向を運転席に向けて設置される。そして、運転席に座った乗員9の顔を撮像する。そして、車内カメラ12により撮像された撮像画像に対して画像処理が行われることによって、乗員9の目の位置(視線開始点)や視線方向を検出する。 In addition, an in-vehicle camera 12 is installed on the upper surface of the instrument panel of the vehicle. The in-vehicle camera 12 is an image pickup device having a camera using a solid-state image sensor such as a CCD, and is installed with the optical axis direction facing the driver's seat. Then, the face of the occupant 9 sitting in the driver's seat is imaged. Then, image processing is performed on the captured image captured by the in-vehicle camera 12, so that the eye position (line-of-sight start point) and the line-of-sight direction of the occupant 9 are detected.

次に、上記走行情報案内装置1を構成するナビゲーション装置3の概略構成について図2を用いて説明する。図2は本実施形態に係るナビゲーション装置3を示したブロック図である。 Next, a schematic configuration of the navigation device 3 constituting the traveling information guidance device 1 will be described with reference to FIG. FIG. 2 is a block diagram showing a navigation device 3 according to the present embodiment.

図2に示すように本実施形態に係るナビゲーション装置3は、ナビゲーション装置3が搭載された車両2の現在位置を検出する現在位置検出部13と、各種のデータが記録されたデータ記録部14と、入力された情報に基づいて、各種の演算処理を行うナビゲーションECU15と、ユーザからの操作を受け付ける操作部16と、ユーザに対して車両周辺の地図や施設の関する施設情報を表示する液晶ディスプレイ17と、経路案内に関する音声ガイダンスを出力するスピーカ18と、記憶媒体であるDVDを読み取るDVDドライブ19と、VICS(登録商標:Vehicle Information and Communication System)センタ等の情報センタとの間で通信を行う通信モジュール20と、を有する。また、ナビゲーション装置3はCAN等の車載ネットワークを介して、前述したHUD4、フロントカメラ11及び車内カメラ12等が接続されている。 As shown in FIG. 2, the navigation device 3 according to the present embodiment includes a current position detection unit 13 that detects the current position of the vehicle 2 on which the navigation device 3 is mounted, and a data recording unit 14 in which various data are recorded. , A navigation ECU 15 that performs various arithmetic processes based on the input information, an operation unit 16 that receives operations from the user, and a liquid crystal display 17 that displays a map around the vehicle and facility information related to the facility to the user. Communication between a speaker 18 that outputs voice guidance regarding route guidance, a DVD drive 19 that reads a DVD as a storage medium, and an information center such as a VICS (registered trademark: Vehicle Information and Communication System) center. It has a module 20 and. Further, the navigation device 3 is connected to the above-mentioned HUD4, the front camera 11, the in-vehicle camera 12, and the like via an in-vehicle network such as CAN.

以下に、ナビゲーション装置3が有する各構成要素について順に説明する。
現在位置検出部13は、GPS21、車速センサ22、ステアリングセンサ23、ジャイロセンサ24等からなり、現在の車両の位置、方位、車両の走行速度、現在時刻等を検出することが可能となっている。ここで、特に車速センサ22は、車両の移動距離や車速を検出する為のセンサであり、車両の駆動輪の回転に応じてパルスを発生させ、パルス信号をナビゲーションECU15に出力する。そして、ナビゲーションECU15は発生するパルスを計数することにより駆動輪の回転速度や移動距離を算出する。尚、上記4種類のセンサをナビゲーション装置3が全て備える必要はなく、これらの内の1又は複数種類のセンサのみをナビゲーション装置3が備える構成としても良い。
Hereinafter, each component of the navigation device 3 will be described in order.
The current position detection unit 13 includes a GPS 21, a vehicle speed sensor 22, a steering sensor 23, a gyro sensor 24, and the like, and can detect the current position and direction of the vehicle, the traveling speed of the vehicle, the current time, and the like. .. Here, in particular, the vehicle speed sensor 22 is a sensor for detecting the moving distance and the vehicle speed of the vehicle, generates a pulse according to the rotation of the drive wheels of the vehicle, and outputs the pulse signal to the navigation ECU 15. Then, the navigation ECU 15 calculates the rotation speed and the moving distance of the drive wheels by counting the generated pulses. It is not necessary for the navigation device 3 to include all of the above four types of sensors, and the navigation device 3 may include only one or a plurality of of these sensors.

また、データ記録部14は、外部記憶装置及び記録媒体としてのハードディスク(図示せず)と、ハードディスクに記録された地図情報DB31や学習DB32や所定のプログラム等を読み出すとともにハードディスクに所定のデータを書き込む為のドライバである記録ヘッド(図示せず)とを備えている。尚、データ記録部14はハードディスクの代わりにフラッシュメモリやメモリーカードやCDやDVD等の光ディスクを有していても良い。また、地図情報DB31や学習DB32は外部のサーバに格納させ、ナビゲーション装置3が通信により取得する構成としても良い。 Further, the data recording unit 14 reads a hard disk (not shown) as an external storage device and a recording medium, a map information DB 31 and a learning DB 32 recorded on the hard disk, a predetermined program, and the like, and writes predetermined data to the hard disk. It is equipped with a recording head (not shown), which is a driver for this purpose. The data recording unit 14 may have a flash memory, a memory card, an optical disk such as a CD or a DVD, instead of the hard disk. Further, the map information DB 31 and the learning DB 32 may be stored in an external server and acquired by the navigation device 3 by communication.

ここで、地図情報DB31は、例えば、道路(リンク)に関するリンクデータ33、ノード点に関するノードデータ34、施設等の地点に関する地点データ35、各交差点に関する交差点データ、地図を表示するための地図表示データ、経路を探索するための探索データ、地点を検索するための検索データ等が記憶された記憶手段である。 Here, the map information DB 31 is, for example, link data 33 related to a road (link), node data 34 related to a node point, point data 35 related to a point such as a facility, intersection data related to each intersection, and map display data for displaying a map. , A storage means in which search data for searching a route, search data for searching a point, and the like are stored.

ここで、リンクデータ33としては、例えば、該リンクを識別するリンクID、該リンクの端部に位置するノードを特定する端部ノード情報、該リンクが構成する道路の道路種別等が記憶される。また、ノードデータ34としては、該ノードを識別するノードID、該ノードの位置座標、該ノードがリンクを介して接続される接続先ノードを特定する接続先ノード情報等が記憶される。また、地点データ35としては、目的地への設定対象となる施設に関する各種情報が記憶される。例えば、施設を特定するID、施設名称、位置座標、ジャンル、住所等が記憶される。 Here, as the link data 33, for example, a link ID that identifies the link, end node information that identifies a node located at the end of the link, a road type of a road that the link constitutes, and the like are stored. .. Further, as the node data 34, a node ID that identifies the node, position coordinates of the node, connection destination node information that identifies the connection destination node to which the node is connected via a link, and the like are stored. Further, as the point data 35, various information regarding the facility to be set to the destination is stored. For example, an ID that identifies the facility, a facility name, position coordinates, a genre, an address, and the like are stored.

また、学習DB32は、HUD4によって表示対象候補となる車両の走行に関する各種情報に対して、情報の項目毎の車両の乗員9の視線位置の滞在態様を累積して記憶した記憶手段である。また、本実施形態では特に車両状況毎(より具体的には車両が走行する道路種別毎)に乗員9の視線位置の滞在態様の学習を行う。即ち、学習DB32には、車両状況毎に、車両の乗員9がHUD4によって表示対象候補となる各情報のどの項目をどの程度視認したか(視認回数、視認時間、視認割合等)について学習値として累積記憶されることとなる。そして、ナビゲーションECU15は、後述のように学習DB32に記憶された学習値に基づいてHUD4の情報の表示態様を設定する。尚、学習DB32に記憶される学習値の詳細については後述する。 Further, the learning DB 32 is a storage means that accumulates and stores the staying mode of the line-of-sight position of the occupant 9 of the vehicle for each item of information with respect to various information related to the running of the vehicle that is a display target candidate by the HUD4. Further, in the present embodiment, the staying mode of the line-of-sight position of the occupant 9 is learned especially for each vehicle condition (more specifically, for each road type on which the vehicle travels). That is, in the learning DB 32, as a learning value, for each vehicle situation, which item of each information as a display target candidate is visually recognized by the vehicle occupant 9 by the HUD4 (number of visual recognitions, visual recognition time, visual recognition ratio, etc.). It will be accumulated and stored. Then, the navigation ECU 15 sets the display mode of the information of the HUD 4 based on the learning value stored in the learning DB 32 as described later. The details of the learning value stored in the learning DB 32 will be described later.

一方、ナビゲーションECU(エレクトロニック・コントロール・ユニット)15は、ナビゲーション装置3の全体の制御を行う電子制御ユニットであり、演算装置及び制御装置としてのCPU41、並びにCPU41が各種の演算処理を行うにあたってワーキングメモリとして使用されるとともに、経路が探索されたときの経路データ等が記憶されるRAM42、制御用のプログラムのほか、後述の基本表示データテーブル(図4)や走行情報案内処理プログラム(図3)等が記録されたROM43、ROM43から読み出したプログラムを記憶するフラッシュメモリ44等の内部記憶装置を備えている。尚、ナビゲーションECU15は、処理アルゴリズムとしての各種手段を有する。例えば、状況取得手段は、現在の車両状況を取得する。視線位置取得手段は、運転者の視線位置を取得する。情報表示手段は、車両の走行に関する情報を運転者が視認可能な表示領域に表示する。 On the other hand, the navigation ECU (electronic control unit) 15 is an electronic control unit that controls the entire navigation device 3, and is a computing device, a CPU 41 as a control device, and a working memory when the CPU 41 performs various arithmetic processes. In addition to the RAM 42 that stores the route data when the route is searched, the control program, the basic display data table (Fig. 4) and the driving information guidance processing program (Fig. 3), which will be described later, etc. It is provided with an internal storage device such as a ROM 43 in which data is recorded and a flash memory 44 for storing a program read from the ROM 43. The navigation ECU 15 has various means as a processing algorithm. For example, the status acquisition means acquires the current vehicle status. The line-of-sight position acquisition means acquires the line-of-sight position of the driver. The information display means displays information on the running of the vehicle in a display area that can be seen by the driver.

操作部16は、走行開始地点としての出発地及び走行終了地点としての目的地を入力する際等に操作され、各種のキー、ボタン等の複数の操作スイッチ(図示せず)を有する。そして、ナビゲーションECU15は、各スイッチの押下等により出力されるスイッチ信号に基づき、対応する各種の動作を実行すべく制御を行う。尚、操作部16は液晶ディスプレイ17の前面に設けたタッチパネルを有していても良い。また、マイクと音声認識装置を有していても良い。 The operation unit 16 is operated when inputting a starting point as a traveling start point and a destination as a traveling end point, and has a plurality of operation switches (not shown) such as various keys and buttons. Then, the navigation ECU 15 controls to execute various corresponding operations based on the switch signals output by pressing each switch or the like. The operation unit 16 may have a touch panel provided on the front surface of the liquid crystal display 17. It may also have a microphone and a voice recognition device.

また、液晶ディスプレイ17には、道路を含む地図画像、交通情報、操作案内、操作メニュー、キーの案内、出発地から目的地までの案内経路、案内経路に沿った案内情報、ニュース、天気予報、時刻、メール、テレビ番組等が表示される。尚、本実施形態では情報の表示手段としてHUD4を備えているので、上記地図画像等の表示をHUD4で行う構成とすれば液晶ディスプレイ17は省略しても良い。 Further, on the liquid crystal display 17, map images including roads, traffic information, operation guidance, operation menus, key guidance, guidance routes from the departure point to the destination, guidance information along the guidance routes, news, weather forecasts, etc. The time, mail, TV program, etc. are displayed. Since the HUD 4 is provided as the information display means in the present embodiment, the liquid crystal display 17 may be omitted if the HUD 4 is used to display the map image or the like.

また、スピーカ18は、ナビゲーションECU15からの指示に基づいて案内経路に沿った走行を案内する音声ガイダンスや、交通情報の案内を出力する。 Further, the speaker 18 outputs voice guidance for guiding the traveling along the guidance route and traffic information guidance based on the instruction from the navigation ECU 15.

また、DVDドライブ19は、DVDやCD等の記録媒体に記録されたデータを読み取り可能なドライブである。そして、読み取ったデータに基づいて音楽や映像の再生、地図情報DB31の更新等が行われる。尚、DVDドライブ19に替えてメモリーカードを読み書きする為のカードスロットを設けても良い。 The DVD drive 19 is a drive capable of reading data recorded on a recording medium such as a DVD or a CD. Then, based on the read data, music or video is reproduced, the map information DB 31 is updated, and the like. A card slot for reading and writing a memory card may be provided instead of the DVD drive 19.

また、通信モジュール20は、交通情報センタ、例えば、VICSセンタやプローブセンタ等から送信された渋滞情報、規制情報、交通事故情報等の各情報から成る交通情報を受信する為の通信装置であり、例えば携帯電話機やDCMが該当する。 Further, the communication module 20 is a communication device for receiving traffic information including various information such as traffic jam information, regulation information, and traffic accident information transmitted from a traffic information center, for example, a VICS center or a probe center. For example, mobile phones and DCM.

続いて、前記構成を有する走行情報案内装置1の内、特にナビゲーション装置3において実行する走行情報案内処理プログラムについて図3に基づき説明する。図3は本実施形態に係る走行情報案内処理プログラムのフローチャートである。ここで、走行情報案内処理プログラムは車両のACC電源(accessory power supply)がONされた後に実行され、HUD4を用いて車両2の乗員9に車両の走行に関する各種情報の案内を行うプログラムである。尚、以下の図3にフローチャートで示されるプログラムは、ナビゲーション装置3が備えているRAM42やROM43に記憶されており、CPU41により実行される。 Subsequently, among the traveling information guidance devices 1 having the above configuration, a traveling information guidance processing program executed by the navigation device 3 will be described with reference to FIG. FIG. 3 is a flowchart of the traveling information guidance processing program according to the present embodiment. Here, the traveling information guidance processing program is a program that is executed after the ACC power supply (accessory power supply) of the vehicle is turned on, and guides various information related to the traveling of the vehicle to the occupant 9 of the vehicle 2 using the HUD4. The program shown in the flowchart in FIG. 3 below is stored in the RAM 42 or ROM 43 included in the navigation device 3 and is executed by the CPU 41.

先ず、走行情報案内処理プログラムではステップ(以下、Sと略記する)1において、CPU41は、現在の車両状況を取得する。本実施形態では、車両状況として特に車両が現在走行する道路の道路種別を取得する。具体的には、先ずCPU41は現在位置検出部13により車両の現在位置を特定するとともに、地図情報DB31に記憶された地図データを用いてマップマッチング処理を行い、車両が走行するリンクを特定する。その後、リンクデータ33を用いて車両が走行するリンクの道路種別を特定する。尚、以下の説明では、道路種別を『高速道路』、『一般道(国道、県道等)』、『細街路』の3種類で定義することとする。 First, in the traveling information guidance processing program, in step 1 (hereinafter, abbreviated as S) 1, the CPU 41 acquires the current vehicle status. In the present embodiment, the road type of the road on which the vehicle is currently traveling is acquired as the vehicle status. Specifically, the CPU 41 first identifies the current position of the vehicle by the current position detection unit 13, and performs map matching processing using the map data stored in the map information DB 31 to specify the link on which the vehicle travels. After that, the road type of the link on which the vehicle travels is specified using the link data 33. In the following explanation, the road types will be defined as three types: "expressway", "general road (national road, prefectural road, etc.)", and "narrow street".

次に、S2においてCPU41は、前記S1で取得した車両状況に基づいて、車両の走行に関する情報として表示対象候補となる複数の項目の内、表示対象とする項目を選択する。特に本実施形態では、図4に示すように基本表示データテーブルによって、車両状況(車両が走行する道路種別)毎に予め表示対象とする項目が予め設定されている。尚、基本表示データテーブルは、ROM43やフラッシュメモリ44等に格納されている。 Next, in S2, the CPU 41 selects an item to be displayed as a display target candidate among a plurality of items to be displayed as information on the running of the vehicle, based on the vehicle condition acquired in S1. In particular, in the present embodiment, as shown in FIG. 4, items to be displayed are preset for each vehicle condition (road type on which the vehicle travels) by the basic display data table. The basic display data table is stored in the ROM 43, the flash memory 44, or the like.

図4に示すように本実施形態において車両の走行に関する情報として表示対象候補となる項目は、『車速』、『シフト位置』、『ACC(Adaptive Cruise Control)の設定値』、『交差点拡大図』、『レーン案内』、『エコインジケータ』の6項目がある。 As shown in FIG. 4, the items to be displayed as information on the running of the vehicle in the present embodiment are "vehicle speed", "shift position", "setting value of ACC (Adaptive Cruise Control)", and "enlarged view of intersection". , "Lane guidance" and "Eco indicator".

ここで、『車速』は車両の現在の車速に関する情報である。『シフト位置』は車両の現在のシフト位置に関する情報である。『ACC(Adaptive Cruise Control)の設定値』はACCの設定値である前方車両との車間距離や走行車速に関する情報である。『交差点拡大図』は車両が次に通過する案内交差点の形状や案内交差点における車両の進行方向に関する情報である。『レーン案内』は車両が走行するリンクの車線毎の進行方向区分に関する情報である。『エコインジケータ』は運転者のエコ運転のレベルに関する情報である。 Here, "vehicle speed" is information on the current vehicle speed of the vehicle. The "shift position" is information about the current shift position of the vehicle. The "ACC (Adaptive Cruise Control) set value" is information on the inter-vehicle distance to the vehicle in front and the traveling vehicle speed, which are the set values of the ACC. The "intersection enlarged view" is information on the shape of the guide intersection through which the vehicle passes next and the traveling direction of the vehicle at the guide intersection. "Lane guidance" is information on the traveling direction classification for each lane of the link on which the vehicle travels. The "eco-indicator" is information on the level of eco-driving of the driver.

そして、図4に示すように基本表示データテーブルでは、特に車両が高速道路を走行する場合には、『車速』、『シフト位置』、『ACC(Adaptive Cruise Control)の設定値』、『エコインジケータ』の4項目が表示対象として対応付けられている。また、車両が一般道を走行する場合には、『車速』、『シフト位置』、『交差点拡大図』、『レーン案内』、『エコインジケータ』の5項目が表示対象として対応付けられている。更に、車両が細街路を走行する場合には、『車速』、『シフト位置』、『交差点拡大図』の3項目が表示対象として対応付けられている。尚、基本表示データテーブルで各車両状況に表示対象として対応付けられた項目は、その車両状況において運転者が必要と予測される情報の項目である。一方で、基本表示データテーブルで各車両状況に表示対象として対応付けられていない項目は、その車両状況において運転者が必要としないと予測される情報の項目である。即ち、車両が高速道路を走行する場合には、ACCを用いられる可能性があることから『ACCの設定値』は表示対象とする一方、交差点は基本的に存在しないことから『交差点拡大図』は表示対象から除く。 Then, as shown in FIG. 4, in the basic display data table, especially when the vehicle travels on the highway, "vehicle speed", "shift position", "ACC (Adaptive Cruise Control) setting value", and "eco indicator" ] Is associated with the display target. When the vehicle travels on a general road, five items of "vehicle speed", "shift position", "enlarged view of intersection", "lane guidance", and "eco-indicator" are associated with each other as display targets. Further, when the vehicle travels on a narrow street, three items of "vehicle speed", "shift position", and "enlarged view of intersection" are associated with each other as display targets. In the basic display data table, the items associated with each vehicle status as display targets are information items predicted to be necessary by the driver in the vehicle status. On the other hand, items that are not associated with each vehicle status as display targets in the basic display data table are information items that are not expected to be needed by the driver in that vehicle status. That is, when the vehicle travels on the highway, ACC may be used, so the "ACC set value" is displayed, but since the intersection basically does not exist, the "intersection enlarged view" Is excluded from the display target.

続いて、S3においてCPU41は、学習DB32を参照し、前記S1で取得した現在の車両状況に対応する学習結果が存在するか否か判定する。ここで、本実施形態では車両状況毎(より具体的には車両が走行する道路種別毎)に、HUD4によって表示対象候補となる車両の走行に関する各種情報に対して、情報の項目毎の車両の乗員9の視線位置の滞在態様を学習する。より具体的には、“運転者が視認した回数”又は“運転者が視認した時間”の割合(即ち視線位置の滞在割合)を学習する。 Subsequently, in S3, the CPU 41 refers to the learning DB 32 and determines whether or not there is a learning result corresponding to the current vehicle condition acquired in S1. Here, in the present embodiment, for each vehicle situation (more specifically, for each road type on which the vehicle travels), for various information regarding the traveling of the vehicle that is a candidate for display by HUD4, the vehicle for each information item Learn how to stay at the line-of-sight position of the occupant 9. More specifically, the ratio of "the number of times the driver has visually recognized" or "the time the driver has visually recognized" (that is, the ratio of staying at the line-of-sight position) is learned.

例えば、車両が高速道路を走行する場合については、高速道路の走行を開始してから終了するまでの期間において、HUD4により表示された情報の項目毎に“運転者が視認した回数”又は“運転者が視認した時間”を学習値としてカウントして学習DB32に格納する。そして、カウントした回数又は時間を項目毎に統計し、“運転者が視認した回数”又は“運転者が視認した時間”の割合を学習結果として学習DB32に対して更に格納する。また、車両が走行を行う度に学習DB32は随時更新される。 For example, when the vehicle travels on the highway, "the number of times the driver has visually recognized" or "driving" for each item of information displayed by HUD4 during the period from the start to the end of the highway. The "time visually recognized by the person" is counted as a learning value and stored in the learning DB 32. Then, the counted number of times or time is statistic for each item, and the ratio of "the number of times the driver has visually recognized" or "the time visually recognized by the driver" is further stored in the learning DB 32 as a learning result. Further, the learning DB 32 is updated at any time every time the vehicle travels.

ここで、図5は学習DB32に格納される学習結果の一例を示した図である。図5に示すように学習DB32には、車両状況(車両が走行する道路種別)毎に“運転者が視認した回数”又は“運転者が視認した時間”の割合が学習結果として格納されている。例えば、図5に示す学習結果では、車両が高速道路を走行する場合には、『車速』を30%、『シフト位置』を10%、『ACCの設定値』を50%、『エコインジケータ』を10%の割合で視認していることが分かる。 Here, FIG. 5 is a diagram showing an example of the learning result stored in the learning DB 32. As shown in FIG. 5, in the learning DB 32, the ratio of "the number of times the driver has visually recognized" or "the time the driver has visually recognized" is stored as a learning result for each vehicle condition (road type on which the vehicle travels). .. For example, in the learning results shown in FIG. 5, when the vehicle travels on the highway, the "vehicle speed" is 30%, the "shift position" is 10%, the "ACC set value" is 50%, and the "eco indicator". It can be seen that is visually recognized at a rate of 10%.

そして、前記S1で取得した現在の車両状況に対応する学習結果が学習DB32に存在すると判定された場合(S3:YES)には、S7へと移行する。それに対して、前記S1で取得した現在の車両状況に対応する学習結果が学習DB32に存在しないと判定された場合(S3:NO)には、S4へと移行する。 Then, when it is determined that the learning result corresponding to the current vehicle condition acquired in S1 exists in the learning DB 32 (S3: YES), the process proceeds to S7. On the other hand, when it is determined that the learning result corresponding to the current vehicle condition acquired in S1 does not exist in the learning DB 32 (S3: NO), the process proceeds to S4.

S4においてCPU41は、前記S2で表示対象として選択された各情報の項目について、同一の表示輝度を一旦設定する。その後、HUD4に対して制御信号を送信し、HUD4の液晶ディスプレイ6に対して虚像10を生成する為の映像を設定された輝度で出力する。例えば、車両が一般道を走行する場合には、『車速』、『シフト位置』、『交差点拡大図』、『レーン案内』、『エコインジケータ』の5項目に関する情報の映像が液晶ディスプレイ6に出力される。その結果、上記情報の映像の虚像10が乗員9の視認可能な前方の表示領域(例えば25m前方の運転者の視野領域)に表示される。 In S4, the CPU 41 temporarily sets the same display luminance for each information item selected as the display target in S2. After that, a control signal is transmitted to the HUD 4, and an image for generating a virtual image 10 is output to the liquid crystal display 6 of the HUD 4 with a set brightness. For example, when a vehicle travels on a general road, an image of information on five items of "vehicle speed", "shift position", "enlarged intersection", "lane guidance", and "eco-indicator" is output to the liquid crystal display 6. Will be done. As a result, the virtual image 10 of the image of the above information is displayed in the visible front display area of the occupant 9 (for example, the driver's visual field area 25 m ahead).

ここで、図6は前記S4においてHUD4によって表示される情報の一例を示した図である。特に図6は車両が一般道を走行する場合について示す。
図6に示すように車両が一般道を走行する場合には、車両の進行方向の所定距離(25m)前方の位置に、車両の現在の車速を示す虚像51、車両の現在のシフト位置を示す虚像52、交差点拡大図を示す虚像53、レーン案内を示す虚像54、エコインジケータを示す虚像55をそれぞれ生成する。尚、各虚像51〜55は同一の輝度で表示される。その結果、乗員9は進行方向から視線を逸脱させることなく各虚像51〜55に基づく情報を把握することが可能である。
Here, FIG. 6 is a diagram showing an example of information displayed by HUD4 in S4. In particular, FIG. 6 shows a case where the vehicle travels on a general road.
As shown in FIG. 6, when the vehicle travels on a general road, a virtual image 51 showing the current vehicle speed of the vehicle and the current shift position of the vehicle are shown at a position in front of a predetermined distance (25 m) in the traveling direction of the vehicle. A virtual image 52, a virtual image 53 showing an enlarged view of an intersection, a virtual image 54 showing lane guidance, and a virtual image 55 showing an eco-indicator are generated. The virtual images 51 to 55 are displayed with the same brightness. As a result, the occupant 9 can grasp the information based on each of the virtual images 51 to 55 without deviating from the line of sight from the traveling direction.

次に、S5においてCPU41は、車内カメラ12の撮像画像に基づいて、乗員9の視線開始点(目の位置)及び視線方向を検出する。車内カメラ12は前記したように車両のインストルメントパネルや天井に設置され、撮像方向を運転席に向けて設置されており、撮像画像には乗員9の顔が含まれることとなる。尚、視線開始点や視線方向の検出方法としては、例えば角膜反射法により計測された瞳孔の中心位置やプルキニエ像を用いて検出する方法がある。それらの方法は既に公知の技術であるので、詳細は省略する。 Next, in S5, the CPU 41 detects the line-of-sight start point (eye position) and the line-of-sight direction of the occupant 9 based on the image captured by the in-vehicle camera 12. As described above, the in-vehicle camera 12 is installed on the instrument panel or ceiling of the vehicle and is installed with the imaging direction facing the driver's seat, and the captured image includes the face of the occupant 9. As a method of detecting the line-of-sight start point and the line-of-sight direction, for example, there is a method of detecting using the center position of the pupil or the Purkinje image measured by the corneal reflex method. Since these methods are already known techniques, details are omitted.

続いて、前記S5においてCPU41は、検出された乗員9の視線開始点及び視線方向に基づいて、現時点における乗員9の視線位置を特定する。具体的には、図8に示すように、CPU41は視線開始点Pから視線方向αへと延長した直線と検出面61との交点を視線位置Qとする。そして、視線位置Qは検出面61上を座標系としたX座標及びY座標によって特定される。尚、本実施形態では検出面61はHUD4による虚像の表示領域とする。即ち、前記S5で特定された視線位置は、現時点のHUD4の虚像の表示領域における乗員9の視線位置となる。尚、前記S5では視線位置として特に乗員9の注視点を特定しても良い。その場合には、乗員9の視線が所定時間以上留まった注視点を視線位置として特定する。 Subsequently, in S5, the CPU 41 identifies the current line-of-sight position of the occupant 9 based on the detected line-of-sight start point and line-of-sight direction of the occupant 9. Specifically, as shown in FIG. 8, the CPU 41 sets the intersection of the straight line extending from the line-of-sight start point P in the line-of-sight direction α and the detection surface 61 as the line-of-sight position Q. Then, the line-of-sight position Q is specified by the X coordinate and the Y coordinate with the detection surface 61 as the coordinate system. In the present embodiment, the detection surface 61 is a virtual image display area by HUD4. That is, the line-of-sight position specified in S5 is the line-of-sight position of the occupant 9 in the current display area of the virtual image of HUD4. In S5, the gaze point of the occupant 9 may be specified as the line-of-sight position. In that case, the gaze point where the line of sight of the occupant 9 stays for a predetermined time or longer is specified as the line of sight position.

続いて、S6においてCPU41は、前記S5で取得した乗員9の視線位置に基づいて学習DB32を更新する。具体的には現在の車両状況に対応付けて、情報の項目毎に“運転者が視認した回数”又は“運転者が視認した時間”を学習値としてカウントする。乗員9がHUD4に表示された項目の内、どの項目を視認しているかについては、前記S5で取得した乗員9の視線位置の座標と、HUD4の表示領域に対して情報を表示した位置座標とに基づいて判定される。そして、十分な学習値が取得できた時点で、カウントした回数又は時間を項目毎に統計し、“運転者が視認した回数”又は“運転者が視認した時間”の割合を学習結果として学習DB32に対して更に格納する(図5参照)。その後、S3へと戻る。 Subsequently, in S6, the CPU 41 updates the learning DB 32 based on the line-of-sight position of the occupant 9 acquired in S5. Specifically, "the number of times the driver has visually recognized" or "the time the driver has visually recognized" is counted as a learning value for each item of information in association with the current vehicle situation. Regarding which item the occupant 9 is visually recognizing among the items displayed on the HUD 4, the coordinates of the line-of-sight position of the occupant 9 acquired in S5 and the position coordinates displaying the information with respect to the display area of the HUD 4 are used. Judgment is based on. Then, when a sufficient learning value can be acquired, the number of times counted or the time is statistic for each item, and the ratio of "the number of times the driver has visually recognized" or "the time the driver has visually recognized" is used as the learning result in the learning DB 32. (See FIG. 5). After that, it returns to S3.

尚、前記S4〜S6の処理は学習結果が算出されるまで、車両の走行中において一定時間毎(例えば200ms毎)に継続して実施される。また、学習結果が一旦算出された後においても、車両が走行を行う度に学習DB32は随時更新される。 The processes S4 to S6 are continuously performed at regular time intervals (for example, every 200 ms) while the vehicle is running until the learning result is calculated. Further, even after the learning result is calculated once, the learning DB 32 is updated at any time every time the vehicle travels.

一方、S7においてCPU41は、前記S1で取得した現在の車両状況に対応する学習結果を学習DB32から読み出す。特に本実施形態では、学習結果として情報の項目毎の車両の乗員9の視線位置の滞在態様を取得する。より具体的には、“運転者が視認した回数”又は“運転者が視認した時間”の割合(即ち視線位置の滞在割合)を取得する。 On the other hand, in S7, the CPU 41 reads the learning result corresponding to the current vehicle condition acquired in S1 from the learning DB 32. In particular, in the present embodiment, as a learning result, the staying mode of the line-of-sight position of the vehicle occupant 9 for each item of information is acquired. More specifically, the ratio of "the number of times the driver has visually recognized" or "the time the driver has visually recognized" (that is, the ratio of staying at the line-of-sight position) is acquired.

次に、S8においてCPU41は、前記S7で読み出した学習結果に基づいて、前記S2で表示対象として選択された各情報の項目に対して表示輝度を設定する。ここで、本実施形態では運転者の視線位置が滞在する割合の高い項目ほど、より強調して表示する態様とし、より高い輝度を設定する。具体的には、最も滞在割合の高い項目を100%の輝度とし、他の項目は滞在割合に応じて輝度を減少させる。例えば、図5に示す高速道路の例では、最も滞在割合の高い『ACC設定』を100%の輝度とし、『車速』を60%の輝度、『シフト位置』と『エコインジケータ』を20%の輝度とする。それによって、項目毎に表示態様(特に表示輝度)に差が生じることとなる。 Next, in S8, the CPU 41 sets the display luminance for each information item selected as the display target in S2, based on the learning result read in S7. Here, in the present embodiment, the higher the ratio of the driver's line of sight staying, the more emphasized the display is, and the higher the brightness is set. Specifically, the item having the highest stay ratio is set to 100% brightness, and the other items reduce the brightness according to the stay ratio. For example, in the example of the expressway shown in FIG. 5, the "ACC setting" having the highest stay ratio is set to 100% brightness, the "vehicle speed" is set to 60% brightness, and the "shift position" and "eco indicator" are set to 20%. Let it be brightness. As a result, there will be a difference in the display mode (particularly the display brightness) for each item.

その後、S9においてCPU41は、HUD4に対して制御信号を送信し、HUD4の液晶ディスプレイ6に対して虚像10を生成する為の映像を、前記S8で設定された輝度で出力する。尚、表示対象となるのは前記S2で表示対象として選択された各情報の項目である。例えば、車両が一般道を走行する場合には、『車速』、『シフト位置』、『交差点拡大図』、『レーン案内』、『エコインジケータ』の5項目に関する情報の映像が、それぞれ異なる輝度で液晶ディスプレイ6に出力される。その結果、上記情報の映像の虚像10が乗員9の視認可能な前方の表示領域(例えば25m前方の運転者の視野領域)に表示される。 After that, in S9, the CPU 41 transmits a control signal to the HUD 4, and outputs an image for generating a virtual image 10 to the liquid crystal display 6 of the HUD 4 with the brightness set in the S8. The items to be displayed are the items of each information selected as the display target in S2. For example, when a vehicle travels on a general road, the images of information on the five items of "vehicle speed", "shift position", "enlarged view of intersection", "lane guidance", and "eco-indicator" have different brightness. It is output to the liquid crystal display 6. As a result, the virtual image 10 of the image of the above information is displayed in the visible front display area of the occupant 9 (for example, the driver's visual field area 25 m ahead).

ここで、図8は前記S9においてHUD4によって表示される情報の一例を示した図である。特に図8は車両が一般道を走行する場合について示す。
図8に示すように車両が一般道を走行する場合には、車両の進行方向の所定距離(25m)前方の位置に、車両の現在の車速を示す虚像51、車両の現在のシフト位置を示す虚像52、交差点拡大図を示す虚像53、レーン案内を示す虚像54、エコインジケータを示す虚像55をそれぞれ生成する。また、各虚像51〜55は前記S8で設定された輝度で表示される。例えば図8に示す例では車両の現在の車速を示す虚像51が他の虚像52〜55よりも高い輝度で表示された例を示す。その結果、乗員9は進行方向から視線を逸脱させることなく各虚像51〜55に基づく情報を把握することが可能である。更に、過去において運転者の視線の滞在割合が高い情報項目(図8では現在の車速)については他の項目よりも強調して表示されるので、情報が多数ある場合であっても運転者が必要とする情報について適切に提供することが可能となる。
Here, FIG. 8 is a diagram showing an example of the information displayed by the HUD 4 in S9. In particular, FIG. 8 shows a case where the vehicle travels on a general road.
As shown in FIG. 8, when the vehicle travels on a general road, a virtual image 51 showing the current vehicle speed of the vehicle and the current shift position of the vehicle are shown at a position in front of a predetermined distance (25 m) in the traveling direction of the vehicle. A virtual image 52, a virtual image 53 showing an enlarged view of an intersection, a virtual image 54 showing lane guidance, and a virtual image 55 showing an eco-indicator are generated. Further, each virtual image 51 to 55 is displayed with the brightness set in S8. For example, the example shown in FIG. 8 shows an example in which the virtual image 51 indicating the current vehicle speed of the vehicle is displayed with a higher brightness than the other virtual images 52 to 55. As a result, the occupant 9 can grasp the information based on each of the virtual images 51 to 55 without deviating from the line of sight from the traveling direction. Furthermore, information items (current vehicle speed in FIG. 8) that have a high rate of stay in the driver's line of sight in the past are displayed with more emphasis than other items, so even if there is a lot of information, the driver can It becomes possible to appropriately provide the necessary information.

以上詳細に説明した通り、本実施形態に係る走行情報案内装置1及び走行情報案内装置1で実行されるコンピュータプログラムでは、現在の車両状況を取得するとともに(S1)、運転者の視線位置を取得し(S5)、車両の走行に関する情報を運転者が視認可能な表示領域に表示する際において、車両の走行に関する情報として表示対象候補となる各項目について、項目間で現在の車両状況と運転者の視線位置との組み合わせに応じて表示態様に差を設けて表示する(S9)ので、提供する対象となる情報が多数ある場合においても、運転者に必要な情報を適切に提供することが可能となる。 As described in detail above, the computer program executed by the driving information guidance device 1 and the driving information guidance device 1 according to the present embodiment acquires the current vehicle status (S1) and the driver's line-of-sight position. (S5) When displaying information on the running of the vehicle in a display area that can be seen by the driver, the current vehicle status and the driver are displayed between the items for each item that is a candidate for display as the information on the running of the vehicle. Since the display mode is displayed with a difference depending on the combination with the line-of-sight position (S9), it is possible to appropriately provide the necessary information to the driver even when there is a large amount of information to be provided. It becomes.

尚、本発明は前記実施形態に限定されるものではなく、本発明の要旨を逸脱しない範囲内で種々の改良、変形が可能であることは勿論である。
例えば、本実施形態ではHUD4によって車両2のフロントウィンドウ8の前方に虚像を生成する構成としているが、フロントウィンドウ8以外のウィンドウの前方に虚像を生成する構成としても良い。また、HUD4により映像を反射させる対象はフロントウィンドウ8自身ではなくフロントウィンドウ8の周辺に設置されたバイザー(コンバイナー)であっても良い。
It should be noted that the present invention is not limited to the above-described embodiment, and it goes without saying that various improvements and modifications can be made without departing from the gist of the present invention.
For example, in the present embodiment, the HUD 4 is configured to generate a virtual image in front of the front window 8 of the vehicle 2, but a virtual image may be generated in front of a window other than the front window 8. Further, the target for reflecting the image by the HUD 4 may be a visor (combiner) installed around the front window 8 instead of the front window 8 itself.

また、本実施形態では、車両の走行に関する情報を表示する手段としてHUD4を用いているが、フロントウィンドウ8に対して映像を表示するウインドウシールドディスプレイ(WSD)を用いても良い。更に、車内のインストルメントパネル等に設置された液晶ディスプレイであっても良い。尚、ウインドウシールドディスプレイを用いる場合には情報の表示領域は車両のフロントウィンドウ8となり、液晶ディスプレイを用いる場合には情報の表示領域は液晶ディスプレイの表示画面となる。 Further, in the present embodiment, the HUD 4 is used as a means for displaying information on the traveling of the vehicle, but a window shield display (WSD) for displaying an image on the front window 8 may be used. Further, it may be a liquid crystal display installed on an instrument panel or the like in the vehicle. When the window shield display is used, the information display area is the front window 8 of the vehicle, and when the liquid crystal display is used, the information display area is the display screen of the liquid crystal display.

また、本実施形態では、情報の項目毎に表示態様に差を設ける手段として、表示する輝度に差を設けることとしているが、他の手段を用いても良い。例えば、表示するサイズ、表示位置等で差を設けても良い。例えば、表示するサイズで差を設ける場合には、視線位置の滞在する割合の高い項目ほど、大きいサイズで表示する。また、表示する位置で差を設ける場合には、視線位置の滞在する割合の高い項目ほど、運転者の視野の中央寄りの位置に表示する。 Further, in the present embodiment, as a means for providing a difference in the display mode for each item of information, a difference in the displayed brightness is provided, but other means may be used. For example, a difference may be provided in the display size, display position, and the like. For example, when a difference is provided in the display size, the item with a higher percentage of staying at the line-of-sight position is displayed in a larger size. Further, when a difference is provided in the display position, the item having a higher percentage of staying in the line-of-sight position is displayed at a position closer to the center of the driver's field of view.

また、本実施形態では、車両状況として車両が走行する道路の道路種別を取得し、道路種別毎に表示対象とする項目の有無や輝度差を設定することとしているが、道路種別以外の車両状況を用いても良い。例えば、天候、渋滞状況等がある。 Further, in the present embodiment, the road type of the road on which the vehicle travels is acquired as the vehicle status, and the presence / absence of the item to be displayed and the brightness difference are set for each road type. May be used. For example, there are weather conditions, traffic conditions, and the like.

また、本実施形態では、走行情報案内処理プログラム(図3)の処理をナビゲーション装置3のナビゲーションECU15が実行する構成としているが、実行主体は適宜変更することが可能である。例えば、HUD4の制御部、車両制御ECU、その他の車載器が実行する構成としても良い。尚、HUD4の制御部が実行する場合には、本発明に係る走行情報案内装置はHUD4のみで構成することも可能である。 Further, in the present embodiment, the navigation ECU 15 of the navigation device 3 executes the processing of the traveling information guidance processing program (FIG. 3), but the executing subject can be changed as appropriate. For example, it may be configured to be executed by the control unit of the HUD4, the vehicle control ECU, or other in-vehicle device. When the control unit of the HUD4 executes the operation, the traveling information guidance device according to the present invention may be composed of only the HUD4.

また、本発明に係る走行情報案内装置を具体化した実施例について上記に説明したが、走行情報案内装置は以下の構成を有することも可能であり、その場合には以下の効果を奏する。 Further, although the embodiment in which the traveling information guidance device according to the present invention is embodied has been described above, the traveling information guidance device can also have the following configuration, and in that case, the following effects are obtained.

例えば、第1の構成は以下のとおりである。
現在の車両状況を取得する状況取得手段(41)と、運転者の視線位置を取得する視線位置取得手段(41)と、車両の走行に関する情報を運転者が視認可能な表示領域に表示する情報表示手段(41)と、を有し、前記車両の走行に関する情報として前記表示領域に表示対象となる項目が複数あって、車両状況毎に前記表示領域に表示された複数の項目を対象として、運転者の視線位置が滞在する割合を項目間での相対評価により学習する学習手段を備え、前記情報表示手段は、前記現在の車両状況に対応する前記学習手段の学習結果に基づいて、前記複数の項目の表示態様に差を設けて表示する。
上記構成を有する走行情報案内装置によれば、車両の走行に関する情報を表示領域に表示することによって提供する場合において、車両の状況に応じて項目間で表示態様に差を設けて表示することにより、提供する対象となる情報が多数ある場合においても、運転者に必要な情報を適切に提供することが可能となる。
For example, the first configuration is as follows.
Situation acquisition means (41) for acquiring the current vehicle status, line-of-sight position acquisition means (41) for acquiring the driver's line-of-sight position, and information for displaying information on the driving of the vehicle in a display area visible to the driver. It has a display means (41), and there are a plurality of items to be displayed in the display area as information regarding the driving of the vehicle, and the plurality of items displayed in the display area are targeted for each vehicle situation. The information display means includes learning means for learning the ratio of the driver's line of sight staying by relative evaluation between items, and the information display means has the plurality of learning means based on the learning result of the learning means corresponding to the current vehicle situation. The items are displayed with a difference in the display mode.
According to the traveling information guidance device having the above configuration, when providing information on the traveling of the vehicle by displaying it in the display area, the display mode is different between the items according to the situation of the vehicle. Even when there is a large amount of information to be provided, it is possible to appropriately provide the necessary information to the driver.

また、上記構成を有する走行情報案内装置によれば、運転者毎且つ車両状況毎にどのような情報を必要としているかを学習結果から把握することが可能となる。その結果、提供する対象となる情報が多数ある場合においても、運転者に必要な情報を適切に提供することが可能となる。 Further, according to the traveling information guidance device having the above configuration, it is possible to grasp what kind of information is required for each driver and each vehicle situation from the learning result. As a result, even when there is a large amount of information to be provided, it is possible to appropriately provide the necessary information to the driver.

また、第の構成は以下のとおりである。
前記情報表示手段(41)は、前記複数の項目の内、前記運転者の視線位置が滞在する割合の高い項目ほど、より強調して表示する。
上記構成を有する走行情報案内装置によれば、運転者が必要とする情報程、より強調して表示することによって、提供する対象となる情報が多数ある場合においても、運転者に必要な情報を適切に提供することが可能となる。
The second configuration is as follows.
The information display means (41) emphasizes and displays the item having a higher proportion of the driver's line-of-sight position staying among the plurality of items.
According to the driving information guidance device having the above configuration, the information required by the driver is displayed with more emphasis, so that the information required by the driver can be provided even when there is a large amount of information to be provided. It will be possible to provide it appropriately.

また、第の構成は以下のとおりである。
前記情報表示手段(41)は、前記複数の項目について、項目間で表示する輝度に差を設けて表示する。
上記構成を有する走行情報案内装置によれば、運転者が必要とする情報程、より高い輝度で強調して表示することによって、提供する対象となる情報が多数ある場合においても、運転者に必要な情報を適切に提供することが可能となる。
The third configuration is as follows.
The information display means (41) displays the plurality of items with a difference in brightness displayed between the items.
According to the driving information guidance device having the above configuration, the information required by the driver is emphasized and displayed with higher brightness, so that the driver needs it even when there is a large amount of information to be provided. Information can be provided appropriately.

また、第の構成は以下のとおりである。
前記状況取得手段(41)は、車両が現在走行する道路の道路種別を前記車両状況として取得する。
上記構成を有する走行情報案内装置によれば、車両が走行する道路種別に応じて項目間で表示態様に差を設けて表示することにより、提供する対象となる情報が多数ある場合においても、現在走行する道路の道路種別に応じた必要な情報を適切に提供することが可能となる。
The fourth configuration is as follows.
The status acquisition means (41) acquires the road type of the road on which the vehicle is currently traveling as the vehicle status.
According to the traveling information guidance device having the above configuration, even when there is a large amount of information to be provided, the display mode is different between the items according to the type of road on which the vehicle is traveling. It is possible to appropriately provide necessary information according to the type of road on which the vehicle travels.

1 走行支援装置
2 車両
3 ナビゲーション装置
4 HUD
6 液晶ディスプレイ
8 フロントウィンドウ
10、51〜55 虚像
12 車内カメラ
15 ナビゲーションECU
32 学習DB
41 CPU
42 RAM
43 ROM
1 Driving support device 2 Vehicle 3 Navigation device 4 HUD
6 Liquid crystal display 8 Front window 10, 51-55 Virtual image 12 In-car camera 15 Navigation ECU
32 Learning DB
41 CPU
42 RAM
43 ROM

Claims (5)

現在の車両状況を取得する状況取得手段と、
運転者の視線位置を取得する視線位置取得手段と、
車両の走行に関する情報を運転者が視認可能な表示領域に表示する情報表示手段と、を有し、
前記車両の走行に関する情報として前記表示領域に表示対象となる項目が複数あって、
車両状況毎に前記表示領域に表示された複数の項目を対象として、運転者の視線位置が滞在する割合を項目間での相対評価により学習する学習手段を備え、
前記情報表示手段は、前記現在の車両状況に対応する前記学習手段の学習結果に基づいて、前記複数の項目の表示態様に差を設けて表示する走行情報案内装置。
Situation acquisition means to acquire the current vehicle status,
A line-of-sight position acquisition means for acquiring the driver's line-of-sight position,
It has an information display means for displaying information on the running of the vehicle in a display area that can be seen by the driver.
There are a plurality of items to be displayed in the display area as information on the running of the vehicle.
It is provided with a learning means for learning the ratio of the driver's line-of-sight position staying for a plurality of items displayed in the display area for each vehicle condition by relative evaluation between the items.
The information display means is a traveling information guidance device that displays different display modes of the plurality of items based on the learning results of the learning means corresponding to the current vehicle situation.
前記情報表示手段は、前記複数の項目の内、前記運転者の視線位置が滞在する割合の高い項目ほど、より強調して表示する請求項に記載の走行情報案内装置。 The travel information guidance device according to claim 1 , wherein the information display means emphasizes the item in which the driver's line-of-sight position stays higher among the plurality of items. 前記情報表示手段は、前記複数の項目について、項目間で表示する輝度に差を設けて表示する請求項1又は請求項2に記載の走行情報案内装置。 The traveling information guidance device according to claim 1 or 2 , wherein the information display means displays the plurality of items with a difference in brightness displayed between the items. 前記状況取得手段は、車両が現在走行する道路の道路種別を前記車両状況として取得する請求項1乃至請求項のいずれかに記載の走行情報案内装置。 The travel information guidance device according to any one of claims 1 to 3 , wherein the status acquisition means acquires the road type of the road on which the vehicle is currently traveling as the vehicle status. コンピュータを、
現在の車両状況を取得する状況取得手段と、
運転者の視線位置を取得する視線位置取得手段と、
車両の走行に関する情報を運転者が視認可能な表示領域に表示する情報表示手段と、
前記車両の走行に関する情報として前記表示領域に表示対象となる項目が複数あり、車両状況毎に前記表示領域に表示された複数の項目を対象として、運転者の視線位置が滞在する割合を項目間での相対評価により学習する学習手段と、して機能させる為のコンピュータプログラムであって、
前記情報表示手段は、前記現在の車両状況に対応する前記学習手段の学習結果に基づいて、前記複数の項目の表示態様に差を設けて表示するコンピュータプログラム。
Computer,
Situation acquisition means to acquire the current vehicle status,
A line-of-sight position acquisition means for acquiring the driver's line-of-sight position,
Information display means for displaying information on vehicle driving in a display area visible to the driver,
There are a plurality of items to be displayed in the display area as information related to the traveling of the vehicle, and the ratio of the driver's line-of-sight position staying is between the items for the plurality of items displayed in the display area for each vehicle condition. It is a computer program to function as a learning means to learn by relative evaluation in
The information display means is a computer program that displays different display modes of the plurality of items based on the learning results of the learning means corresponding to the current vehicle situation.
JP2017127744A 2017-06-29 2017-06-29 Driving information guidance device and computer program Active JP6939147B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2017127744A JP6939147B2 (en) 2017-06-29 2017-06-29 Driving information guidance device and computer program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2017127744A JP6939147B2 (en) 2017-06-29 2017-06-29 Driving information guidance device and computer program

Publications (2)

Publication Number Publication Date
JP2019011983A JP2019011983A (en) 2019-01-24
JP6939147B2 true JP6939147B2 (en) 2021-09-22

Family

ID=65226301

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2017127744A Active JP6939147B2 (en) 2017-06-29 2017-06-29 Driving information guidance device and computer program

Country Status (1)

Country Link
JP (1) JP6939147B2 (en)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7151633B2 (en) * 2019-06-12 2022-10-12 トヨタ自動車株式会社 Information display device

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010256554A (en) * 2009-04-23 2010-11-11 Pioneer Electronic Corp Information processor and image display control method
JP5880408B2 (en) * 2012-11-28 2016-03-09 トヨタ自動車株式会社 Image display device and image display method
JP6015547B2 (en) * 2013-05-09 2016-10-26 株式会社デンソー Line-of-sight input device
WO2016143744A1 (en) * 2015-03-12 2016-09-15 日本精機株式会社 Head mounted display device

Also Published As

Publication number Publication date
JP2019011983A (en) 2019-01-24

Similar Documents

Publication Publication Date Title
JP6658905B2 (en) Travel support device and computer program
WO2016067574A1 (en) Display control device and display control program
US11493357B2 (en) Superimposed image display device, superimposed image drawing method, and computer program
JP5327025B2 (en) Vehicle travel guidance device, vehicle travel guidance method, and computer program
JP2014120111A (en) Travel support system, travel support method, and computer program
JP6825433B2 (en) Virtual image display device and computer program
JP2014120114A (en) Travel support system, travel support method, and computer program
JP2019056884A (en) Superimposed image display device
JP6805974B2 (en) Driving support device and computer program
JP6136238B2 (en) Driving support system, driving support method, and computer program
JP2014120113A (en) Travel support system, travel support method, and computer program
JP2017062706A (en) Travel support system, travel support method, and computer program
JP6939147B2 (en) Driving information guidance device and computer program
JP6310381B2 (en) Information processing apparatus, signal information guiding method, and computer program
JP6136237B2 (en) Driving support system, driving support method, and computer program
JP6582798B2 (en) Driving support system, driving support method, and computer program
JP2019087259A (en) Superposition image display device and computer program
JP6946962B2 (en) Driving support device and computer program
JP2014154125A (en) Travel support system, travel support method and computer program
JP7484132B2 (en) Superimposed image display device and computer program
JP6984341B2 (en) Superimposed image display device and computer program
JP2021081232A (en) Superimposed image display device and computer program
WO2020084827A1 (en) Superimposed-image display device, and computer program
JP2023008462A (en) Superimposed image display device
JP2020040617A (en) Superimposed image display device and computer program

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20200305

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20201118

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20201124

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210120

A711 Notification of change in applicant

Free format text: JAPANESE INTERMEDIATE CODE: A712

Effective date: 20210423

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20210803

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20210816

R150 Certificate of patent or registration of utility model

Ref document number: 6939147

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150