JP6917697B2 - Information display method and information display device - Google Patents

Information display method and information display device Download PDF

Info

Publication number
JP6917697B2
JP6917697B2 JP2016225835A JP2016225835A JP6917697B2 JP 6917697 B2 JP6917697 B2 JP 6917697B2 JP 2016225835 A JP2016225835 A JP 2016225835A JP 2016225835 A JP2016225835 A JP 2016225835A JP 6917697 B2 JP6917697 B2 JP 6917697B2
Authority
JP
Japan
Prior art keywords
display
information
display unit
line
sight
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2016225835A
Other languages
Japanese (ja)
Other versions
JP2018083441A (en
Inventor
敦哉 古田
敦哉 古田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Denso Ten Ltd
Original Assignee
Denso Ten Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Denso Ten Ltd filed Critical Denso Ten Ltd
Priority to JP2016225835A priority Critical patent/JP6917697B2/en
Publication of JP2018083441A publication Critical patent/JP2018083441A/en
Application granted granted Critical
Publication of JP6917697B2 publication Critical patent/JP6917697B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Description

本発明は、情報表示方法及び情報表示装置に関する。 The present invention relates to an information display method and an information display device.

従来、車両の車室内には、車載装置の表示部が配置されている。表示部には、車載装置が動作している機能に応じて、例えば、目的地までの経路案内を行うナビゲーション情報又はオーディオ等の演奏情報が表示される。 Conventionally, a display unit of an in-vehicle device is arranged in the vehicle interior of a vehicle. On the display unit, for example, navigation information for guiding the route to the destination or performance information such as audio is displayed according to the function in which the in-vehicle device is operating.

また、近年では、車両のフロントガラスに情報を表示するヘッドアップディスプレイ(Head Up Display:HUD)を、車両に搭載することが提案されている。 Further, in recent years, it has been proposed to equip a vehicle with a head-up display (HUD) that displays information on the windshield of the vehicle.

HUDを用いることにより、視界と情報とが重なって表示されるので、運転者は、視線を前方へ向けながら情報を読み取れるため、走行中の安全な運転を促すことが期待される。 By using the HUD, the field of view and the information are displayed in an overlapping manner, so that the driver can read the information while turning his / her line of sight forward, and is expected to promote safe driving while driving.

特許文献1は、運転者が、コンソールパネル内の表示部に対して、所定の時間以上の運転者の注視が検出された場合、表示部の表示を停止して、表示部に表示していた内容を、HUDに表示することを提案している。 In Patent Document 1, when the driver detects the driver's gaze on the display unit in the console panel for a predetermined time or longer, the display of the display unit is stopped and displayed on the display unit. We are proposing to display the content on the HUD.

このように、運転者の運転の妨げとなるコンソールパネル内の表示部への注視を抑止すると共に、運転者への情報の提示を継続する技術が提案されている。 As described above, a technique has been proposed in which attention to the display unit in the console panel, which hinders the driver's driving, is suppressed and information is continuously presented to the driver.

特開2013−020334号公報Japanese Unexamined Patent Publication No. 2013-020334

運転者は、車両の走行中には、前方に視線を向けて運転を行っているが、時々、コンソールパネル内の速度計の表示に視線を向けて車両の速度を確認し、またナビゲーションシステム等の車載装置に備えられた表示部に視線を向けて経路を確認することがある。 While the vehicle is running, the driver turns his gaze forward to drive, but sometimes he looks at the speedometer display on the console panel to check the speed of the vehicle, and also the navigation system, etc. The route may be confirmed by directing the line of sight to the display unit provided in the in-vehicle device.

一方、前方に歩行者又は対向車両が現れる等の状況に変化が生じた時には、運転者は、視線を前方に戻さなければならないので、速度又は経路を十分に確認することができない場合がある。 On the other hand, when a change occurs in the situation such as the appearance of a pedestrian or an oncoming vehicle in front, the driver must return his / her line of sight to the front, so that the speed or the route may not be sufficiently confirmed.

また、視線を、前方と速度計又は車載装置の表示部との間で何度も移動することは、運転に対する集中力又は注意力の低下を招くおそれがある。 Further, moving the line of sight many times between the front and the display unit of the speedometer or the in-vehicle device may cause a decrease in concentration or attention to driving.

そこで、本明細書では、運転者の視線の移動頻度を低減させることができる情報表示方法及び情報表示装置を提供することを課題とする。 Therefore, it is an object of the present specification to provide an information display method and an information display device capable of reducing the frequency of movement of the driver's line of sight.

本明細書に開示する情報表示方法によれば、ユーザの視線方向を検知し、ユーザの視線方向が、第1表示部から第2表示部へ移動した時に、上記第1表示部に表示されている情報の内の少なくとも一部の表示情報を、上記第2表示部へ表示することを備える。 According to the information display method disclosed in the present specification, when the user's line-of-sight direction is detected and the user's line-of-sight direction moves from the first display unit to the second display unit, it is displayed on the first display unit. It is provided that at least a part of the displayed information is displayed on the second display unit.

また、本明細書に開示する情報表示装置によれば、第1表示部と、第2表示部と、ユーザの視線方向を検知する視線検知部と、上記視線検知部により検知されたユーザの視線方向が、上記第1表示部から上記第2表示部へ移動した時に、上記第1表示部に表示されている情報の内の少なくとも一部の表示情報を、上記第2表示部へ表示させる処理部と、を備える。 Further, according to the information display device disclosed in the present specification, the first display unit, the second display unit, the line-of-sight detection unit that detects the user's line-of-sight direction, and the user's line-of-sight detected by the line-of-sight detection unit. A process of displaying at least a part of the information displayed on the first display unit on the second display unit when the direction moves from the first display unit to the second display unit. It has a part and.

上述した本明細書に開示する情報表示方法によれば、運転者の視線の移動頻度を低減させることができる。 According to the information display method disclosed in the present specification described above, it is possible to reduce the frequency of movement of the driver's line of sight.

また、上述した本明細書に開示する情報表示装置によれば、運転者の視線の移動頻度を低減させることができる。 Further, according to the information display device disclosed in the present specification described above, it is possible to reduce the frequency of movement of the driver's line of sight.

本明細書に開示する情報表示システムの第1実施形態のハードウェア構成を示す図である。It is a figure which shows the hardware configuration of the 1st Embodiment of the information display system disclosed in this specification. HUD、計器表示部及び車載装置表示部を示す図である。It is a figure which shows the HUD, the instrument display part and the vehicle-mounted device display part. 第1実施形態の情報表示システムの動作を説明するフローチャート(その1)である。It is a flowchart (the 1) explaining the operation of the information display system of 1st Embodiment. 第1実施形態の情報表示システムの動作を説明するフローチャート(その2)である。It is a flowchart (the 2) explaining the operation of the information display system of 1st Embodiment. 第1実施形態の情報表示システムの動作を説明するフローチャート(その3)である。It is a flowchart (3) explaining the operation of the information display system of 1st Embodiment. HUDに表示されるオブジェクト画像を示す図である。It is a figure which shows the object image displayed on the HUD. 本明細書に開示する情報表示システムの第2実施形態におけるHUD、計器表示部及び車載装置表示部を示す図である。It is a figure which shows the HUD, the instrument display part and the vehicle-mounted device display part in the 2nd Embodiment of the information display system disclosed in this specification. 車載装置表示部に表示された画像を示す図である。It is a figure which shows the image displayed on the in-vehicle device display part. 第2実施形態の情報表示システムの動作を説明するフローチャートである。It is a flowchart explaining operation of the information display system of 2nd Embodiment. HUDに表示されるオブジェクト画像を示す図である。It is a figure which shows the object image displayed on the HUD.

以下、本明細書で開示する情報表示システムの好ましい第1実施形態を、図を参照して説明する。但し、本発明の技術範囲はそれらの実施形態に限定されず、特許請求の範囲に記載された発明とその均等物に及ぶものである。 Hereinafter, a preferred first embodiment of the information display system disclosed in the present specification will be described with reference to the drawings. However, the technical scope of the present invention is not limited to those embodiments, but extends to the inventions described in the claims and their equivalents.

図1は、本明細書に開示する情報表示装置を含む情報表示システムの第1実施形態のハードウェア構成を示す図である。図2は、ヘッドアップディスプレイ(HUD)、計器表示部及び車載装置表示部を示す図である。 FIG. 1 is a diagram showing a hardware configuration of a first embodiment of an information display system including an information display device disclosed in the present specification. FIG. 2 is a diagram showing a head-up display (HUD), an instrument display unit, and an in-vehicle device display unit.

本実施形態の情報表示システム1は、車両に搭載されて、運転者の運転に使用される情報等を表示する。 The information display system 1 of the present embodiment is mounted on a vehicle and displays information and the like used for driving by a driver.

情報表示システム1は、情報を表示する表示部として、車両のフロントガラスに重ねて表示されるヘッドアップディスプレイ(HUD)21と、車両の速度及び回転数等を表示する計器表示部22と、車載装置10が有する車載装置表示部13を備える。 The information display system 1 includes a head-up display (HUD) 21 that is superimposed on the windshield of the vehicle, an instrument display 22 that displays the speed and rotation speed of the vehicle, and the like as display units for displaying information. The vehicle-mounted device display unit 13 included in the device 10 is provided.

図2に示すように、HUD21と、計器表示部22と、車載装置表示部13とは、運転者40の前に視認可能に配置される。ここで、計器表示部22には、車両速度を示す速度計画像22a及びエンジンの回転数を示す回転数計画像22bが表示されている。 As shown in FIG. 2, the HUD 21, the instrument display unit 22, and the in-vehicle device display unit 13 are visibly arranged in front of the driver 40. Here, the speedometer image 22a showing the vehicle speed and the speedometer image 22b showing the engine speed are displayed on the instrument display unit 22.

運転者40は、車両の走行中には、前方に視線を向けて運転を行っているが、時々、計器表示部22に視線を向けて車両の速度情報等を確認し、また車載装置表示部13に視線を向けてナビゲーション情報等を確認する。 While the vehicle is running, the driver 40 is driving with his / her line of sight directed forward, but sometimes he / she turns his / her line of sight to the instrument display unit 22 to check the speed information of the vehicle and the in-vehicle device display unit. Look at 13 and check the navigation information and so on.

図2に示す例では、運転者40の視線は、最初、HUD21を通して前方に向けられていたが、次に、計器表示部22に表示された速度計画像22aに移動した後、再度、HUDを通して前方に移動している。 In the example shown in FIG. 2, the line of sight of the driver 40 was initially directed forward through the HUD 21, but then moved to the speedometer image 22a displayed on the instrument display 22 and then passed through the HUD again. Moving forward.

情報表示システム1は、ユーザの視線方向を検知して、ユーザの視線が、計器表示部22又は車載装置表示部13からHUD21へ移動した時に、計器表示部22又は車載装置表示部13に表示されている情報の内の少なくとも一部の表示情報を、HUD21へ表示して、ユーザの走行中の運転を支援する。 The information display system 1 detects the direction of the user's line of sight, and when the user's line of sight moves from the instrument display unit 22 or the in-vehicle device display unit 13 to the HUD 21, it is displayed on the instrument display unit 22 or the in-vehicle device display unit 13. At least a part of the displayed information is displayed on the HUD 21 to support the user's driving while driving.

図1に示すように、情報表示システム1は、車載装置10と、カメラ20と、HUD21と、計器表示部22と、GPS情報受信部30を備える。 As shown in FIG. 1, the information display system 1 includes an in-vehicle device 10, a camera 20, a HUD 21, an instrument display unit 22, and a GPS information receiving unit 30.

カメラ20は、HUD21の上方に配置される。カメラ20は、運転者40の目を含む画像を撮影して、撮影した画像を車載装置10へ送信する。カメラ20は、例えば、撮影した画像の画像データを圧縮して情報容量を低減した後、画像データを車載装置10へ送信してもよい。 The camera 20 is arranged above the HUD 21. The camera 20 captures an image including the eyes of the driver 40 and transmits the captured image to the in-vehicle device 10. For example, the camera 20 may compress the image data of the captured image to reduce the information capacity, and then transmit the image data to the in-vehicle device 10.

HUD21は、車両のフロントガラスと重ねて情報を表示する。HUD21は、車載装置10により制御されて、各種の情報を表示する。運転者40は、前方に視線を向けた状態で、HUD21に表示される情報を視認可能である。 The HUD 21 displays information by superimposing it on the windshield of the vehicle. The HUD 21 is controlled by the in-vehicle device 10 to display various types of information. The driver 40 can visually recognize the information displayed on the HUD 21 with his / her line of sight directed forward.

計器表示部22は、運転者40の前方のセンターコンソールに配置されて、車両の速度情報及びエンジンの回転数情報等の車両の動作に関わる情報を表示する。計器表示部22は、車載装置10により制御されて、各種の情報を表示する。計器表示部22として、例えば、液晶ディスプレイを用いることができる。 The instrument display unit 22 is arranged on the center console in front of the driver 40, and displays information related to vehicle operation such as vehicle speed information and engine speed information. The instrument display unit 22 is controlled by the in-vehicle device 10 to display various types of information. As the instrument display unit 22, for example, a liquid crystal display can be used.

車載装置10は、処理部11と、記憶部12と、車載装置表示部13と、入力部14と、ディスクドライブ15と、通信部16を有する。 The in-vehicle device 10 includes a processing unit 11, a storage unit 12, an in-vehicle device display unit 13, an input unit 14, a disk drive 15, and a communication unit 16.

処理部11は、一つまたは複数のプロセッサと、周辺回路とを有する。処理部11は、記憶部12に予め記憶されている所定のプログラム12aに従い、車載装置10の各ハードウェア構成要素の制御及び各種処理を行い、処理中に生じるデータを一時的に保存するために記憶部12を利用する。 The processing unit 11 has one or more processors and peripheral circuits. The processing unit 11 controls each hardware component of the in-vehicle device 10 and performs various processes according to a predetermined program 12a stored in the storage unit 12 in advance, and temporarily stores the data generated during the process. The storage unit 12 is used.

記憶部12は、ランダムアクセスメモリ(RAM)若しくはリードオンリーメモリ(ROM)等の半導体メモリ、又は磁気ディスク若しくはフラッシュメモリ等の不揮発性メモリを有していてもよい。また、記憶部12は、所定のプログラム12aを記憶する非一時的な記憶媒体を読み出し可能なドライブとして、ディスクドライブ15を用いてもよい。 The storage unit 12 may have a semiconductor memory such as a random access memory (RAM) or a read-only memory (ROM), or a non-volatile memory such as a magnetic disk or a flash memory. Further, the storage unit 12 may use the disk drive 15 as a drive capable of reading a non-temporary storage medium for storing the predetermined program 12a.

車載装置表示部13は、センターコンソールに配置されおり、処理部11に制御されて、車載装置10の動作に伴う各種の情報を表示可能である。車載装置表示部13として、例えば、液晶ディスプレイを用いることができる。 The in-vehicle device display unit 13 is arranged in the center console and can be controlled by the processing unit 11 to display various information accompanying the operation of the in-vehicle device 10. As the in-vehicle device display unit 13, for example, a liquid crystal display can be used.

入力部14は、運転者40により操作されて、操作を入力可能である。車載装置10は、入力部14として、例えば車載装置表示部13の画面上に配置されるタッチパネルを用いることができる。 The input unit 14 is operated by the driver 40 and can input the operation. As the input unit 14, the vehicle-mounted device 10 can use, for example, a touch panel arranged on the screen of the vehicle-mounted device display unit 13.

ディスクドライブ15は、ディスク状の記憶媒体を格納し、処理部11に制御されて、記憶媒体に書き込まれている音楽データ又は映像データ等のコンテンツを読み出して、読み出したデータを処理部11に出力する。 The disk drive 15 stores a disc-shaped storage medium, is controlled by the processing unit 11, reads content such as music data or video data written in the storage medium, and outputs the read data to the processing unit 11. do.

通信部16は、車両に搭載されている車内のローカルエリアネットワーク(Car Area Network:CAN)と通信する。通信部16は、CANを介してECUと接続しており、ECUから車両の速度情報及びエンジンの回転数情報等の車両信号を受信する。また、通信部16は、カメラ20と通信して、カメラ20から画像データを受信する。更に、通信部16は、HUD21及び計器表示部22に対して、表示する画像データを送信する。 The communication unit 16 communicates with a local area network (Car Area Network: CAN) mounted on the vehicle. The communication unit 16 is connected to the ECU via the CAN, and receives vehicle signals such as vehicle speed information and engine speed information from the ECU. Further, the communication unit 16 communicates with the camera 20 and receives image data from the camera 20. Further, the communication unit 16 transmits the image data to be displayed to the HUD 21 and the instrument display unit 22.

また、車載装置10には、車両に搭載されたGPS情報受信部30から、車両の位置を示す位置情報が入力される。GPS情報受信部30は、GPS人工衛星が送信するGPS電波を受信して車両の位置を求め、車両の位置情報を車載装置10に出力する。 Further, in the vehicle-mounted device 10, position information indicating the position of the vehicle is input from the GPS information receiving unit 30 mounted on the vehicle. The GPS information receiving unit 30 receives the GPS radio wave transmitted by the GPS artificial satellite, obtains the position of the vehicle, and outputs the position information of the vehicle to the in-vehicle device 10.

上述した処理部11は、視線検知部11aと、表示情報制御部11bと、HUD表示制御部11cと、計器表示制御部11dと、ナビゲーション部11eと、オーディオ部11fを有する。 The processing unit 11 described above includes a line-of-sight detection unit 11a, a display information control unit 11b, a HUD display control unit 11c, an instrument display control unit 11d, a navigation unit 11e, and an audio unit 11f.

処理部11が有するこれらの各部は、例えば、処理部11が有するプロセッサ上で動作するコンピュータプログラムにより実現される機能モジュールである。 Each of these units included in the processing unit 11 is, for example, a functional module realized by a computer program running on the processor included in the processing unit 11.

視線検知部11aは、カメラ20が撮影した画像の画像データに基づいて、運転者40の視線方向を検知する。運転者40の視線方向を検知する方法としては、例えば、基準点を目頭、動点を虹彩にして位置関係を使う方法、又は、基準点を光源からの角膜反射の位置、動点を瞳孔にして位置関係を使う方法等の公知技術を用いることができる。 The line-of-sight detection unit 11a detects the line-of-sight direction of the driver 40 based on the image data of the image taken by the camera 20. As a method of detecting the line-of-sight direction of the driver 40, for example, a method of using the positional relationship with the reference point as the inner corner of the eye and the moving point as the iris, or a method of using the reference point as the position of the corneal reflex from the light source and the moving point as the pupil. A known technique such as a method using a positional relationship can be used.

表示情報制御部11bは、運転者40の視線方向と、車両内の運転者40の位置と、車両内のHUD21等の各部品の位置とに基づいて、運転者40の注視位置を決定する。例えば、表示情報制御部11bは、運転者40の注視位置と、各表示部の範囲の関係とに基づいて、運転者40の視線が向けられている表示部が、HUD21、計器表示部22又は車載装置表示部13の内の何れであるかを決定する。 The display information control unit 11b determines the gaze position of the driver 40 based on the line-of-sight direction of the driver 40, the position of the driver 40 in the vehicle, and the position of each component such as the HUD 21 in the vehicle. For example, in the display information control unit 11b, the display unit to which the driver 40's line of sight is directed is the HUD 21, the instrument display unit 22 or the display unit based on the relationship between the gaze position of the driver 40 and the range of each display unit. It is determined which of the in-vehicle device display units 13 is used.

また、表示情報制御部11bは、視線検知部11aが決定した、運転者40の視線の位置に基づいて、運転者40の視線方向が、計器表示部22又は車載装置表示部13からHUD21へ移動したと判断した時に、計器表示部22又は車載装置表示部13に表示されている情報の内の少なくとも一部の表示情報を、HUD21へ表示させる。 Further, in the display information control unit 11b, the line-of-sight direction of the driver 40 is moved from the instrument display unit 22 or the in-vehicle device display unit 13 to the HUD 21 based on the position of the line-of-sight of the driver 40 determined by the line-of-sight detection unit 11a. When it is determined that the information has been changed, at least a part of the information displayed on the instrument display unit 22 or the in-vehicle device display unit 13 is displayed on the HUD 21.

計器表示部22又は車載装置表示部13に表示されている情報の内の少なくとも一部の表示情報としては、計器表示部22又は車載装置表示部13に表示されている情報の要部を含むことが好ましい。 The display information of at least a part of the information displayed on the instrument display unit 22 or the in-vehicle device display unit 13 includes a main part of the information displayed on the instrument display unit 22 or the in-vehicle device display unit 13. Is preferable.

表示されている情報の要部としては、運転者40が注視していた、計器表示部22又は車載装置表示部13に表示されている画像の部分が挙げられる。これにより、運転者40は、興味があって注視していた表示情報を、視線を移動した後も継続して確認することができるので、余裕をもって運転に集中できる。 As the main part of the displayed information, the part of the image displayed on the instrument display unit 22 or the in-vehicle device display unit 13 that the driver 40 was gazing at can be mentioned. As a result, the driver 40 can continuously check the displayed information that he / she was interested in and gazed at even after moving his / her line of sight, so that he / she can concentrate on driving with a margin.

例えば、計器表示部22が速度計画像22a及び回転数計画像22bを表示していて(図2参照)、運転者40が、計器表示部22に表示されていた速度計画像22aを注視していた時には、表示されている情報の要部として、速度計画像22aを用いることができる。 For example, the instrument display unit 22 is displaying the speedometer image 22a and the speedometer image 22b (see FIG. 2), and the driver 40 is gazing at the speedometer image 22a displayed on the instrument display unit 22. At that time, the speedometer image 22a can be used as a main part of the displayed information.

また、車載装置表示部13が、経路情報を有する経路画像及び再生中の曲名を表示していて、運転者40が、車載装置表示部13に表示されていた経路画像を注視していた時には、表示されている情報の要部として、経路画像を用いることができる。 Further, when the in-vehicle device display unit 13 displays the route image having the route information and the title of the song being played, and the driver 40 is gazing at the route image displayed on the in-vehicle device display unit 13. A route image can be used as a main part of the displayed information.

また、計器表示部22又は車載装置表示部13に表示されている情報を要約した要約情報を、情報の要部としてもよい。例えば、運転者40の視線が、計器表示部22に向けられていた場合には、速度の数値及び回転数の数値を、情報の要部とすることができる。また、運転者40の視線が、ナビゲーション機能を実行している車載装置表示部13に向けられていた場合には、目的地の名称及び目的地への到着予想時刻を、情報の要部とすることができる。 Further, the summary information summarizing the information displayed on the instrument display unit 22 or the in-vehicle device display unit 13 may be used as a main part of the information. For example, when the line of sight of the driver 40 is directed to the instrument display unit 22, the numerical value of the speed and the numerical value of the rotation speed can be used as the main part of the information. Further, when the line of sight of the driver 40 is directed to the in-vehicle device display unit 13 executing the navigation function, the name of the destination and the estimated arrival time at the destination are used as the main parts of the information. be able to.

HUD表示制御部11cは、HUD21に表示する表示情報に基づいて、表示画像を生成し、生成した表示画像をHUD21に表示させる。 The HUD display control unit 11c generates a display image based on the display information displayed on the HUD 21, and causes the HUD 21 to display the generated display image.

計器表示制御部11dは、計器表示部22に表示する表示情報に基づいて、表示画像を生成し、生成した表示画像を計器表示部22に表示させる。計器表示制御部11dに表示される画像としては、例えば、図2に示すように、車両速度を示す速度計画像22a及びエンジンの回転数を示す回転数計画像22bが挙げられる。 The instrument display control unit 11d generates a display image based on the display information displayed on the instrument display unit 22, and causes the instrument display unit 22 to display the generated display image. Examples of the image displayed on the instrument display control unit 11d include a speedometer image 22a showing the vehicle speed and a rotometer image 22b showing the engine speed, as shown in FIG.

ナビゲーション部11eは、プログラム12aの実行により地図データ12bを用いて実現される機能モジュールであり、GPS情報受信部30から取得した車両の現在の位置に基づいて、目的地までの経路案内を行うナビゲーション機能を有する。ナビゲーション部11eは、記憶部12に記憶された地図データ12bと車両の位置とに基づき、車両の周辺の地図を示す地図画像及び音声案内情報を生成する。また、ナビゲーション部11eは、運転者40により目的地が設定された場合には、現時点の車両の位置から目的地までの経路を導出し、当該経路を地図画像上に重畳する。ナビゲーション部11eが生成した地図画像は、車載装置表示部13に表示される。 The navigation unit 11e is a functional module realized by executing the program 12a using the map data 12b, and is a navigation system that guides the route to the destination based on the current position of the vehicle acquired from the GPS information receiving unit 30. Has a function. The navigation unit 11e generates a map image showing a map around the vehicle and voice guidance information based on the map data 12b stored in the storage unit 12 and the position of the vehicle. Further, when the destination is set by the driver 40, the navigation unit 11e derives a route from the current position of the vehicle to the destination and superimposes the route on the map image. The map image generated by the navigation unit 11e is displayed on the vehicle-mounted device display unit 13.

また、ナビゲーション部11eは、車載装置表示部13等に表示する表示情報に基づいて表示画像を生成し、生成した表示画像を車載装置表示部13等に表示させる。車載装置表示部13等に表示される画像としては、例えば、経路が示された地図画像、目的地の名称、交差点拡大画像、目的地への到着予想時刻、目的地までの走行距離等が挙げられる。 Further, the navigation unit 11e generates a display image based on the display information displayed on the vehicle-mounted device display unit 13 and the like, and displays the generated display image on the vehicle-mounted device display unit 13 and the like. Examples of the image displayed on the in-vehicle device display unit 13 and the like include a map image showing a route, a name of a destination, an enlarged image of an intersection, an estimated time of arrival at the destination, a mileage to the destination, and the like. Be done.

オーディオ部11fは、プログラム12aの実行により実現される機能モジュールであり、ディスクドライブ15に格納されたディスク状の記憶媒体に書き込まれている音楽データ又は映像データ等のコンテンツを読み出す。また、オーディオ部11fは、ラジオ又はテレビの受信再生機能を有していてもよい。 The audio unit 11f is a functional module realized by executing the program 12a, and reads out contents such as music data or video data written in the disk-shaped storage medium stored in the disk drive 15. Further, the audio unit 11f may have a radio or television reception / reproduction function.

また、オーディオ部11fは、車載装置表示部13等に表示する表示情報に基づいて表示画像を生成し、生成した表示画像を車載装置表示部13等に表示させる。車載装置表示部13等に表示される画像としては、例えば、再生中の曲名、再生中の曲の再生時間、受信再生中のラジオの放送局名又はテレビのチャネル等が挙げられる。 Further, the audio unit 11f generates a display image based on the display information displayed on the vehicle-mounted device display unit 13 and the like, and displays the generated display image on the vehicle-mounted device display unit 13 and the like. Examples of the image displayed on the in-vehicle device display unit 13 and the like include the title of the song being played, the playing time of the song being played, the name of the radio station being received and played, the channel of the television, and the like.

次に、情報表示システム1の動作について、以下に説明する。 Next, the operation of the information display system 1 will be described below.

まず、情報表示システム1が運転者40の視線方向の移動を検知する動作について、図3及び図4を参照しながら、以下に説明する。 First, the operation of the information display system 1 for detecting the movement of the driver 40 in the line-of-sight direction will be described below with reference to FIGS. 3 and 4.

まず、ステップS301において、カメラ20は、運転者40の目を含む画像を撮影し、撮影した画像の画像データを、車載装置10へ送信する。 First, in step S301, the camera 20 takes an image including the eyes of the driver 40, and transmits the image data of the taken image to the in-vehicle device 10.

次に、ステップS303において、処理部11の視線検知部11aは、カメラ20から受信した画像データに基づいて、運転者40の視線方向を検知する。 Next, in step S303, the line-of-sight detection unit 11a of the processing unit 11 detects the line-of-sight direction of the driver 40 based on the image data received from the camera 20.

次に、ステップS305において、処理部の表示情報制御部11bは、運転者40の視線方向等に基づいて、運転者40の視線の車両内の位置を決定する。 Next, in step S305, the display information control unit 11b of the processing unit determines the position of the driver 40's line of sight in the vehicle based on the line-of-sight direction of the driver 40 and the like.

次に、ステップS307において、表示情報制御部11bは、運転者40の視線の位置に基づいて、運転者40の視線の位置がHUD21、計器表示部22及び車載装置表示部13の内の何れかの表示部である場合には、運転者40の視線が向けられている表示部を決定する。以下の処理は、運転者40の視線の位置が何れかの表示部である場合に行われる。 Next, in step S307, the display information control unit 11b has the position of the line of sight of the driver 40 based on the position of the line of sight of the driver 40, whichever is among the HUD 21, the instrument display unit 22, and the in-vehicle device display unit 13. In the case of the display unit of, the display unit to which the line of sight of the driver 40 is directed is determined. The following processing is performed when the position of the line of sight of the driver 40 is any display unit.

次に、ステップS309において、表示情報制御部11bは、表示部内の運転者40の注視位置に基づいて、視線が向けられている画像の部分の表示情報であるオブジェクト情報を決定する。 Next, in step S309, the display information control unit 11b determines the object information which is the display information of the portion of the image to which the line of sight is directed, based on the gaze position of the driver 40 in the display unit.

具体的には、例えば、運転者40の視線が計器表示部22へ向けられている場合には、表示情報制御部11bは、計器表示部22内の運転者40の注視位置を、計器表示制御部11dに通知する。計器表示制御部11dは、計器表示部22に表示している画像内の計器表示部22内の運転者40の注視位置に基づいて、計器表示部22に表示されている画像内のオブジェクト画像を決定する。具体的には、計器表示制御部11dは、運転者40の注視位置と、計器表示部22に表示されている速度計画像22aの範囲及び回転数計画像22bの範囲との関係に基づいて、運転者40が注視しているオブジェクト画像を決定する。計器表示制御部11dは、決定されたオブジェクト画像のオブジェクト情報を、表示情報制御部11bに通知する。上述した、運転者40の視線が計器表示部22へ向けられている場合の説明は、運転者40の視線が車載装置表示部13へ向けられている場合についても、同様に適用される。 Specifically, for example, when the line of sight of the driver 40 is directed to the instrument display unit 22, the display information control unit 11b controls the instrument display control of the gaze position of the driver 40 in the instrument display unit 22. Notify unit 11d. The instrument display control unit 11d displays an object image in the image displayed on the instrument display 22 based on the gaze position of the driver 40 in the instrument display 22 in the image displayed on the instrument display 22. decide. Specifically, the instrument display control unit 11d is based on the relationship between the gaze position of the driver 40 and the range of the speedometer image 22a and the range of the tachometer image 22b displayed on the instrument display 22. The object image that the driver 40 is gazing at is determined. The instrument display control unit 11d notifies the display information control unit 11b of the object information of the determined object image. The above description of the case where the line of sight of the driver 40 is directed to the instrument display unit 22 is similarly applied to the case where the line of sight of the driver 40 is directed to the in-vehicle device display unit 13.

次に、ステップS311において、表示情報制御部11bは、運転者40の視線が向けられている表示部が変わったか否かを判断する。表示情報制御部11bは、前回のカメラ20の画像に基づいて決定された運転者40の視線が向けられている表示部と、今回のカメラ20の画像に基づいて決定された運転者40の視線が向けられている表示部が異なる場合には、運転者40の視線が向けられている表示部が変わったと判断し、そうでない場合には、運転者40の視線が向けられている表示部は変化していない(同じ)と判断する。 Next, in step S311 the display information control unit 11b determines whether or not the display unit to which the driver 40's line of sight is directed has changed. The display information control unit 11b has a display unit to which the line of sight of the driver 40 determined based on the image of the previous camera 20 is directed and a line of sight of the driver 40 determined based on the image of the camera 20 this time. If the display unit to which the driver 40 is directed is different, it is determined that the display unit to which the driver 40's line of sight is directed has changed, and if not, the display unit to which the driver 40's line of sight is directed is determined to be different. Judge that it has not changed (same).

運転者40の視線が向けられている表示部が変わらない場合(ステップS311−No)、ステップS301へ戻り、ステップS301からステップS311の処理が繰り返される。 If the display unit to which the driver 40's line of sight is directed does not change (step S311-No), the process returns to step S301, and the processes of step S301 to step S311 are repeated.

一方、運転者40の視線が向けられている表示部が変わった場合(ステップS311−Yes)、表示情報制御部11bは、運転者の視線が現在の表示部へ向けられている時間のカウントを開始する(ステップS401)。人の視線にはゆらぎがあるので、視線が向けられている表示部が変化したとしても、注視しているとは限らない。視線のゆらぎにも関わらずに、前の表示部に表示されていた表示情報をHUD21に表示することは、運転者40の運転に対する集中をさまたげるおそれがある。運転者40が現在の表示部を注視している時間が所定の時間よりも長い場合には、ゆらぎではないと推定される。そこで、視線のゆらぎであるか否かを判断するために、現在の表示部を注視している時間をカウントする。 On the other hand, when the display unit to which the driver's line of sight is directed changes (step S311-Yes), the display information control unit 11b counts the time when the driver's line of sight is directed to the current display unit. Start (step S401). Since there are fluctuations in the line of sight of a person, even if the display unit to which the line of sight is directed changes, it does not necessarily mean that the person is watching. Displaying the display information displayed on the previous display unit on the HUD 21 in spite of the fluctuation of the line of sight may hinder the concentration of the driver 40 on driving. If the time the driver 40 is gazing at the current display unit is longer than a predetermined time, it is presumed that there is no fluctuation. Therefore, in order to determine whether or not the line of sight is fluctuating, the time during which the current display unit is being watched is counted.

次に、ステップS403において、表示情報制御部11bは、運転者40の視線が、前の表示部から現在の表示部へ移動した後、所定の時間が経過したか否かを判断する。表示情報制御部11bは、所定の時間が経過している場合には、運転者40の視線方向が移動したと判断する。そうでない場合には、運転者40の視線方向は移動していないと判断する。所定の時間としては、例えば、0.5秒とすることができる。 Next, in step S403, the display information control unit 11b determines whether or not a predetermined time has elapsed after the line of sight of the driver 40 has moved from the previous display unit to the current display unit. When the predetermined time has elapsed, the display information control unit 11b determines that the line-of-sight direction of the driver 40 has moved. If this is not the case, it is determined that the line-of-sight direction of the driver 40 has not moved. The predetermined time can be, for example, 0.5 seconds.

運転者40の視線方向が移動した場合(ステップS403−Yes)、運転者40の視線方向の移動は、視線方向のゆらぎではないと判断されて、図5に示す処理が開始される(ステップS501)。 When the line-of-sight direction of the driver 40 moves (step S403-Yes), it is determined that the movement of the driver 40 in the line-of-sight direction is not a fluctuation in the line-of-sight direction, and the process shown in FIG. 5 is started (step S501). ).

運転者40の視線方向が移動していない場合(ステップS403−No)、表示情報制御部11bは、運転者40の視線が移動したか否かを判断する(ステップ405)。具体的には、ステップS301〜S311の処理が行われる。そして、運転者40の視線方向が移動していない場合(ステップS405−No)、ステップS403へ戻る。 When the line-of-sight direction of the driver 40 has not moved (step S403-No), the display information control unit 11b determines whether or not the line-of-sight of the driver 40 has moved (step 405). Specifically, the processes of steps S301 to S311 are performed. Then, when the line-of-sight direction of the driver 40 has not moved (step S405-No), the process returns to step S403.

運転者40の視線方向が移動した場合(ステップS403−Yes)、運転者40の視線方向の移動は、視線のゆらぎであると判断されて、ステップS301へ戻る。 When the line-of-sight direction of the driver 40 moves (step S403-Yes), the movement of the driver 40 in the line-of-sight direction is determined to be a fluctuation of the line-of-sight, and the process returns to step S301.

図3及び図4に示す処理は、絶え間なく行われていて、運転者40の視線方向の移動は常に監視される。 The processes shown in FIGS. 3 and 4 are continuously performed, and the movement of the driver 40 in the line-of-sight direction is constantly monitored.

次に、運転者40の視線方向が、図2に示すように、HUD21から計器表示部22の速度計画像22aへ移動した後、再びHUD21へ移動した場合について、情報表示システム1の動作を、図5を参照しながら、以下に説明する。 Next, as shown in FIG. 2, the operation of the information display system 1 is performed when the line-of-sight direction of the driver 40 moves from the HUD 21 to the speedometer image 22a of the instrument display unit 22 and then moves to the HUD 21 again. This will be described below with reference to FIG.

ステップS501において、表示情報制御部11bは、計器表示部22に表示されていたオブジェクト情報(速度計画像22aの表示情報)を、HUD21に表示する表示時間のカウントを開始する。 In step S501, the display information control unit 11b starts counting the display time for displaying the object information (display information of the speedometer image 22a) displayed on the instrument display unit 22 on the HUD 21.

次に、ステップS503において、表示情報制御部11bは、運転者が視線を向けていたオブジェクト情報(速度計画像22aの表示情報)の要求を、計器表示制御部11dに通知する。ここで、オブジェクト情報は、オブジェクト画像(速度計画像22a)を生成するのに用いられる情報である。 Next, in step S503, the display information control unit 11b notifies the instrument display control unit 11d of a request for object information (display information of the speedometer image 22a) that the driver is looking at. Here, the object information is information used to generate an object image (speedometer image 22a).

次に、ステップS505において、計器表示制御部11dは、運転者が視線を向けていたオブジェクト情報(速度計画像22aの表示情報)を、表示情報制御部11bに通知する。 Next, in step S505, the instrument display control unit 11d notifies the display information control unit 11b of the object information (display information of the speedometer image 22a) that the driver is looking at.

次に、ステップS507において、表示情報制御部11bは、計器表示制御部11dから通知されたオブジェクト情報(速度計画像22aの表示情報)を、HUD表示制御部11cへ通知する。 Next, in step S507, the display information control unit 11b notifies the HUD display control unit 11c of the object information (display information of the speedometer image 22a) notified from the instrument display control unit 11d.

次に、ステップS509において、HUD表示制御部11cは、表示情報制御部11bから通知されたオブジェクト情報(速度計画像22aの表示情報)に基づいて、オブジェクト画像(速度計画像22a)を生成し、生成したオブジェクト画像(速度計画像22a)をHUD21に表示する。 Next, in step S509, the HUD display control unit 11c generates an object image (speedometer image 22a) based on the object information (display information of the speedometer image 22a) notified from the display information control unit 11b. The generated object image (speedometer image 22a) is displayed on the HUD21.

ここで、HUD表示制御部11cは、計器表示部22からHUD21への運転者40の視線の移動する向きに基づいて、オブジェクト画像(速度計画像22a)をHUD21内に表示する表示開始位置を決定する。 Here, the HUD display control unit 11c determines a display start position for displaying the object image (speedometer image 22a) in the HUD 21 based on the direction in which the line of sight of the driver 40 moves from the instrument display unit 22 to the HUD 21. do.

図6は、HUDに表示されるオブジェクト画像を示す図である。 FIG. 6 is a diagram showing an object image displayed on the HUD.

図6に示す例では、オブジェクト画像(速度計画像22a)をHUD21内に表示する表示開始位置が、計器表示部22からHUD21への運転者40の視線の移動方向と交差するHUD21の輪郭の内側に決定される。オブジェクト画像(速度計画像22a)は、鎖線で示すように、まず、HUD21内の表示開始位置に表示される。これにより、前方を注視する運転者の視界に生じる違和感を抑えて、運転に対する影響を少なくできる。 In the example shown in FIG. 6, the display start position for displaying the object image (speedometer image 22a) in the HUD 21 is inside the contour of the HUD 21 that intersects the moving direction of the driver 40's line of sight from the instrument display unit 22 to the HUD 21. Is decided on. The object image (speedometer image 22a) is first displayed at the display start position in the HUD 21, as shown by the chain line. As a result, it is possible to suppress a sense of discomfort that occurs in the driver's field of vision looking ahead and reduce the influence on driving.

次に、ステップS511において、表示情報制御部11bは、HUD21におけるオブジェクト画像(速度計画像22a)の表示時間が所定の時間を超えたか否かを判断する。この所定の時間は、オブジェクト画像(速度計画像22a)に表示される情報を見て確認できる時間が確保されればよい。所定の時間としては、例えば、5〜10秒とすることができる。また、この所定の時間は、オブジェクト情報に応じて変化させてもよい。例えば、視覚により理解が容易な情報であれば、時間を短くし、理解が容易でない情報であれば、時間を長くしてもよい。 Next, in step S511, the display information control unit 11b determines whether or not the display time of the object image (speedometer image 22a) in the HUD 21 exceeds a predetermined time. As for this predetermined time, it is sufficient that a time that can be confirmed by looking at the information displayed on the object image (speedometer image 22a) is secured. The predetermined time can be, for example, 5 to 10 seconds. Further, this predetermined time may be changed according to the object information. For example, if the information is visually easy to understand, the time may be shortened, and if the information is not easy to understand, the time may be lengthened.

オブジェクト画像(速度計画像22a)がHUD21に表示されている間に、運転者40の視線がオブジェクト画像(速度計画像22a)に向けられた場合には、所定の時間を延長するようにしてもよい。 If the line of sight of the driver 40 is directed to the object image (speedometer image 22a) while the object image (speedometer image 22a) is displayed on the HUD 21, the predetermined time may be extended. good.

オブジェクト画像(速度計画像22a)の表示時間が所定の時間を超えた場合(ステップS511−Yes)、表示情報制御部11bは、オブジェクト画像(速度計画像22a)をフェードアウトさせて消去するように、HUD表示制御部11cに通知する(ステップS513)。 When the display time of the object image (speedometer image 22a) exceeds a predetermined time (step S511-Yes), the display information control unit 11b fades out the object image (speedometer image 22a) and erases it. Notify the HUD display control unit 11c (step S513).

そして、HUD表示制御部11cは、HUD21に表示されているオブジェクト画像(速度計画像22a)をフェードアウトさせて消去する(ステップS513)。これにより、速度情報を確認した運転者40に対して、前方の視界を広げて運転に注意を注がせることができる。なお、HUD21に表示されているオブジェクト画像を消去する際には、運転者40の前方への注視を妨げないように消去するのであれば、他の態様を用いて消去してもよい。 Then, the HUD display control unit 11c fades out the object image (speedometer image 22a) displayed on the HUD 21 and erases it (step S513). As a result, the driver 40 who has confirmed the speed information can be made to pay attention to the driving by widening the field of view in front of the driver 40. When erasing the object image displayed on the HUD 21, the object image may be erased by using another mode as long as it does not interfere with the driver 40's gaze forward.

一方、オブジェクト画像(速度計画像22a)の表示時間が所定の時間を超えていない場合(ステップS511−No)、ステップ503に戻り、ステップS503からステップS511の処理が繰り返される。 On the other hand, when the display time of the object image (speedometer image 22a) does not exceed a predetermined time (step S511-No), the process returns to step 503, and the processes of steps S503 to S511 are repeated.

ここで、HUD表示制御部11cは、図6に示すように、オブジェクト画像(速度計画像22a)をHUD21内の表示開始位置に表示した後、オブジェクト画像(速度計画像22a)を、HUD21内の表示開始位置から右上の隅の位置まで表示しながら移動させた後、右上の隅の位置で表示し続けてもよい。これにより、オブジェクト画像(速度計画像22a)を、HUD21内の視界を妨げない位置に表示させて、運転者の前方の視界を確保できる。ここで、オブジェクト画像(速度計画像22a)は、計器表示部22に表示される速度計画像と同じ表示情報に基づいて生成されるので、車両の速度変化に応じて表示される速度も変化してHUD21に表示される。 Here, as shown in FIG. 6, the HUD display control unit 11c displays the object image (speedometer image 22a) at the display start position in the HUD 21, and then displays the object image (speedometer image 22a) in the HUD 21. After moving while displaying from the display start position to the position of the upper right corner, the display may be continued at the position of the upper right corner. As a result, the object image (speedometer image 22a) can be displayed at a position in the HUD 21 that does not obstruct the field of view, and the field of view in front of the driver can be secured. Here, since the object image (speedometer image 22a) is generated based on the same display information as the speedometer image displayed on the instrument display unit 22, the displayed speed changes according to the speed change of the vehicle. Is displayed on HUD21.

上述した本実施形態の情報表示システム1によれば、運転者40の視線方向の移動に応じて、視線の移動前の計器表示部22に表示されていた情報を、視線の移動後のHUD21に表示できる。そのため、運転者40の視線の移動頻度を低減させて、運転者40は、HUD21を通して、前方を注視して運転に注意を注ぐことができる。 According to the information display system 1 of the present embodiment described above, according to the movement of the driver 40 in the line-of-sight direction, the information displayed on the instrument display unit 22 before the movement of the line of sight is transferred to the HUD 21 after the movement of the line of sight. Can be displayed. Therefore, by reducing the frequency of movement of the line of sight of the driver 40, the driver 40 can pay attention to the driving by looking ahead through the HUD 21.

次に、上述した情報表示システムの第2実施形態を、図7〜図10を参照しながら以下に説明する。第2実施形態について特に説明しない点については、上述の第1実施形態に関して詳述した説明が適宜適用される。また、同一の構成要素には同一の符号を付してある。 Next, a second embodiment of the above-mentioned information display system will be described below with reference to FIGS. 7 to 10. With respect to points that are not particularly described with respect to the second embodiment, the above-mentioned detailed description of the first embodiment is appropriately applied. Further, the same components are designated by the same reference numerals.

本実施形態の情報表示システム1では、図7及び図8に示すように、運転者40の視線方向が、HUD21から車載装置表示部13の交差点拡大画像13b(図8参照)へ移動した後、再びHUD21へ移動した場合について、情報表示システム1の動作を、図9を参照しながら、以下に説明する。ここで、図8に示すように、車載装置表示部13には、経路情報を示す経路画像13a及び交差点における進行方向を示す交差点拡大画像13bが表示されている。 In the information display system 1 of the present embodiment, as shown in FIGS. 7 and 8, after the line-of-sight direction of the driver 40 moves from the HUD 21 to the intersection enlarged image 13b (see FIG. 8) of the in-vehicle device display unit 13. The operation of the information display system 1 will be described below with reference to FIG. 9 in the case of moving to the HUD 21 again. Here, as shown in FIG. 8, the vehicle-mounted device display unit 13 displays a route image 13a showing the route information and an intersection enlarged image 13b showing the traveling direction at the intersection.

以下、運転者40の視線方向が、図7に示すように、HUD21から車載装置表示部13の交差点拡大画像13bへ移動した後、再びHUD21へ移動した場合について、情報表示システム1の動作を、図9を参照しながら、以下に説明する。 Hereinafter, when the line-of-sight direction of the driver 40 moves from the HUD 21 to the intersection enlarged image 13b of the in-vehicle device display unit 13 and then moves to the HUD 21 again, the operation of the information display system 1 is described. This will be described below with reference to FIG.

まず、ステップ901において、表示情報制御部11bは、計器表示部22に表示されていたオブジェクト情報(速度計画像22aの表示情報)を、HUD21に表示する表示時間のカウントを開始する。 First, in step 901, the display information control unit 11b starts counting the display time for displaying the object information (display information of the speedometer image 22a) displayed on the instrument display unit 22 on the HUD 21.

次に、ステップS903において、表示情報制御部11bは、運転者が視線を向けていたオブジェクト情報(交差点拡大画像13bの表示情報)をナビゲーション部11eから受け取って、HUD21に表示するように、HUD表示制御部11cへ通知する。ここで、オブジェクト情報(交差点拡大画像13bの表示情報)は、オブジェクト画像(交差点拡大画像13b)を生成するのに用いられる情報である。 Next, in step S903, the display information control unit 11b receives the object information (display information of the intersection enlarged image 13b) that the driver is looking at from the navigation unit 11e and displays the HUD so as to display it on the HUD 21. Notify the control unit 11c. Here, the object information (display information of the intersection enlarged image 13b) is information used to generate the object image (intersection enlarged image 13b).

次に、ステップS905において、HUD表示制御部11cは、運転者が視線を向けていたオブジェクト情報(交差点拡大画像13bの表示情報)の要求を、ナビゲーション部11eに通知する。 Next, in step S905, the HUD display control unit 11c notifies the navigation unit 11e of a request for object information (display information of the intersection enlarged image 13b) that the driver is looking at.

次に、ステップS907において、ナビゲーション部11eは、運転者が視線を向けていたオブジェクト情報(交差点拡大画像13bの表示情報)を、HUD表示制御部11cに通知する。 Next, in step S907, the navigation unit 11e notifies the HUD display control unit 11c of the object information (display information of the intersection enlarged image 13b) that the driver is looking at.

次に、ステップS909において、HUD表示制御部11cは、ナビゲーション部11eから通知されたオブジェクト情報(交差点拡大画像13bの表示情報)に基づいて、オブジェクト画像(交差点拡大画像13b)を生成し、生成したオブジェクト画像(交差点拡大画像13b)をHUD21に表示する。 Next, in step S909, the HUD display control unit 11c generates an object image (intersection enlarged image 13b) based on the object information (display information of the intersection enlarged image 13b) notified from the navigation unit 11e, and generates the object image (intersection enlarged image 13b). The object image (intersection enlarged image 13b) is displayed on the HUD 21.

HUD表示制御部11cは、車載装置表示部13からHUD21への運転者40の視線の移動する向きに基づいて、オブジェクト画像(交差点拡大画像13b)をHUD21内に表示する表示開始位置を決定する。 The HUD display control unit 11c determines a display start position for displaying the object image (intersection enlarged image 13b) in the HUD 21 based on the direction in which the driver 40's line of sight moves from the vehicle-mounted device display unit 13 to the HUD 21.

図10は、HUDに表示されるオブジェクト画像を示す図である。 FIG. 10 is a diagram showing an object image displayed on the HUD.

図10に示す例では、オブジェクト画像(交差点拡大画像13b)をHUD21内に表示する表示開始位置が、車載装置表示部13からHUD21への運転者40の視線の移動方向と交差するHUD21の輪郭の内側に決定されている。オブジェクト画像(交差点拡大画像13b)は、鎖線で示すように、まず、HUD21内の表示開始位置に表示される。これにより、前方を注視する運転者の視界に生じる違和感を抑えて、運転に対する影響を少なくできる。 In the example shown in FIG. 10, the display start position for displaying the object image (intersection enlarged image 13b) in the HUD 21 is the contour of the HUD 21 that intersects the moving direction of the driver 40's line of sight from the in-vehicle device display unit 13 to the HUD 21. It is decided on the inside. The object image (intersection enlarged image 13b) is first displayed at the display start position in the HUD 21, as shown by the chain line. As a result, it is possible to suppress a sense of discomfort that occurs in the driver's field of vision looking ahead and reduce the influence on driving.

次に、ステップS911において、表示情報制御部11bは、HUD21におけるオブジェクト画像(交差点拡大画像13b)の表示時間が所定の時間を超えたか否かを判断する。この所定の時間は、オブジェクト画像(交差点拡大画像13b)に表示される情報を見て確認できる時間が確保されればよい。所定の時間としては、例えば、5〜20秒とすることができる。 Next, in step S911, the display information control unit 11b determines whether or not the display time of the object image (intersection enlarged image 13b) in the HUD 21 exceeds a predetermined time. As for this predetermined time, it is sufficient that a time that can be confirmed by looking at the information displayed on the object image (intersection enlarged image 13b) is secured. The predetermined time can be, for example, 5 to 20 seconds.

オブジェクト画像(交差点拡大画像13b)の表示時間が所定の時間を超えた場合(ステップS911−Yes)、表示情報制御部11bは、オブジェクト画像(交差点拡大画像13b)をフェードアウトさせて消去するように、HUD表示制御部11cに通知する(ステップS913)。 When the display time of the object image (intersection enlarged image 13b) exceeds a predetermined time (step S911-Yes), the display information control unit 11b fades out the object image (intersection enlarged image 13b) and erases it. Notify the HUD display control unit 11c (step S913).

HUD表示制御部11cは、HUD21に表示されているオブジェクト画像(交差点拡大画像13b)をフェードアウトさせて消去する(ステップS913)。これにより、経路情報を確認した運転者40に対して、前方の視界を広げて運転に注意を注がせることができる。 The HUD display control unit 11c fades out the object image (intersection enlarged image 13b) displayed on the HUD 21 and erases it (step S913). As a result, the driver 40 who has confirmed the route information can be made to pay attention to the driving by widening the field of view in front of the driver 40.

一方、オブジェクト画像(交差点拡大画像13b)の表示時間が所定の時間を超えていない場合(ステップS911−No)、ステップ905に戻り、ステップS905からステップS911の処理が繰り返される。 On the other hand, if the display time of the object image (intersection enlarged image 13b) does not exceed a predetermined time (step S911-No), the process returns to step 905, and the processes of steps S905 to S911 are repeated.

HUD表示制御部11cは、図10に示すように、オブジェクト画像(交差点拡大画像13b)をHUD21内の表示開始位置に表示した後、オブジェクト画像(交差点拡大画像13b)を、HUD21内の表示開始位置から右上の隅の位置まで表示しながら移動させた後、右上の隅の位置で表示し続けてもよい。これにより、オブジェクト画像(交差点拡大画像13b)を、HUD21内の視界を妨げない位置に表示させて、運転者の前方の視界を確保できる。ここで、オブジェクト画像(交差点拡大画像13b)は、車載装置表示部13に表示される交差点拡大画像と同じ表示情報に基づいて生成されるので、走行する車両の位置に応じて表示される交差点拡大画像も変化して表示される。 As shown in FIG. 10, the HUD display control unit 11c displays the object image (intersection enlarged image 13b) at the display start position in the HUD 21, and then displays the object image (intersection enlarged image 13b) at the display start position in the HUD 21. After moving while displaying from to the position of the upper right corner, the display may be continued at the position of the upper right corner. As a result, the object image (intersection enlarged image 13b) can be displayed at a position in the HUD 21 that does not obstruct the field of view, and the field of view in front of the driver can be secured. Here, since the object image (intersection enlarged image 13b) is generated based on the same display information as the intersection enlarged image displayed on the in-vehicle device display unit 13, the intersection enlarged displayed according to the position of the traveling vehicle. The image is also changed and displayed.

上述した本実施形態の情報表示システム1によれば、運転者40の視線方向の移動に応じて、視線の移動前の車載装置表示部13に表示されていた情報を、視線の移動後のHUD21に表示できる。そのため、運転者40の視線の移動頻度を低減させて、運転者40は、HUD21を通して、前方を注視して運転に注意を注ぐことができる。 According to the information display system 1 of the present embodiment described above, according to the movement of the driver 40 in the line-of-sight direction, the information displayed on the in-vehicle device display unit 13 before the movement of the line of sight is changed to the HUD 21 after the movement of the line of sight. Can be displayed on. Therefore, by reducing the frequency of movement of the line of sight of the driver 40, the driver 40 can pay attention to the driving by looking ahead through the HUD 21.

本発明では、上述した実施形態の情報表示方法及び情報表示装置は、本発明の趣旨を逸脱しない限り適宜変更が可能である。また、一の実施形態が有する構成要件は、他の実施形態にも適宜適用することができる。 In the present invention, the information display method and the information display device of the above-described embodiment can be appropriately changed as long as the gist of the present invention is not deviated. Further, the constituent requirements of one embodiment can be appropriately applied to other embodiments.

例えば、上述した第1実施形態において、HUD表示制御部は、第2実施形態のように、計器表示制御部からオブジェクト情報の通知を直接受けとるようにしてもよい。また、上述した第2実施形態において、HUD表示制御部は、第1実施形態のように、表示情報制御部を介して、ナビゲーション部からオブジェクト情報の通知を受けとるようにしてもよい。 For example, in the first embodiment described above, the HUD display control unit may directly receive the notification of the object information from the instrument display control unit as in the second embodiment. Further, in the second embodiment described above, the HUD display control unit may receive notification of object information from the navigation unit via the display information control unit as in the first embodiment.

また、上述した第1実施形態では、移動前の表示部は、計器表示部であったが、移動前の表示部は、機械式の速度を表示する速度計(又は回転数計)であってもよい。情報表示制御部は、運転者の視線の位置と、車両内のHUD等の各部品の位置情報とに基づいて、運転者の視線の位置が、機械式の速度計(又は回転数計)であることを決定する。そして、情報表示制御部は、HUD表示制御部に対して、HUDに車両の速度情報(又は回転数情報)を表示させるようにしてもよい。 Further, in the first embodiment described above, the display unit before movement is an instrument display unit, but the display unit before movement is a speedometer (or rotation speedometer) that displays a mechanical speed. May be good. The information display control unit uses a mechanical speedometer (or tachometer) to determine the position of the driver's line of sight based on the position of the driver's line of sight and the position information of each part such as the HUD in the vehicle. Decide to be. Then, the information display control unit may cause the HUD display control unit to display the vehicle speed information (or rotation speed information) on the HUD.

また、運転者の視線が一つ前の表示部へ移動した後、上述した所定の時間(例えば、0.5秒)が経過して、更に第2の所定の時間(例えば、5秒)が経過している場合には、そのあとに運転者の視線が新しい表示部へ移動したときに、当該新しい表示部に、前記一つ前の表示部に表示されていた情報を表示させることを停止する(表示させない)ようにしてもよい。具体的には、たとえば運転者がHUDから計器表示部又は車載装置表示部に視線移動させ、当該計器表示部又は車載装置表示部に5秒以上視線を留めたのち、再度HUDに視線を移動させた(視線を戻した)ような場合は、計器表示部又は車載装置表示部に表示されていた情報を、HUDに表示することを停止する(表示させない)ようにしてもよい。運転者が、十分な時間の間、計器表示部又は車載装置表示部に表示されていた情報を注視している場合には、注視していた情報を十分に理解していると考えられるので、HUDに表示しなくてもよいためである。 Further, after the driver's line of sight moves to the previous display unit, the above-mentioned predetermined time (for example, 0.5 seconds) elapses, and then the second predetermined time (for example, 5 seconds) elapses. If it has passed, when the driver's line of sight moves to a new display unit after that, the new display unit stops displaying the information displayed on the previous display unit. It may be set (not displayed). Specifically, for example, the driver moves the line of sight from the HUD to the instrument display unit or the in-vehicle device display unit, keeps the line of sight on the instrument display unit or the in-vehicle device display unit for 5 seconds or longer, and then moves the line of sight to the HUD again. In such a case (returning the line of sight), the information displayed on the instrument display unit or the in-vehicle device display unit may be stopped (not displayed) on the HUD. If the driver is gazing at the information displayed on the instrument display or the in-vehicle device display for a sufficient period of time, it is considered that he / she fully understands the information he / she was gazing at. This is because it does not have to be displayed on the HUD.

更に、上述した各実施形態では、運転者の視線方向が、計器表示部又は車載装置表示部からHUDへ移動した時に、計器表示部又は車載装置表示部に表示されている情報の内の少なくとも一部の表示情報を、HUDへ表示していたが、逆に、ユーザの視線が、HUDから計器表示部又は車載装置表示部へ移動した時に、HUDに表示されている情報の内の少なくとも一部の表示情報を、計器表示部又は車載装置表示部へ表示するようにしてもよい。 Further, in each of the above-described embodiments, when the driver's line of sight moves from the instrument display unit or the vehicle-mounted device display unit to the HUD, at least one of the information displayed on the instrument display unit or the vehicle-mounted device display unit is displayed. The display information of the unit was displayed on the HUD, but conversely, when the user's line of sight moves from the HUD to the instrument display unit or the in-vehicle device display unit, at least a part of the information displayed on the HUD. The display information of may be displayed on the instrument display unit or the in-vehicle device display unit.

更にまた、運転者の視線方向が、オーディオ情報を表示している車載装置表示部からHUDへ移動した時には、車載装置表示部に表示されているオーディオ情報の内の少なくとも一部の表示情報を、HUDへ表示するようにしてもよい。 Furthermore, when the driver's line of sight moves from the in-vehicle device display unit displaying the audio information to the HUD, at least a part of the audio information displayed on the in-vehicle device display unit is displayed. It may be displayed on the HUD.

1 情報表示システム
10 車載装置
11 処理部
11a 視線検知部
11b 表示情報制御部
11c HUD表示制御部
11d 計器表示制御部
11e ナビゲーション部
11f オーディオ部
12 記憶部
12a プログラム
12b 地図データ
13 車載装置表示部
13a 経路画像
13b 交差点拡大画像
14 入力部
15 ディスクドライブ
16 通信部
20 カメラ
21 ヘッドアップディスプレイ(HUD)
22 計器表示部
22a 速度計画像
22b 回転数計画像
30 GPS情報受信部
40 運転者(ユーザ)
1 Information display system 10 In-vehicle device 11 Processing unit 11a Line-of-sight detection unit 11b Display information control unit 11c HUD display control unit 11d Instrument display control unit 11e Navigation unit 11f Audio unit 12 Storage unit 12a Program 12b Map data 13 In-vehicle device display unit 13a Route Image 13b Enlarged image of intersection 14 Input unit 15 Disk drive 16 Communication unit 20 Camera 21 Head-up display (HUD)
22 Instrument display 22a Speedometer image 22b Rotometer image 30 GPS information receiver 40 Driver (user)

Claims (5)

ユーザの視線方向を検知することと
ユーザの視線方向が、第1表示部から第2表示部へ移動した時に、前記第1表示部から前記第2表示部へのユーザの視線の移動する向きに基づいて、前記第1表示部に表示されている情報を要約した要約情報である表示情報を、前記第2表示部内に表示する第1位置を決定することと、
前記表示情報を、前記第2表示部の前記第1位置に表示することと、
前記表示情報を前記第2表示部内の前記第1位置に表示した後、前記表示情報を、前記第2表示部内の前記第1位置から第2位置まで表示しながら移動させることと、
を備える情報表示方法。
And possible to detect the direction of the line of sight of the user,
When the user's line of sight moves from the first display unit to the second display unit, the first display unit is based on the direction in which the user's line of sight moves from the first display unit to the second display unit. Determining the first position to display the display information, which is the summary information summarizing the displayed information, in the second display unit, and
Displaying the display information at the first position of the second display unit , and
After displaying the display information at the first position in the second display unit, the display information is moved while being displayed from the first position to the second position in the second display unit.
Information display method including.
前記表示情報を前記第2表示部へ表示してから所定の時間が経過した後、前記第2表示部に表示されている前記表示情報を消去することを更に備える請求項1に記載の情報表示方法。 The information display according to claim 1, further comprising erasing the display information displayed on the second display unit after a predetermined time has elapsed after displaying the display information on the second display unit. Method. ユーザが、前記第1表示部に視線を向けていた時間に基づいて、前記表示情報を、前記第2表示部へ表示するか否かを決定することを更に備える請求項1又は2に記載の情報表示方法。 The first or second aspect of claim 1 or 2, further comprising deciding whether or not to display the display information on the second display unit based on the time when the user has turned his / her line of sight to the first display unit. Information display method. ユーザの視線方向を検知し、Detects the user's line of sight and
ユーザの視線方向が、第1表示部から第2表示部へ移動した時に、前記第1表示部から前記第2表示部へのユーザの視線の移動する向きに基づいて、前記第1表示部に表示されている情報の内の少なくとも一部の表示情報を前記第2表示部内に表示する第1位置を決定し、 When the user's line of sight moves from the first display unit to the second display unit, the first display unit is based on the direction in which the user's line of sight moves from the first display unit to the second display unit. A first position for displaying at least a part of the displayed information in the second display unit is determined.
前記表示情報を、前記第2表示部内の前記第1位置に表示した後、前記表示情報を、前記第2表示部内の前記第1位置から第2位置まで表示しながら移動させることを備える情報表示方法。 Information display including displaying the display information at the first position in the second display unit and then moving the display information while displaying the display information from the first position to the second position in the second display unit. Method.
第1表示部と、1st display and
第2表示部と、 2nd display and
ユーザの視線方向を検知する視線検知部と、 A line-of-sight detector that detects the user's line-of-sight direction,
前記視線検知部により検知されたユーザの視線方向が、第1表示部から第2表示部へ移動した時に、前記第1表示部から前記第2表示部へのユーザの視線の移動する向きに基づいて、前記第1表示部に表示されている情報の内の少なくとも一部の表示情報を前記第2表示部内に表示する第1位置を決定し、前記表示情報を、前記第2表示部内の前記第1位置に表示した後、前記表示情報を、前記第2表示部内の前記第1位置から第2位置まで表示しながら移動させる処理部と、 Based on the direction in which the user's line of sight moves from the first display unit to the second display unit when the line-of-sight direction of the user detected by the line-of-sight detection unit moves from the first display unit to the second display unit. Therefore, a first position for displaying at least a part of the display information displayed on the first display unit in the second display unit is determined, and the display information is displayed on the second display unit. A processing unit that moves the display information while displaying it from the first position to the second position in the second display unit after displaying it at the first position.
を備える情報表示装置。An information display device comprising.
JP2016225835A 2016-11-21 2016-11-21 Information display method and information display device Active JP6917697B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2016225835A JP6917697B2 (en) 2016-11-21 2016-11-21 Information display method and information display device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2016225835A JP6917697B2 (en) 2016-11-21 2016-11-21 Information display method and information display device

Publications (2)

Publication Number Publication Date
JP2018083441A JP2018083441A (en) 2018-05-31
JP6917697B2 true JP6917697B2 (en) 2021-08-11

Family

ID=62236607

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2016225835A Active JP6917697B2 (en) 2016-11-21 2016-11-21 Information display method and information display device

Country Status (1)

Country Link
JP (1) JP6917697B2 (en)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2020022241A1 (en) * 2018-07-25 2020-01-30 日本精機株式会社 Vehicle display device, control method for vehicle display device, and control program for vehicle display device
JP7196779B2 (en) * 2019-06-11 2022-12-27 株式会社デンソー In-vehicle control system
KR102650436B1 (en) * 2019-07-01 2024-03-26 엘지전자 주식회사 Vehicle control devices and vehicles incorporating them
WO2021014617A1 (en) * 2019-07-24 2021-01-28 三菱電機株式会社 Vehicle display control device, vehicle display device, and vehicle display control method
KR102640693B1 (en) * 2022-03-18 2024-02-26 가부시키가이샤 덴소 Integrated control system for cluster and hud of vehicles

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH106810A (en) * 1996-06-25 1998-01-13 Matsushita Electric Ind Co Ltd Display device for automobile
JP2007141223A (en) * 2005-10-17 2007-06-07 Omron Corp Information processing apparatus and method, recording medium, and program
JP4687521B2 (en) * 2006-03-15 2011-05-25 オムロン株式会社 Display device and method, and program
JP2008013070A (en) * 2006-07-06 2008-01-24 Toyota Motor Corp Vehicular display device
JP2010018201A (en) * 2008-07-11 2010-01-28 Fujitsu Ten Ltd Driver assistant device, driver assistant method, and driver assistant processing program
JP5277974B2 (en) * 2009-01-14 2013-08-28 株式会社デンソー Driving assistance device
JP5198368B2 (en) * 2009-06-18 2013-05-15 本田技研工業株式会社 Image display device for vehicle
JP2012131329A (en) * 2010-12-21 2012-07-12 Mitsubishi Fuso Truck & Bus Corp Display device for vehicle
JP5679449B2 (en) * 2011-07-08 2015-03-04 アルパイン株式会社 In-vehicle system
JP2014211787A (en) * 2013-04-19 2014-11-13 本田技研工業株式会社 Information providing device
JPWO2015025350A1 (en) * 2013-08-19 2017-03-02 三菱電機株式会社 In-vehicle display controller

Also Published As

Publication number Publication date
JP2018083441A (en) 2018-05-31

Similar Documents

Publication Publication Date Title
JP6917697B2 (en) Information display method and information display device
JP5106540B2 (en) In-vehicle information provider
CN104301507B (en) Mobile terminal and control method thereof
US8872639B2 (en) In-vehicle system
US9977243B2 (en) Method for executing vehicle function using wearable device and vehicle for carrying out the same
JP4650349B2 (en) Vehicle display system
US8050858B2 (en) Multiple visual display device and vehicle-mounted navigation system
US9418548B2 (en) Display control device, display control method, non-transitory computer-readable recording medium, and projecting device
JP5098438B2 (en) Information display device
US20210088351A1 (en) Method for calculating an augmented reality (ar) display for displaying a navigation route on an ar display unit, device for carrying out the method, transportation vehicle and computer program
JP2014211787A (en) Information providing device
JP6825433B2 (en) Virtual image display device and computer program
JP7058800B2 (en) Display control device, display control method, and display control program
JP6197218B2 (en) Notification required information presentation device, notification required information presentation method, and notification required information presentation program
JP2010205123A (en) Method, apparatus and program for driving support
JP3968720B2 (en) Image display device for vehicle
JP7099837B2 (en) Display projection device for vehicles
JP2010118024A (en) Display control system, display control method and display control program
KR20150109212A (en) Head-up display device for automobile
JP2013217739A (en) Vehicle driving operation support apparatus
JP6939147B2 (en) Driving information guidance device and computer program
US11842661B2 (en) Control method and information display system
JP3948017B2 (en) Route guidance device, route guidance method, and route guidance program
US20230376123A1 (en) Display system
JP2019023806A (en) Information control device

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20190930

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20200520

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20201013

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20201214

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20210406

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210604

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20210622

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20210720

R150 Certificate of patent or registration of utility model

Ref document number: 6917697

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150