JP5257600B2 - Display control system and display control program - Google Patents

Display control system and display control program Download PDF

Info

Publication number
JP5257600B2
JP5257600B2 JP2008292799A JP2008292799A JP5257600B2 JP 5257600 B2 JP5257600 B2 JP 5257600B2 JP 2008292799 A JP2008292799 A JP 2008292799A JP 2008292799 A JP2008292799 A JP 2008292799A JP 5257600 B2 JP5257600 B2 JP 5257600B2
Authority
JP
Japan
Prior art keywords
switching
influence
driver
importance
degree
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2008292799A
Other languages
Japanese (ja)
Other versions
JP2010118024A (en
Inventor
英文 岡部
智之 国立
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Aisin AW Co Ltd
Original Assignee
Aisin AW Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Aisin AW Co Ltd filed Critical Aisin AW Co Ltd
Priority to JP2008292799A priority Critical patent/JP5257600B2/en
Publication of JP2010118024A publication Critical patent/JP2010118024A/en
Application granted granted Critical
Publication of JP5257600B2 publication Critical patent/JP5257600B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Description

本発明は、表示制御システム、及び表示制御プログラムに関する。 The present invention relates to a display control system, and a display control program.

従来、テレビジョン受像機等のAV機器において、画像情報の切り替えから視聴者が受ける不快感を抑制するため、画面に表示中の第1画像情報と、次に表示されるべき第2画像情報とのそれぞれの表示態様を、連続的に又は段階的に変更する画像制御装置が提案されている。この画像制御装置は、画面への表示における優先度を画像情報毎に設定し、第1画像情報と第2画像情報と間で優先度を比較した結果に基づいて切替時間を決定し、第1画像情報と第2画像情報とのそれぞれの表示態様を当該切替時間内に連続的に又は段階的に変更する(例えば、特許文献1参照)。   2. Description of the Related Art Conventionally, in AV equipment such as a television receiver, first image information being displayed on a screen and second image information to be displayed next are displayed in order to suppress discomfort experienced by a viewer from switching of image information. There has been proposed an image control device that changes each display mode continuously or stepwise. The image control apparatus sets a priority for display on the screen for each image information, determines a switching time based on a result of comparing the priorities between the first image information and the second image information, The display modes of the image information and the second image information are changed continuously or stepwise within the switching time (see, for example, Patent Document 1).

特開2008−4083号公報JP 2008-4083 A

ところで、カーナビゲーションやカーオーディオ等の各種車載機器においては、当該車載機器に対する各種の入力操作等に基づいて、自動的に画面を切り替える場合がある。しかしながら、従来のこれらの車載機器や、上記特許文献1や特許文献2に記載の従来の装置は、画面の切り替えに際して、車両の状態や運転者等の状態を何ら考慮していなかった。このため、運転者が車両の周囲に注意を向けるべき状況であるにも関わらず、運転者の注意を引いてしまうような切替タイミングや表示形態で画面の切替を行ってしまい、運転者の注意を必要以上に引いてしまう可能性がある等、運転者の利便性等の面から更なる改善の余地があった。   By the way, in various in-vehicle devices such as car navigation and car audio, the screen may be automatically switched based on various input operations to the in-vehicle device. However, these conventional in-vehicle devices and the conventional devices described in Patent Document 1 and Patent Document 2 do not consider the state of the vehicle or the driver at all when switching the screen. For this reason, even though the driver should pay attention to the surroundings of the vehicle, the screen is switched at the switching timing and display form that draws the driver's attention, and the driver's attention There is room for further improvement in terms of convenience for the driver, such as the possibility of pulling more than necessary.

本発明は、上記に鑑みてなされたものであって、運転者に対して適切な切替を行うことができる態様で、出力の切替を行うことができる、表示制御システム、及び表示制御プログラムを提供することを目的とする。 The present invention was made in view of the above, in a manner that can perform appropriate switching to the driver, it is possible to perform the switching of the output, the display control system, and a display control program The purpose is to provide.

上述した課題を解決し、目的を達成するために、請求項1に記載の表示制御システムは、車両に設置された表示手段の出力の切替を行う表示制御システムであって、前記切替後に前記表示手段が出力する情報の重要度を取得する重要度取得手段と、前記車両の現在位置が含まれる領域に設定されている注意レベルと、前記切替に関する運転者の操作状態とに基づいて、前記切替を行うタイミングにおける当該切替が前記運転者の注意を引く度合いを示す影響度を特定する影響度特定手段と、前記重要度と前記影響度とに基づいて、前記切替の態様を決定する切替態様決定手段とを備えることを特徴とする。
ことを特徴とする。
In order to solve the above-described problems and achieve the object, the display control system according to claim 1 is a display control system for switching an output of a display unit installed in a vehicle, and the display is performed after the switching. Based on the importance level acquisition means for acquiring the importance level of the information output by the means, the attention level set in the area including the current position of the vehicle, and the operation state of the driver regarding the switching Switching mode determination that determines the mode of switching based on the degree of importance and the degree of influence, and influence degree specifying means for specifying the degree of influence indicating that the switching at the timing of performing the driver's attention Means.
It is characterized by that.

また、請求項2に記載の表示制御システムは、請求項1に記載の表示制御システムにおいて、前記注意レベルと、前記運転者の操作状態と、前記影響度とを相互に関連付けて格納する影響度マップを備え、前記影響度特定手段は、前記注意レベルと前記運転者の操作状態とに基づいて、前記影響度を前記影響度マップから取得することを特徴とする。 Further, the display control system according to claim 2 is the display control system according to claim 1 , wherein the influence level stores the caution level, the operation state of the driver, and the influence degree in association with each other. A map is provided, and the influence degree specifying means acquires the influence degree from the influence degree map based on the attention level and the operation state of the driver .

また、請求項3に記載の表示制御システムは、請求項1又は2に記載の表示制御システムにおいて、前記重要度と、前記影響度と、前記切替の態様とを相互に関連付けて格納する制御テーブルを備え、前記切替態様決定手段は、前記重要度と前記影響度とに基づいて、前記切替の態様を前記制御テーブルから取得することを特徴とする。 The display control system according to claim 3 is a control table that stores the importance, the influence, and the switching mode in association with each other in the display control system according to claim 1 or 2. The switching mode determining means acquires the switching mode from the control table based on the importance and the influence .

請求項4に記載の表示制御システムは、車両に設置された表示手段の出力の切替を行う表示制御システムであって、前記切替後に前記表示手段が出力する情報の重要度を取得する重要度取得手段と、前記車両の現在位置が含まれる領域に設定されている注意レベルと、前記表示手段に対する前記運転者の視野情報とに基づいて、前記切替を行うタイミングにおける当該切替が運転者の注意を引く度合いを示す影響度を特定する影響度特定手段と、前記重要度と前記影響度とに基づいて、前記切替の態様を決定する切替態様決定手段とを備えることを特徴とする。 The display control system according to claim 4 is a display control system that switches an output of a display unit installed in a vehicle, and acquires an importance level of information output by the display unit after the switching. Based on the means, the attention level set in the region including the current position of the vehicle, and the visual field information of the driver with respect to the display means, It is characterized by comprising an influence degree specifying means for specifying an influence degree indicating the degree of drawing, and a switching aspect determining means for determining the switching aspect based on the importance and the influence degree .

また、請求項5に記載の表示制御プログラムは、コンピュータに、車両に設置された表示手段の出力の切替を行わせる表示制御プログラムであって、前記切替後に前記表示手段が出力する情報の重要度を取得する重要度取得ステップと、前記車両の現在位置が含まれる領域に設定されている注意レベルと、前記切替に関する運転者の操作状態とに基づいて、前記切替を行うタイミングにおける当該切替が前記運転者の注意を引く度合いを示す影響度を特定する影響度特定ステップと、前記重要度と前記影響度とに基づいて、前記切替の態様を決定する切替態様決定ステップとを前記コンピュータに実行させることを特徴とする。 The display control program according to claim 5, the computer, a display control program causes I line switches the output of the display unit installed in the vehicle, key information that the display means is outputted after the switching The switching at the timing of performing the switching is performed based on the importance acquisition step of acquiring the degree, the attention level set in the region including the current position of the vehicle, and the operation state of the driver regarding the switching. The computer executes an influence degree specifying step for specifying an influence degree indicating a degree of attention of the driver, and a switching aspect determining step for determining the switching aspect based on the importance degree and the influence degree. It is characterized by making it .

また、請求項6に記載の表示制御プログラムは、コンピュータに、車両に設置された表示手段の出力の切替を行わせる表示制御プログラムであって、前記切替後に前記表示手段が出力する情報の重要度を取得する重要度取得ステップと、前記車両の現在位置が含まれる領域に設定されている注意レベルと、前記表示手段に対する運転者の視野情報とに基づいて、前記切替を行うタイミングにおける当該切替が前記運転者の注意を引く度合いを示す影響度を特定する影響度特定ステップと、前記重要度と前記影響度とに基づいて、前記切替の態様を決定する切替態様決定ステップとを前記コンピュータに実行させることを特徴とする。 The display control program according to claim 6 is a display control program for causing a computer to switch the output of the display means installed in the vehicle, and the importance of the information output by the display means after the switching Based on the importance level acquisition step for acquiring the vehicle level, the attention level set in the region including the current position of the vehicle, and the driver's visual field information for the display means, The computer executes an influence degree specifying step for specifying an influence degree indicating a degree of attention of the driver, and a switching aspect determining step for determining the switching aspect based on the importance degree and the influence degree. It is characterized by making it.

請求項1に記載の表示制御システム、及び請求項5に記載の表示制御プログラムによれば、切替後に表示手段が出力する情報の重要度と、出力の切替が運転者に与える影響度とに基づいて切替の態様を決定するので、切替後に表示手段が出力する情報の重要度に加えて、車両の状態や運転者の状態によって異なる影響度を考慮した切替態様にて出力の切替を行うことができ、運転者に対して適切な切替を行うことができる態様で、出力の切替を行うことができる。
また、影響度特定手段は、車両の現在位置が含まれる領域に設定されている注意レベルに基づいて出力の切替が運転者に与える影響度を特定するので、車両が走行する際に必要な注意のレベルによって異なる影響度を考慮した切替態様にて出力を切り替えることができる。
また、影響度特定手段は、切替に関する運転者の操作状態に基づいて出力の切替が運転者に与える影響度を特定するので、運転者の操作の種類や有無によって異なる影響度を考慮した切替態様にて出力を切り替えることができる。
According to the display control system according to claim 1 and the display control program according to claim 5 , based on the importance of the information output by the display means after switching and the degree of influence of the switching of the output on the driver. Therefore, in addition to the importance of the information output by the display means after switching, the output can be switched in a switching mode that takes into account the degree of influence that varies depending on the state of the vehicle and the state of the driver. The output can be switched in such a manner that the driver can perform appropriate switching.
In addition, since the influence degree specifying means specifies the degree of influence that the output switching has on the driver based on the attention level set in the region including the current position of the vehicle, the attention necessary when the vehicle travels. The output can be switched in a switching mode that takes into consideration the degree of influence that varies depending on the level of the output.
Further, since the influence degree specifying means specifies the degree of influence that the output switching has on the driver based on the operation state of the driver regarding the switching, the switching mode that takes into consideration the degree of influence that varies depending on the type and presence of the driver's operation. The output can be switched with.

請求項に記載の表示制御システム、及び請求項6に記載の表示制御プログラムによれば、切替後に表示手段が出力する情報の重要度と、出力の切替が運転者に与える影響度とに基づいて切替の態様を決定するので、切替後に表示手段が出力する情報の重要度に加えて、車両の状態や運転者の状態によって異なる影響度を考慮した切替態様にて出力の切替を行うことができ、運転者に対して適切な切替を行うことができる態様で、出力の切替を行うことができる。
また、影響度特定手段は、車両の現在位置が含まれる領域に設定されている注意レベルに基づいて出力の切替が運転者に与える影響度を特定するので、車両が走行する際に必要な注意のレベルによって異なる影響度を考慮した切替態様にて出力を切り替えることができる。
また、影響度特定手段は、表示手段に対する運転者の視野情報に基づいて出力の切替が運転者に与える影響度を特定するので、運転者の視野における表示手段の位置によって異なる影響度を考慮した切替態様にて出力を切り替えることができる。
According to the display control system according to claim 4 and the display control program according to claim 6 , based on the importance of the information output by the display means after switching and the degree of influence of the switching of the output on the driver. Therefore, in addition to the importance of the information output by the display means after switching, the output can be switched in a switching mode that takes into account the degree of influence that varies depending on the state of the vehicle and the state of the driver. The output can be switched in such a manner that the driver can perform appropriate switching.
In addition, since the influence degree specifying means specifies the degree of influence that the output switching has on the driver based on the attention level set in the region including the current position of the vehicle, the attention necessary when the vehicle travels. The output can be switched in a switching mode that takes into consideration the degree of influence that varies depending on the level of the output.
Further, since the influence degree specifying means specifies the influence degree that the output switching has on the driver based on the driver's visual field information on the display means, the influence degree that varies depending on the position of the display means in the driver's visual field is considered. The output can be switched in the switching mode.

以下、本発明に係る表示制御システム、及び表示制御プログラムの各実施の形態について図面を参照しつつ詳細に説明する。ただし、各実施の形態によって本発明が限定されるものではない。 Hereinafter, embodiments of a display control system and a display control program according to the present invention will be described in detail with reference to the drawings. However, the present invention is not limited to each embodiment.

〔実施の形態1〕
最初に、実施の形態1について説明する。この形態は、切替に関する運転者の操作状態に基づいて切替が運転者に与える影響度を特定する形態である。
[Embodiment 1]
First, the first embodiment will be described. In this form, the degree of influence that the switching has on the driver is specified based on the operation state of the driver regarding the switching.

(構成)
図1は、実施の形態1に係る表示制御システムを例示するブロック図である。この表示制御システム1は、車両に搭載されるシステムであって、視野検知部10、操作部20、車速センサ30、照度センサ40、現在地検出処理部50、モニタ60、インストルメント・パネル(以下「パネル」)70、及び表示制御装置80を備えている。
(Constitution)
FIG. 1 is a block diagram illustrating a display control system according to the first embodiment. The display control system 1 is a system mounted on a vehicle, and includes a visual field detection unit 10, an operation unit 20, a vehicle speed sensor 30, an illuminance sensor 40, a current location detection processing unit 50, a monitor 60, an instrument panel (hereinafter referred to as “an instrument panel”). Panel ") 70 and a display control device 80.

(構成−視野検知部)
視野検知部10は、モニタ60やパネル70に対する使用者(車両の運転者や、当該車両におけるその他の同乗者。以下同じ)の視野情報を取得する視野情報取得手段である。視野情報とは、使用者の視野範囲を特定するための情報であり、当該視野情報に基づき、使用者の視野におけるモニタ60やパネル70の位置を特定し、当該使用者がモニタ60やパネル70を見ているか否か、あるいは見ていないが視野内にモニタ60やパネル70が存在しているか否かを特定することができる。視野検知部10の具体的な構成は任意であり、例えば、使用者の眼球をカメラで撮影し、車内に設置した点光源の角膜表面における反射像(角膜反射像)と瞳孔との位置関係に基づき視線を特定する方法(角膜反射法)を用いた手段等、公知の視線検知手段を用いて視線を検知し、当該視線を中心とした所定の範囲を視野範囲として特定することができる。この視野検知部10は、例えば、車両の各座席毎に設けられており、各座席に座っている使用者の視野をそれぞれ検知する。
(Configuration-visual field detector)
The visual field detection unit 10 is visual field information acquisition means for acquiring visual field information of a user (a vehicle driver and other passengers in the vehicle, the same applies hereinafter) for the monitor 60 and the panel 70. The visual field information is information for specifying the visual field range of the user. Based on the visual field information, the position of the monitor 60 and the panel 70 in the user's visual field is specified, and the user uses the monitor 60 and the panel 70. Whether or not the monitor 60 or the panel 70 exists in the field of view can be specified. The specific configuration of the visual field detection unit 10 is arbitrary. For example, the user's eyeball is photographed by a camera, and the positional relationship between the reflection image (corneal reflection image) of the point light source installed in the vehicle and the pupil is determined. It is possible to detect a line of sight using a known line-of-sight detection unit such as a unit using a method for identifying the line of sight (corneal reflection method), and specify a predetermined range centered on the line of sight as the visual field range. The visual field detection unit 10 is provided for each seat of the vehicle, for example, and detects the visual field of the user sitting in each seat.

(構成−操作部)
操作部20は、モニタ60やパネル70の出力に関連する使用者からの操作入力を受け付ける操作手段である。この操作部20が受け付ける操作の具体的な内容としては、例えば、経路案内の目的地の設定やオーディオ機器の操作等、操作内容に対応する内容の情報が直接モニタ60やパネル70に出力される操作の他、ヘッドライトの点灯状態に基づいてパネル70のバックライト点灯状態が調整される場合における当該ヘッドライトに対する操作等、操作内容が間接的にモニタ60やパネル70の出力に反映される操作が含まれる。
(Configuration-operation unit)
The operation unit 20 is an operation unit that receives an operation input from a user related to the output of the monitor 60 or the panel 70. As specific contents of the operation received by the operation unit 20, for example, information on contents corresponding to the operation contents such as setting of a route guidance destination and operation of an audio device is directly output to the monitor 60 and the panel 70. In addition to operations, operations such as operations on the headlight when the backlight lighting state of the panel 70 is adjusted based on the lighting state of the headlight, etc., operations that are indirectly reflected in the output of the monitor 60 or the panel 70 Is included.

(構成−車速センサ)
車速センサ30は、車輪の回転速度等を表示制御装置80に出力するものであり、公知の車速センサを用いることができる。
(Configuration-vehicle speed sensor)
The vehicle speed sensor 30 outputs wheel rotation speed and the like to the display control device 80, and a known vehicle speed sensor can be used.

(構成−照度センサ)
照度センサ40は、車外、あるいはモニタ60周辺等の車内の照度を検出して表示制御装置80に出力するものであり、公知の照度センサを用いることができる。
(Configuration-Illuminance sensor)
The illuminance sensor 40 detects the illuminance inside the vehicle outside the vehicle or around the monitor 60 and outputs the detected illuminance to the display control device 80, and a known illuminance sensor can be used.

(構成−現在地検出処理部)
現在地検出処理部50は、表示制御装置80が取り付けられた車両の現在位置を検出する現在位置検出手段である。具体的には、現在地検出処理部50は、GPS、地磁気センサ、距離センサ、又はジャイロセンサ(いずれも図示省略)の少なくとも一つを有し、現在の車両の位置(座標)及び方位等を公知の方法にて検出する。
(Configuration-Current location detection processing unit)
The current position detection processing unit 50 is current position detection means for detecting the current position of the vehicle to which the display control device 80 is attached. Specifically, the current location detection processing unit 50 has at least one of a GPS, a geomagnetic sensor, a distance sensor, and a gyro sensor (all of which are not shown) and knows the current vehicle position (coordinates), direction, and the like. The method is detected.

(構成−モニタ)
モニタ60は、経路案内情報や警告情報等の各種の情報を表示するためのものであり、公知の液晶ディスプレイや有機ELディスプレイの如きフラットパネルディスプレイ、又は車両のフロントガラスにホログラムを投影するホログラム装置等を使用することができる。
(Configuration-Monitor)
The monitor 60 is for displaying various types of information such as route guidance information and warning information, and is a known flat panel display such as a liquid crystal display or an organic EL display, or a hologram device for projecting a hologram onto a vehicle windshield. Etc. can be used.

(構成−パネル)
パネル70は、主に車両の状態に関する情報を表示するための各種機器を備えた表示手段であり、例えば、スピードメータ、タコメータ、燃料計等を備えている。また、トンネル内走行時や夜間走行時における各種計器の視認性確保のためのバックライトを備えており、表示制御装置80の制御に基づいて当該バックライトの輝度が調整される。
(Configuration-Panel)
The panel 70 is a display means including various devices mainly for displaying information related to the state of the vehicle, and includes, for example, a speedometer, a tachometer, a fuel meter, and the like. In addition, a backlight is provided for ensuring the visibility of various instruments when traveling in a tunnel or during night travel, and the brightness of the backlight is adjusted based on the control of the display control device 80.

(構成−表示制御装置)
表示制御装置80は、表示制御を行う装置であり、制御部81、及びデータ記録部82を備えている。
(Configuration-Display control device)
The display control device 80 is a device that performs display control, and includes a control unit 81 and a data recording unit 82.

(構成−表示制御装置−制御部)
制御部81は、表示制御装置80を制御する制御手段であり、具体的には、CPU、当該CPU上で解釈実行される各種のプログラム(OSなどの基本制御プログラムや、OS上で起動され特定機能を実現するアプリケーションプログラムを含む)、及びプログラムや各種のデータを格納するためのRAMの如き内部メモリを備えて構成されるコンピュータである。特に、本実施の形態に係る表示制御プログラムが、任意の記録媒体又はネットワークを介して表示制御装置80にインストールされることで、制御部81の各部を実質的に構成する。
(Configuration-Display control device-Control unit)
The control unit 81 is a control unit that controls the display control device 80. Specifically, the CPU, various programs interpreted and executed on the CPU (a basic control program such as an OS, and a specific program that is activated and specified on the OS). And an internal memory such as a RAM for storing the program and various data. In particular, the display control program according to the present embodiment is installed in the display control device 80 via an arbitrary recording medium or network, so that each unit of the control unit 81 is substantially configured.

この制御部81は、機能概念的に、重要度取得部81a、影響度特定部81b、切替態様決定部81c、及び経路案内部81dを備えている。重要度取得部81aは、モニタ60やパネル70の出力の切替後にモニタ60やパネル70が出力する情報の重要度を取得する重要度取得手段である。影響度特定部81bは、切替を行うタイミングにおける当該切替が運転者に与える影響度を特定する影響度特定手段である。切替態様決定部81cは、重要度と影響度とに基づいて、切替の態様を決定する切替態様決定手段である。経路案内部81dは、出発地から目的地に至る経路を探索し、モニタ60を介して経路案内情報を出力させる経路案内手段である。この経路案内部81dの具体的な経路案内方法としては、カーナビゲーション装置で用いられている公知の方法を用いることができる。これらの制御部81の各構成要素によって実行される処理の詳細については後述する。   The control unit 81 includes an importance level acquisition unit 81a, an influence level specification unit 81b, a switching mode determination unit 81c, and a route guidance unit 81d in terms of functional concept. The importance level acquisition unit 81a is an importance level acquisition unit that acquires the importance level of information output from the monitor 60 or the panel 70 after the output of the monitor 60 or the panel 70 is switched. The influence degree specifying unit 81b is an influence degree specifying unit that specifies the degree of influence of the switching on the driver at the timing of switching. The switching mode determination unit 81c is a switching mode determination unit that determines a switching mode based on the importance level and the influence level. The route guidance unit 81d is route guidance means for searching for a route from the departure point to the destination and outputting route guidance information via the monitor 60. As a specific route guidance method of the route guidance unit 81d, a known method used in a car navigation device can be used. Details of processing executed by each component of the control unit 81 will be described later.

(構成−表示制御装置−データ記録部)
データ記録部82は、表示制御装置80の動作に必要なプログラム及び各種のデータを記録する記録手段であり、例えば、外部記憶装置としてのハードディスク(図示省略)を用いて構成されている。ただし、ハードディスクに代えてあるいはハードディスクと共に、磁気ディスクの如き磁気的記録媒体、又はDVDやブルーレイディスクの如き光学的記録媒体を含む、その他の任意の記録媒体を用いることができる。
(Configuration-Display control device-Data recording unit)
The data recording unit 82 is a recording unit that records a program and various data necessary for the operation of the display control device 80, and is configured using, for example, a hard disk (not shown) as an external storage device. However, any other recording medium including a magnetic recording medium such as a magnetic disk or an optical recording medium such as a DVD or a Blu-ray disk can be used instead of or together with the hard disk.

このデータ記録部82は、重要度データベース(以下、データベースを「DB」と称する)82a、地図情報DB82b、影響度マップ82e、及び制御テーブル82fを備えている。重要度DB82aは、モニタ60やパネル70が出力する情報と、当該情報の使用者にとっての重要度を特定する重要度情報とを、相互に関連付けて格納する重要度情報格納手段である。図2は、重要度DB82aに格納されている情報を例示した図である。図2に示すように、重要度DB82aは、DB項目として項目「出力内容」及び項目「重要度」を含み、これらに対応する情報が相互に対応付けて格納されている。項目「出力内容」に対応して格納される情報は、モニタ60やパネル70が出力する情報や、出力状態を特定する情報であり、例えば各情報や出力状態の名称を格納することができる。図2の例では、情報の名称として「車両接近警告」、出力状態として「モニタ輝度」等が格納されている状態を示す。項目「重要度」に対応して格納される情報は、モニタ60やパネル70が出力する情報や出力状態の重要度を特定する重要度情報であり、例えば当該情報や出力状態が重要であるか否かを示す数値や識別情報を格納することができる。図2に示した例では、重要度が「小」の場合は当該情報や出力状態の重要度が小さく、「中」の場合は重要度が中程度であり、「大」の場合は重要度が大きいことを示している。この重要度の決定方法は任意であるが、例えば、使用者(ここでは特に運転者)に即座に通知する必要性の程度に基づいて決定するこができ、必要性が高い情報(例えば警告情報)は重要度を高く設定し、必要性の低い情報(例えば出力状態)は重要度を低く設定する。   The data recording unit 82 includes an importance database (hereinafter referred to as “DB”) 82a, a map information DB 82b, an influence map 82e, and a control table 82f. The importance DB 82a is importance information storage means for storing information output from the monitor 60 and the panel 70 and importance information for specifying the importance for the user of the information in association with each other. FIG. 2 is a diagram illustrating information stored in the importance DB 82a. As illustrated in FIG. 2, the importance DB 82 a includes items “output contents” and items “importance” as DB items, and information corresponding to these items is stored in association with each other. The information stored corresponding to the item “output content” is information output from the monitor 60 and the panel 70 and information specifying the output state. For example, each information and the name of the output state can be stored. The example of FIG. 2 shows a state in which “vehicle approach warning” is stored as the name of information and “monitor luminance” is stored as the output state. The information stored corresponding to the item “importance” is information output from the monitor 60 and the panel 70 and importance information for specifying the importance of the output state. For example, is the information and the output state important? A numerical value indicating whether or not and identification information can be stored. In the example shown in FIG. 2, when the importance level is “low”, the importance level of the information and the output state is low, when “high” level, the importance level is medium, and when “high” level, the importance level is low. Is large. The importance can be determined by any method. For example, the importance can be determined based on the degree of necessity of prompt notification to the user (in particular, the driver in this case). ) Sets the importance level high, and sets the importance level low for information that is not necessary (for example, output status).

図1に戻り、地図情報DB82bは、地図情報を格納する地図情報格納手段である。「地図情報」は、例えば経路案内部81dが経路を探索したり案内したりするための探索データ及び地図データ等を含んでいると共に、注意レベル情報82cや履歴情報82dを含んで構成されている。この内、注意レベル情報82cは、所定の領域を車両が走行する際に必要な注意のレベルを特定する情報であり、例えば、スクールゾーン、交差点、あるいは事故多発エリア等、運転者が特に注意を払って走行すべき領域について注意レベルを高く設定することができる。この注意レベルの具体的な設定方法は任意であるが、ここでは、後述する図3の横軸に示すように、「1」「2」「3」の数値のいずれかにより設定されている。また、履歴情報82dは、所定の領域を車両が走行した履歴に関する履歴情報82dであり、例えば、道路の走行頻度や目的地の設定頻度を特定する情報を含んでいる。ただし、走行頻度が高いと想定される所定の名称(例えば「自宅」)で登録されている地点が存在する場合には、当該名称によって履歴情報82dを代替してもよい。   Returning to FIG. 1, the map information DB 82b is map information storage means for storing map information. The “map information” includes, for example, search data and map data for the route guidance unit 81d to search and guide a route, and includes attention level information 82c and history information 82d. . Of these, the attention level information 82c is information that specifies the level of attention required when the vehicle travels in a predetermined area. For example, the driver should pay particular attention to a school zone, an intersection, an accident-prone area, or the like. The attention level can be set high for the area to be paid for. A specific method for setting the attention level is arbitrary, but here, it is set by one of the numerical values “1”, “2”, and “3” as shown on the horizontal axis of FIG. The history information 82d is history information 82d related to the history of the vehicle traveling in a predetermined area, and includes information for specifying the road traveling frequency and the destination setting frequency, for example. However, when there is a point registered with a predetermined name (for example, “home”) that is assumed to have a high traveling frequency, the history information 82d may be substituted with the name.

影響度マップ82eは、影響度特定部81bが影響度を特定する際に参照するマップである。図3は、影響度マップ82eを例示した図である。図3の例では、影響度マップ82eは、注意レベル情報82cに基づき特定される「注意レベル」を横軸、操作部20を介して取得されたモニタ60やパネル70の出力に関する所定の操作の有無に基づき特定される「操作状態」を縦軸とした場合における、これらの「注意レベル」及び「操作状態」に対応する影響度の大きさを示している。図3に示した例では、横軸「注意レベル」は、注意レベル情報82cにて特定される注意レベルの大きさに対応しており、数値が大きいほど注意レベルが高いことを示している。また、縦軸「操作状態」は、モニタ60やパネル70の出力に関する所定の操作の有無(例えば、ナビ画面を直接変化させる操作の有無、ヘッドライトの操作等の操作内容が間接的にモニタ60やパネル70の出力に反映される操作の有無等)に対応しており、数値が小さいほどモニタ60やパネル70の出力との関連性が高い操作があったことを示している。例えば、「操作状態」の「3」はモニタ60等の出力に関する操作が無かった場合、「2」は間接的にモニタ60等の出力に反映される操作があった場合、「1」はモニタ60等の出力を直接変化させる操作があった場合に、それぞれ対応付けることができる。ここでは省略しているが、実際には、各操作と操作状態とを相互に関連付けて構成された操作状態テーブルをデータ記録部82に格納しておき、運転者による操作があった場合には、この操作に対応する操作状態を操作状態テーブルから取得するようにしてもよい。   The influence degree map 82e is a map that is referred to when the influence degree specifying unit 81b specifies the influence degree. FIG. 3 is a diagram illustrating an influence map 82e. In the example of FIG. 3, the influence map 82 e indicates the “attention level” specified based on the attention level information 82 c on the horizontal axis and the predetermined operation related to the output of the monitor 60 or the panel 70 acquired via the operation unit 20. When the “operation state” specified based on the presence / absence is on the vertical axis, the degree of influence corresponding to these “attention level” and “operation state” is shown. In the example illustrated in FIG. 3, the horizontal axis “attention level” corresponds to the size of the attention level specified by the attention level information 82 c, and the larger the numerical value, the higher the attention level. Further, the vertical axis “operation state” indicates that the presence or absence of a predetermined operation relating to the output of the monitor 60 or the panel 70 (for example, the presence or absence of an operation that directly changes the navigation screen, the operation content such as the operation of the headlight, etc. indirectly. And the presence or absence of an operation reflected in the output of the panel 70), the smaller the numerical value, the higher the relevance with the output of the monitor 60 or the panel 70 is. For example, “3” of “operation state” indicates that there is no operation related to the output of the monitor 60 or the like, “2” indicates that an operation is indirectly reflected in the output of the monitor 60 or the like, and “1” indicates that the monitor 60 When there is an operation for directly changing the output such as 60, it can be associated with each other. Although omitted here, in practice, an operation state table configured by associating each operation with the operation state is stored in the data recording unit 82, and when there is an operation by the driver, The operation state corresponding to this operation may be acquired from the operation state table.

これらの「注意レベル」及び「操作状態」を特定することで、対応する影響度を特定することができる。例えば、図3において「注意レベル」及び「操作状態」が共に「1」の場合、影響度は「小」である。これは、運転者が特に高い注意を払う必要が無い領域を走行している場合はモニタ60等を見る余裕を運転者が有している状況であり、モニタ60等の出力を直接変化させる操作を運転者が行った場合は出力の切替が発生することを運転者自身が予測していると考えられることから、モニタ60等の出力の切替が運転者に与える影響が小さいことを示している。   By specifying these “attention level” and “operation state”, the corresponding degree of influence can be specified. For example, when “attention level” and “operation state” are both “1” in FIG. 3, the degree of influence is “small”. This is a situation in which the driver has room to view the monitor 60 or the like when driving in an area where the driver does not need to pay particularly high attention, and an operation for directly changing the output of the monitor 60 or the like. When the driver performs the operation, it is considered that the driver himself predicts that the output switching will occur, indicating that the influence of the output switching of the monitor 60 or the like on the driver is small. .

図1に戻り、制御テーブル82fは、切替態様決定部81cがモニタ60等の出力の切替態様を決定する際に参照するためのものである。図4は、制御テーブル82fに格納されている情報を例示した図である。図4に示したように、制御テーブル82fは、テーブル項目として項目「影響度」及び項目「重要度」を備え、これらの「影響度」や「重要度」のレベル(図4の例では、「影響度」及び「重要度」のそれぞれについて「大」「中」「小」)に対応する切替態様を特定する情報(図4の例では、「即時」及び「スロー」)が格納されている。この切替態様を特定する情報の意味については後述する。   Returning to FIG. 1, the control table 82 f is used for reference when the switching mode determining unit 81 c determines the switching mode of the output of the monitor 60 or the like. FIG. 4 is a diagram illustrating information stored in the control table 82f. As shown in FIG. 4, the control table 82 f includes items “impact” and item “importance” as table items, and the levels of these “impact” and “importance” (in the example of FIG. 4, Information for specifying the switching mode corresponding to “large”, “medium”, and “small” for each of “influence” and “importance” (“immediate” and “slow” in the example of FIG. 4) is stored. Yes. The meaning of the information specifying this switching mode will be described later.

(処理)
このように構成される表示制御システム1によって実行される表示切替処理について説明する。図5は表示切替処理のフローチャートである(以下の各処理の説明ではステップを「S」と略記する)。この表示切替処理は、表示制御システム1への電源投入後に自動的に起動される。この電源投入後、切替態様決定部81cは、所定の表示切替タイミングが到来したか否かを監視する(SA1)。具体的には、切替態様決定部81cは、車両の位置、車速等の車両状態、周囲を監視するセンサからの障害物情報、あるいは公知の図示しないタイマが計時している時間等に基づき、表示切替タイミングが到来したか否かを判定する。
(processing)
A display switching process executed by the display control system 1 configured as described above will be described. FIG. 5 is a flowchart of the display switching process (in the following description of each process, step is abbreviated as “S”). This display switching process is automatically activated after the display control system 1 is powered on. After the power is turned on, the switching mode determining unit 81c monitors whether or not a predetermined display switching timing has arrived (SA1). Specifically, the switching mode determination unit 81c displays based on the vehicle position such as the vehicle position, the vehicle speed, obstacle information from a sensor for monitoring the surroundings, or a time measured by a known timer (not shown). It is determined whether or not the switching timing has arrived.

例えば、公知の車間センサや障害物センサによって自車両が他の車両や障害物に接近したものと判定された場合、切替態様決定部81cは、モニタ60の出力やパネル70の警告灯を、車両接近警告や障害物接近警告を行う表示内容に切り替える表示切替タイミングが到来したものと判定する。   For example, when it is determined by a known inter-vehicle sensor or obstacle sensor that the host vehicle has approached another vehicle or obstacle, the switching mode determining unit 81c uses the output of the monitor 60 or the warning light on the panel 70 as the vehicle. It is determined that a display switching timing for switching to display contents for performing an approach warning or an obstacle approach warning has arrived.

また、経路案内部81dが経路案内情報をモニタ60に出力させている場合において、現在地検出処理部50が検出した車両の現在位置に基づき、車両が交差点に接近したものと経路案内部81dが判定した場合には、一般の地図表示から交差点拡大図にモニタ60の出力を切り替える旨の指示を経路案内部81dが切替態様決定部81cに対して行うことにより、切替態様決定部81cは表示切替タイミングが到来したものと判定する。また、車両が県境を通過したものと経路案内部81dが判定した場合には、県境通過を示す案内情報を一般の地図表示に重畳表示させるように、モニタ60の出力を切り替える旨の指示を経路案内部81dが切替態様決定部81cに対して行うことにより、切替態様決定部81cは表示切替タイミングが到来したものと判定する。   When the route guidance unit 81d outputs the route guidance information to the monitor 60, the route guidance unit 81d determines that the vehicle has approached the intersection based on the current position of the vehicle detected by the current location detection processing unit 50. In this case, when the route guidance unit 81d instructs the switching mode determination unit 81c to switch the output of the monitor 60 from the general map display to the enlarged intersection view, the switching mode determination unit 81c performs the display switching timing. Is determined to have arrived. In addition, when the route guidance unit 81d determines that the vehicle has passed the prefectural border, an instruction to switch the output of the monitor 60 is displayed so that guidance information indicating the prefectural border passage is superimposed on a general map display. When the guidance unit 81d performs the switching mode determination unit 81c, the switching mode determination unit 81c determines that the display switching timing has arrived.

また、照度センサ40によって検出された車外の照度に基づいてヘッドライトの点灯状態が自動的に変更された場合、あるいは操作部20を介して運転者がヘッドライトの点灯状態を変更する操作入力を行った場合、切替態様決定部81cは、モニタ60やパネル70の輝度をヘッドライトの点灯状態に対応した輝度に切り替える表示切替タイミングが到来したものと判定する。   Further, when the lighting state of the headlight is automatically changed based on the illuminance outside the vehicle detected by the illuminance sensor 40, or the driver inputs an operation input for changing the lighting state of the headlight via the operation unit 20. If so, the switching mode determination unit 81c determines that the display switching timing for switching the luminance of the monitor 60 or the panel 70 to the luminance corresponding to the lighting state of the headlight has arrived.

さらに、視野検知部10によって検知された運転者の視野に関する情報(例えば運転者の瞬きの回数や時間、あるいは瞳孔径等)に基づいて、当該運転者の疲労度を特定する公知の方法に基づき、運転者の疲労度の変化が検出された場合、切替態様決定部81cは、モニタ60に表示されているフォントの大きさ、線の太さ、あるいはモニタ60の配色等を運転者の疲労度に対応した状態に切り替える表示切替タイミングが到来したものと判定する。   Further, based on information relating to the driver's visual field detected by the visual field detection unit 10 (for example, the number and time of blinks of the driver, the pupil diameter, etc.), based on a known method for identifying the degree of fatigue of the driver. When a change in the driver's fatigue level is detected, the switching mode determination unit 81c changes the font size, line thickness, or color scheme of the monitor 60 displayed on the monitor 60 to the driver's fatigue level. It is determined that the display switching timing for switching to the state corresponding to is reached.

また、カーオーディオやカーエアコン等の車載機器に対して操作部20を介して使用者が所定の操作入力を行った場合、切替態様決定部81cは、この操作入力に対応するガイダンス等にモニタ60の出力を切り替える表示切替タイミングが到来したものと判定する。   In addition, when the user inputs a predetermined operation input to an in-vehicle device such as a car audio or a car air conditioner via the operation unit 20, the switching mode determination unit 81c displays a monitor 60 for guidance or the like corresponding to the operation input. It is determined that the display switching timing for switching the output has arrived.

上記の如き判定基準に基づき表示切替タイミングが到来したものと判定した場合(SA1、Yes)、重要度取得部81aは、表示切替後にモニタ60やパネル70が出力する情報や出力状態に対応する重要度を重要度DB82aから取得する(SA2)。   When it is determined that the display switching timing has arrived based on the determination criteria as described above (SA1, Yes), the importance level acquisition unit 81a is important to respond to information and output state output by the monitor 60 and the panel 70 after display switching. The degree is acquired from the importance DB 82a (SA2).

続いて、影響度特定部81bは、地図情報DB82bから取得した注意レベル情報82cに基づいて、現在地検出処理部50にて検出された車両の現在位置が含まれる領域に設定されている注意レベルを取得する(SA3)。さらに、影響度特定部81bは、操作部20を介してモニタ60やパネル70の出力に関する所定の操作の有無を判定し、この操作の有無に対応する操作状態を取得する(SA4)。   Subsequently, the influence level specifying unit 81b sets the attention level set in the region including the current position of the vehicle detected by the current location detection processing unit 50 based on the attention level information 82c acquired from the map information DB 82b. Obtain (SA3). Further, the influence degree specifying unit 81b determines the presence / absence of a predetermined operation related to the output of the monitor 60 and the panel 70 via the operation unit 20, and acquires the operation state corresponding to the presence / absence of the operation (SA4).

影響度特定部81bは、影響度マップ82eを参照し、SA3で取得した注意レベルとSA4で取得した操作状態とに基づいて、モニタ60等の出力の切替が運転者に与える影響度を特定する(SA5)。さらに、切替態様決定部81cは、制御テーブル82fを参照し、SA2で重要度取得部81aが取得した重要度と、SA5で影響度特定部81bが特定した影響度とに基づいて切替態様を決定する(SA6)。図4に示した例では、重要度が「大」である場合や影響度が「小」である場合等は、切替態様を「即時」に決定する。また、重要度が「小」であり、且つ影響度が「大」や「中」である場合等は、切替態様を「スロー」に決定する。ここで、切替態様が「即時」とは、表示切替タイミングが到来した時点(厳密にはSA6の処理が終了した時点)で、モニタ60やパネル70の出力内容を切替えることを意味する。また、切替態様が「スロー」とは、「即時」に比べて、出力の切替による運転者への影響を軽減し得る切替態様を意味し、例えば、切替後にモニタ60に表示される画面の透過率を段階的に増加させたり、画面サイズを徐々に拡大したりする。   The influence degree specifying unit 81b refers to the influence degree map 82e, and specifies the degree of influence that the switching of the output of the monitor 60 or the like has on the driver based on the attention level acquired in SA3 and the operation state acquired in SA4. (SA5). Further, the switching mode determining unit 81c refers to the control table 82f, and determines the switching mode based on the importance level acquired by the importance level acquiring unit 81a in SA2 and the influence level specified by the impact level specifying unit 81b in SA5. (SA6). In the example shown in FIG. 4, the switching mode is determined to be “immediate” when the importance is “large” or the influence is “small”. Further, when the importance is “small” and the influence is “large” or “medium”, the switching mode is determined to be “slow”. Here, the switching mode “immediately” means that the output contents of the monitor 60 and the panel 70 are switched when the display switching timing arrives (strictly, when the processing of SA6 ends). In addition, “slow” as the switching mode means a switching mode that can reduce the influence on the driver due to the switching of the output as compared with “immediate”. For example, the screen displayed on the monitor 60 after the switching is transparent. Increase the rate step by step or gradually increase the screen size.

例えば図2に示した例では、例えば表示切替後にモニタ60が交差点拡大図を出力する場合、対応する重要度情報は「1」であり、当該表示切替後の情報の重要度は中程度であることが特定される。また、図3に示した例において、スクールゾーンを走行中の場合等、車両の現在位置に設定されている注意レベルが最も高いレベル(図3における注意レベル=「3」)であり、モニタ60等の出力に関する操作が全く無い操作状態であった場合(図3における操作状態=「3」)、影響度は最も大きいレベルであることが特定される。このような場合、切替態様決定部81cは、重要度が中程度、且つ影響度が大きいことから、切替態様を「スロー」に決定する。あるいは、図3に示した例において、注意レベルが最も低いレベルに設定されている領域を走行中であり(図3における注意レベル=「1」)、ヘッドライトの操作等、モニタ60等の出力に間接的に反映される操作を運転者が行った場合には(図3における操作状態=「2」)、影響度は中程度のレベルであることが特定される。このような場合、切替態様決定部81cは、重要度及び影響度が中程度であることから、切替態様を「即時」に決定する。   For example, in the example shown in FIG. 2, for example, when the monitor 60 outputs an enlarged intersection map after display switching, the corresponding importance information is “1”, and the importance of the information after the display switching is medium. It is specified. Further, in the example shown in FIG. 3, the caution level set at the current position of the vehicle is the highest level (attention level = “3” in FIG. 3), such as when traveling in the school zone, and the monitor 60 If the operation state is such that there is no operation related to the output (operation state = “3” in FIG. 3), the influence level is specified to be the highest level. In such a case, the switching mode determining unit 81c determines that the switching mode is “slow” because the importance level is medium and the influence level is large. Alternatively, in the example shown in FIG. 3, the vehicle is traveling in the region where the attention level is set to the lowest level (attention level = “1” in FIG. 3), and the output of the monitor 60 etc. When the driver performs an operation that is indirectly reflected in the operation state (operation state = “2” in FIG. 3), it is specified that the influence level is a medium level. In such a case, the switching mode determining unit 81c determines that the switching mode is “immediate” because the importance level and the influence level are medium.

図5に戻り、切替態様決定部81cは、SA6で決定した切替態様に基づき、モニタ60やパネル70の切替を開始する(SA7)。そして、切替が完了したか否かを判定し(SA8)、切替が完了していない場合は(SA8、No)、SA3に戻り、影響度特定部81bが車両の現在位置が含まれる領域に設定されている注意レベルを取得する。以降、SA8において出力の切替が完了したと判定されるまで、SA3からSA8の処理を切替が完了するまで繰り返す。なお、SA6で切替態様を「スロー」に決定した場合において、当該「スロー」の切替が完了したと判定される前に、SA3で取得された注意レベルやSA4で取得された操作状態が変化し、SA5にて特定された影響度が変化して、SA6で切替の態様が「即時」に決定された場合は、当該「即時」の切替態様にて出力の切替を行う(SA7)。   Returning to FIG. 5, the switching mode determining unit 81c starts switching the monitor 60 and the panel 70 based on the switching mode determined in SA6 (SA7). Then, it is determined whether or not the switching has been completed (SA8). If the switching has not been completed (SA8, No), the process returns to SA3, and the influence level specifying unit 81b is set to an area including the current position of the vehicle. Get the attention level being. Thereafter, the processes from SA3 to SA8 are repeated until the switching is completed until it is determined in SA8 that the output switching is completed. When the switching mode is determined to be “slow” in SA6, the attention level acquired in SA3 and the operation state acquired in SA4 change before it is determined that the switching of “slow” is completed. When the influence degree specified in SA5 changes and the switching mode is determined to be “immediate” in SA6, the output is switched in the “immediate” switching mode (SA7).

例えば、車両がスクールゾーン等の特に注意を払って走行すべき領域を走行しており(図3における注意レベル=「3」)、且つ運転者がモニタ60の輝度を変更させる操作を行った場合(図3における操作状態=「1」)について説明する。この場合、図2に示す重要度DB82aにより、表示切替後の情報の重要度が最も小さいレベルであるとともに、図3に示す影響度マップ82eにより、影響度が最も大きいレベルであることが特定される。従って、図4に示す制御テーブル82fに基づいて、切替態様は「スロー」に決定される。この決定に基づいてスロー表示切替を行っている途中において、車両がスクールゾーン等を抜けて特に注意を要しない領域に入った場合(図3における注意レベル=「1」)、図3に示す影響度マップ82eにより、影響度は最も小さいレベルとなるため、図4に示す制御テーブルに基づいて、切替態様が「即時」に決定される。この場合は、スロー表示切替を中断して即時表示切替を行う。これにより、運転者が車両の周囲に注意を向けるべき状況から、モニタを見る余裕を運転者が有している状況に変わった場合に、出力を極力迅速に切り替えることができる。   For example, when the vehicle is traveling in an area to be traveled with particular attention, such as a school zone (attention level = “3” in FIG. 3), and the driver performs an operation to change the brightness of the monitor 60 (Operation state in FIG. 3 = “1”) will be described. In this case, the importance DB 82a shown in FIG. 2 specifies that the importance of the information after display switching is the lowest level, and the influence map 82e shown in FIG. 3 specifies that the level of influence is the highest. The Accordingly, the switching mode is determined to be “slow” based on the control table 82f shown in FIG. In the middle of switching the slow display based on this determination, if the vehicle exits the school zone or the like and enters an area that does not require special attention (attention level = “1” in FIG. 3), the effects shown in FIG. Since the degree of influence becomes the smallest level by the degree map 82e, the switching mode is determined as “immediate” based on the control table shown in FIG. In this case, the slow display switching is interrupted and the immediate display switching is performed. As a result, when the driver changes from a situation where the driver should pay attention to the surroundings of the vehicle to a situation where the driver has a margin to view the monitor, the output can be switched as quickly as possible.

図5に戻り、モニタ60やパネル70の出力の切替が完了したと判定した場合(SA8、Yes)、SA1に戻り、切替態様決定部81cは、所定の表示切替タイミングが到来したか否かを監視する(SA1)。以降、同様にSA1からSA8までの処理を繰り返す。   Returning to FIG. 5, when it is determined that the output switching of the monitor 60 or the panel 70 has been completed (SA8, Yes), the process returns to SA1, and the switching mode determination unit 81c determines whether or not a predetermined display switching timing has arrived. Monitor (SA1). Thereafter, the processing from SA1 to SA8 is similarly repeated.

(効果)
このように実施の形態1によれば、切替後にモニタ60やパネル70が出力する情報の重要度と、出力の切替が運転者に与える影響度とに基づいて切替の態様を決定するので、車両の状態や運転者の状態によって異なる影響度を考慮した切替態様にて出力の切替を行うことができ、運転者に与える影響を低減することができる。
(effect)
As described above, according to the first embodiment, the mode of switching is determined based on the importance of information output from the monitor 60 and the panel 70 after switching and the degree of influence that the switching of output has on the driver. The output can be switched in a switching manner that takes into account the degree of influence that varies depending on the state of the vehicle and the state of the driver, and the influence on the driver can be reduced.

また、影響度特定部81bは、車両の現在位置が含まれる領域に設定されている注意レベルに基づいて出力の切替が運転者に与える影響度を特定するので、車両が走行する際に必要な注意のレベルによって異なる影響度を考慮した切替態様にて出力を切り替えることができる。   In addition, the influence degree specifying unit 81b specifies the degree of influence that the output switching has on the driver based on the attention level set in the region including the current position of the vehicle, and thus is necessary when the vehicle travels. The output can be switched in a switching mode that takes into account different degrees of influence depending on the level of attention.

また、影響度特定部81bは、切替に関する運転者の操作状態に基づいて出力の切替が運転者に与える影響度を特定するので、運転者の操作の種類や有無によって異なる影響度を考慮した切替態様にて出力を切り替えることができる。   Moreover, since the influence specific | specification part 81b pinpoints the influence which the switching of an output has on a driver based on the operation state of the driver regarding switching, the switching which considered the influence which changes with the kind and presence or absence of a driver | operator's operation The output can be switched in a manner.

〔実施の形態2〕
次に、実施の形態2について説明する。この形態は、モニタ60やパネル70に対する運転者の視野情報に基づいて影響度を特定する形態である。なお、実施の形態2及びそれ以降の実施の形態の構成は、特記する場合を除いて、実施の形態1の構成と略同一であり、実施の形態1の構成と略同一の構成についてはこの実施の形態1で用いたものと同一の符号及び/又は名称を必要に応じて付して、その説明を省略する。
[Embodiment 2]
Next, a second embodiment will be described. In this form, the influence degree is specified based on the driver's visual field information with respect to the monitor 60 and the panel 70. The configurations of the second embodiment and the subsequent embodiments are substantially the same as the configurations of the first embodiment unless otherwise specified, and this configuration is substantially the same as the configuration of the first embodiment. The same reference numerals and / or names as those used in Embodiment 1 are attached as necessary, and the description thereof is omitted.

(構成−影響度マップ)
実施の形態2に係る表示制御装置80のデータ記録部82に格納されている影響度マップについて説明する。図6は、影響度マップを例示した図である。図6に示すように、影響度マップは、注意レベル情報82cに基づき特定される「注意レベル」を横軸、視野検知部10を介して取得された運転者の視野情報に基づき特定される「視野」を縦軸とした場合における、これらの「注意レベル」及び「視野」に対応する影響度の大きさを示している。図6に示した例では、縦軸「視野」は、視野情報から特定される運転者の視野範囲におけるモニタ60やパネル70の位置に対応しており、数値が小さいほどモニタ60やパネル70の位置が運転者の視野中心から離れていることを示している。例えば、「視野」の「3」は、運転者の視野の中心近傍にモニタ60やパネル70が位置しており、運転者が当該モニタ60等を見ていると推測される場合、「2」は運転者の視野の周縁部にモニタ60やパネル70が位置しており、運転者が当該モニタ60等を見てはいないが視認可能と推測される場合、「1」は運転者の視野にモニタ60やパネル70が含まれておらず、運転者が当該モニタ60等を視認不可能と推測される場合に、それぞれ対応付けることができる。
(Configuration-Influence map)
The influence map stored in the data recording unit 82 of the display control apparatus 80 according to Embodiment 2 will be described. FIG. 6 is a diagram illustrating an influence map. As shown in FIG. 6, the influence degree map is identified based on the driver's visual field information acquired through the visual field detection unit 10 with the “attention level” identified based on the attention level information 82 c as the horizontal axis. The magnitude of the degree of influence corresponding to these “attention level” and “visual field” when the “visual field” is the vertical axis is shown. In the example illustrated in FIG. 6, the vertical axis “field of view” corresponds to the position of the monitor 60 and the panel 70 in the driver's field of view specified from the field of view information. It shows that the position is far from the driver's visual center. For example, “3” of “field of view” is “2” when the monitor 60 and the panel 70 are located in the vicinity of the center of the driver's field of view and the driver is looking at the monitor 60 and the like. When the monitor 60 and the panel 70 are located in the peripheral part of the driver's field of view and the driver is not looking at the monitor 60 or the like but is estimated to be visible, “1” is in the driver's field of view. When the monitor 60 and the panel 70 are not included and it is estimated that the driver cannot visually recognize the monitor 60 and the like, they can be associated with each other.

これらの「注意レベル」及び「視野」を特定することで、対応する影響度を特定することができる。図6の例では、「注意レベル」及び「視野」が共に「1」の場合、影響度は「小」である。これは、運転者が特に高い注意を払う必要が無い領域を走行している場合はモニタ60等に運転者の注意を必要以上に引くことがなく、運転者はモニタ60等を視野の中で視認することもできないと考えられることから、モニタ60等の出力の切替が運転者に与える影響が小さいことを示している。また、「注意レベル」が「1」で「視野」が「3」の場合も、影響度は「小」である。これは、運転者がモニタ60を既に見ていると考えられることから、モニタ60等の出力の切替が運転者の注意を引くことによる影響度は相対的に低下することを示している。一方、「注意レベル」が「1」で「視野」が「2」の場合、影響度は「中」である。これは、運転者がモニタ60等を見ていないものの、視野の中で当該モニタ60等を視認可能であることから、モニタ60等の出力の切替を行うことによって他の対象からモニタ60等へ運転者の注意を引く可能性があり、当該切替による影響度が相対的に上昇することを示している。   By specifying these “attention level” and “field of view”, the corresponding influence degree can be specified. In the example of FIG. 6, when both “attention level” and “field of view” are “1”, the degree of influence is “small”. This is because when the driver is traveling in an area where it is not particularly necessary to pay high attention, the driver's attention is not drawn to the monitor 60 etc. more than necessary. Since it is considered that it cannot be visually recognized, it indicates that the influence of switching the output of the monitor 60 or the like on the driver is small. Further, when the “attention level” is “1” and the “field of view” is “3”, the influence degree is “small”. This indicates that since the driver is already looking at the monitor 60, the influence of switching the output of the monitor 60 or the like due to the driver's attention is relatively reduced. On the other hand, when the “attention level” is “1” and the “field of view” is “2”, the influence degree is “medium”. This is because although the driver does not look at the monitor 60 or the like, the monitor 60 or the like can be seen in the field of view, so by switching the output of the monitor 60 or the like to another monitor 60 or the like. This indicates that there is a possibility that the driver's attention may be drawn, and the degree of influence due to the switching is relatively increased.

(処理)
次に、実施の形態2に係る表示制御システム1によって実行される表示切替処理について説明する。なお、本実施の形態2における表示切替処理は、以下に説明する内容を除いて実施の形態1で説明した表示切替処理と同様であるので、フローチャートの図示を省略する。
(processing)
Next, display switching processing executed by the display control system 1 according to Embodiment 2 will be described. Since the display switching process in the second embodiment is the same as the display switching process described in the first embodiment except for the contents described below, the flowchart is not shown.

実施の形態1で説明した表示切替処理のSA4において、影響度特定部81bは、視野検知部10を介してモニタ60やパネル70に対する運転者の視野情報を取得する(SA4)。そして、影響度特定部81bは影響度マップを参照し、SA3で取得した注意レベルとSA4で取得した視野情報とに基づいて、モニタ60等の出力の切替が運転者に与える影響度を特定する(SA5)。   In SA4 of the display switching process described in the first embodiment, the influence degree specifying unit 81b acquires the driver's visual field information for the monitor 60 and the panel 70 via the visual field detection unit 10 (SA4). Then, the influence degree specifying unit 81b refers to the influence degree map, and specifies the degree of influence that the switching of the output of the monitor 60 or the like has on the driver based on the attention level acquired in SA3 and the visual field information acquired in SA4. (SA5).

(効果)
このように実施の形態2によれば、影響度特定部81bは、モニタ60やパネル70に対する運転者の視野情報に基づいて出力の切替が運転者に与える影響度を特定するので、運転者の視野におけるモニタ60等の位置によって異なる影響度を考慮した切替態様にて出力を切り替えることができる。
(effect)
As described above, according to the second embodiment, the influence specifying unit 81b specifies the influence that the output switching has on the driver based on the driver's visual field information on the monitor 60 and the panel 70. The output can be switched in a switching mode that takes into account the degree of influence that varies depending on the position of the monitor 60 or the like in the field of view.

〔各実施の形態に対する変形例〕
以上、本発明に係る各実施の形態について説明したが、本発明の具体的な構成及び手段は、特許請求の範囲に記載した各発明の技術的思想の範囲内において、任意に改変及び改良することができる。以下、このような変形例について説明する。
[Modifications to Embodiments]
Although the embodiments of the present invention have been described above, the specific configuration and means of the present invention are arbitrarily modified and improved within the scope of the technical idea of each invention described in the claims. be able to. Hereinafter, such a modification will be described.

(解決しようとする課題や発明の効果について)
まず、発明が解決しようとする課題や発明の効果は、上述の内容に限定されるものではなく、発明の実施環境や構成の細部に応じて異なる可能性があり、上述した課題の一部のみを解決したり、上述した効果の一部のみを奏することがある。
(About problems to be solved and effects of the invention)
First, the problems to be solved by the invention and the effects of the invention are not limited to the above contents, and may vary depending on the implementation environment and details of the configuration of the invention. May be solved, or only some of the effects described above may be achieved.

(スロー表示切替について)
上記の各実施の形態では、切替態様決定部81cが切替態様を「スロー」に決定した場合、切替後にモニタ60に表示される画面の透過率を段階的に減少させたり、画面サイズを徐々に拡大したりすると説明したが、影響度特定部81bに特定された影響度が変化し、切替の態様を「即時」に決定して出力の即時切替を行うまで、出力の切替を開始せず、切替前の画面を継続して表示させてもよい。これにより、例えば車両がスクールゾーン等の特に注意を払って走行すべき領域を走行している場合、当該車両がスクールゾーンから退出して安全な領域に進入するまでは切替を行わず、安全な領域に進入した後に切替を行わせることができる。
(About slow display switching)
In each of the above-described embodiments, when the switching mode determining unit 81c determines the switching mode to be “slow”, the screen transmittance displayed on the monitor 60 after switching is decreased stepwise, or the screen size is gradually increased. Although it has been explained that the influence is specified, the influence degree specified by the influence degree specifying unit 81b is changed, and the output switching is not started until the switching mode is determined to be “immediately” and the output is immediately switched, The screen before switching may be continuously displayed. As a result, for example, when a vehicle is traveling in an area that should be traveled with particular attention, such as a school zone, the vehicle is not switched until the vehicle exits the school zone and enters a safe area. Switching can be performed after entering the area.

(影響度マップについて)
上記の各実施の形態では、「注意レベル」を横軸、「操作状態」又は「視野」を縦軸とした2次元の影響度マップに基づいて影響度特定部81bが影響度を特定すると説明したが、「注意レベル」、「操作状態」、及び「視野」を相互に直交する軸とした3次元の影響度マップに基づいて影響度を特定してもよい。
(About the impact map)
In each of the above embodiments, the influence degree specifying unit 81b specifies the influence degree based on a two-dimensional influence degree map in which “attention level” is the horizontal axis and “operation state” or “field of view” is the vertical axis. However, the influence degree may be specified based on a three-dimensional influence degree map having “attention level”, “operation state”, and “field of view” as axes orthogonal to each other.

また、所定の領域を車両が走行した履歴に関する履歴情報82dに基づいて特定される道路の走行頻度や目的地の設定頻度を影響度マップの軸として設定し、これに基づいて影響度を特定してもよい。これにより、道路の走行頻度等によって異なる影響度を考慮した切替態様にて出力を切り替えることができる。   Also, the road frequency and destination setting frequency specified based on the history information 82d relating to the history of the vehicle traveling in the predetermined area are set as the axes of the influence map, and the influence degree is specified based on this. May be. Thereby, an output can be switched in the switching mode which considered the influence degree which changes with the driving | running | working frequency etc. of a road.

また、運転者の操作状態としては、表示の切替に関する操作状態に基づいて影響度を特定する例を示したが、車両に関する運転者の操作状態を考慮してもよく、例えば、車両の速度やハンドル角度に基づいて影響度を特定してもよい。すなわち、車両の速度と注意レベル又は視野との関係を影響度マップとしてデータ記録部82に記録しておき、表示切替タイミングが到来した時点における車両の速度に基づいて影響度を特定したり、ハンドル角度と注意レベル又は視野との関係を影響度マップとしてデータ記録部82に記録しておき、表示切替タイミングが到来した時点におけるハンドル角度に基づいて影響度を特定してもよい。   In addition, as the driver's operation state, an example in which the degree of influence is specified based on the operation state related to display switching has been shown, but the driver's operation state related to the vehicle may be considered. The degree of influence may be specified based on the handle angle. That is, the relationship between the vehicle speed and the attention level or the field of view is recorded in the data recording unit 82 as an influence degree map, and the influence degree is specified based on the speed of the vehicle at the time when the display switching timing arrives. The relationship between the angle and the attention level or the visual field may be recorded in the data recording unit 82 as an influence degree map, and the influence degree may be specified based on the handle angle at the time when the display switching timing arrives.

(制御テーブルについて)
上記の各実施の形態では、制御テーブルに格納されている切替態様を特定する情報は「即時」及び「スロー」の二種類と説明したが、例えば、これら二種類の全部又は一部を、これら「即時」と「スロー」の間の速度で画面を切り替える「中間」の如き切替態様や「表示OFF」のような切替態様等に代えたり、他の切替態様を加えて三種類以上としてもよい。
(About the control table)
In each of the above embodiments, the information specifying the switching mode stored in the control table has been described as two types of “immediate” and “slow”. For example, all or part of these two types It may be replaced with a switching mode such as “intermediate” that switches the screen at a speed between “immediate” and “slow”, a switching mode such as “display OFF”, or other switching modes may be added to provide three or more types. .

実施の形態1に係る表示制御システムを例示するブロック図である。1 is a block diagram illustrating a display control system according to a first embodiment. 重要度DBに格納されている情報を例示した図である。It is the figure which illustrated the information stored in importance DB. 影響度マップを例示した図である。It is the figure which illustrated the influence degree map. 制御テーブルに格納されている情報を例示した図である。It is the figure which illustrated the information stored in the control table. 表示切替処理のフローチャートである。It is a flowchart of a display switching process. 影響度マップを例示した図である。It is the figure which illustrated the influence degree map.

符号の説明Explanation of symbols

1 表示制御システム
10 視野検知部
20 操作部
30 車速センサ
40 照度センサ
50 現在地検出処理部
60 モニタ
70 パネル
80 表示制御装置
81 制御部
81a 重要度取得部
81b 影響度特定部
81c 切替態様決定部
81d 経路案内部
82 データ記録部
82a 重要度DB
82b 地図情報DB
82c 注意レベル情報
82d 履歴情報
82e 影響度マップ
82f 制御テーブル
DESCRIPTION OF SYMBOLS 1 Display control system 10 Visual field detection part 20 Operation part 30 Vehicle speed sensor 40 Illuminance sensor 50 Present location detection process part 60 Monitor 70 Panel 80 Display control device 81 Control part 81a Importance acquisition part 81b Influence degree specific part 81c Switching mode determination part 81d Path | route Guide part 82 Data recording part 82a Importance DB
82b Map information DB
82c Attention level information 82d History information 82e Influence map 82f Control table

Claims (6)

車両に設置された表示手段の出力の切替を行う表示制御システムであって、
前記切替後に前記表示手段が出力する情報の重要度を取得する重要度取得手段と、
前記車両の現在位置が含まれる領域に設定されている注意レベルと、前記切替に関する運転者の操作状態とに基づいて、前記切替を行うタイミングにおける当該切替が前記運転者の注意を引く度合いを示す影響度を特定する影響度特定手段と、
前記重要度と前記影響度とに基づいて、前記切替の態様を決定する切替態様決定手段と、
を備えることを特徴とする表示制御システム。
A display control system for switching the output of display means installed in a vehicle,
Importance acquisition means for acquiring importance of information output by the display means after the switching;
Based on the attention level set in the region including the current position of the vehicle and the operation state of the driver related to the switching, the switching at the timing of performing the switching indicates the degree of attention of the driver. An impact identification means for identifying the impact,
Switching mode determining means for determining the mode of switching based on the importance and the degree of influence;
A display control system comprising:
前記注意レベルと、前記運転者の操作状態と、前記影響度とを相互に関連付けて格納する影響度マップを備え、
前記影響度特定手段は、前記注意レベルと前記運転者の操作状態とに基づいて、前記影響度を前記影響度マップから取得すること、
を特徴とする請求項1に記載の表示制御システム。
An impact map that stores the caution level, the operation state of the driver, and the impact in association with each other;
The influence degree specifying means acquires the influence degree from the influence degree map based on the attention level and the operation state of the driver;
The display control system according to claim 1.
前記重要度と、前記影響度と、前記切替の態様とを相互に関連付けて格納する制御テーブルを備え、
前記切替態様決定手段は、前記重要度と前記影響度とに基づいて、前記切替の態様を前記制御テーブルから取得すること、
を特徴とする請求項1又は2に記載の表示制御システム。
A control table that stores the degree of importance, the degree of influence, and the mode of switching in association with each other;
The switching mode determination means acquires the switching mode from the control table based on the importance and the influence.
The display control system according to claim 1 or 2.
車両に設置された表示手段の出力の切替を行う表示制御システムであって、
前記切替後に前記表示手段が出力する情報の重要度を取得する重要度取得手段と、
前記車両の現在位置が含まれる領域に設定されている注意レベルと、前記表示手段に対する運転者の視野情報とに基づいて、前記切替を行うタイミングにおける当該切替が前記運転者の注意を引く度合いを示す影響度を特定する影響度特定手段と、
前記重要度と前記影響度とに基づいて、前記切替の態様を決定する切替態様決定手段と、
を備えることを特徴とする表示制御システム。
A display control system for switching the output of display means installed in a vehicle,
Importance acquisition means for acquiring importance of information output by the display means after the switching;
Based on the attention level set in the region including the current position of the vehicle and the visual field information of the driver with respect to the display means, the degree to which the switching at the timing of performing the switching draws the driver's attention. An impact level identifying means for identifying the impact level to be displayed;
Switching mode determining means for determining the mode of switching based on the importance and the degree of influence;
Table示制control system that comprising: a.
コンピュータに、車両に設置された表示手段の出力の切替を行わせる表示制御プログラムであって、
前記切替後に前記表示手段が出力する情報の重要度を取得する重要度取得ステップと、
前記車両の現在位置が含まれる領域に設定されている注意レベルと、前記切替に関する運転者の操作状態とに基づいて、前記切替を行うタイミングにおける当該切替が前記運転者の注意を引く度合いを示す影響度を特定する影響度特定ステップと、
前記重要度と前記影響度とに基づいて、前記切替の態様を決定する切替態様決定ステップと、
を前記コンピュータに実行させることを特徴とする表示制御プログラム。
A display control program for causing a computer to switch the output of display means installed in a vehicle,
An importance level acquisition step of acquiring the importance level of information output by the display means after the switching;
Based on the attention level set in the region including the current position of the vehicle and the operation state of the driver related to the switching, the switching at the timing of performing the switching indicates the degree of attention of the driver. An impact identification step for identifying the impact,
A switching mode determining step for determining the mode of switching based on the importance and the degree of influence;
A display control program for causing a computer to execute
コンピュータに、車両に設置された表示手段の出力の切替を行わせる表示制御プログラムであって、
前記切替後に前記表示手段が出力する情報の重要度を取得する重要度取得ステップと、
前記車両の現在位置が含まれる領域に設定されている注意レベルと、前記表示手段に対する運転者の視野情報とに基づいて、前記切替を行うタイミングにおける当該切替が前記運転者の注意を引く度合いを示す影響度を特定する影響度特定ステップと、
前記重要度と前記影響度とに基づいて、前記切替の態様を決定する切替態様決定ステップと、
を前記コンピュータに実行させることを特徴とする表示制御プログラム。
A display control program for causing a computer to switch the output of display means installed in a vehicle,
An importance level acquisition step of acquiring the importance level of information output by the display means after the switching;
Based on the attention level set in the region including the current position of the vehicle and the visual field information of the driver with respect to the display means, the degree to which the switching at the timing of performing the switching draws the driver's attention. An impact level identifying step for identifying the impact level to be shown;
A switching mode determining step for determining the mode of switching based on the importance and the degree of influence;
A display control program for causing the computer to perform.
JP2008292799A 2008-11-14 2008-11-14 Display control system and display control program Expired - Fee Related JP5257600B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2008292799A JP5257600B2 (en) 2008-11-14 2008-11-14 Display control system and display control program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2008292799A JP5257600B2 (en) 2008-11-14 2008-11-14 Display control system and display control program

Publications (2)

Publication Number Publication Date
JP2010118024A JP2010118024A (en) 2010-05-27
JP5257600B2 true JP5257600B2 (en) 2013-08-07

Family

ID=42305643

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2008292799A Expired - Fee Related JP5257600B2 (en) 2008-11-14 2008-11-14 Display control system and display control program

Country Status (1)

Country Link
JP (1) JP5257600B2 (en)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012098662A (en) * 2010-11-05 2012-05-24 Nec Casio Mobile Communications Ltd Image display device, image display method and image display program
KR102118438B1 (en) * 2013-01-28 2020-06-04 한국전자통신연구원 Head up display apparatus for vehicle and method thereof
JP6443716B2 (en) * 2014-05-19 2018-12-26 株式会社リコー Image display device, image display method, and image display control program
JP2016020212A (en) * 2015-10-21 2016-02-04 株式会社Jvcケンウッド Vehicle information display apparatus, vehicle information display method, and program

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3456291B2 (en) * 1995-03-01 2003-10-14 日産自動車株式会社 Display device for vehicles
JPH09244003A (en) * 1996-03-13 1997-09-19 Toyota Motor Corp Screen controller for vehicle
JP4977525B2 (en) * 2006-05-25 2012-07-18 パナソニック株式会社 Image control apparatus and method, program thereof, and recording medium recording the same

Also Published As

Publication number Publication date
JP2010118024A (en) 2010-05-27

Similar Documents

Publication Publication Date Title
US11449294B2 (en) Display system in a vehicle
US8605009B2 (en) In-vehicle display management system
CN101802886B (en) On-vehicle information providing device
US10147165B2 (en) Display device, control method, program and recording medium
US8700329B2 (en) Navigation apparatus
JP2017056844A (en) Electronic device, image display method, and image display program
JP2013112269A (en) In-vehicle display device
JP2006327481A (en) Display device for vehicle and its method
EP3683668A1 (en) Vehicle display device
JP4753735B2 (en) Car electronics
KR20210113070A (en) Attention-based notifications
KR20140058312A (en) Electronic apparatus for vehicle
JP5257600B2 (en) Display control system and display control program
JP5000590B2 (en) Peripheral information display device and peripheral information display method
JP2012168196A (en) Information display device
JP4858094B2 (en) Display display system
JP2012132789A (en) Vehicular navigation device
JP7352989B2 (en) Driving information processing device and driving information processing program
JP2009250933A (en) Navigation device for vehicle
JP2007280203A (en) Information presenting device, automobile and information presenting method
KR20090032542A (en) Apparatus and method for displaying instrumentboard of vehicle
JP2008157894A (en) Drive support device
JP2019031176A (en) Display device for vehicle
JP6939147B2 (en) Driving information guidance device and computer program
JP2012225751A (en) On-vehicle information terminal

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20110308

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20120725

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20120725

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20120921

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20130327

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20130409

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20160502

Year of fee payment: 3

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

LAPS Cancellation because of no payment of annual fees