JP6095781B2 - 情報提示装置及び情報提示方法 - Google Patents
情報提示装置及び情報提示方法 Download PDFInfo
- Publication number
- JP6095781B2 JP6095781B2 JP2015527112A JP2015527112A JP6095781B2 JP 6095781 B2 JP6095781 B2 JP 6095781B2 JP 2015527112 A JP2015527112 A JP 2015527112A JP 2015527112 A JP2015527112 A JP 2015527112A JP 6095781 B2 JP6095781 B2 JP 6095781B2
- Authority
- JP
- Japan
- Prior art keywords
- presentation
- user
- recognition
- target
- unit
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Classifications
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
- G09G5/36—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory
- G09G5/37—Details of the operation on graphic patterns
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
- G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
- G01C21/26—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
- G01C21/34—Route searching; Route guidance
- G01C21/36—Input/output arrangements for on-board computers
- G01C21/3626—Details of the output of route guidance instructions
- G01C21/365—Guidance using head up displays or projectors, e.g. virtual vehicles or arrows projected on the windscreen or on the road itself
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
- G06F3/013—Eye tracking input arrangements
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/18—Eye characteristics, e.g. of the iris
- G06V40/19—Sensors therefor
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
- G09G5/22—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of characters or indicia using display control signals derived from coded signals representing the characters or indicia, e.g. with a character-code memory
- G09G5/30—Control of display attribute
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0101—Head-up displays characterised by optical features
- G02B2027/014—Head-up displays characterised by optical features comprising information/image processing systems
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0179—Display position adjusting means not related to the information to be displayed
- G02B2027/0187—Display position adjusting means not related to the information to be displayed slaved to motion of at least a part of the body of the user, e.g. head, eye
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
- G06F2203/01—Indexing scheme relating to G06F3/01
- G06F2203/011—Emotion or mood input determined on the basis of sensed human body parameters such as pulse, heart rate or beat, temperature of skin, facial expressions, iris, voice pitch, brain activity patterns
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2320/00—Control of display operating conditions
- G09G2320/08—Arrangements within a display terminal for setting, manually or automatically, display parameters of the display terminal
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2340/00—Aspects of display data processing
- G09G2340/14—Solving problems related to the presentation of information to be displayed
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2380/00—Specific applications
- G09G2380/10—Automotive applications
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Radar, Positioning & Navigation (AREA)
- Remote Sensing (AREA)
- General Engineering & Computer Science (AREA)
- Human Computer Interaction (AREA)
- Automation & Control Theory (AREA)
- Computer Hardware Design (AREA)
- Optics & Photonics (AREA)
- General Health & Medical Sciences (AREA)
- Ophthalmology & Optometry (AREA)
- Multimedia (AREA)
- Health & Medical Sciences (AREA)
- Navigation (AREA)
- Traffic Control Systems (AREA)
- User Interface Of Digital Computer (AREA)
- Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)
Description
この発明は、例えば、提示対象(例えば、アイコン、文字、地図、動画など)をカーナビゲーション装置のディスプレイなどに表示する情報提示装置及び情報提示方法に関するものである。
以下の特許文献1に開示されている情報提示装置では、車両の運転者の視線を検出して、運転者が注視している注視対象を特定し、その注視対象の種類に対応する情報を表示するようにしている。
これにより、運転者が必要とする情報を適切に提供することができる。
これにより、運転者が必要とする情報を適切に提供することができる。
以下の特許文献2に開示されている情報提示装置では、ユーザの視線動作をユーザの状態として検出する手段を備えており、例えば、ユーザの視線が画面外に向いている状態、瞬きの波形がゆっくりとしたものになっている状態、眼球成分が急速に減少している状態を検出する。
この情報提示装置は、上記の状態を検出すると、情報を画面上に表示することが可能な時期であると判断し、画面上に配置されているウィンドウの状態と、ユーザの注視点との関係に基づいて、情報の表示位置を決定して、その情報を表示するようにしている。
これにより、ユーザの作業集中を妨げず、看過の危険性を減少させることができる。
この情報提示装置は、上記の状態を検出すると、情報を画面上に表示することが可能な時期であると判断し、画面上に配置されているウィンドウの状態と、ユーザの注視点との関係に基づいて、情報の表示位置を決定して、その情報を表示するようにしている。
これにより、ユーザの作業集中を妨げず、看過の危険性を減少させることができる。
従来の情報提示装置は以上のように構成されているので、特許文献1の場合、運転者が必要とする情報を適切に提供することができるが、提示対象に対するユーザの認識度を把握して情報量を調整することができない。このため、情報の過多が原因で、情報の見落としや煩わしさを招いてしまうことがある課題があった。
また、特許文献2の場合、ユーザの視線動作から情報を提示する時期を判断することができるが、特許文献1と同様に、提示対象に対するユーザの認識度を把握して情報量を調整することができない。このため、情報の過多が原因で、情報の見落としや煩わしさを招いてしまうことがある課題があった。
また、特許文献2の場合、ユーザの視線動作から情報を提示する時期を判断することができるが、特許文献1と同様に、提示対象に対するユーザの認識度を把握して情報量を調整することができない。このため、情報の過多が原因で、情報の見落としや煩わしさを招いてしまうことがある課題があった。
この発明は上記のような課題を解決するためになされたもので、過多の情報提示を抑えて、情報の提示による煩わしさを軽減することができる情報提示装置及び情報提示方法を得ることを目的とする。
この発明に係る情報提示装置は、ユーザが表示エリアを注視している注視時間と、表示エリアの提示対象の種類ごとに定められている把握必要時間とを比較し、その比較結果から提示対象に対するユーザの認識度を判定する認識度判定手段と、各種類の提示対象を、認識度判定手段により判定された認識度に対応する提示形態で提示する提示処理手段とを備え、提示形態は、提示対象の提示の有無、提示対象の強調表現の有無、及び、提示対象の表示位置のうちの少なくとも1つであるようにしたものである。
この発明によれば、ユーザが提示対象を注視している注視時間と提示対象の内容に応じて定められている把握必要時間とを比較し、その比較結果から提示対象に対するユーザの認識度を判定する認識度判定手段を設け、提示処理手段が、認識度判定手段により判定された認識度に対応する提示形態で、提示対象を提示するように構成したので、過多の情報提示を抑えて、情報の提示による煩わしさを軽減することができる効果がある。
以下、この発明をより詳細に説明するため、この発明を実施するための形態について、添付の図面に従って説明する。
実施の形態1.
図1はこの発明の実施の形態1による情報提示装置を示す構成図である。
図1において、視線計測カメラ1は例えばCCDカメラなどの撮像装置から構成されており、ユーザの視線の検出に用いる画像(視線検出用画像)を撮影し、その視線検出用画像の画像データを出力する処理を実施する。視線検出用画像は、ユーザの顔を撮影している画像である。
視線検出部2は例えばCPUを実装している半導体集積回路、あるいは、ワンチップマイコンなどから構成されており、視線計測カメラ1から出力された画像データを解析して、ユーザの視線を検出する処理を実施する。
実施の形態1.
図1はこの発明の実施の形態1による情報提示装置を示す構成図である。
図1において、視線計測カメラ1は例えばCCDカメラなどの撮像装置から構成されており、ユーザの視線の検出に用いる画像(視線検出用画像)を撮影し、その視線検出用画像の画像データを出力する処理を実施する。視線検出用画像は、ユーザの顔を撮影している画像である。
視線検出部2は例えばCPUを実装している半導体集積回路、あるいは、ワンチップマイコンなどから構成されており、視線計測カメラ1から出力された画像データを解析して、ユーザの視線を検出する処理を実施する。
提示情報取得部3は例えばCPUを実装している半導体集積回路、あるいは、ワンチップマイコンなどから構成されており、例えば、アプリケーションから、現在、表示処理部9により表示されている提示対象(例えば、アイコン、文字、地図、動画など)、あるいは、これから表示処理部9に表示される提示対象の種類、表示エリア(表示位置)、大きさ、色、タイミング、アニメーションの表現方法、重要度などを示す提示情報を取得する処理を実施する。
注視時間計測部4は例えばCPUを実装している半導体集積回路、あるいは、ワンチップマイコンなどから構成されており、視線検出部2により検出された視線から、ユーザが見ている領域である注視エリアを特定し、その注視エリアと提示情報取得部3により取得された提示情報が示す表示エリアとが重なっている時間である注視時間Tを計測する処理を実施する。
把握最低必要時間格納部5は例えばRAMやハードディスクなどの記憶装置から構成されており、提示対象の種類と把握最低必要時間(提示対象の内容の把握に最低必要な時間)との対応関係を示すテーブルを格納している。
把握最低必要時間特定部6は例えばCPUを実装している半導体集積回路、あるいは、ワンチップマイコンなどから構成されており、把握最低必要時間格納部5により格納されているテーブルを参照して、提示情報取得部3により取得された提示情報が示す提示対象の種類に対応する把握最低必要時間Tminを特定する処理を実施する。
把握最低必要時間特定部6は例えばCPUを実装している半導体集積回路、あるいは、ワンチップマイコンなどから構成されており、把握最低必要時間格納部5により格納されているテーブルを参照して、提示情報取得部3により取得された提示情報が示す提示対象の種類に対応する把握最低必要時間Tminを特定する処理を実施する。
ユーザ認識度判定部7は例えばCPUを実装している半導体集積回路、あるいは、ワンチップマイコンなどから構成されており、注視時間計測部4により計測された注視時間Tと把握最低必要時間特定部6により特定された把握最低必要時間Tminを比較し、その比較結果から提示対象に対するユーザの認識度を判定する処理を実施する。なお、ユーザ認識度判定部7は認識度判定手段を構成している。
提示形態選択部8は例えばGPU(Graphics Processing Unit)、あるいは、ワンチップマイコンなどから構成されており、ユーザ認識度判定部7により判定された認識度に対応する提示形態で、提示対象を表示処理部9に表示するとともに、その提示対象の内容を示す音声データを音声出力部10に出力する処理を実施する。
表示処理部9は例えば液晶ディスプレイなどから構成されており、提示形態選択部8の制御の下、提示対象を画面に表示する。
音声出力部10は例えばスピーカなどから構成されており、提示形態選択部8から出力された音声データにしたがって音声を出力する。
なお、提示形態選択部8、表示処理部9及び音声出力部10から提示処理手段が構成されている。
表示処理部9は例えば液晶ディスプレイなどから構成されており、提示形態選択部8の制御の下、提示対象を画面に表示する。
音声出力部10は例えばスピーカなどから構成されており、提示形態選択部8から出力された音声データにしたがって音声を出力する。
なお、提示形態選択部8、表示処理部9及び音声出力部10から提示処理手段が構成されている。
図1では、情報提示装置の構成要素である視線計測カメラ1、視線検出部2、提示情報取得部3、注視時間計測部4、把握最低必要時間格納部5、把握最低必要時間特定部6、ユーザ認識度判定部7、提示形態選択部8、表示処理部9及び音声出力部10のそれぞれが専用のハードウェアで構成されているものを想定しているが、情報提示装置の全部又は一部がコンピュータで構成されていてもよい。
例えば、情報提示装置の一部(視線検出部2、提示情報取得部3、注視時間計測部4、把握最低必要時間格納部5、把握最低必要時間特定部6、ユーザ認識度判定部7、提示形態選択部8)がコンピュータで構成されている場合、把握最低必要時間格納部5をコンピュータの内部メモリ又は外部メモリ上に構成するとともに、視線検出部2、提示情報取得部3、注視時間計測部4、把握最低必要時間特定部6、ユーザ認識度判定部7及び提示形態選択部8の処理内容を記述しているプログラムをコンピュータのメモリに格納し、当該コンピュータのCPUが当該メモリに格納されているプログラムを実行するようにすればよい。
図2はこの発明の実施の形態1による情報提示装置の処理内容(情報提示方法)を示すフローチャートである。
例えば、情報提示装置の一部(視線検出部2、提示情報取得部3、注視時間計測部4、把握最低必要時間格納部5、把握最低必要時間特定部6、ユーザ認識度判定部7、提示形態選択部8)がコンピュータで構成されている場合、把握最低必要時間格納部5をコンピュータの内部メモリ又は外部メモリ上に構成するとともに、視線検出部2、提示情報取得部3、注視時間計測部4、把握最低必要時間特定部6、ユーザ認識度判定部7及び提示形態選択部8の処理内容を記述しているプログラムをコンピュータのメモリに格納し、当該コンピュータのCPUが当該メモリに格納されているプログラムを実行するようにすればよい。
図2はこの発明の実施の形態1による情報提示装置の処理内容(情報提示方法)を示すフローチャートである。
次に動作について説明する。
この実施の形態1では、情報提示装置が車両に搭載されており、HUD(Head−Up Display)、カーナビゲーション装置のディスプレイ及びインパネが、表示処理部9の機能を備えているものとする。
図3は車両内のHUD、カーナビゲーション装置のディスプレイ及びインパネを示す説明図である。
この実施の形態1では、情報提示装置が車両に搭載されており、HUD(Head−Up Display)、カーナビゲーション装置のディスプレイ及びインパネが、表示処理部9の機能を備えているものとする。
図3は車両内のHUD、カーナビゲーション装置のディスプレイ及びインパネを示す説明図である。
視線計測カメラ1は、ユーザの視線の検出に用いる画像である視線検出用画像を撮影し、その視線検出用画像の画像データを視線検出部2に出力する(図2のステップST1)。なお、視線検出用画像の撮影は、連続的又は断続的に繰り返し行われる。
視線検出部2は、視線計測カメラ1から視線検出用画像の画像データを受ける毎に、その画像データを解析して、ユーザの視線を検出する(ステップST2)。
画像データを解析してユーザの視線を検出する処理自体は公知の技術であるため詳細な説明は省略する。
なお、ユーザの視線の検出結果として、例えば、ユーザが見ている地点(注視点)の2次元座標(HUD、カーナビゲーション装置のディスプレイ及びインパネが配置されている面のXY座標)、あるいは、ユーザが見ている地点(注視点)の3次元座標(HUD、カーナビゲーション装置のディスプレイ及びインパネが配置されている空間のXYZ座標)を時系列で注視時間計測部4に出力する。
視線検出部2は、視線計測カメラ1から視線検出用画像の画像データを受ける毎に、その画像データを解析して、ユーザの視線を検出する(ステップST2)。
画像データを解析してユーザの視線を検出する処理自体は公知の技術であるため詳細な説明は省略する。
なお、ユーザの視線の検出結果として、例えば、ユーザが見ている地点(注視点)の2次元座標(HUD、カーナビゲーション装置のディスプレイ及びインパネが配置されている面のXY座標)、あるいは、ユーザが見ている地点(注視点)の3次元座標(HUD、カーナビゲーション装置のディスプレイ及びインパネが配置されている空間のXYZ座標)を時系列で注視時間計測部4に出力する。
提示情報取得部3は、例えば、アプリケーションから、現在、表示処理部9により表示されている提示対象、あるいは、これから表示処理部9に表示される提示対象の種類、表示エリア(表示位置)、大きさ、色、タイミング、アニメーションの表現方法、重要度などを示す提示情報を取得し、その提示情報を注視時間計測部4及び把握最低必要時間特定部6に出力する(ステップST3)。
注視時間計測部4は、視線検出部2による視線の検出結果から、ユーザが見ている領域である注視エリアを特定する。
ここで、注視エリアは、ユーザが見ている地点(注視点)を中心とする有効視野の範囲内のエリア(安定注視野を除く)を意味する。
注視時間計測部4は、ユーザの注視エリアを特定すると、その注視エリアと提示情報取得部3により取得された提示情報が示す表示エリアとが重なっている時間である注視時間Tを計測する(ステップST4)。
例えば、提示情報取得部3により取得された提示情報が示す表示エリアがカーナビゲーション装置のディスプレイであるとき、ユーザの注視エリアがカーナビゲーション装置のディスプレイを包含している時間を注視時間Tとして計測する。
ここで、注視エリアは、ユーザが見ている地点(注視点)を中心とする有効視野の範囲内のエリア(安定注視野を除く)を意味する。
注視時間計測部4は、ユーザの注視エリアを特定すると、その注視エリアと提示情報取得部3により取得された提示情報が示す表示エリアとが重なっている時間である注視時間Tを計測する(ステップST4)。
例えば、提示情報取得部3により取得された提示情報が示す表示エリアがカーナビゲーション装置のディスプレイであるとき、ユーザの注視エリアがカーナビゲーション装置のディスプレイを包含している時間を注視時間Tとして計測する。
把握最低必要時間特定部6は、提示情報取得部3から提示情報を受けると、把握最低必要時間格納部5により格納されているテーブルを参照して、その提示情報が示す提示対象の種類に対応する把握最低必要時間Tminを特定する(ステップST5)。
ここで、図4は把握最低必要時間格納部5により格納されているテーブルを示す説明図である。
把握最低必要時間Tminは、提示対象の内容の把握に最低必要な時間である。
図4では、提示対象の種類がアイコンであれば、把握最低必要時間Tminは1.5秒、提示対象の種類が文字であれば、把握最低必要時間Tminは文字数×0.8秒であるなどの例を示している。
なお、把握最低必要時間Tminは、ユーザの属性(例えば、視線の状態、疲れ、年齢、理解力など)に応じて変えるようにしてもよい。
例えば、ユーザが60歳以上の高齢者である場合、上記の把握最低必要時間Tminに、1.0秒を付加するような態様が考えられる。
ここで、図4は把握最低必要時間格納部5により格納されているテーブルを示す説明図である。
把握最低必要時間Tminは、提示対象の内容の把握に最低必要な時間である。
図4では、提示対象の種類がアイコンであれば、把握最低必要時間Tminは1.5秒、提示対象の種類が文字であれば、把握最低必要時間Tminは文字数×0.8秒であるなどの例を示している。
なお、把握最低必要時間Tminは、ユーザの属性(例えば、視線の状態、疲れ、年齢、理解力など)に応じて変えるようにしてもよい。
例えば、ユーザが60歳以上の高齢者である場合、上記の把握最低必要時間Tminに、1.0秒を付加するような態様が考えられる。
ユーザ認識度判定部7は、注視時間計測部4が注視時間Tを計測し、把握最低必要時間特定部6が把握最低必要時間Tminを特定すると、その注視時間Tと把握最低必要時間Tminを比較して、その比較結果から提示対象に対するユーザの認識度を判定する。
以下、ユーザ認識度判定部7によるユーザの認識度の判定処理を具体的に説明する。
ここでは、提示対象の内容を十分には把握することができないが、多少の把握は可能であると思われる時間を「微小把握時間TLittle」と定義する。
なお、微小把握時間TLittleとしては、把握最低必要時間Tminより短い0.75秒などが考えられる。
以下、ユーザ認識度判定部7によるユーザの認識度の判定処理を具体的に説明する。
ここでは、提示対象の内容を十分には把握することができないが、多少の把握は可能であると思われる時間を「微小把握時間TLittle」と定義する。
なお、微小把握時間TLittleとしては、把握最低必要時間Tminより短い0.75秒などが考えられる。
ユーザ認識度判定部7は、注視時間計測部4が注視時間Tを計測すると、その注視時間Tと微小把握時間TLittleを比較し(ステップST6)、その注視時間Tが微小把握時間TLittleより短ければ、提示対象に対するユーザの認識度は極めて低いと考えられるため、ユーザの認識度を「レベル1」に認定する(ステップST7)。
ユーザ認識度判定部7は、その注視時間Tが微小把握時間TLittle以上であれば、その注視時間Tと把握最低必要時間Tminを比較する(ステップST8)。
ユーザ認識度判定部7は、その注視時間Tが微小把握時間TLittle以上であれば、その注視時間Tと把握最低必要時間Tminを比較する(ステップST8)。
ユーザ認識度判定部7は、その注視時間Tが把握最低必要時間Tminより短い場合、提示対象の内容を十分には把握することができていないが、多少は把握していると考えられるため、ユーザの認識度を「レベル2」に認定する(ステップST9)。
また、ユーザ認識度判定部7は、その注視時間Tが把握最低必要時間Tmin以上であれば、提示対象の内容を十分に把握していると考えられるため、ユーザの認識度を「レベル3」に認定する(ステップST10)。
また、ユーザ認識度判定部7は、その注視時間Tが把握最低必要時間Tmin以上であれば、提示対象の内容を十分に把握していると考えられるため、ユーザの認識度を「レベル3」に認定する(ステップST10)。
提示形態選択部8は、ユーザ認識度判定部7が提示対象に対するユーザの認識度を判定すると、複数の提示形態の中から、ユーザの認識度に対応する提示形態を選択する。
即ち、提示形態選択部8は、ユーザ認識度判定部7により判定されたユーザの認識度が高い程、目立たない提示形態を選択するものであり、ユーザの認識度が最も低いレベル1であれば、最も目立つ提示形態を選択し(ステップST11)、ユーザの認識度が中程度であるレベル2であれば、少し目立つ提示形態を選択し(ステップST12)、ユーザの認識度が最も高いレベル3であれば、目立たない提示形態を選択する(ステップST13)。
即ち、提示形態選択部8は、ユーザ認識度判定部7により判定されたユーザの認識度が高い程、目立たない提示形態を選択するものであり、ユーザの認識度が最も低いレベル1であれば、最も目立つ提示形態を選択し(ステップST11)、ユーザの認識度が中程度であるレベル2であれば、少し目立つ提示形態を選択し(ステップST12)、ユーザの認識度が最も高いレベル3であれば、目立たない提示形態を選択する(ステップST13)。
ここで、図5はユーザの認識度に対応する提示形態の一例を示す説明図である。
図5では、提示対象の種類がアイコンである場合、認識度が最も低いレベル1であれば、提示形態として、アイコンの点滅表示+音声案内を選択する例を示している。
また、認識度が中程度であるレベル2であれば、提示形態として、アイコンの点滅表示だけを選択し、認識度が最も高いレベル3であれば、提示形態として、アイコンの強調表現を行わない例を示している。
図5では、提示対象の種類がアイコンである場合、認識度が最も低いレベル1であれば、提示形態として、アイコンの点滅表示+音声案内を選択する例を示している。
また、認識度が中程度であるレベル2であれば、提示形態として、アイコンの点滅表示だけを選択し、認識度が最も高いレベル3であれば、提示形態として、アイコンの強調表現を行わない例を示している。
提示形態選択部8は、ユーザの認識度に対応する提示形態を選択すると、その提示形態で、提示対象を表示処理部9に表示するとともに、その提示対象の内容を示す音声データを音声出力部10に出力する。
即ち、提示形態選択部8は、ユーザの認識度が最も低いレベル1であれば、レベル1に対応する提示形態で、提示対象を表示処理部9に表示するとともに、その提示対象の内容を示す音声データを音声出力部10に出力し(ステップST14)、ユーザの認識度が中程度であるレベル2であれば、レベル2に対応する提示形態で、提示対象を表示処理部9に表示するとともに、その提示対象の内容を示す音声データを音声出力部10に出力する(ステップST15)。
また、ユーザの認識度が最も高いレベル3であれば、レベル3に対応する提示形態で、提示対象を表示処理部9に表示するとともに、その提示対象の内容を示す音声データを音声出力部10に出力する(ステップST16)。
即ち、提示形態選択部8は、ユーザの認識度が最も低いレベル1であれば、レベル1に対応する提示形態で、提示対象を表示処理部9に表示するとともに、その提示対象の内容を示す音声データを音声出力部10に出力し(ステップST14)、ユーザの認識度が中程度であるレベル2であれば、レベル2に対応する提示形態で、提示対象を表示処理部9に表示するとともに、その提示対象の内容を示す音声データを音声出力部10に出力する(ステップST15)。
また、ユーザの認識度が最も高いレベル3であれば、レベル3に対応する提示形態で、提示対象を表示処理部9に表示するとともに、その提示対象の内容を示す音声データを音声出力部10に出力する(ステップST16)。
以下、提示形態選択部8が提示対象を提示する際の具体例を説明する。ただし、以下の具体的はあくまでも一例である。
例えば、カーナビゲーション装置のアナウンスが提示対象であり、そのアナウンスが「ルートから外れています」である場合、この提示対象の種類は文字であり、その文字数が11であるため、把握最低必要時間Tminは、図4に示すように、8.8秒(=11×0.8秒)になる。
したがって、ユーザがカーナビゲーション装置のディスプレイを見ている注視時間Tが、8.8秒以上であれば、ユーザの認識度が最も高いレベル3に対応する提示形態で、提示対象を提示する。
図5の例では、アナウンス「ルートから外れています」を点滅するなどの強調表現を行わずに(情報提示による煩わしさの発生を防止ために、強調表現を行わないようにする)、アナウンス「ルートから外れています」を表示処理部9であるカーナビゲーション装置のディスプレイに表示する。
例えば、カーナビゲーション装置のアナウンスが提示対象であり、そのアナウンスが「ルートから外れています」である場合、この提示対象の種類は文字であり、その文字数が11であるため、把握最低必要時間Tminは、図4に示すように、8.8秒(=11×0.8秒)になる。
したがって、ユーザがカーナビゲーション装置のディスプレイを見ている注視時間Tが、8.8秒以上であれば、ユーザの認識度が最も高いレベル3に対応する提示形態で、提示対象を提示する。
図5の例では、アナウンス「ルートから外れています」を点滅するなどの強調表現を行わずに(情報提示による煩わしさの発生を防止ために、強調表現を行わないようにする)、アナウンス「ルートから外れています」を表示処理部9であるカーナビゲーション装置のディスプレイに表示する。
また、ユーザがカーナビゲーション装置のディスプレイを見ている注視時間Tが、微小把握時間TLittle(0.75秒)以上で、8.8秒未満であれば、ユーザの認識度が中程度であるレベル2に対応する提示形態で、提示対象を提示する。
図5の例では、アナウンス「ルートから外れています」を表示処理部9であるカーナビゲーション装置のディスプレイに点滅表示することで、アナウンスが表示されていることをユーザが気付くようにしている。
また、ユーザがカーナビゲーション装置のディスプレイを見ている注視時間Tが、微小把握時間TLittle(0.75秒)より短ければ、ユーザの認識度が最も低いレベル1に対応する提示形態で、提示対象を提示する。
図5の例では、アナウンスが提示されていることをユーザが確実に気付くようにするために、アナウンス「ルートから外れています」を表示処理部9であるカーナビゲーション装置のディスプレイに点滅表示するとともに、音声出力部10からアナウンス「ルートから外れています」を音声出力する。
図5の例では、アナウンス「ルートから外れています」を表示処理部9であるカーナビゲーション装置のディスプレイに点滅表示することで、アナウンスが表示されていることをユーザが気付くようにしている。
また、ユーザがカーナビゲーション装置のディスプレイを見ている注視時間Tが、微小把握時間TLittle(0.75秒)より短ければ、ユーザの認識度が最も低いレベル1に対応する提示形態で、提示対象を提示する。
図5の例では、アナウンスが提示されていることをユーザが確実に気付くようにするために、アナウンス「ルートから外れています」を表示処理部9であるカーナビゲーション装置のディスプレイに点滅表示するとともに、音声出力部10からアナウンス「ルートから外れています」を音声出力する。
例えば、車両の異常を示す警告が提示対象であり、その警告内容を示すアイコン(例えば、エンジン異常を示すアイコン)をインパネに提示する場合、この提示対象の種類がアイコンであるため、把握最低必要時間Tminは、図4に示すように、1.5秒になる。
したがって、ユーザがインパネを見ている注視時間Tが、1.5秒以上であれば、ユーザの認識度が最も高いレベル3に対応する提示形態で、提示対象を提示する。
図5の例では、アイコンを点滅するなどの強調表現を行わずに(情報提示による煩わしさの発生を防止ために、強調表現を行わないようにする)、アイコンを表示処理部9であるインパネに表示する。
したがって、ユーザがインパネを見ている注視時間Tが、1.5秒以上であれば、ユーザの認識度が最も高いレベル3に対応する提示形態で、提示対象を提示する。
図5の例では、アイコンを点滅するなどの強調表現を行わずに(情報提示による煩わしさの発生を防止ために、強調表現を行わないようにする)、アイコンを表示処理部9であるインパネに表示する。
また、ユーザがインパネを見ている注視時間Tが、微小把握時間TLittle(0.75秒)以上で、1.5秒未満であれば、ユーザの認識度が中程度であるレベル2に対応する提示形態で、提示対象を提示する。
図5の例では、アイコンを表示処理部9であるインパネに点滅表示することで、アイコンが表示されていることをユーザが気付くようにしている。
また、ユーザがインパネを見ている注視時間Tが、微小把握時間TLittle(0.75秒)より短ければ、ユーザの認識度が最も低いレベル1に対応する提示形態で、提示対象を提示する。
図5の例では、アイコンが提示されていることをユーザが確実に気付くようにするために、アイコンを表示処理部9であるインパネに点滅表示するとともに、音声出力部10からアイコンが意味する内容(例えば、エンジン異常)を音声出力する。
図5の例では、アイコンを表示処理部9であるインパネに点滅表示することで、アイコンが表示されていることをユーザが気付くようにしている。
また、ユーザがインパネを見ている注視時間Tが、微小把握時間TLittle(0.75秒)より短ければ、ユーザの認識度が最も低いレベル1に対応する提示形態で、提示対象を提示する。
図5の例では、アイコンが提示されていることをユーザが確実に気付くようにするために、アイコンを表示処理部9であるインパネに点滅表示するとともに、音声出力部10からアイコンが意味する内容(例えば、エンジン異常)を音声出力する。
ここでは、1つの提示対象に対するユーザの認識度を判定し、その提示対象に対するユーザの認識度に応じて、その提示対象をカーナビゲーション装置のディスプレイやインパネに表示する例を示したが、複数の提示対象に対するユーザの認識度を同時に判定し、各々の提示対象に対するユーザの認識度に応じて、各々の提示対象を任意の表示処理部9に表示するようにしてもよい。
以上で明らかなように、この実施の形態1によれば、視線検出部2により検出された視線から、ユーザが見ている領域である注視エリアを特定し、その注視エリアと提示情報取得部3により取得された提示情報が示す表示エリアとが重なっている時間である注視時間Tを計測する注視時間計測部4と、提示情報取得部3により取得された提示情報が示す提示対象の種類から、提示対象の内容の把握に最低必要な時間である把握最低必要時間Tminを特定する把握最低必要時間特定部6と、注視時間計測部4により計測された注視時間Tと把握最低必要時間特定部6により特定された把握最低必要時間Tminを比較し、その比較結果から提示対象に対するユーザの認識度を判定するユーザ認識度判定部7とを設け、提示形態選択部8が、ユーザ認識度判定部7により判定された認識度に対応する提示形態で、提示対象を提示するように構成したので、過多の情報提示を抑えて、情報の提示による煩わしさを軽減することができる効果を奏する。
したがって、例えば、カーナビゲーション装置が提示しているルートから外れてしまった場合、従来であれば、「ルートから外れています」という音声ガイダンスが、ルートから外れている間、鳴り続く煩わしさや、リルートの選択肢がカーナビゲーション装置の画面上から消えない煩わしさが生じるとともに、リルートの選択肢が画面上から消えないことで、地図情報の面積が少なくなってしまうなどの問題を生じるが、この実施の形態1では、ユーザの認識度が高くなると、例えば、音声ガイダンスを止めたり、リルートの選択肢を移動や停止したりすることで、過多の情報提示を抑えて、情報の提示による煩わしさを軽減することができる。
この実施の形態1では、情報提示装置が車両に搭載されており、HUD、カーナビゲーション装置のディスプレイ及びインパネが、表示処理部9の機能を備えているものについて説明したが、例えば、監視制御システムのディスプレイ、電車の運転席のディスプレイ、飛行機のコックピットのディスプレイ、船の運転席に設置されているモニター、タッチ操作を伴う公共空間に設置されているデジタルサイネージなどが表示処理部9の機能を備えて、提示形態選択部8が、これらのディスプレイ等に提示対象を表示するようにしてもよい。
また、この実施の形態1では、把握最低必要時間格納部5が、提示対象の種類と把握最低必要時間(提示対象の内容の把握に最低必要な時間)との対応関係を示すテーブルを格納し、把握最低必要時間特定部6が、把握最低必要時間格納部5により格納されているテーブルを参照して、把握最低必要時間Tminを特定する処理を実施し、ユーザ認識度判定部7が、注視時間計測部4により計測された注視時間Tと把握最低必要時間特定部6により特定された把握最低必要時間Tminを比較し、その比較結果から提示対象に対するユーザの認識度を判定する処理を実施する場合について説明している。
しかしながら、ユーザ認識度判定部7が、注視時間計測部4により計測された注視時間Tと提示対象の内容に応じて定められている所定時間(把握時間)とを比較し、その比較結果から提示対象に対するユーザの認識度を判定するものであればよく、把握時間は、把握最低必要時間Tminに限定されるものではない。例えば、提示対象の内容を把握するための平均時間や、複数人のサンプルが、提示対象の内容を把握するために要した時間の最大時間などであってもよい。
しかしながら、ユーザ認識度判定部7が、注視時間計測部4により計測された注視時間Tと提示対象の内容に応じて定められている所定時間(把握時間)とを比較し、その比較結果から提示対象に対するユーザの認識度を判定するものであればよく、把握時間は、把握最低必要時間Tminに限定されるものではない。例えば、提示対象の内容を把握するための平均時間や、複数人のサンプルが、提示対象の内容を把握するために要した時間の最大時間などであってもよい。
この場合、把握最低必要時間格納部5は、提示対象の種類と把握時間との対応関係を示すテーブルを格納し、把握最低必要時間特定部6は、把握最低必要時間格納部5により格納されているテーブルを参照して、把握時間を特定する処理を実施するように構成する。
また、外部装置で測定された注視時間を参照し、表示処理部9及び音声出力部10の機能を外部装置で補ってもよい。その場合、図1における視線計測カメラ1、視線検出部2、注視時間計測部4、表示処理部9及び音声出力部10は不要である。
さらに、この実施の形態1のように、提示対象が、複数情報を提示するものではなく、単一情報を提示する場合には、把握最低必要時間のテーブルを参照する必要がない。その場合、図1における提示情報取得部3、把握最低必要時間格納部5及び把握最低必要時間特定部6は不要である。
また、外部装置で測定された注視時間を参照し、表示処理部9及び音声出力部10の機能を外部装置で補ってもよい。その場合、図1における視線計測カメラ1、視線検出部2、注視時間計測部4、表示処理部9及び音声出力部10は不要である。
さらに、この実施の形態1のように、提示対象が、複数情報を提示するものではなく、単一情報を提示する場合には、把握最低必要時間のテーブルを参照する必要がない。その場合、図1における提示情報取得部3、把握最低必要時間格納部5及び把握最低必要時間特定部6は不要である。
実施の形態2.
図6はこの発明の実施の形態2による情報提示装置を示す構成図であり、図において、図1と同一符号は同一または相当部分を示すので説明を省略する。
車載情報取得部11は例えばCPUを実装している半導体集積回路、あるいは、ワンチップマイコンなどから構成されており、現在の車両の状態等を示す車載情報(例えば、車速、加速度、ガソリン車のガソリン残量、電気自動車のエネルギー残量、タイヤの空気圧、現在地などの位置情報、外気温、車内の温度・湿度、現在再生中の音楽、ナビ情報などの車内外の情報)を取得する処理を実施する。
重要度判定部12は例えばCPUを実装している半導体集積回路、あるいは、ワンチップマイコンなどから構成されており、車載情報取得部11により取得された車載情報に基づいて、提示対象の重要度を判定する処理を実施する。
なお、車載情報取得部11及び重要度判定部12から重要度判定手段が構成されている。
図6はこの発明の実施の形態2による情報提示装置を示す構成図であり、図において、図1と同一符号は同一または相当部分を示すので説明を省略する。
車載情報取得部11は例えばCPUを実装している半導体集積回路、あるいは、ワンチップマイコンなどから構成されており、現在の車両の状態等を示す車載情報(例えば、車速、加速度、ガソリン車のガソリン残量、電気自動車のエネルギー残量、タイヤの空気圧、現在地などの位置情報、外気温、車内の温度・湿度、現在再生中の音楽、ナビ情報などの車内外の情報)を取得する処理を実施する。
重要度判定部12は例えばCPUを実装している半導体集積回路、あるいは、ワンチップマイコンなどから構成されており、車載情報取得部11により取得された車載情報に基づいて、提示対象の重要度を判定する処理を実施する。
なお、車載情報取得部11及び重要度判定部12から重要度判定手段が構成されている。
提示形態選択部13は例えばGPU、あるいは、ワンチップマイコンなどから構成されており、ユーザ認識度判定部7により判定された認識度及び重要度判定部12により判定された重要度に対応する提示形態で、提示対象を表示処理部9に表示するとともに、その提示対象の内容を示す音声データを音声出力部10に出力する処理を実施する。なお、提示形態選択部13は提示処理手段を構成している。
図6では、情報提示装置の構成要素である視線計測カメラ1、視線検出部2、提示情報取得部3、注視時間計測部4、把握最低必要時間格納部5、把握最低必要時間特定部6、ユーザ認識度判定部7、車載情報取得部11、重要度判定部12、提示形態選択部13、表示処理部9及び音声出力部10のそれぞれが専用のハードウェアで構成されているものを想定しているが、情報提示装置の全部又は一部がコンピュータで構成されていてもよい。
例えば、情報提示装置の一部(視線検出部2、提示情報取得部3、注視時間計測部4、把握最低必要時間格納部5、把握最低必要時間特定部6、ユーザ認識度判定部7、車載情報取得部11、重要度判定部12、提示形態選択部13)がコンピュータで構成されている場合、把握最低必要時間格納部5をコンピュータの内部メモリ又は外部メモリ上に構成するとともに、視線検出部2、提示情報取得部3、注視時間計測部4、把握最低必要時間特定部6、ユーザ認識度判定部7、車載情報取得部11、重要度判定部12及び提示形態選択部13の処理内容を記述しているプログラムをコンピュータのメモリに格納し、当該コンピュータのCPUが当該メモリに格納されているプログラムを実行するようにすればよい。
例えば、情報提示装置の一部(視線検出部2、提示情報取得部3、注視時間計測部4、把握最低必要時間格納部5、把握最低必要時間特定部6、ユーザ認識度判定部7、車載情報取得部11、重要度判定部12、提示形態選択部13)がコンピュータで構成されている場合、把握最低必要時間格納部5をコンピュータの内部メモリ又は外部メモリ上に構成するとともに、視線検出部2、提示情報取得部3、注視時間計測部4、把握最低必要時間特定部6、ユーザ認識度判定部7、車載情報取得部11、重要度判定部12及び提示形態選択部13の処理内容を記述しているプログラムをコンピュータのメモリに格納し、当該コンピュータのCPUが当該メモリに格納されているプログラムを実行するようにすればよい。
上記実施の形態1では、提示形態選択部8が、ユーザ認識度判定部7により判定された認識度に対応する提示形態で、提示対象を表示処理部9に表示するとともに、その提示対象の内容を示す音声データを音声出力部10に出力するものを示したが、提示形態選択部13が、ユーザ認識度判定部7により判定された認識度及び重要度判定部12により判定された重要度に対応する提示形態で、提示対象を表示処理部9に表示するとともに、その提示対象の内容を示す音声データを音声出力部10に出力するようにしてもよい。
具体的には、以下の通りである。
具体的には、以下の通りである。
車載情報取得部11、重要度判定部12及び提示形態選択部13以外は、上記実施の形態1と同様であるため、ここでは、車載情報取得部11、重要度判定部12及び提示形態選択部13の処理内容だけを説明する。
車載情報取得部11は、現在の車両の状態等を示す車載情報を取得し、その車載情報を重要度判定部12に出力する。
車載情報として、例えば、車速、加速度、ガソリン車のガソリン残量、電気自動車のエネルギー残量、タイヤの空気圧、現在地などの位置情報、外気温、車内の温度・湿度、現在再生中の音楽、ナビ情報などの車内外の情報を取得する。
車載情報取得部11は、現在の車両の状態等を示す車載情報を取得し、その車載情報を重要度判定部12に出力する。
車載情報として、例えば、車速、加速度、ガソリン車のガソリン残量、電気自動車のエネルギー残量、タイヤの空気圧、現在地などの位置情報、外気温、車内の温度・湿度、現在再生中の音楽、ナビ情報などの車内外の情報を取得する。
重要度判定部12は、提示情報取得部3により取得された提示情報を入手し、車載情報取得部11から、その提示情報に関連する車載情報を受けると、その車載情報に基づいて、提示対象の重要度を判定する。
例えば、車両の異常を示す警告が提示対象であり、ガソリンの残量低下を警告内容とするアイコンをインパネに提示する場合、ガソリン残量に関する車載情報に基づいて、提示対象の重要度を判定する。
具体的には、ガソリン残量に関する車載情報が、ガソリン残量30%以下を示している場合、提示対象の重要度を重要度1(重要度は低)、ガソリン残量20%以下を示している場合、提示対象の重要度を重要度2(重要度は中)、ガソリン残量10%以下を示している場合、提示対象の重要度を重要度3(重要度は高)とする。
例えば、車両の異常を示す警告が提示対象であり、ガソリンの残量低下を警告内容とするアイコンをインパネに提示する場合、ガソリン残量に関する車載情報に基づいて、提示対象の重要度を判定する。
具体的には、ガソリン残量に関する車載情報が、ガソリン残量30%以下を示している場合、提示対象の重要度を重要度1(重要度は低)、ガソリン残量20%以下を示している場合、提示対象の重要度を重要度2(重要度は中)、ガソリン残量10%以下を示している場合、提示対象の重要度を重要度3(重要度は高)とする。
提示形態選択部13は、ユーザ認識度判定部7が提示対象に対するユーザの認識度を判定し、重要度判定部12が提示対象の重要度を判定すると、複数の提示形態の中から、ユーザの認識度及び提示対象の重要度に対応する提示形態を選択する。
即ち、提示形態選択部13は、図1の提示形態選択部8と同様に、ユーザ認識度判定部7により判定されたユーザの認識度が高い程、目立たない提示形態を選択するが、提示対象の重要度が高い程、目立つ提示形態を選択する。
即ち、提示形態選択部13は、図1の提示形態選択部8と同様に、ユーザ認識度判定部7により判定されたユーザの認識度が高い程、目立たない提示形態を選択するが、提示対象の重要度が高い程、目立つ提示形態を選択する。
ここで、図7はユーザの認識度及び提示対象の重要度に対応する提示形態の一例を示す説明図である。
この実施の形態2では、ユーザの認識度が同じレベルであっても、提示対象の重要度が異なれば、異なる提示形態が選択される。
図7では、例えば、ユーザの認識度がレベル1である場合、ガソリン残量10%以下であれば(重要度3)、緊急性が高く、提示対象を確実にユーザに認識させる必要があるため、アイコンを表示処理部9であるインパネに点滅表示するとともに、ガソリンの残量が10%以下である旨を示すメッセージを表示処理部9であるHUDやカーナビゲーション装置のディスプレイ等に表示する。また、音声出力部10からガソリンの残量が10%以下である旨を示すメッセージを音声出力する。
この実施の形態2では、ユーザの認識度が同じレベルであっても、提示対象の重要度が異なれば、異なる提示形態が選択される。
図7では、例えば、ユーザの認識度がレベル1である場合、ガソリン残量10%以下であれば(重要度3)、緊急性が高く、提示対象を確実にユーザに認識させる必要があるため、アイコンを表示処理部9であるインパネに点滅表示するとともに、ガソリンの残量が10%以下である旨を示すメッセージを表示処理部9であるHUDやカーナビゲーション装置のディスプレイ等に表示する。また、音声出力部10からガソリンの残量が10%以下である旨を示すメッセージを音声出力する。
ユーザの認識度が同じレベル1であっても、ガソリン残量20%以下である場合(重要度2)、ガソリン残量10%以下の場合ほど緊急性が高くないので、アイコンを表示処理部9であるインパネに点滅表示し、ガソリンの残量が20%以下である旨を示すメッセージを表示処理部9であるHUDやカーナビゲーション装置のディスプレイ等に表示するが、ガソリンの残量が20%以下である旨を示すメッセージについては音声出力しない。
また、ユーザの認識度が同じレベル1であっても、ガソリン残量30%以下である場合(重要度2)、緊急性が高くないので、情報過多による煩わしさを軽減する観点から、アイコンの点滅表示だけを行う。
また、ユーザの認識度が同じレベル1であっても、ガソリン残量30%以下である場合(重要度2)、緊急性が高くないので、情報過多による煩わしさを軽減する観点から、アイコンの点滅表示だけを行う。
以上で明らかなように、この実施の形態2によれば、車載情報取得部11により取得された車載情報に基づいて、提示対象の重要度を判定する重要度判定部12を備え、提示形態選択部13が、ユーザ認識度判定部7により判定された認識度及び重要度判定部12により判定された重要度に対応する提示形態で、提示対象を表示処理部9に表示するとともに、その提示対象の内容を示す音声データを音声出力部10に出力するように構成したので、上記実施の形態1と同様に、過多の情報提示を抑えて、情報の提示による煩わしさを軽減することができるほか、現在の状況に応じた適正な提示形態で、提示対象を提示することができる効果を奏する。
なお、本願発明はその発明の範囲内において、各実施の形態の自由な組み合わせ、あるいは各実施の形態の任意の構成要素の変形、もしくは各実施の形態において任意の構成要素の省略が可能である。
この発明に係る情報提示装置は、提示対象(例えば、アイコン、文字、地図、動画など)をカーナビゲーション装置のディスプレイなどに表示する際、過多の情報提示を抑えて、情報の提示による煩わしさを軽減する必要性が高いものに適している。
1 視線計測カメラ、2 視線検出部、3 提示情報取得部、4 注視時間計測部、5 把握最低必要時間格納部、6 把握最低必要時間特定部、7 ユーザ認識度判定部(認識度判定手段)、8 提示形態選択部(提示処理手段)、9 表示処理部(提示処理手段)、10 音声出力部(提示処理手段)、11 車載情報取得部(重要度判定手段)、12 重要度判定部(重要度判定手段)、13 提示形態選択部(提示処理手段)。
Claims (6)
- ユーザが表示エリアを注視している注視時間と、上記表示エリアの提示対象の種類ごとに定められている把握必要時間とを比較し、その比較結果から上記提示対象に対するユーザの認識度を判定する認識度判定手段と、
各種類の上記提示対象を、上記認識度判定手段により判定された認識度に対応する提示形態で提示する提示処理手段とを備え、
上記提示形態は、上記提示対象の提示の有無、上記提示対象の強調表現の有無、及び、上記提示対象の表示位置のうちの少なくとも1つであることを特徴とする情報提示装置。 - ユーザが表示エリアを注視している注視時間と、上記表示エリアの提示対象の種類ごとに定められている把握必要時間とを比較し、その比較結果から上記提示対象に対するユーザの認識度を判定する認識度判定手段と、
各種類の上記提示対象を、上記認識度判定手段により判定された認識度に対応する提示形態で提示する提示処理手段とを備え、
上記提示処理手段は、上記認識度判定手段により判定されたユーザの認識度が高い程、目立たない提示形態で、上記提示対象を提示することを特徴とする情報提示装置。 - ユーザが表示エリアを注視している注視時間と、上記表示エリアの提示対象の種類ごとに定められている把握必要時間とを比較し、その比較結果から上記提示対象に対するユーザの認識度を判定する認識度判定手段と、
各種類の上記提示対象を、上記認識度判定手段により判定された認識度に対応する提示形態で提示する提示処理手段と、
上記提示対象の重要度を判定する重要度判定手段とを備え、
上記提示処理手段は、上記認識度判定手段により判定された認識度及び上記重要度判定手段により判定された重要度に対応する提示形態で、上記提示対象を提示することを特徴とする情報提示装置。 - 上記提示処理手段は、上記重要度判定手段により判定された重要度が高い程、目立つ提示形態で、上記提示対象を提示することを特徴とする請求項3記載の情報提示装置。
- 認識度判定手段が、ユーザが表示エリアを注視している注視時間と、上記表示エリアの提示対象の種類ごとに定められている把握必要時間とを比較し、その比較結果から上記提示対象に対するユーザの認識度を判定する認識度判定処理ステップと、
提示処理手段が、各種類の上記提示対象を、上記認識度判定処理ステップで判定された認識度に対応する提示形態で提示する提示処理ステップとを備え、
上記提示形態は、上記提示対象の提示の有無、上記提示対象の強調表現の有無、及び、上記提示対象の表示位置のうちの少なくとも1つであることを特徴とする情報提示方法。 - 認識度判定手段が、ユーザが表示エリアを注視している注視時間と、上記表示エリアの提示対象の種類ごとに定められている把握必要時間とを比較し、その比較結果から上記提示対象に対するユーザの認識度を判定する認識度判定処理ステップと、
提示処理手段が、各種類の上記提示対象を、上記認識度判定処理ステップで判定された認識度に対応する提示形態で提示する提示処理ステップとを備え、
上記提示処理手段は、上記認識度判定手段により判定されたユーザの認識度が高い程、目立たない提示形態で、上記提示対象を提示することを特徴とする情報提示方法。
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
PCT/JP2013/069520 WO2015008363A1 (ja) | 2013-07-18 | 2013-07-18 | 情報提示装置及び情報提示方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JPWO2015008363A1 JPWO2015008363A1 (ja) | 2017-03-02 |
JP6095781B2 true JP6095781B2 (ja) | 2017-03-15 |
Family
ID=52345858
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2015527112A Expired - Fee Related JP6095781B2 (ja) | 2013-07-18 | 2013-07-18 | 情報提示装置及び情報提示方法 |
Country Status (5)
Country | Link |
---|---|
US (1) | US10109258B2 (ja) |
JP (1) | JP6095781B2 (ja) |
CN (1) | CN105164499B (ja) |
DE (1) | DE112013007242T5 (ja) |
WO (1) | WO2015008363A1 (ja) |
Families Citing this family (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105868157B (zh) * | 2016-04-18 | 2018-06-15 | 山东交通学院 | 基于驾驶员注视时间的隧道出入口限速标志位置设定方法 |
JPWO2017212610A1 (ja) * | 2016-06-09 | 2018-09-06 | 三菱電機株式会社 | 表示制御装置、表示装置、車載ディスプレイシステムおよび表示制御方法 |
JP6945130B2 (ja) * | 2016-09-13 | 2021-10-06 | パナソニックIpマネジメント株式会社 | 音声提示方法、音声提示プログラム、音声提示システム及び端末装置 |
CN107608514A (zh) * | 2017-09-20 | 2018-01-19 | 维沃移动通信有限公司 | 信息处理方法及移动终端 |
JP7270206B2 (ja) * | 2018-12-06 | 2023-05-10 | パナソニックIpマネジメント株式会社 | 情報提示システム、情報提示方法、プログラム、及び、移動体 |
JP6827204B2 (ja) * | 2018-12-21 | 2021-02-10 | パナソニックIpマネジメント株式会社 | 指導情報の出力方法および指導情報の出力システム |
WO2020261781A1 (ja) * | 2019-06-27 | 2020-12-30 | 株式会社デンソー | 表示制御装置、表示制御プログラム、および持続的有形コンピュータ読み取り媒体 |
CN110533894B (zh) * | 2019-09-02 | 2021-11-02 | 深圳市新系区块链技术有限公司 | 一种视觉疲劳提醒的方法、装置、设备及可读存储介质 |
CN115113784A (zh) * | 2021-03-08 | 2022-09-27 | 北京七鑫易维信息技术有限公司 | 一种显示方法、装置、设备及存储介质 |
Family Cites Families (25)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5422653A (en) * | 1993-01-07 | 1995-06-06 | Maguire, Jr.; Francis J. | Passive virtual reality |
US20020044152A1 (en) * | 2000-10-16 | 2002-04-18 | Abbott Kenneth H. | Dynamic integration of computer generated and real world images |
JP2007225282A (ja) * | 2004-03-31 | 2007-09-06 | Pioneer Electronic Corp | 情報提示装置、情報提示プログラム及び情報提示方法等 |
US8232962B2 (en) * | 2004-06-21 | 2012-07-31 | Trading Technologies International, Inc. | System and method for display management based on user attention inputs |
JP2006072876A (ja) | 2004-09-06 | 2006-03-16 | Fuji Xerox Co Ltd | 情報提示装置及び情報提示方法、並びにコンピュータ・プログラム |
JP4596910B2 (ja) * | 2004-12-28 | 2010-12-15 | 日産ライトトラック株式会社 | 車両情報表示装置 |
JP4645299B2 (ja) * | 2005-05-16 | 2011-03-09 | 株式会社デンソー | 車載用表示装置 |
WO2007050029A2 (en) * | 2005-10-28 | 2007-05-03 | Tobii Technology Ab | Eye tracker with visual feedback |
CN1830389A (zh) * | 2006-04-21 | 2006-09-13 | 太原理工大学 | 疲劳驾驶状态监控装置及方法 |
JP2008013070A (ja) | 2006-07-06 | 2008-01-24 | Toyota Motor Corp | 車両用表示装置 |
JP2008267878A (ja) * | 2007-04-17 | 2008-11-06 | Toyota Motor Corp | ナビゲーション装置 |
CN101030316B (zh) * | 2007-04-17 | 2010-04-21 | 北京中星微电子有限公司 | 一种汽车安全驾驶监控系统和方法 |
JP5264193B2 (ja) * | 2008-01-18 | 2013-08-14 | キヤノン株式会社 | 表示装置及びその制御方法 |
JP2009229385A (ja) * | 2008-03-25 | 2009-10-08 | Kenwood Corp | 車載用表示制御装置、方法及びプログラム |
JP2010039646A (ja) * | 2008-08-01 | 2010-02-18 | Dainippon Printing Co Ltd | 契約端末装置、契約管理システム、方法、プログラム、記録媒体 |
JP5292978B2 (ja) | 2008-08-01 | 2013-09-18 | 富士通株式会社 | 制御装置、情報処理装置、及びメモリモジュール認識方法 |
JP5311012B2 (ja) * | 2008-09-29 | 2013-10-09 | マツダ株式会社 | 車両用運転支援装置 |
EP2491709B1 (en) * | 2009-10-19 | 2018-09-26 | Intergraph Corporation | Data search, parser, and synchronization of video and telemetry data |
US20120236172A1 (en) * | 2011-03-14 | 2012-09-20 | Geovector Corp. | Multi Mode Augmented Reality Search Systems |
CN102779502A (zh) * | 2011-05-11 | 2012-11-14 | 中兴通讯股份有限公司 | 一种控制终端屏幕的方法及终端 |
JP2012245880A (ja) * | 2011-05-27 | 2012-12-13 | Isuzu Motors Ltd | 車両用表示装置 |
US8886530B2 (en) * | 2011-06-24 | 2014-11-11 | Honda Motor Co., Ltd. | Displaying text and direction of an utterance combined with an image of a sound source |
JP5863423B2 (ja) * | 2011-11-30 | 2016-02-16 | キヤノン株式会社 | 情報処理装置、情報処理方法及びプログラム |
EP2831699A1 (en) * | 2012-03-30 | 2015-02-04 | Sony Mobile Communications AB | Optimizing selection of a media object type in which to present content to a user of a device |
EP2847648A4 (en) * | 2012-05-09 | 2016-03-02 | Intel Corp | EYE PERSONALIZED SELECTIVE STRESSING OF PARTS OF AN INDICATION |
-
2013
- 2013-07-18 DE DE112013007242.4T patent/DE112013007242T5/de not_active Withdrawn
- 2013-07-18 US US14/766,862 patent/US10109258B2/en active Active
- 2013-07-18 JP JP2015527112A patent/JP6095781B2/ja not_active Expired - Fee Related
- 2013-07-18 WO PCT/JP2013/069520 patent/WO2015008363A1/ja active Application Filing
- 2013-07-18 CN CN201380076180.5A patent/CN105164499B/zh not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
JPWO2015008363A1 (ja) | 2017-03-02 |
WO2015008363A1 (ja) | 2015-01-22 |
CN105164499A (zh) | 2015-12-16 |
DE112013007242T5 (de) | 2016-04-07 |
US20160012801A1 (en) | 2016-01-14 |
CN105164499B (zh) | 2019-01-11 |
US10109258B2 (en) | 2018-10-23 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6095781B2 (ja) | 情報提示装置及び情報提示方法 | |
US11535260B2 (en) | Attention-based notifications | |
CN111163968B (zh) | 交通工具中的显示系统 | |
US9904362B2 (en) | Systems and methods for use at a vehicle including an eye tracking device | |
US9530065B2 (en) | Systems and methods for use at a vehicle including an eye tracking device | |
US9838814B2 (en) | Displaying sound indications on a wearable computing system | |
US9043042B2 (en) | Method to map gaze position to information display in vehicle | |
WO2015019542A1 (ja) | 視野算出装置および視野算出方法 | |
US20140070934A1 (en) | Methods and systems for monitoring driver object detection | |
US10002300B2 (en) | Apparatus and method for monitoring driver's concentrativeness using eye tracing | |
JP2010018201A (ja) | 運転者支援装置、運転者支援方法および運転者支援処理プログラム | |
JP2017016457A (ja) | 表示制御装置、投影装置、表示制御プログラム、および記録媒体 | |
JP2018185654A (ja) | ヘッドアップディスプレイ装置 | |
JP2017072800A (ja) | 表示制御装置、投影装置、および表示制御プログラム | |
KR20120124256A (ko) | 운전자 상태감지 모듈을 이용한 클러스터 컨텐츠 표시시스템 및 클러스터 컨텐츠 표시방법 | |
JP2015228203A (ja) | 表示制御装置、投影装置、表示制御プログラム、および記録媒体 | |
JP2011086125A (ja) | 視認検出装置 | |
JP2010118024A (ja) | 表示制御システム、表示制御方法、及び表示制御プログラム | |
US9376019B2 (en) | Method for operating a control device for a display in a motor vehicle and correspondingly functioning control device | |
KR101619267B1 (ko) | 차량의 hud 제어 방법, 및 차량의 hud 제어 장치 | |
US11768650B2 (en) | Display control device, display system, and display control method for controlling display of information | |
JP2014174313A (ja) | データ再生装置、集積回路、モバイル機器、データ再生方法 | |
JP7262040B2 (ja) | 情報提示システム、情報提示方法、プログラム、及び、移動体 | |
JP2017204177A (ja) | ドライバ状態判定装置 | |
JP2021124972A (ja) | 情報処理システム、および情報処理プログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20170117 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20170214 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6095781 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
LAPS | Cancellation because of no payment of annual fees |