CN105164499A - 信息提示装置和信息提示方法 - Google Patents

信息提示装置和信息提示方法 Download PDF

Info

Publication number
CN105164499A
CN105164499A CN201380076180.5A CN201380076180A CN105164499A CN 105164499 A CN105164499 A CN 105164499A CN 201380076180 A CN201380076180 A CN 201380076180A CN 105164499 A CN105164499 A CN 105164499A
Authority
CN
China
Prior art keywords
prompting
resolution
user
information
mentioned
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201380076180.5A
Other languages
English (en)
Other versions
CN105164499B (zh
Inventor
西村洋
中村芳知
岛田淳
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Mitsubishi Electric Corp
Original Assignee
Mitsubishi Electric Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Mitsubishi Electric Corp filed Critical Mitsubishi Electric Corp
Publication of CN105164499A publication Critical patent/CN105164499A/zh
Application granted granted Critical
Publication of CN105164499B publication Critical patent/CN105164499B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/36—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory
    • G09G5/37—Details of the operation on graphic patterns
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/34—Route searching; Route guidance
    • G01C21/36—Input/output arrangements for on-board computers
    • G01C21/3626—Details of the output of route guidance instructions
    • G01C21/365—Guidance using head up displays or projectors, e.g. virtual vehicles or arrows projected on the windscreen or on the road itself
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/013—Eye tracking input arrangements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/18—Eye characteristics, e.g. of the iris
    • G06V40/19—Sensors therefor
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/22—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of characters or indicia using display control signals derived from coded signals representing the characters or indicia, e.g. with a character-code memory
    • G09G5/30—Control of display attribute
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • G02B2027/014—Head-up displays characterised by optical features comprising information/image processing systems
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0179—Display position adjusting means not related to the information to be displayed
    • G02B2027/0187—Display position adjusting means not related to the information to be displayed slaved to motion of at least a part of the body of the user, e.g. head, eye
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/01—Indexing scheme relating to G06F3/01
    • G06F2203/011—Emotion or mood input determined on the basis of sensed human body parameters such as pulse, heart rate or beat, temperature of skin, facial expressions, iris, voice pitch, brain activity patterns
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00—Control of display operating conditions
    • G09G2320/08—Arrangements within a display terminal for setting, manually or automatically, display parameters of the display terminal
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00—Aspects of display data processing
    • G09G2340/14—Solving problems related to the presentation of information to be displayed
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2380/00—Specific applications
    • G09G2380/10—Automotive applications

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Automation & Control Theory (AREA)
  • Computer Hardware Design (AREA)
  • Optics & Photonics (AREA)
  • Ophthalmology & Optometry (AREA)
  • Multimedia (AREA)
  • General Health & Medical Sciences (AREA)
  • Health & Medical Sciences (AREA)
  • Navigation (AREA)
  • Traffic Control Systems (AREA)
  • User Interface Of Digital Computer (AREA)
  • Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)

Abstract

信息提示装置具有：注视时间计测部(4)，其根据用户的视线确定注视区域，计测作为该注视区域与由提示信息取得部(3)取得的提示信息所表示的显示区域重叠的时间的注视时间(T)；掌握最低需要时间确定部(6)，其根据该提示信息所表示的提示对象的种类，确定作为掌握提示对象的内容最低所需的时间的掌握最低需要时间(Tmin)；以及用户识别度判定部(7)，其比较该注视时间(T)与掌握最低需要时间(Tmin)，并根据其比较结果判定用户对提示对象的识别度，提示形式选择部(8)按照与由用户识别度判定部(7)判定出的识别度对应的提示形式对提示对象进行提示。

Description

信息提示装置和信息提示方法
技术领域
本发明例如涉及在汽车导航装置的显示器等中显示提示对象(例如，图标、文字、地图、视频等)的信息提示装置和信息提示方法。
背景技术
在以下的专利文献1所公开的信息提示装置中，检测车辆的驾驶员的视线，确定驾驶员正在注视的注视对象，显示与该注视对象的种类对应的信息。
由此，能够适当地提供驾驶员所需要的信息。
在以下的专利文献2所公开的信息提示装置中，具有将用户的视线动作检测为用户状态的单元，例如，检测用户的视线朝向画面外的状态、眨眼波形变得缓慢的状态、眼球成分急速减少的状态。
该信息提示装置如果检测到上述的状态，则判断为处于能够在画面上显示信息的时期，根据配置在画面上的窗口的状态与用户的注视点之间的关系，决定信息的显示位置而显示该信息。
由此，能够不妨碍用户的作业集中，减少看漏的危险性。
现有专利文献
专利文献
专利文献1：日本特开2008-13070号公报(段落编号[0007])
专利文献2：日本特开2006-72876号公报(段落编号[0016][0020])
发明内容
发明要解决的课题
由于以往的信息提示装置是以如上方式构成的，因此，在专利文献1的情况下，能够适当地提供驾驶员所需要的信息，但无法掌握用户对提示对象的识别度而调整信息量。因此，存在这样的课题：由于信息过多，导致信息的看漏或烦杂。
并且，在专利文献2的情况下，能够根据用户的视线动作判断提示信息的时期，但与专利文献1同样，无法掌握用户对提示对象的识别度而调整信息量。因此，存在这样的课题：由于信息过多，导致信息的看漏或烦杂。
本发明是为了解决上述这样的课题而完成的，其目的在于，得到一种信息提示装置和信息提示方法，能够抑制过多的信息提示而减轻因信息提示导致的烦杂。
用于解决课题的手段
本发明的信息提示装置设置有识别度判定单元，该识别度判定单元比较用户注视提示对象的注视时间与根据提示对象的内容而确定的掌握需要时间，并根据其比较结果判定用户对提示对象的识别度，提示处理单元按照与由识别度判定单元判定出的识别度对应的提示形式对提示对象进行提示。
发明效果
根据本发明，构成为设置有识别度判定单元，该识别度判定单元比较用户注视提示对象的注视时间与根据提示对象的内容而确定的掌握需要时间，并根据其比较结果判定用户对提示对象的识别度，提示处理单元按照与由识别度判定单元判定出的识别度对应的提示形式对提示对象进行提示，因此，存在如下效果：能够抑制过多的信息提示，减轻因信息的提示导致的烦杂。
附图说明
图1是示出本发明的实施方式1的信息提示装置的结构图。
图2是示出本发明的实施方式1的信息提示装置的处理内容(信息提示方法)的流程图。
图3是示出车辆内的HUD、汽车导航装置的显示器以及仪表盘的说明图。
图4是示出由掌握最低需要时间存储部5存储的表的说明图。
图5是示出与用户的识别度对应的提示形式的一例的说明图。
图6是示出本发明的实施方式2的信息提示装置的结构图。
图7是示出与用户的识别度以及提示对象的重要度对应的提示形式的一例的说明图。
具体实施方式
以下，为了更详细地说明本发明，根据附图详细地说明用于实施本发明的方式。
实施方式1.
图1是示出本发明的实施方式1的信息提示装置的结构图。
在图1中，视线计测摄像机1例如由CCD摄像机等摄像装置构成，实施如下处理：拍摄用于检测用户的视线的图像(视线检测用图像)、并输出该视线检测用图像的图像数据。视线检测用图像是拍摄用户的脸而得到的图像。
视线检测部2例如由安装有CPU的半导体集成电路或者单片机等构成，实施如下处理：分析从视线计测摄像机1输出的图像数据来检测用户的视线。
提示信息取得部3例如由安装有CPU的半导体集成电路或者单片机等构成，实施如下处理：例如从应用程序中取得表示当前由显示处理部9显示的提示对象(例如，图标、文字、地图、视频等)、或者之后要显示在显示处理部9中的提示对象的种类、显示区域(显示位置)、大小、颜色、定时、动画的表达方法、重要度等的提示信息。
注视时间计测部4例如由安装有CPU的半导体集成电路或者单片机等构成，实施如下的处理：根据由视线检测部2检测到的视线，确定作为用户正在观察的区域的注视区域，计测注视时间T，该注视时间T是该注视区域与由提示信息取得部3取得的提示信息所表示的显示区域重叠的时间。
掌握最低需要时间存储部5例如由RAM或硬盘等存储装置构成，存储有表示提示对象的种类与掌握最低需要时间(掌握提示对象的内容最低需要的时间)之间的对应关系的表。
掌握最低需要时间确定部6例如由安装有CPU的半导体集成电路或者单片机等构成，实施如下处理：参照由掌握最低需要时间存储部5存储的表，确定与由提示信息取得部3取得的提示信息所表示的提示对象的种类对应的掌握最低需要时间Tmin。
用户识别度判定部7例如由安装有CPU的半导体集成电路或者单片机等构成，实施如下处理：比较由注视时间计测部4计测出的注视时间T与由掌握最低需要时间确定部6确定的掌握最低需要时间Tmin，根据其比较结果判定用户对提示对象的识别度。另外，用户识别度判定部7构成识别度判定单元。
提示形式选择部8例如由GPU(GraphicsProcessingUnit)或者单片机等构成，实施如下处理：按照与由用户识别度判定部7判定出的识别度对应的提示形式在显示处理部9中显示提示对象，并且将表示该提示对象的内容的语音数据输出到语音输出部10。
显示处理部9例如由液晶显示器等构成，在提示形式选择部8的控制下，在画面中显示提示对象。
语音输出部10例如由扬声器等构成，根据从提示形式选择部8输出的语音数据输出语音。
另外，提示处理单元由提示形式选择部8、显示处理部9以及语音输出部10构成。
在图1中，假定作为信息提示装置的结构要素的视线计测摄像机1、视线检测部2、提示信息取得部3、注视时间计测部4、掌握最低需要时间存储部5、掌握最低需要时间确定部6、用户识别度判定部7、提示形式选择部8、显示处理部9以及语音输出部10分别由专用的硬件构成，但信息提示装置的全部或者一部分也可以由计算机构成。
例如，在信息提示装置的一部分(视线检测部2、提示信息取得部3、注视时间计测部4、掌握最低需要时间存储部5、掌握最低需要时间确定部6、用户识别度判定部7、提示形式选择部8)由计算机构成的情况下，在计算机的内部存储器或者外部存储器上构成掌握最低需要时间存储部5，并且在计算机的存储器中存储记述有视线检测部2、提示信息取得部3、注视时间计测部4、掌握最低需要时间确定部6、用户识别度判定部7以及提示形式选择部8的处理内容的程序，该计算机的CPU执行存储在该存储器中的程序即可。
图2是示出本发明的实施方式1的信息提示装置的处理内容(信息提示方法)的流程图。
接着，对动作进行说明。
在本实施方式1中，信息提示装置搭载于车辆，HUD(Head－UpDisplay：平视显示器)、汽车导航装置的显示器以及仪表盘具有显示处理部9的功能。
图3是示出车辆内的HUD、汽车导航装置的显示器以及仪表盘的说明图。
视线计测摄像机1拍摄作为用于检测用户的视线的图像的视线检测用图像，将该视线检测用图像的图像数据输出到视线检测部2(图2的步骤ST1)。另外，连续地或者间断地重复进行视线检测用图像的拍摄。
视线检测部2每次从视线计测摄像机1接受视线检测用图像的图像数据，分析该图像数据，检测用户的视线(步骤ST2)。
由于分析图像数据而检测用户的视线的处理本身是公知的技术，因此省略详细的说明。
另外，作为用户视线的检测结果，例如将用户正观察的地点(注视点)的二维坐标(配置有HUD、汽车导航装置的显示器以及仪表盘的面的XY坐标)、或者用户正观察的地点(注视点)的三维坐标(配置有HUD、汽车导航装置的显示器以及仪表盘的空间的XYZ坐标)按时间序列输出到注视时间计测部4。
提示信息取得部3例如从应用程序中取得表示当前显示在显示处理部9中的提示对象、或者之后显示在显示处理部9中的提示对象的种类、显示区域(显示位置)、大小、颜色、定时、动画的表达方法、重要度等的提示信息，将该提示信息输出到注视时间计测部4和掌握最低需要时间确定部6(步骤ST3)。
注视时间计测部4根据基于视线检测部2的视线的检测结果确定作为用户正观察的区域的注视区域。
这里，注视区域是指以用户正观察的地点(注视点)为中心的有效视场的范围内的区域(除了稳定注视视场)。
在确定用户的注视区域后，注视时间计测部4计测作为该注视区域与由提示信息取得部3取得的提示信息所表示的显示区域重叠的时间的注视时间T(步骤ST4)。
例如，在由提示信息取得部3取得的提示信息所表示的显示区域是汽车导航装置的显示器时，将用户的注视区域包含汽车导航装置的显示器的时间计测为注视时间T。
掌握最低需要时间确定部6从提示信息取得部3接受提示信息后，参照由掌握最低需要时间存储部5存储的表，确定与该提示信息所表示的提示对象的种类对应的掌握最低需要时间Tmin(步骤ST5)。
这里，图4是示出由掌握最低需要时间存储部5存储的表的说明图。
掌握最低需要时间Tmin是掌握提示对象的内容最低所需的时间。
在图4中示出如下的例子：如果提示对象的种类是图标，则掌握最低需要时间Tmin是1.5秒，如果提示对象的种类是文字，则掌握最低需要时间Tmin是文字数×0.8秒。
另外，掌握最低需要时间Tmin也可以根据用户的属性(例如，视线的状态、疲劳度、年龄、理解力等)发生变化。
例如，在用户是60岁以上的高龄者的情况下，可考虑使上述的掌握最低需要时间Tmin加上1.0秒的方式。
在注视时间计测部4计测注视时间T、且掌握最低需要时间确定部6确定掌握最低需要时间Tmin后，用户识别度判定部7比较该注视时间T与掌握最低需要时间Tmin，根据其比较结果判定用户对提示对象的识别度。
以下，具体地说明用户识别度判定部7对用户识别度的判定处理。
这里，将无法充分地掌握提示对象的内容、但认为可稍微掌握的时间定义为“微小掌握时间TLittle”。
另外，可认为微小掌握时间TLittle是比掌握最低需要时间Tmin短的0.75秒等。
当注视时间计测部4计测注视时间T时，用户识别度判定部7比较该注视时间T与微小掌握时间TLittle(步骤ST6)，如果该注视时间T比微小掌握时间TLittle短，则可认为用户对提示对象的识别度极低，因此，将用户的识别度认定为“级别1”(步骤ST7)。
如果该注视时间T为微小掌握时间TLittle以上，则用户识别度判定部7比较该注视时间T与掌握最低需要时间Tmin(步骤ST8)。
在该注视时间T比掌握最低需要时间Tmin短的情况下，由于可认为无法充分地掌握提示对象的内容、但可以稍微掌握，因此，用户识别度判定部7将用户的识别度认定为“级别2”(步骤ST9)。
并且，如果该注视时间T为掌握最低需要时间Tmin以上，则可认为已充分地掌握提示对象的内容，因此，用户识别度判定部7将用户的识别度认定为“级别3”(步骤ST10)。
在用户识别度判定部7判定用户对提示对象的识别度后，提示形式选择部8从多个提示形式中，选择与用户的识别度对应的提示形式。
即，提示形式选择部8选择由用户识别度判定部7判定的用户的识别度越高、则越不明显的提示形式，如果用户的识别度是最低的级别1，则选择最明显的提示形式(步骤ST11)，如果用户的识别度是中等的级别2，则选择稍微明显的提示形式(步骤ST12)，如果用户的识别度是最高的级别3，则选择不明显的提示形式(步骤ST13)。
这里，图5是示出与用户的识别度对应的提示形式的一例的说明图。
在图5中示出如下的例子：在提示对象的种类是图标的情况下，如果识别度是最低的级别1，则选择图标的闪烁显示+语音引导作为提示形式。
并且，示出如下的例子：如果识别度是中等的级别2，则仅选择图标的闪烁显示作为提示形式，如果识别度是最高的级别3，则不进行图标的强调表达作为提示形式。
提示形式选择部8选择与用户的识别度对应的提示形式后，按照该提示形式，在显示处理部9中显示提示对象，并且将表示该提示对象的内容的语音数据输出到语音输出部10。
即，如果用户的识别度是最低的级别1，则提示形式选择部8按照与级别1对应的提示形式在显示处理部9中显示提示对象，并且将表示该提示对象的内容的语音数据输出到语音输出部10(步骤ST14)，如果用户的识别度是中等的级别2，则提示形式选择部8按照与级别2对应的提示形式在显示处理部9中显示提示对象，并且将表示该提示对象的内容的语音数据输出到语音输出部10(步骤ST15)。
并且，如果用户的识别度是最高的级别3，则按照与级别3对应的提示形式在显示处理部9中显示提示对象，并且将表示该提示对象的内容的语音数据输出到语音输出部10(步骤ST16)。
以下，说明提示形式选择部8对提示对象进行提示时的具体例。但是，以下的具体的内容仅为一例。
例如，在汽车导航装置的广播是提示对象、该广播是“ルートから外れています(偏离路径)”的情况下，该提示对象的种类是文字，该文字字数是11，因此，如图4所示，掌握最低需要时间Tmin是8.8秒(＝11×0.8秒)。
因此，如果用户观察汽车导航装置的显示器的注视时间T是8.8秒以上，则按照与用户的识别度最高的级别3对应的提示形式对提示对象进行提示。
在图5的例子中，不进行使广播“ルートから外れています(偏离路径)”闪烁等的强调表达(为了防止因信息提示导致的烦杂的产生，而不进行强调表达)，在作为显示处理部9的汽车导航装置的显示器中显示广播“ルートから外れています(偏离路径)”。
另外，如果用户观察汽车导航装置的显示器的注视时间T为微小掌握时间TLittle(0.75秒)以上且小于8.8秒，则按照与用户的识别度中等的级别2对应的提示形式对提示对象进行提示。
在图5的例子中，在作为显示处理部9的汽车导航装置的显示器中闪烁显示广播“ルートから外れています(偏离路径)”，从而使用户注意显示广播的情况
另外，如果用户观察汽车导航装置的显示器的注视时间T比微小掌握时间TLittle(0.75秒)短，则按照与用户的识别度最低的级别1对应的提示形式对提示对象进行提示。
在图5的例子中，为了使用户可靠地注意提示广播的情况，在作为显示处理部9的汽车导航装置的显示器中闪烁显示广播“ルートから外れています(偏离路径)”，并且从语音输出部10输出广播“ルートから外れています(偏离路径)”的语音。
例如，在表示车辆异常的警告是提示对象、在仪表盘中提示表示该警告内容的图标(例如，表示发动机异常的图标)的情况下，由于该提示对象的种类是图标，因此，掌握最低需要时间Tmin如图4所示为1.5秒。
因此，如果用户观察仪表盘的注视时间T是1.5秒以上，则按照与用户的识别度最高的级别3对应的提示形式对提示对象进行提示。
在图5的例子中，不进行闪烁图标等的强调表达(为了防止因信息提示导致的烦杂的产生而不进行强调表达)，在作为显示处理部9的仪表盘中显示图标。
并且，如果用户观察仪表盘的注视时间T是微小掌握时间TLittle(0.75秒)以上且小于1.5秒，则按照与用户的识别度是中等的级别2对应的提示形式对提示对象进行提示。
在图5的例子中，在作为显示处理部9的仪表盘中闪烁显示图标，从而使用户注意显示图标的情况。
并且，如果用户观察仪表盘的注视时间T比微小掌握时间TLittle(0.75秒)短，则按照与用户的识别度最低的级别1对应的提示形式对提示对象进行提示。
在图5的例子中，为了使用户可靠地注意提示图标的情况，在作为显示处理部9的仪表盘中闪烁显示图标，并且从语音输出部10输出图标表示的内容(例如，发动机异常)的语音。
这里，示出了判定用户对1个提示对象的识别度，并根据用户对该提示对象的识别度，在汽车导航装置的显示器或仪表盘中显示该提示对象的例子，但也可以同时地判定用户对多个提示对象的识别度，根据用户对各个提示对象的识别度，在任意的显示处理部9中显示各个提示对象。
由以上可知，根据本实施方式1，可实现如下效果：设置有：注视时间计测部4，根据由视线检测部2检测到的视线确定作为用户正观察的区域的注视区域，计测作为该注视区域与由提示信息取得部3取得的提示信息所表示的显示区域重叠的时间的注视时间T；掌握最低需要时间确定部6，其根据由提示信息取得部3取得的提示信息所表示的提示对象的种类，确定作为掌握提示对象的内容最低所需的时间即掌握最低需要时间Tmin；以及用户识别度判定部7，其比较由注视时间计测部4计测到的注视时间T与由掌握最低需要时间确定部6确定到的掌握最低需要时间Tmin，根据其比较结果判定用户对提示对象的识别度，由于提示形式选择部8构成为按照与由用户识别度判定部7判定出的识别度对应的提示形式对提示对象进行提示，因此，能够抑制过多的信息提示，减轻因信息的提示导致的烦杂。
因此，例如，在从汽车导航装置所提示的路径偏离的情况下，如果在以往，关于“ルートから外れています(偏离路径)”这样的语音引导，在偏离路径的期间，会产生持续鸣响的烦杂、或重选路径的选择项不从汽车导航装置的画面上消失的烦杂，并且由于重选路径的选择项不从画面上消失，从而产生地图信息的面积减少等问题，但在本实施方式1中，当用户的识别度变高时，例如停止语音引导、或者使重选路径的选择项移动或停止，从而能够抑制过多的信息提示，减轻因信息的提示导致的烦杂。
在本实施方式1中，将信息提示装置搭载于车辆，对HUD、汽车导航装置的显示器和仪表盘具有显示处理部9的功能的情况进行了说明，但例如监视控制系统的显示器、电车的驾驶席的显示器、飞机的座舱的显示器、设置于船的驾驶席的监视器、伴随着触摸操作的设置于公共空间的数字标牌等也可以具有显示处理部9的功能，提示形式选择部8也可以在这些显示器等中显示提示对象。
并且，在本实施方式1中，对这样的情况进行了说明：掌握最低需要时间存储部5存储表示提示对象的种类与掌握最低需要时间(掌握提示对象的内容最低所需的时间)之间的对应关系的表，掌握最低需要时间确定部6实施如下处理：参照由掌握最低需要时间存储部5存储的表，确定掌握最低需要时间Tmin，用户识别度判定部7实施如下处理：比较由注视时间计测部4计测到的注视时间T与由掌握最低需要时间确定部6确定的掌握最低需要时间Tmin，并根据其比较结果，判定用户对提示对象的识别度。
然而，用户识别度判定部7只要比较由注视时间计测部4计测到的注视时间T与根据提示对象的内容确定的规定时间(掌握时间)，根据其比较结果判定用户对提示对象的识别度即可，掌握时间不限于掌握最低需要时间Tmin。例如，用于掌握提示对象的内容的平均时间、多人的样本也可以是为了掌握提示对象的内容所需的时间的最大时间等。
在该情况下，构成为实施如下处理：掌握最低需要时间存储部5存储表示提示对象的种类与掌握时间之间的对应关系的表，掌握最低需要时间确定部6参照由掌握最低需要时间存储部5存储的表，确定掌握时间。
并且，也可以参照由外部装置测定出的注视时间，利用外部装置补充显示处理部9和语音输出部10的功能。在该情况下，不需要图1中的视线计测摄像机1、视线检测部2、注视时间计测部4、显示处理部9以及语音输出部10。
此外，像本实施方式1那样，在提示对象不是提示多个信息而是提示单一信息的情况下，不需要参照掌握最低需要时间的表。在该情况下，不需要图1中的提示信息取得部3、掌握最低需要时间存储部5以及掌握最低需要时间确定部6。
实施方式2.
图6是示出本发明的实施方式2的信息提示装置的结构图，在图中，由于与图1同一标号表示相同或相应部分，因此，省略说明。
车载信息取得部11例如由安装有CPU的半导体集成电路、或者单片机等构成，实施用于取得表示当前的车辆的状态等的车载信息(例如，车速、加速度、汽油车的汽油余量、电动车辆的能源余量、轮胎气压、当前位置等位置信息、外界气温、车内的温度/湿度、当前再现的音乐、导航信息等车内外的信息)的处理。
重要度判定部12例如由安装有CPU的半导体集成电路、或者单片机等构成，实施根据由车载信息取得部11取得的车载信息来判定提示对象的重要度的处理。
另外，由车载信息取得部11和重要度判定部12构成重要度判定单元。
提示形式选择部13例如由GPU、或者单片机等构成，实施如下处理：按照与由用户识别度判定部7判定出的识别度以及由重要度判定部12判定出的重要度对应的提示形式在显示处理部9中显示提示对象，并且将表示该提示对象的内容的语音数据输出到语音输出部10。另外，提示形式选择部13构成提示处理单元。
在图6中，假定作为信息提示装置的结构要素的视线计测摄像机1、视线检测部2、提示信息取得部3、注视时间计测部4、掌握最低需要时间存储部5、掌握最低需要时间确定部6、用户识别度判定部7、车载信息取得部11、重要度判定部12、提示形式选择部13、显示处理部9以及语音输出部10分别由专用的硬件构成，但信息提示装置的全部或者一部分也可以由计算机构成。
例如，在信息提示装置的一部分(视线检测部2、提示信息取得部3、注视时间计测部4、掌握最低需要时间存储部5、掌握最低需要时间确定部6、用户识别度判定部7、车载信息取得部11、重要度判定部12、提示形式选择部13)由计算机构成的情况下，在计算机的内部存储器或者外部存储器上构成掌握最低需要时间存储部5，并且在计算机的存储器中存储记述有对视线检测部2、提示信息取得部3、注视时间计测部4、掌握最低需要时间确定部6、用户识别度判定部7、车载信息取得部11、重要度判定部12以及提示形式选择部13的处理内容的程序，该计算机的CPU执行存储在该存储器中的程序即可。
在上述实施方式1中示出了提示形式选择部8按照与由用户识别度判定部7判定出的识别度对应的提示形式在显示处理部9中显示提示对象、并且将表示该提示对象的内容的语音数据输出到语音输出部10的情况，但也可以是，提示形式选择部13按照与由用户识别度判定部7判定出的识别度以及由重要度判定部12判定出的重要度对应的提示形式在显示处理部9中显示提示对象，并且将表示该提示对象的内容的语音数据输出到语音输出部10。
具体而言，如下所述。
由于除了车载信息取得部11、重要度判定部12以及提示形式选择部13之外都与上述实施方式1相同，因此，这里仅对车载信息取得部11、重要度判定部12以及提示形式选择部13的处理内容进行说明。
车载信息取得部11取得表示当前车辆的状态等的车载信息，将该车载信息输出到重要度判定部12。
作为车载信息，例如取得车速、加速度、汽油车的汽油余量、电动车辆的能源余量、轮胎气压、当前位置等位置信息、外界气温、车内的温度/湿度、当前再现的音乐、导航信息等车内外的信息。
重要度判定部12在获取由提示信息取得部3取得的提示信息并从车载信息取得部1接收与该提示信息相关的车载信息后，根据该车载信息判定提示对象的重要度。
例如，在表示车辆异常的警告是提示对象、在仪表盘上提示将汽油余量的降低作为警告内容的图标的情况下，根据关于汽油余量的车载信息，判定提示对象的重要度。
具体而言，在关于汽油余量的车载信息表示汽油余量30％以下的情况下，将提示对象的重要度设为重要度1(重要度为低)，在表示汽油余量为20％以下的情况下，将提示对象的重要度设为重要度2(重要度为中)，在表示汽油余量10％以下的情况下，将提示对象的重要度设为重要度3(重要度为高)。
在用户识别度判定部7判定用户对提示对象的识别度、重要度判定部12判定提示对象的重要度后，提示形式选择部13从多个提示形式中选择与用户的识别度以及提示对象的重要度对应的提示形式。
即，提示形式选择部13与图1的提示形式选择部8同样，选择由用户识别度判定部7判定出的用户的识别度越高、则越不明显的提示形式，选择提示对象的重要度越高、则越明显的提示形式。
这里，图7是示出与用户的识别度以及提示对象的重要度对应的提示形式的一例的说明图。
在本实施方式2中，即使用户的识别度为同级，如果提示对象的重要度不同，则也选择不同的提示形式。
在图7中，例如在用户的识别度为级别1的情况下，如果汽油余量为10％以下(重要度3)，则紧急性较高，需要使用户可靠地识别提示对象，因此，在作为显示处理部9的仪表盘中闪烁显示图标，并且在作为显示处理部9的HUD或汽车导航装置的显示器等中显示表示汽油的余量为10％以下的消息。并且，从语音输出部10语音输出表示汽油的余量为10％以下的消息。
即使用户的识别度都为级别1，在汽油余量为20％以下的情况下(重要度2)，由于紧急性不像汽油余量为10％以下的情况那样高，因此，在作为显示处理部9的仪表盘中闪烁显示图标，在作为显示处理部9的HUD或汽车导航装置的显示器等中显示表示汽油的余量为20％以下的消息，但关于表示汽油的余量为20％以下的消息，不进行语音输出。
并且，即使用户的识别度都为级别1，由于在汽油余量为30％以下的情况下(重要度2)，紧急性不高，因此，从减轻因信息过多导致的烦杂的观点出发，仅进行图标的闪烁显示。
以上可以明显看出，根据本实施方式2，具有根据由车载信息取得部11取得的车载信息来判定提示对象的重要度的重要度判定部12，由于提示形式选择部13构成为按照与由用户识别度判定部7判定出的识别度和由重要度判定部12判定出的重要度对应的提示形式，在显示处理部9中显示提示对象，并且将表示该提示对象的内容的语音数据输出到语音输出部10，因此，与上述实施方式1同样实现如下效果：能够抑制过多的信息提示而减轻因信息的提示导致的烦杂，按照与当前的状况对应的适当的提示形式对提示对象进行提示。
另外，本发明在本发明的范围内可以进行各实施方式的自由的组合或者各实施方式的任意的结构要素的变形、或者在各实施方式中可以省略任意的结构要素。
产业上的可利用性
本发明的信息提示装置适用于在汽车导航装置的显示器等中显示提示对象(例如，图标、文字、地图、视频等)时非常需要抑制过多的信息提示而减轻因信息提示导致的烦杂的情况。
标号说明
1：视线计测摄像机；2：视线检测部；3：提示信息取得部；4：注视时间计测部；5：掌握最低需要时间存储部；6：掌握最低需要时间确定部；7：用户识别度判定部(识别度判定单元)；8：提示形式选择部(提示处理单元)；9：显示处理部(提示处理单元)；10：语音输出部(提示处理单元)；11：车载信息取得部(重要度判定单元)；12：重要度判定部(重要度判定单元)；13：提示形式选择部(提示处理单元)。

Claims (5)

1.一种信息提示装置，其具有：
识别度判定单元，其比较用户注视提示对象的注视时间与根据上述提示对象的内容而确定的掌握需要时间，并根据其比较结果判定用户对上述提示对象的识别度；以及
提示处理单元，其按照与由上述识别度判定单元判定出的识别度对应的提示形式提示上述提示对象。
2.根据权利要求1所述的信息提示装置，其特征在于，
上述提示处理单元按照由上述识别度判定单元判定出的用户的识别度越高、则越不明显的提示形式提示上述提示对象。
3.根据权利要求1所述的信息提示装置，其特征在于，
该信息提示装置具有用于判定上述提示对象的重要度的重要度判定单元，
上述提示处理单元按照与由上述识别度判定单元判定出的识别度以及由上述重要度判定单元判定出的重要度对应的提示形式提示上述提示对象。
4.根据权利要求3所述的信息提示装置，其特征在于，
上述提示处理单元按照由上述重要度判定单元判定出的重要度越高、则越明显的提示形式提示上述提示对象。
5.一种信息提示方法，包括如下步骤：
识别度判定处理步骤，识别度判定单元比较用户注视提示对象的注视时间与根据上述提示对象的内容而确定的掌握需要时间，根据其比较结果判定用户对上述提示对象的识别度；以及
提示处理步骤，提示处理单元按照与由上述识别度判定处理步骤判定出的识别度对应的提示形式提示上述提示对象。
CN201380076180.5A 2013-07-18 2013-07-18 信息提示装置和信息提示方法 Expired - Fee Related CN105164499B (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/JP2013/069520 WO2015008363A1 (ja) 2013-07-18 2013-07-18 情報提示装置及び情報提示方法

Publications (2)

Publication Number Publication Date
CN105164499A true CN105164499A (zh) 2015-12-16
CN105164499B CN105164499B (zh) 2019-01-11

Family

ID=52345858

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201380076180.5A Expired - Fee Related CN105164499B (zh) 2013-07-18 2013-07-18 信息提示装置和信息提示方法

Country Status (5)

Country Link
US (1) US10109258B2 (zh)
JP (1) JP6095781B2 (zh)
CN (1) CN105164499B (zh)
DE (1) DE112013007242T5 (zh)
WO (1) WO2015008363A1 (zh)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105868157A (zh) * 2016-04-18 2016-08-17 山东交通学院 基于驾驶员注视时间的隧道出入口限速标志位置设定方法
CN107608514A (zh) * 2017-09-20 2018-01-19 维沃移动通信有限公司 信息处理方法及移动终端
CN109313880A (zh) * 2016-06-09 2019-02-05 三菱电机株式会社 显示控制装置、显示装置、车载显示系统及显示控制方法
CN110533894A (zh) * 2019-09-02 2019-12-03 深圳市新系区块链技术有限公司 一种视觉疲劳提醒的方法、装置、设备及可读存储介质
CN115113784A (zh) * 2021-03-08 2022-09-27 北京七鑫易维信息技术有限公司 一种显示方法、装置、设备及存储介质

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20190053814A (ko) * 2016-09-13 2019-05-20 파나소닉 아이피 매니지먼트 가부시키가이샤 음성 제시 방법, 음성 제시 프로그램, 음성 제시 시스템 및 단말 장치
JP7270206B2 (ja) * 2018-12-06 2023-05-10 パナソニックＩｐマネジメント株式会社 情報提示システム、情報提示方法、プログラム、及び、移動体
JP6827204B2 (ja) * 2018-12-21 2021-02-10 パナソニックＩｐマネジメント株式会社 指導情報の出力方法および指導情報の出力システム
WO2020261781A1 (ja) * 2019-06-27 2020-12-30 株式会社デンソー 表示制御装置、表示制御プログラム、および持続的有形コンピュータ読み取り媒体

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2005098360A1 (ja) * 2004-03-31 2005-10-20 Pioneer Corporation 情報提示装置、経路誘導装置、情報提示プログラム、情報記録媒体、及び情報提示方法
CN1830389A (zh) * 2006-04-21 2006-09-13 太原理工大学 疲劳驾驶状态监控装置及方法
CN101030316A (zh) * 2007-04-17 2007-09-05 北京中星微电子有限公司 一种汽车安全驾驶监控系统和方法
CN102668534A (zh) * 2009-10-19 2012-09-12 图形科技公司 视频和遥测数据的数据搜索、解析和同步
CN102779502A (zh) * 2011-05-11 2012-11-14 中兴通讯股份有限公司 一种控制终端屏幕的方法及终端
JP2012245880A (ja) * 2011-05-27 2012-12-13 Isuzu Motors Ltd 車両用表示装置

Family Cites Families (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5422653A (en) * 1993-01-07 1995-06-06 Maguire, Jr.; Francis J. Passive virtual reality
US20020044152A1 (en) * 2000-10-16 2002-04-18 Abbott Kenneth H. Dynamic integration of computer generated and real world images
US8232962B2 (en) * 2004-06-21 2012-07-31 Trading Technologies International, Inc. System and method for display management based on user attention inputs
JP2006072876A (ja) 2004-09-06 2006-03-16 Fuji Xerox Co Ltd 情報提示装置及び情報提示方法、並びにコンピュータ・プログラム
JP4596910B2 (ja) * 2004-12-28 2010-12-15 日産ライトトラック株式会社 車両情報表示装置
JP4645299B2 (ja) * 2005-05-16 2011-03-09 株式会社デンソー 車載用表示装置
EP1943583B1 (en) * 2005-10-28 2019-04-10 Tobii AB Eye tracker with visual feedback
JP2008013070A (ja) 2006-07-06 2008-01-24 Toyota Motor Corp 車両用表示装置
JP2008267878A (ja) * 2007-04-17 2008-11-06 Toyota Motor Corp ナビゲーション装置
JP5264193B2 (ja) * 2008-01-18 2013-08-14 キヤノン株式会社 表示装置及びその制御方法
JP2009229385A (ja) * 2008-03-25 2009-10-08 Kenwood Corp 車載用表示制御装置、方法及びプログラム
JP2010039646A (ja) 2008-08-01 2010-02-18 Dainippon Printing Co Ltd 契約端末装置、契約管理システム、方法、プログラム、記録媒体
JP5292978B2 (ja) 2008-08-01 2013-09-18 富士通株式会社 制御装置、情報処理装置、及びメモリモジュール認識方法
JP5311012B2 (ja) * 2008-09-29 2013-10-09 マツダ株式会社 車両用運転支援装置
US20120236172A1 (en) * 2011-03-14 2012-09-20 Geovector Corp. Multi Mode Augmented Reality Search Systems
JP6017854B2 (ja) * 2011-06-24 2016-11-02 本田技研工業株式会社 情報処理装置、情報処理システム、情報処理方法及び情報処理プログラム
JP5863423B2 (ja) * 2011-11-30 2016-02-16 キヤノン株式会社 情報処理装置、情報処理方法及びプログラム
US20140204014A1 (en) * 2012-03-30 2014-07-24 Sony Mobile Communications Ab Optimizing selection of a media object type in which to present content to a user of a device
EP2847648A4 (en) * 2012-05-09 2016-03-02 Intel Corp EYE PERSONALIZED SELECTIVE STRESSING OF PARTS OF AN INDICATION

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2005098360A1 (ja) * 2004-03-31 2005-10-20 Pioneer Corporation 情報提示装置、経路誘導装置、情報提示プログラム、情報記録媒体、及び情報提示方法
CN1830389A (zh) * 2006-04-21 2006-09-13 太原理工大学 疲劳驾驶状态监控装置及方法
CN101030316A (zh) * 2007-04-17 2007-09-05 北京中星微电子有限公司 一种汽车安全驾驶监控系统和方法
CN102668534A (zh) * 2009-10-19 2012-09-12 图形科技公司 视频和遥测数据的数据搜索、解析和同步
CN102779502A (zh) * 2011-05-11 2012-11-14 中兴通讯股份有限公司 一种控制终端屏幕的方法及终端
JP2012245880A (ja) * 2011-05-27 2012-12-13 Isuzu Motors Ltd 車両用表示装置

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105868157A (zh) * 2016-04-18 2016-08-17 山东交通学院 基于驾驶员注视时间的隧道出入口限速标志位置设定方法
CN105868157B (zh) * 2016-04-18 2018-06-15 山东交通学院 基于驾驶员注视时间的隧道出入口限速标志位置设定方法
CN109313880A (zh) * 2016-06-09 2019-02-05 三菱电机株式会社 显示控制装置、显示装置、车载显示系统及显示控制方法
CN107608514A (zh) * 2017-09-20 2018-01-19 维沃移动通信有限公司 信息处理方法及移动终端
CN110533894A (zh) * 2019-09-02 2019-12-03 深圳市新系区块链技术有限公司 一种视觉疲劳提醒的方法、装置、设备及可读存储介质
CN115113784A (zh) * 2021-03-08 2022-09-27 北京七鑫易维信息技术有限公司 一种显示方法、装置、设备及存储介质

Also Published As

Publication number Publication date
JPWO2015008363A1 (ja) 2017-03-02
US20160012801A1 (en) 2016-01-14
CN105164499B (zh) 2019-01-11
DE112013007242T5 (de) 2016-04-07
US10109258B2 (en) 2018-10-23
WO2015008363A1 (ja) 2015-01-22
JP6095781B2 (ja) 2017-03-15

Similar Documents

Publication Publication Date Title
CN105164499A (zh) 信息提示装置和信息提示方法
CN105667421B (zh) 包括眼跟踪装置的供车辆使用的系统和方法
CN105966311B (zh) 用于校准摄像机的方法、车辆用的设备和计算机程序产品
CN105718230B (zh) 用于验证飞机组件的近眼显示系统和方法
US20140070934A1 (en) Methods and systems for monitoring driver object detection
KR101944473B1 (ko) 차량 상태 및 운행 정보를 디지털 클러스터 형태로 유사하게 표현하기 위한 정보 제공 방법
CN109835260A (zh) 一种车辆信息显示方法、装置、终端和存储介质
US10391937B2 (en) Method and apparatus for detecting a pedestrian by a vehicle during night driving
US9849783B2 (en) Display control apparatus, meter system, and display control method
US9600942B2 (en) Method and system for notifying alarm state of vehicle
US10507729B2 (en) Graphic meter
US9798941B2 (en) Driver visual sensor behavior study device
WO2017020166A1 (en) Method, apparatus and system for presenting information in a vehicle
CN210139817U (zh) 汽车增强现实显示系统及汽车
CN104936827B (zh) 车载显示系统
US20140247255A1 (en) Method for Operating a Control Device for a Display in a Motor Vehicle and Correspondingly Functioning Control Device
JP2015021730A (ja) 車両用表示装置及び車両用表示方法
JP6278655B2 (ja) グラフィックメータ
JP2017146167A (ja) 表示装置、表示方法、及び表示プログラム
JP2016097765A (ja) 車載用表示装置
KR20190059239A (ko) 디지털 클러스터형 통합 차량 정보 제공 방법
US20200269690A1 (en) Display control apparatus and method of display control
JPWO2023286292A5 (ja) 情報処理装置、情報処理方法およびプログラム
Tasaki et al. Depth perception control by hiding displayed images based on car vibration for monocular head-up display
JP2017010191A (ja) 走行情報解析装置及びコンピュータプログラム

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20190111

Termination date: 20210718

CF01 Termination of patent right due to non-payment of annual fee