CN106562793A - 信息提示装置的控制方法、以及信息提示装置 - Google Patents

信息提示装置的控制方法、以及信息提示装置 Download PDF

Info

Publication number
CN106562793A
CN106562793A CN201610806345.5A CN201610806345A CN106562793A CN 106562793 A CN106562793 A CN 106562793A CN 201610806345 A CN201610806345 A CN 201610806345A CN 106562793 A CN106562793 A CN 106562793A
Authority
CN
China
Prior art keywords
emotion
user
prompting
information presentation
presentation device
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201610806345.5A
Other languages
English (en)
Other versions
CN106562793B (zh
Inventor
式井慎
式井慎一
楠龟弘
楠龟弘一
内田真司
伊藤达男
米田亚旗
N·塞拉万
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Intellectual Property Corp of America
Original Assignee
Panasonic Intellectual Property Corp of America
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from JP2016097491A external-priority patent/JP6656079B2/ja
Application filed by Panasonic Intellectual Property Corp of America filed Critical Panasonic Intellectual Property Corp of America
Publication of CN106562793A publication Critical patent/CN106562793A/zh
Application granted granted Critical
Publication of CN106562793B publication Critical patent/CN106562793B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/16—Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/0304—Detection arrangements using opto-electronic means
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/16—Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state
    • A61B5/165—Evaluating the state of mind, e.g. depression, anxiety
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/72—Signal processing specially adapted for physiological signals or for diagnostic purposes
    • A61B5/7271—Specific aspects of physiological measurement analysis
    • A61B5/7275—Determining trends in physiological measurement data; Predicting development of a medical condition based on physiological measurements, e.g. determining a risk factor
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/012—Head tracking input arrangements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/013—Eye tracking input arrangements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/59—Context or environment of the image inside of a vehicle, e.g. relating to seat occupancy, driver state or inner lighting conditions
    • G06V20/597—Recognising the driver's state or behaviour, e.g. attention or drowsiness
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/01—Indexing scheme relating to G06F3/01
    • G06F2203/011—Emotion or mood input determined on the basis of sensed human body parameters such as pulse, heart rate or beat, temperature of skin, facial expressions, iris, voice pitch, brain activity patterns
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2354/00—Aspects of interface with display user
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2380/00—Specific applications
    • G09G2380/10—Automotive applications

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Health & Medical Sciences (AREA)
  • General Physics & Mathematics (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Human Computer Interaction (AREA)
  • Psychiatry (AREA)
  • Public Health (AREA)
  • Molecular Biology (AREA)
  • Veterinary Medicine (AREA)
  • General Health & Medical Sciences (AREA)
  • Animal Behavior & Ethology (AREA)
  • Surgery (AREA)
  • Biophysics (AREA)
  • Pathology (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Medical Informatics (AREA)
  • Multimedia (AREA)
  • Developmental Disabilities (AREA)
  • Social Psychology (AREA)
  • Psychology (AREA)
  • Child & Adolescent Psychology (AREA)
  • Hospice & Palliative Care (AREA)
  • Educational Technology (AREA)
  • Artificial Intelligence (AREA)
  • Physiology (AREA)
  • Signal Processing (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本发明涉及信息提示装置的控制方法、以及信息提示装置。根据本发明的信息提示装置的控制方法，能够更适当地提示推定出的情绪。在可被多个用户视觉识别的提示部中提示信息的信息提示装置的控制方法包括：基于由传感器取得的物理量，推定多个用户中的第一用户的情绪(S101)；使用所取得的物理量或者推定出的情绪，执行关于是否对推定出的情绪进行提示的判定处理(S103)；按照判定处理的结果，控制提示部对推定出的情绪的提示(S104)。

Description

信息提示装置的控制方法、以及信息提示装置
技术领域
本发明涉及信息提示装置的控制方法、以及信息提示装置。
背景技术
公开了推定人的情绪并提示推定出的情绪的装置(例如参照专利文献1)。
现有技术文献
专利文献1：日本特开2013-216241号公报
发明内容
发明所要解决的问题
然而，若通过专利文献1中所公开的装置来推定并提示被测试者的情绪，则由该装置提示的内容能被包括被测试者自身的多人视觉识别。因此，被测试者可能会因为被提示的情绪而感到尴尬。现存在如下问题：被测试者因情绪的提示而背负感到尴尬等精神负担并由此引起情绪变化，之后，可能发生推定出的情绪与被测试者本来应该被推定的情绪不同这一情况。
因此，本发明提供一种更适当地提示推定出的情绪的信息提示装置的控制方法等。
用于解决问题的技术方案
本发明的一技术方案涉及信息提示装置的控制方法，所述信息提示装置在可被多个用户视觉识别的提示部中提示信息，所述控制方法包括：基于由传感器取得的物理量，推定所述多个用户中的第一用户的情绪；使用所取得的所述物理量或者推定出的所述情绪，执行关于是否对推定出的所述情绪进行提示的判定处理；按照所述判定处理的结果，控制所述提示部对推定出的所述情绪的提示。
此外，这些概括的或者具体的技术方案既可以通过系统、方法、集成电路、计算机程序或者计算机可读取的CD-ROM等记录介质而实现，也可以通过系统、方法、集成电路、计算机程序以及记录介质的任意组合而实现。
发明效果
根据本发明的信息提示装置的控制方法，能够更适当地提示推定出的情绪。
附图说明
图1是表示实施方式1中的信息提示装置的功能块的框图。
图2是表示实施方式1中的信息提示装置的控制方法的流程图。
图3是表示实施方式2中的信息提示装置的利用场景的说明图。
图4是表示实施方式2中的信息提示装置的功能块的框图。
图5是表示实施方式2中的信息提示装置的控制方法的流程图。
图6是表示实施方式2的变形例1中的信息提示装置的利用场景的说明图。
图7是表示实施方式2的变形例1中的信息提示装置的功能块的框图。
图8是表示实施方式2的变形例1中的信息提示装置的控制方法的流程图。
图9是表示实施方式2的变形例1中的信息提示装置的占空比的例子的说明图。
图10是表示实施方式2的变形例2中的信息提示装置的功能块的结构图。
图11是表示实施方式2的变形例3中的信息提示装置的功能块的结构图。
图12是表示实施方式3中的信息提示装置的功能块的框图。
图13是表示实施方式3的变形例中的信息提示装置的功能块的框图。
图14是表示实施方式4中的信息提示装置的第一例的功能块的框图。
图15是表示实施方式4中的信息提示装置的第二例的功能块的框图。
图16是表示实施方式4中的信息提示装置的第三例的功能块的框图。
图17是表示实施方式4中的信息提示装置的第四例的功能块的框图。
图18是表示实施方式4中的信息提示装置的第五例的功能块的框图。
标号说明
1、2、2A、3、4、5、6、7、8、9、A、B：信息提示装置
10、10A、10B、10C：传感器
11、55：摄像头(camera)
12、12A、12B、12C：情绪推定部
14、14A：判定部
14B：危险度判定部
15：视线解析部
16、16A：提示控制部
17、17A：提示部
18：控制部
40：车辆
41：变速器(shift)
42：车内照明
43：发动机转速
44：制动器
45：方向盘(steering)
46：导航装置
47：交通信号灯
50：车辆传感器
51：车速传感器
52：路面摩擦传感器
53：车间距离传感器
54：制动传感器
56：反应时间传感器
60：马桶装置
61：喷淋器
62：马桶冲水
70：设施控制装置
80：机器人
82：机器人控制装置
90：麦克风
92：声音识别部
U1、U2、UA、UB、UC：用户
具体实施方式
本发明的一技术方案涉及信息提示装置的控制方法，所述信息提示装置在可被多个用户视觉识别的提示部中提示信息，所述控制方法包括：基于由传感器取得的物理量，推定所述多个用户中的第一用户的情绪；使用所取得的所述物理量或者推定出的所述情绪，执行关于是否对推定出的所述情绪进行提示的判定处理；按照所述判定处理的结果，控制所述提示部对推定出的所述情绪的提示。
根据上述技术方案，信息提示装置在推定出第一用户的情绪后，进行是否提示该情绪的判定处理。该判定处理在由提示部提示推定出的情绪之前进行，关系到要不要进行该提示的控制。通过该判定处理，能够在不适合提示推定出的情绪的情况下，禁止该提示。因此，信息提示装置能够更适当地提示推定出的情绪。
例如，也可以为，在所述判定处理中，判定所述第一用户是否在看所述提示部，在所述提示的控制中，(a)在判定为所述第一用户在看所述提示部的情况下，禁止所述提示，(b)在判定为所述第一用户没在看所述提示部的情况下，允许所述提示。
根据上述技术方案，信息提示装置根据第一用户是否在看提示部，来控制是否进行提示。若当第一用户在看提示部时提示第一用户的被推定的情绪，则第一用户的情绪可能会因该提示而变化。一旦像这样第一用户的情绪发生变化，那么之后所推定的情绪会变得不同于第一用户本来所怀有的或者应该怀有的情绪，成为无法说是妥当的推定结果。通过如上那样当第一用户在看提示部时禁止提示，能够避免第一用户的情绪因提示而变化。
例如，也可以为，在所述判定处理中，作为所述提示的频度，决定与所取得的所述物理量或者推定出的所述情绪相应的频度，在所述提示的控制中，进行控制以使得按照在所述判定处理中所决定的所述频度进行所述提示。
根据上述技术方案，信息提示装置基于第一用户的被推定出的情绪，使提示的频度变化。由此，信息提示装置能够直观地提示第一用户的被推定出的情绪。
例如，也可以为，在所述判定处理中，推定出的所述情绪的强度越高，就将所述提示的频度决定为越高的频度。
根据上述技术方案，信息提示装置基于第一用户的被推定出的情绪的强度，使提示的频度变化。由此，信息提示装置能够更直观地提示第一用户的被推定出的情绪。
例如，也可以为，在所述判定处理中，判定推定出的所述情绪是否是预先决定为禁止由所述提示部进行提示的情绪，在所述提示的控制中，禁止所述预先决定的情绪的所述提示。
根据上述技术方案，信息提示装置通过在第一用户的被推定出的情绪是预定情绪的情况下禁止提示，能够抑制不适当的提示。
例如，也可以为，在所述判定处理中，将推定出的所述情绪事先提示给所述第一用户，关于是否由所述提示部对所述事先提示的所述情绪进行提示，接受由所述第一用户做出的指示，在所述提示的控制中，按照所述第一用户针对所述事先提示所做出的指示，控制由所述提示部进行的提示。
根据上述技术方案，关于是否提示第一用户的被推定出的情绪，信息提示装置按照第一用户的指示来控制是进行提示还是禁止提示。因此，能够抑制对第一用户不希望被提示的情绪进行提示这一情况。
例如，也可以为，在所述判定处理中，判定作为所述传感器的摄像头所取得的图像中包含的用户的人数，判定所述多个用户是否为3人以上，在所述提示的控制中，在判定为所述多个用户是3人以上的情况下，允许所述提示。
根据上述技术方案，信息提示装置能够以无法确定所提示的情绪是多个用户中的哪个用户的情绪的方式、也就是匿名方式提示第一用户的被推定出的情绪。其原因在于，可认为在无法确定是谁所怀有的情绪的情况下，在推定出的情绪被提示时的、第一用户的尴尬等精神负担较轻。
例如，也可以为，在所述情绪的推定中，基于作为所述传感器的摄像头所取得的包括所述第一用户的脸部的图像，将清醒、惊讶、喜悦、舒适、轻松、困倦、无聊、悲伤、不快、焦躁、愤怒、畏惧或者平静的情绪推定为所述第一用户的情绪。
根据上述技术方案，信息提示装置能够更具体地推定第一用户的情绪。
例如，也可以为，所述第一用户是一车辆的驾驶员，所述多个用户中除所述第一用户以外的用户是没有乘坐所述一车辆的人，在推定所述情绪时，推定所述驾驶员的焦躁或者愤怒的情绪。
根据上述技术方案，信息提示装置能够将乘坐车辆的第一用户的情绪提示给没有乘坐车辆的用户。
例如，也可以为，所述第一用户是在厕所室内使用厕所的使用者，所述多个用户中除所述第一用户以外的用户是在所述厕所室外为了使用所述厕所而等待的等待者，在推定所述情绪时，推定所述使用者的不快或者轻松的情绪。
根据上述技术方案，信息提示装置能够将在厕所室内使用厕所的第一用户的情绪提示给在厕所室外为了使用厕所而等待的用户。
例如，也可以为，所述第一用户是在所述厕所室外为了使用所述厕所而等待的等待者，所述多个用户中除所述第一用户以外的用户是在厕所室内使用厕所的使用者，在推定所述情绪时，推定所述等待者的不快或者焦躁的情绪。
根据上述技术方案，信息提示装置能够将在厕所室外为了使用厕所而等待的第一用户的情绪提示给在厕所室内使用厕所的用户。
另外，本发明的一个技术方案涉及信息提示装置，其在可被多个用户视觉识别的提示部中提示信息，该信息提示装置具备：情绪推定部，基于由传感器取得的物理量，推定多个用户中的第一用户的情绪；判定部，使用所取得的所述物理量或者推定出的所述情绪，执行关于是否提示对推定出的所述情绪进行提示的判定处理；以及提示控制部，按照所述判定处理的结果，控制所述提示部对推定出的所述情绪的提示。
由此，可取得与上述同样的效果。
另外，本发明的一技术方案涉及用于使计算机执行上述控制方法的程序。
由此，可取得与上述同样的效果。
此外，这些概括的或者具体的技术方案既可以通过系统、方法、集成电路、计算机程序或者计算机可读取的CD-ROM等记录介质而实现，也可以通过系统、方法、集成电路、计算机程序或者记录介质的任意组合而实现。
以下，参照附图，具体地对实施方式进行说明。
此外，以下说明的实施方式均表示概括的或者具体的例子。在以下的实施方式中表示的数值、形状、材料、构成要素、构成要素的配置位置以及连接方式、步骤、步骤的顺序等仅为一例，并非旨在限定本发明。另外，对于以下的实施方式中的构成要素中的、没有记载在表示最上位概念的独立权利要求中的构成要素，作为任意的构成要素进行说明。
(实施方式1)
在本实施方式中，对更适当地提示推定出的情绪的信息提示装置等进行说明。更加具体而言，该信息提示装置一方面推定并提示被测试者的情绪，另一方面通过使被测试者的情绪维持不变而能够适当地实现连续性的情绪推定。
图1是表示本实施方式中的信息提示装置1的功能块的框图。
如图1所示，信息提示装置1具备情绪推定部12、判定部14以及提示控制部16。另外，信息提示装置1也可以具备传感器10以及提示部17。提示部17能被多个用户视觉识别。在图1中，作为多个用户，示出了用户U1以及用户U2这两个人，但也可以有3个以上的用户。
传感器10是情绪推定部12所使用的传感器的一例，具体例为通过用可见光或者红外光进行拍摄而取得图像的摄像头、心率表、血压计等。此外，传感器10并非信息提示装置1中必须的构成部分。
情绪推定部12是下述处理部：基于由传感器取得的物理量，推定多个用户中作为被测试者的用户U1的情绪。情绪推定部12如上所述使用的传感器例如是传感器10，但并不限于此。情绪推定部12也可以从信息提示装置1的外部取得由传感器取得的物理量。情绪推定部12例如通过分析由作为传感器的摄像头进行拍摄所取得的物理量、即图像中的用户U1的表情，能够推定用户U1所怀有的情绪。在此，通过分析表情(更加具体而言是眼、口以及鼻等部位的特征点的位置)而得到情绪的方法可采用公知技术。
判定部14是下述处理部：使用传感器所取得的物理量或者情绪推定部12推定出的情绪，执行关于是否对推定出的情绪进行提示的判定处理。另外，判定部14也可以根据传感器所取得的物理量或者情绪推定部12推定出的情绪，决定由提示部17进行提示的频度。在此，判定部14也可以为，情绪推定部12推定出的情绪的强度越高，就将由提示部17进行提示的频度决定为越高的频度。另外，判定部14也可以判定情绪推定部12推定出的情绪是否是预先决定为禁止由提示部17进行提示的情绪。在该情况下，通过提示控制部16以及提示部17，禁止对该预先决定的情绪的提示。
提示控制部16是下述处理部：按照判定部14的判定处理的结果，控制提示部17对推定出的情绪的提示。
提示部17是按照提示控制部16的控制来提示信息的提示部。提示部17例如是液晶显示器。
此外，情绪推定部12、判定部14以及提示控制部16的一部分或者全部既可以通过信息提示装置1具备的处理器(未图示)执行程序而以软件形式实现，也可以通过专用电路而以硬件形式实现。另外，设上述构成要素在处理中使用的信息保存于信息提示装置1具备的存储器(memory)(未图示)或者储存器(storage)(未图示)。
图2是表示本实施方式中的信息提示装置1的控制方法的流程图。
在步骤S101中，传感器10取得物理量。此外，也可以代替传感器10，而使用信息提示装置1的外部的传感器，在该情况下，在本步骤中，信息提示装置1取得由外部的传感器取得的物理量。
在步骤S102中，情绪推定部12基于由传感器10(或者外部的传感器)取得的物理量，推定用户U1所怀有的情绪。
在步骤S103中，判定部14使用传感器10(或者外部的传感器)所取得的物理量或者情绪推定部12推定出的情绪，执行关于是否对推定出的情绪进行提示的判定处理。例如，作为上述判定处理，判定部14执行判定用户U1的视线方向的处理、或者判定情绪推定部12推定出的情绪是否与预定的情绪一致的处理。
在步骤S104中，提示控制部16按照判定部14的判定处理的结果，控制提示部17对情绪推定部12在步骤S102中推定出的情绪的提示。
此外，也可以为，在判定部14的判定处理中，将情绪推定部12推定出的情绪事先提示给用户U1，关于是否由提示部17对事先提示出的情绪进行提示，接受由用户U1做出的指示。在该情况下，提示控制部16按照用户U1针对事先提示所做出的指示，控制由提示部17进行的提示。
另外，也可以为，在判定部14的判定处理中，判定作为传感器的摄像头所取得的图像中包含的用户人数。在该情况下，提示控制部16也可以为，在判定为用户是3人以上的情况下，允许由提示部17进行的提示。
通过以上的一系列处理，信息提示装置1能够更适当地提示推定出的情绪。更加具体而言，信息提示装置1一方面推定并提示被测试者的情绪，另一方面通过使被测试者的情绪维持不变而能够适当地实现连续性的情绪推定。
这样，本实施方式的信息提示装置1在推定出第一用户的情绪后，进行是否提示该情绪的判定处理。该判定处理在由提示部17提示推定出的情绪之前进行，关系到要不要进行该提示的控制。通过该判定处理，能够在不适于提示推定出的情绪的情况下，禁止该提示。因此，信息提示装置1能够更适当地提示推定出的情绪。
此外，也可以为，在判定部14的判定处理中，基于从上述以外的传感器获得的物理量和/或上述以外的依据，执行关于是否对推定出的情绪进行提示的判定处理。
(实施方式2)
在本实施方式中，对于更适当地提示推定出的情绪的信息提示装置，进行更具体的说明。
图3是表示本实施方式中的信息提示装置2的利用场景的说明图。
如图3所示，示出了信息提示装置2的下述状况：例如在车辆(汽车)的乘坐空间内，作为驾驶员的用户U1和作为同乘者的用户U2能够对构成为车辆的导航装置的信息提示装置2的提示部17进行视觉识别。
信息提示装置2推定用户U1的情绪并提示推定出的情绪。然而，如果总是进行由信息提示装置2实现的情绪的提示，用户U1就会看到自身被推定出的情绪被传达给用户U2的样子。由此，会产生如下问题：用户U1可能会感到尴尬等精神负担而引起情绪变化，无法适当地对用户U1的情绪进行推定。
因此，信息提示装置2基于用户U1的视线方向，对提示进行控制。具体而言是，当用户U1没在看信息提示装置2的提示部17时(图3的(a))，提示推定出的情绪，当用户U1在看信息提示装置2的提示部17时(图3的(b))，不提示推定出的情绪。用户U1就不会看到自身被推定出的情绪被传达给用户U2的样子。这样，信息提示装置2能够适当地提示推定出的用户U1的情绪，以维持用户U1的情绪。
下面，详细说明信息提示装置2的功能以及处理。
图4是表示本实施方式中的信息提示装置2的功能块的框图。
如图4所示，信息提示装置2具备摄像头11、情绪推定部12、判定部14、提示控制部16以及提示部17。此外，有时对与实施方式1中的构成要素相同的构成要素附加相同的标号，并省略详细的说明。
摄像头11是对用户U1的脸部进行拍摄的可见光摄像头或者红外线摄像头。摄像头11作为取得作为物理量的图像的传感器而发挥功能。
情绪推定部12是下述处理部：基于作为传感器的摄像头11所取得的图像中的用户U1的表情，推定用户U1所怀有的情绪。在此，用户U1所怀有的情绪多种多样，其推定方法可采用公知技术。情绪例如可以是积极情绪或者消极情绪中的某一个，也可以基于表示情绪的积极度(或者消极度)的程度的指标来决定。在此，积极情绪是指表示有精神的生气勃勃的状态的情绪，具体而言是如清醒、兴奋或者幸福这样的情绪。消极情绪是指与积极情绪相反的情绪，是表示没有精神的消极的状态的情绪。
另外，情绪也可以表现在通过情绪的类别(例如清醒、惊讶、喜悦、舒适、轻松、困倦、无聊、悲伤、不快、焦躁、愤怒、畏惧或者平静等)和情绪的强度表示的、情绪的二维模型(例如罗素(Russell)圆环模型)上。
判定部14是下述处理部：基于作为传感器的摄像头11所取得的物理量、即图像中的用户U1的视线方向，执行关于是否对推定出的情绪进行提示的判定处理。判定部14具有根据摄像头11所取得的图像来解析用户U1的视线方向的视线解析部15。此外，关于视线方向的解析，可以通过公知技术根据图像中的用户U1的面部朝向以及眼球的位置来进行。
判定部14在上述判定处理中，取得由视线解析部15进行的解析的结果、即用户U1的视线方向，判定用户U1的视线是否朝向提示部17，由此，判定用户U1是否在看提示部17或者其周边。此外，关于对用户U1的视线是否朝向提示部17的判定，可以通过公知技术基于表示用户U1的面部的位置以及朝向、提示部17的位置以及朝向等信息来进行。
提示控制部16是下述处理部：按照判定部14的判定处理的结果，控制提示部17对情绪推定部12推定出的情绪的提示。具体而言，(a)当判定部14判定为用户U1在看提示部17的情况下，提示控制部16生成用于禁止由提示部17进行提示的控制信息。另一方面，(b)当判定部14判定为用户U1没在看提示部17的情况下，提示控制部16生成用于允许由提示部17进行提示的控制信息。而且，提示控制部16按照所生成的控制信息，控制由提示部17进行的提示。
下面，说明信息提示装置2的控制方法。
图5是表示本实施方式中的信息提示装置2的控制方法的流程图。
在步骤S201中，摄像头11取得图像。
在步骤S202中，基于在步骤S201中所取得的图像，情绪推定部12推定用户U1的情绪。
在步骤S203中，基于在步骤S201中所取得的图像，视线解析部15取得用户U1的视线方向。
在步骤S204中，判定部14基于在步骤S203中所取得的用户U1的视线方向，判定用户U1是否在看提示部17或者其周边。当判定为用户U1在看提示部17的情况下(步骤S204：是)，前进至步骤S205，否则(步骤S204：否)前进至步骤S206。
在步骤S205中，提示控制部16禁止由提示部17提示用户U1的被推定出的情绪。此时，提示控制部16也可以使提示部17提示其他信息(例如当前所在地周边的地图的图像)(参照图3的(b))。
在步骤S206中，提示控制部16允许由提示部17提示用户U1的被推定出的情绪(参照图3的(a))。
通过以上的一系列处理，信息提示装置2能够通过使用户U1的情绪的提示不被用户U1视觉识别，从而一边维持用户U1的情绪，一边适当地提示推定出的用户U1的情绪。
此外，关于由情绪推定部12进行的情绪推定的具体方法，也能够以如下方式进行。情绪推定部12在使用摄像头11作为传感器的情况下，从由摄像头11取得的图像或者该图像的绿色成分的变动中检测脉搏，根据检测出的脉搏的脉搏间隔时间(RRI、R-R Interval)的时间变动，求出RRI的频率分量的功率谱。然后，情绪推定部12根据频率分量的功率谱的LF(Low Frequency，低频)分量(例如0.05～0.15Hz)与HF(High Frequency，高频)分量(例如0.15Hz～0.4Hz)之比LF/HF，判断用户U1是放松的还是紧张的。此外，根据由摄像头11取得的图像，测定眼睑的张开状况或者单位时间中的眼睑闭合的时间比例，从而也能够对困倦的程度进行判断。在使用热像摄像头(thermo-camera)作为传感器的情况下，情绪推定部12还能够主要根据外周的皮肤温度来检测紧张情绪。这利用了人在紧张时外周的皮肤温度会降低这一性质。
此外，传感器取得的物理量例如为心率、心跳波形、脉波、脉波波形、LF/HF、眼睑开度、瞳孔径、血流量、氧饱和度、面色、视线、出汗量、呼吸数、呼吸量、皮肤温度或者体温等生物信息。
此外，关于由提示控制部16进行的对提示的控制的具体方法，也能够以如下方式进行。在使用摄像头11作为传感器的情况下，也可以为，从由摄像头11取得的图像中检测用户U1的眼睑的开度，例如在眼睑闭合了预定时间以上的情况下，判断为用户U1睡着了，提示控制部16使提示部17提示“发困”这样的情绪。另外，在推定出的情绪是预先决定为不由信息提示装置2进行提示的情绪的情况下，提示控制部16也可以禁止提示该情绪。例如，在推定出的情绪是如“无聊”那样的不怎么想让他人知道的情绪的情况下，也可以进行控制以使得禁止情绪的提示。另外，在使用摄像头11作为传感器的情况下，也可以为，仅在由摄像头11取得的图像中包含的人的人数是多个的情况下，进行控制以提示情绪。另外，在该情况下，要提示的情绪既可以设为多人的情绪的平均值，也可以是多人中的预定的1人以上或者任意的1人以上的情绪。
此外，情绪推定部12也可以对推定出的情绪进行校正。例如，也可以根据操作量(加速器、制动器或者方向盘)进行校正。具体而言，也可以根据突然起步和/或突然制动的程度，对焦躁情绪的强度进行校正。若突然起步和/或突然制动的频度增多、或者程度增强，则通过将焦躁情绪的强度校正为更强，而使驾驶员强烈地认识到其焦躁的情绪，由此，能够更强地促使驾驶员对安全的意识、控制使节气门开度降低，而有助于减少危险驾驶和/或提高燃效。另外，也可以根据方向盘的掌舵力和/或掌舵的面积(手相对于方向盘以预定值以上的压力相接触的面积)，对困倦情绪的强度进行校正。若掌舵力和/或掌舵的面积降低，则通过将困倦水平校正为更高，而能够提前将清醒水平的降低告知驾驶员、或者利用安全带等促使驾驶员清醒，能够有助于提高安全性。另外，也可以根据周围的通行量和/或车间距离等来校正情绪。例如，也可以在通行量大的情况下，或者在车间距离短的情况下，将焦躁情绪的强度校正为更强，从而促使安全驾驶、使制动和/或节气门的控制减缓。当然，也可以让车有意地移动到易于保持车间距离的位置。
另外，情绪推定部12也能够根据对驾驶员进行提问时的驾驶员的表情的变化和/或回答来推定情绪。例如，若其对提问做出了无关的回复，则推定为漫不经心的状态和/或有困意。除此之外，情绪推定部12也可以为，若其针对提问语气粗暴或者眉间出现皱纹，则推定为怀有焦躁的情绪。既可以根据轻微的表情的变化(微表情)进行推定，也可以根据规则性的变化进行推定。如果即使没有提问，也一个劲儿地在没有条理地说话，那么也可以推定为漫不经心的状态。
另外，信息提示装置2也可以基于推定出的情绪，来改变向难易度不同的停车场或者停车空间中的哪个停车空间引导停车(即所谓的停车入库)。如果在停车时并未感到不安感，那么就可以导向停车难易度高的停车场或者停车空间。这是因为也有人会觉得能成功地停进停车难易度高的停车场是有趣的。一般来说，停车难易度较高的停车空间因其难易度高故常常没有车停靠而空着。因此，还具有如下优点：通过将即使难易度较高也不会对停车感到不安的人引导至难易度较高的停车空间，能够更有效地利用停车场。
另外，情绪推定部12也可以根据温度、气压、噪音、天气、亮度等来校正情绪。具体而言，若气温既不低也不高，则例如可以进行校正以使得喜悦的情绪增强。若气压低，则可以进行校正以使得不快的情绪增强。若噪音较大，则可以进行校正以使得焦躁的情绪增强。若天气好，则可以进行校正以使得喜悦的情绪增强。相反地若天气差，则可以使喜悦的情绪减弱。若亮度高，则可以进行校正使喜悦的情绪增多。当然，也可以进行除此以外的校正。
另外，信息提示装置2也能够作为智能手机或者PC(个人计算机)上的应用而实现。在该情况下，在使用该应用期间检测出预定的情绪时，可以使得无法进行智能手机或者PC的预定的操作。例如，当在操作交流工具的应用(即所谓的SNS(Social NetworkingService，社交网络服务)等)时，在推定出用户的焦躁情绪的情况下，可以使得无法进行投稿按钮的操作。既可以使得无法进行输入本身，也可以替换成其他操作(或者处理)。由此，能够防止由于用户U1进行非理性的投稿而导致事后友好关系受损，且不仅能够防止用户U1后来回想时感到后悔，而且能够防止Web网站因指责泛滥而陷入混乱(flaming)。另外，有助于防止同样由于在攻击性情绪下的投稿，而伤害、欺侮到对方等。
另外，若有效地利用云计算(cloud computing)，还能够实现如下内容。
例如，也可以为，信息提示装置2通过雷达图等对驾驶员显示周围的1个以上的驾驶员的情绪。若有焦躁情绪的人多，则可以避免在该周边行驶。另外，也可以为，信息提示装置2将情绪上传至云上的服务器，在有焦躁情绪的人多的地方，控制加速器和/或制动器以使速度降低。可认为尤其在自动驾驶中效果明显。另外，信息提示装置2将情绪上传至云上的服务器，例如在接近积雪道路等惊险和/或隐患多的地方时，通过导向防滑链装卸处，能够更安全地进行驾驶。另外，也可以为，信息提示装置2基于上传至云上的服务器的大数据和/或导航信息，预测驾驶员往后会怀有的情绪，为了不让驾驶员怀有不利的情绪，而事先加以缓和。例如，当接近以往驾驶员怀有焦躁的情绪的地点时，信息提示装置2可以播放使焦躁的情绪缓和的音乐。也可以从一开始就通过导航装置的引导信息，引导一条不经过以往驾驶员怀有焦躁的情绪的地点的路径。另外，信息提示装置2推定从当前所在地至目的地的情绪的推移，既可以建议一条怀有焦躁情绪的情况最少的道路，也可以使驾驶员在选择路线时能够选择怀有焦躁情绪的情况少的路线。由此，信息提示装置2能够促使驾驶员进行减少了怀有焦躁情绪这一情况的安全驾驶。
另外，信息提示装置2也可以对驾驶员显示周围的自动驾驶车辆的比例。该信息成为是否切换到自动驾驶的基准。另外，信息提示装置2也可以学习个人的驾驶喜好，若在自动驾驶期间推定出无聊的情绪，则促使从自动驾驶向手动驾驶的切换。由此，驾驶员能够感到驾驶的快感。另外，信息提示装置2也可以学习个人的驾驶的喜好，传达驾驶员所喜爱的道路。驾驶员本人基本不会意识到自己所喜爱的道路，因此，能够自己认识到自己的驾驶的喜好和/或习惯，并能够提高对安全的意识。
(实施方式2的变形例1)
在本变形例中，对于更适当地提示推定出的情绪的信息提示装置的另一方式，进行更具体的说明。
图6是表示本变形例中的信息提示装置2A的利用场景的说明图。
如图6所示，表示了信息提示装置2A例如向车外提示驾驶车辆的用户U1的情绪的状况。也就是说，用户U1是车辆的驾驶员，用户U1的被推定出的情绪能够被提示给除用户U1以外的其他用户(例如，其他车辆的驾驶员或者行人等)。通过向其他用户提示用户U1的情绪，例如能够在因其他驾驶人员或者行人接近用户U1的车辆而预测出危险的情况下，采取避免接近等安全行动。
下面，详细说明信息提示装置2A的功能以及处理。
图7是表示本实施方式中的信息提示装置2A的功能块的框图。
如图7所示，信息提示装置2A具备摄像头11、情绪推定部12、判定部14A、提示控制部16A以及提示部17。此外，有时对与实施方式1中的构成要素相同的构成要素附加相同的标号，并省略详细的说明。
情绪推定部12推定用户U1的情绪，并且推定该情绪的强度。例如，情绪推定部12推定较强的焦躁、或者较弱的舒适等情绪。
判定部14A是下述处理部：基于情绪推定部12推定出的用户U1的情绪的强度，执行关于提示推定出的情绪的时间长度的判定处理。具体而言，判定部14A根据情绪的强度，决定在由提示部17对情绪推定部12推定出的情绪进行提示的状态(接通：ON)和不进行提示的状态(断开：OFF)周期性地反复的情况下的、接通(ON)时间(接通占空时间)以及断开(OFF)时间(断开占空时间)、或者其占空比。例如，在判定部14A中，推定出的情绪的强度越强，就决定越长的接通时间。
提示控制部16A是下述处理部：按照判定部14A的判定处理的结果，控制提示部17对情绪推定部12推定出的情绪的提示。具体而言，提示控制部16A按照判定部14A所决定的接通时间以及断开时间、或者占空比，控制由提示部17进行的提示。
下面，说明信息提示装置2A的控制方法。
图8是表示本实施方式中的信息提示装置2A的控制方法的流程图。图9是表示本变形例中的信息提示装置2A的占空比的例子的说明图。
图8的步骤S201以及S202与图5的同一标号的步骤相同。
在步骤S301中，判定部14A决定与情绪推定部12推定出的用户U1的情绪的强度相应的占空比。在判定部14A中，例如推定出的情绪的强度越强，就决定越长的接通时间。更加具体而言，在用户U1的情绪的强度较弱的情况下，决定较小的占空比(参照图9的(a))。另一方面，在用户U1的情绪的强度较强的情况下，决定较大的占空比(参照图9的(b))。
在步骤S302中，提示控制部16A按照判定部14A在步骤S301中所决定的占空比，提示用户U1的情绪。
这样一来，信息提示装置2A在位于车辆内的用户U1看不到的车外的位置提示用户U1的被推定出的情绪，另外，该提示的时间长度根据被推定出的情绪的强度而决定。该提示处于用户U1无法视觉识别的位置，因此，不会出现用户U1自身看到该提示而感到尴尬的情况，其结果，也不会导致用户U1的情绪发生变化。
此外，判定部14A也可以为，在用户U1的情绪为“平静”的情况下，禁止情绪的提示。这是为了减轻对于用户U1来说的、由总是提示情绪所致的尴尬等精神负担。另外，能够防止周围的车辆接近感到“愤怒”或者“急躁”的驾驶员的车辆，因此具有有助于交通安全的优点。在该情况下，能够建立一种保险费根据情绪历史记录中的特定的情绪的比率而变动的汽车保险制度。
另外，也可以通过使指示器等闪烁，而使驾驶员自身得知由提示部17进行提示的定时(timing)。由此，用户U1能够获知何时提示了自身的情绪，尴尬等精神负担能够得以减轻。另外，也可以事先对用户U1表示要提示的情绪，关于是否进行提示，接受由用户U1做出的指示，按照指示来控制提示。另外，在该情况下，判定部14A也可以为，对于愤怒和/或急躁等预定的情绪，不接受关于是否提示的指示，而判定为总是提示或者总是不提示。
这样，信息提示装置2A能够将用户U1的情绪以与该情绪的强度相应的时间长度向车外进行提示，例如能够有助于其他驾驶员进行安全行动。
另外，虽然在此示出了根据情绪来调整进行显示的占空比的例子，但也可以并不调整占空比，而是例如调整进行显示的辉度，另外也可以改变显示的颜色，只要能够调整周围驾驶员的视觉识别的容易度，也可以是其他方法。
(实施方式2的变形例2)
在本变形例中，对于更适当地提示推定出的情绪的信息提示装置的另一方式，进行更具体的说明。本变形例中的信息提示装置3基于作为乘客或者驾驶员的用户U1的情绪，进行对车辆以及交通信号灯的控制。
图10是表示本变形例中的信息提示装置3的功能块的结构图。
如图10所示，信息提示装置3具备传感器10、情绪推定部12以及控制部18。此外，有时对与上述实施方式或者变形例中的构成要素相同的构成要素附加相同的标号，并省略详细的说明。
控制部18是下述处理部：基于情绪推定部12推定出的用户U1的情绪，控制车辆40所具备的设备(例如变速器41、车内照明42、发动机转速43、制动器44、方向盘45或者导航装置46)、或者交通信号灯47。
例如，信息提示装置3在车辆是出租车的情况下，推定乘客的情绪，若乘客怀有恐惧的情绪，则不通知驾驶人员而进行实施限速、加重加速踏板、或者切换到自动驾驶等控制。另外，信息提示装置3也可以为，在自动驾驶期间，例如若有人发困，则变为软驾驶模式(减少加速减速)。另外，也可以变为静音模式(尽量升档)、或者当有人着急时则变道至超车车道、或者当有人晕车(末梢的血流减少)时则实施限速。由此，能够在乘客的情绪不被驾驶员知道的情况下，使得接近于对于乘客来讲舒适的驾驶。当然，也可以根据推定出的情绪自动地切换驾驶模式，还可以提示给驾驶员并由驾驶员进行选择。此外，在同乘者有多人的情况下，也可以对驾驶员提示情绪。在该情况下，也可以使得无法确定是哪个同乘者的情绪。由于驾驶员不知道是谁的情绪，因此具有同乘者不易感到尴尬等精神负担的优点。
另外，信息提示装置3也可以学习有助于减轻困倦或者变得清醒的音乐。对于个人来讲，音乐的喜好和/或易于清醒的乐曲是不同的，因此，学习对清醒更有效的音乐或者乐曲，从而能在发困时使用。
另外，信息提示装置3也可以按照驾驶人员的情绪来控制交通信号灯47的信号的定时。也可以为，通过对交通信号灯47的控制，减少驾驶员感到急躁的车辆因交通信号灯47而停止的次数。另外，也能够进行控制以使得，驾驶员怀有高兴的情绪的车辆因交通信号灯47而停止的次数增加，使其状态持续，由此，延长驾驶员感到幸福的时间。可以说在与异性约会中等效果明显。
另外，信息提示装置3也可以对出租车的乘客和/或同乘者想去厕所的情绪进行推定。若推定出这样的情绪，则也可以使最近的厕所显示于导航装置。另外，也可以为，将出租车的乘客和/或同乘者的空腹的程度作为情绪进行推定，在紧急度高的情况下，使车内照明42变为蓝色来抑制空腹感。另外，如果有可就餐的富裕时间，则也可以用红色照明放大空腹感，并推荐餐厅。另外，也可以为，在出租车检索网站上显示驾驶员的当前时间点的情绪，使想要利用出租车的人能基于所显示的情绪选择符合自身心情的出租车。例如，也可以使得，想要利用出租车的人在感到困倦时选择安静的驾驶人员，在希望快点到达目的地时选择注意力高度集中的驾驶人员。
另外，信息提示装置3也可以通过感测同乘者或者驾驶员的觉得晃眼的表情，而导向背阴多的道路，来安排舒适的出租车行程。另外，也可以在同乘者或者驾驶员感到困倦的情况下，通过导向日照多的道路，来安排舒适的驾驶。
另外，信息提示装置3对同乘者提示驾驶人员的情绪，从而在驾驶员感到困倦时，同乘者能够努力进行交谈使气氛变得热闹。由于驾驶人员难以说出“觉得困了想要休息”，因此是有用的。
另外，信息提示装置3也可以仅在根据驾驶员的摄像头图像判断出驾驶员并没有经由后视镜看着车辆内的定时，提示推定出的情绪。能够避免使驾驶员产生自己的内心遭到窥视的感觉。
另外，信息提示装置3也可以通过情绪以外的语言，表现并显示驾驶员的情绪。例如，如果在驾驶期间，当面部困倦和/或感到焦躁时，也可以通过事故发生概率等来表现并向驾驶员示出。另外，也可以监测驾驶员的情绪，在根据该情绪可认为事故发生率高的情况下，促使其休息，或者通过远程操作使车辆停止。
(实施方式2的变形例3)
在本变形例中，对于更适当地提示推定出的情绪的信息提示装置的另一方式，进行更具体的说明。本变形例中的信息提示装置4基于作为驾驶员、即用户U1的情绪的困倦水平，提示由用户U1进行驾驶的危险度。
图11是表示本变形例中的信息提示装置4的功能块的结构图。
如图11所示，信息提示装置4具备传感器10、情绪推定部12、危险度判定部14B、提示控制部16以及提示部17。此外，有时对与上述实施方式或者变形例中的构成要素相同的构成要素附加相同的标号，并省略详细的说明。
危险度判定部14B是下述处理部：基于作为情绪推定部12推定出的用户U1的情绪的困倦的程度，判定由用户U1进行驾驶的危险度。在危险度判定部14B中，用户U1的被推定出的困倦的程度越高，判定为危险度越高。此外，也可以为，在危险度判定部14B中，除了情绪推定部12推定出的情绪以外，还取得车辆传感器50(例如车速传感器51、路面摩擦传感器52、车间距离传感器53、或者基于制动传感器54及摄像头55来估算反应时间的反应时间传感器56)提供的各种数据，基于所取得的各种数据，判定危险度。
另外，危险度判定部14B也可以进一步估算碰撞时间以及反应时间。在此，碰撞时间是指，从前方发生危险事态开始到本车发生碰撞的推定时间。碰撞时间也可以根据车间距离、相对速度以及相对加速度等来计算。在相对速度或者相对加速度的计算中，需要前方车辆陷入危险状态时的速度和/或加速度，但这些也可以根据行驶时的前方车辆的速度、加速度或者路面摩擦系数等来推定求出。另外，反应时间是指，从前方发生危险事态开始到驾驶员踩刹车的时间。反应时间例如能够基于从前方车辆的驾驶员踩刹车且尾灯闪烁开始到本车的驾驶员踩刹车的时间等来求出。
危险度判定部14B向提示控制部16提供表示推定出的困倦的程度的信息、和表示危险度的信息。
提示控制部16进行控制以使得提示部17对危险度判定部14B判定出的危险度等信息进行提示。
例如，信息提示装置4也可以结合困倦等情绪以外的要素将驾驶的危险度通知给驾驶员。具体而言，也可以根据车速、路面摩擦系数、车间距离，将在前方车辆突然停车的情况下的碰撞时间求出并进行显示。另外，在困倦的定量化中，也可以用摄像头对前方进行拍摄，根据从前方车辆的驾驶员踩刹车开始到本车驾驶员踩刹车的时间，求出反应时间。这利用了在发困时反应时间增大这一公知的关系。进而，也可以基于它们的全部或者一部分，对驾驶的危险度进行定量化并显示从而通知给驾驶员。
(实施方式3)
在本变形例中，对于更适当地提示推定出的情绪的信息提示装置的另一方式，进行更具体的说明。本变形例中的信息提示装置5将在厕所室内使用厕所的用户U1的情绪提示给在厕所室外为了使用厕所而等待的用户U2。
图12是表示本实施方式中的信息提示装置5的功能块的框图。
如图12所示，信息提示装置5具备传感器10、情绪推定部12、判定部14、提示控制部16以及提示部17。信息提示装置5的构成要素中的、至少传感器10处于厕所室内，至少提示部17处于厕所室外。此外，有时对与实施方式1中的构成要素相同的构成要素附加相同的标号，并省略详细的说明。
情绪推定部12基于传感器10所取得的物理量，推定在厕所室内使用厕所的用户U1的情绪。
判定部14基于情绪推定部12推定出的情绪，判定用户U1对厕所的使用是否即将结束。
提示控制部16使提示部17对用户U2提示判定部14的判定结果。具体而言，提示控制部16基于判定部14的判定结果，若判定为使用即将结束，则提示表示厕所的使用即将结束的消息(例如图12的(a))，否则提示表示厕所的使用仍要继续的消息(例如图12的(b))。用户U2根据所提示的信息，能够知道是否可能即将使用厕所，可减轻如不知要等到何时这样的不安或者焦躁的情绪。
此外，也可以为，在判定部14中，若情绪推定部12推定出的用户U1的情绪变为“轻松(放松)”，则自动地使马桶装置60(喷淋器61或者马桶冲水62)工作。由此，能够提高使用了厕所的人的便利性，防止忘记使马桶冲水62工作，另外，能够促使用户U1离开厕所。另外，也可以为，在判定部14中，若用户U1的情绪变为“轻松”，则在提示部17中开始直到打开门为止的倒计时。由此，可减轻在厕所室外等待的用户U2的不安或者焦躁的情绪。
(实施方式3的变形例)
在本变形例中，对于更适当地提示推定出的情绪的信息提示装置的另一方式，进行更具体的说明。本变形例中的信息提示装置6将在厕所室外为了使用厕所而等待的用户U1的情绪提示给在厕所室内使用厕所的用户U2。也就是说，调换了实施方式3的用户U1和用户U2的立场。
图13是表示本变形例中的信息提示装置的功能块的框图。
如图13所示，信息提示装置6具备传感器10、情绪推定部12、判定部14、提示控制部16以及提示部17。信息提示装置6的构成要素中的、至少传感器10处于厕所室外，至少提示部17处于厕所室内。此外，有时对与实施方式1中的构成要素相同的构成要素附加相同的标号，并省略详细的说明。
情绪推定部12基于传感器10所取得的物理量，推定在厕所室外为了使用厕所而等待的用户U1的情绪。
判定部14判定情绪推定部12推定出的情绪是否为被决定为要提示给用户U2的情绪。此外，判定部14也可以判定情绪推定部12推定出的情绪的强度是否超过了预定的强度。
提示控制部16基于判定部14的判定结果，控制由提示部17进行的提示。具体而言，在判定部14判定为推定出的情绪是被决定为要提示给用户U2的情绪的情况下、以及判定部14判定为推定出的情绪的强度超过了预定的强度的情况下，提示控制部16使该情绪被提示。
受到用户U1的情绪的提示的用户U2例如在使用完厕所已放松的情况下，能够迅速地采取离开厕所的行动。另外，在用户U1具有较强的情绪(例如因接近忍耐的极限而感到愤怒或者焦躁的强烈情绪)的情况下，用户U2能够更快速地离开厕所。此外，如果对信息提示装置6加上实施方式3的信息提示装置5的功能，就能够在厕所室内和厕所室外双向地进行情绪的提示，对厕所室内和厕所室外各自的用户都有好处。
(实施方式4)
在本实施方式中，对于更适当地提示推定出的情绪的信息提示装置的另一方式，进行更具体的说明。本实施方式中的信息提示装置7例如在学校的教室中，将多名学生各自的情绪提示给老师。此外，并不限于上述情况，信息提示装置7也能够适用于在培训班、研讨会或者会议等中，对讲师或者主持人提示多位出席者各自的情绪的用途。
图14是表示本实施方式中的信息提示装置的第一例(信息提示装置7)的功能块的框图。
如图14所示，信息提示装置7具备多个传感器10A、10B及10C(以下也称为“传感器10A等”)、多个情绪推定部12A、12B及12C(以下也称为“情绪推定部12A等”)、判定部14、提示控制部16以及提示部17。此外，有时对与实施方式1中的构成要素相同的构成要素附加相同的标号，并省略详细的说明。
传感器10A等分别是为了推定作为学生的用户UA～UC各自的情绪而由情绪推定部12A等使用的传感器的一例，具体例是摄像头。
情绪推定部12A等分别基于传感器10A所取得的物理量，推定作为学生的用户UA等分别所怀有的情绪。
判定部14通过将情绪推定部12A等推定出的情绪进行合计而生成信息，判定是否利用提示部17提示所生成的信息。
例如，情绪推定部12A等对学生没能理解授课内容这样的情绪进行推定，并经由提示部17提示给老师。由此，具有如下优点：即使未能理解授课内容的学生没有做出举手等行动，老师也能够获知这一情况。具有老师也能够针对多个学生而获知是否已理解了授课内容以及该人数等统计信息的优点。其结果，在一定数量以上的学生未能理解授课内容的情况下，老师能够采取进行再次授课、进行补课等应对。此时，学生无需对老师明确地传达自身未能理解授课这一情况，就可以接受再次授课，因此，能够减轻精神负担。尤其是，对于难以明确对老师传达心意的学生来讲，会起到明显的效果。另外，也可以对学生全员提示未能理解授课内容的学生数。其原因在于，有时在有多名学生未能理解授课内容时，学生就能够自然地将未能理解授课这一情况传达给老师。
此外，代替未能理解授课的情绪，信息提示装置7也可以推定觉得授课没意思这样的情绪。在该情况下，老师能够采取改善授课等应对。
图15是表示本实施方式中的信息提示装置的第二例(信息提示装置8)的功能块的框图。信息提示装置8支援在店铺等中的顾客和店员之间的适当的交流。
如图15所示，信息提示装置8具备传感器10、情绪推定部12、判定部14、提示控制部16以及提示部17。
例如，情绪推定部12推定店铺的试衣间内的顾客的情绪。判定部14判定是否应将情绪推定部12推定出的情绪向试衣间外或者店员进行提示，基于该判定结果，若判定为应该提示，则提示控制部16使提示部17提示推定出的情绪。由此，店员能够获知如顾客是真的满意而购买了商品、还是虽然不太满意但也购买了商品这样的信息，能够进行对店员的接待顾客能力的判定。
例如，在飞机内，通过情绪推定部12推定乘客的情绪，并由提示部17进行提示，乘务员能够获知乘客的情绪、以及根据该情绪推测的身体状况。由此，乘务员能够更优先地对身体状况较差的人提供服务。对于难以说出身体状况差这一情况的人来讲，具有即使未明确表达出身体状况差也能让乘务员获知的优点。
例如，在小酒馆或者餐厅中，通过情绪推定部12推定客人的醉酒的程度，并由提示部17进行提示，店员能够判断是否应该提供更多的酒(酒精类饮品)。例如，假设当客人体内的酒精量适当时，放松的程度最高。利用该假设，提示部17提示放松的程度的推移，店员通过确认所提示的该推移，能够进行上述判断。此外，在不应提供酒的情况下，也可以提供降低了酒精浓度的酒(例如稀释出的兑水酒)、或者推荐不易醉倒的菜肴等。
例如，在办公室中，情绪推定部12也可以在进行文本收发、语音通话或者在线通知(presence alert)等的交流工具中，推定员工的情绪并由提示部17进行提示。由此，员工能够瞅准向其他员工进行询问的时机。另外，通过使得不对自身提示自身的情绪，防止强行地使情绪变好或者变差，从而能够提高情绪的推定的精度。另外，也可以按照员工的被推定出的情绪，改变会议等的日程调整的优先级。例如，可以调整日程，以使得不感到焦躁的员工的预定与感到焦躁的员工的预定相配合。也可以根据焦躁的程度来决定日期的调整的优先级。焦躁的员工多数是繁忙的，因此，通过使繁忙的员工的日程优先，有助于提高办公室或者公司整体的劳动生产性。另外，也可以限制焦躁的员工的加班时间，从而有利于心理健康。另外，还能够通过信息提示装置8向上司自动地提出优先将工作分配给压力少的员工，从而提高劳动生产性。另外，情绪推定部12也可以推定工厂等的进行危险工作的从业人员的“急躁”的情绪。由于有“急躁”情绪时容易引起事故，因此能够对负责人等发出警告而使事故防患于未然。可认为尤其在飞机维修保养厂等、人为差错会导致重大事故的工作场所中的效果明显。
例如，在玩游戏的场景中，情绪推定部12推定玩家的焦躁的程度。另外，也可以按照玩家的情绪来改变游戏的情节。具体而言，当玩家焦躁时，判断为其感觉游戏棘手，可以降低游戏的难易度。另外，当玩家怀有无聊的情绪时，可以提高游戏的难易度。另外，当玩家的性兴奋度提高时，还可以略多地插入性的场景。另外，还能够按照玩家所怀有的情绪，改变游戏角色的身体能力。由此，能够让用户体会到适度的成就感。
例如，信息提示装置8也可以推定到访设施的客人的情绪，按照推定出的情绪，改变设施中显示的颜色或者票据的颜色。
例如，信息提示装置8也可以按照群体的情绪，改变警备方式。能够对生气的人、兴奋的人多的地方增加警备。
例如，信息提示装置8也能够使店内的客人的被推定出的情绪可视化为情绪图。具体而言，在信息提示装置8中，若发困的客人增加，则可以提高照明的辉度，并且加强制冷。另外，可以检测并监视在电车内性兴奋度增高的人，能够有助于当场抓捕疑犯。进而，通过推定看到警察等时的惊讶的情绪，还能够检测到此人犯了罪或者打算犯罪。另外，在疗养院或者办公室，能够监视高压力状态的人。
例如，信息提示装置8能够用于抑郁症应对。将情绪状态良好时的回忆记录在日志中，当陷入消极的情绪时，能够提示情绪状态良好时的回忆从而向积极的情绪状态进行引导。另外，能够根据电话的对方的情绪，将感受传达给电话的对方。也可以使情绪变为颜色而显示于显示器。也可以使得若怀有愤怒的情绪则产生振动进行通知、或者根据情绪改变语尾。
图16是表示本实施方式中的信息提示装置的第三例(信息提示装置9)的功能块的框图。
如图16所示，信息提示装置9具备多个传感器10A、10B及10C(以下也称为“传感器10A等”)、多个情绪推定部12A、12B及12C(以下也称为“情绪推定部12A等”)、判定部14、提示控制部16、提示部17以及设施控制装置70。信息提示装置9的构成要素中的、至少传感器10A等处于设施内，至少提示部17处于设施外。此外，有时对与实施方式1中的构成要素相同的构成要素附加相同的标号，并省略详细的说明。
例如，在活动(event)设施等中，情绪推定部12A等分别推定作为客人的用户UA～UC各自的情绪。情绪推定部12A等推定用户UA～UC是否怀有如无聊情绪那样的消极情绪，由提示部17向设施的经营者或者管理者等进行提示。设施的经营者等能够进行如下研究：在怀有消极情绪的客人多的场所，实施改善以使客人怀有更积极的情绪。具体而言，能够进行配置有趣的店面、设置角色、设置活动等研究。另外，也可以通过将使客人的情绪变得积极的商品设置于易于看到的位置，而促进购买。另外，作为广告语，也能够例如设为如“获得心情悲伤的人的好评”那样，利用客人在购买时的情绪。
另外，还能够在电影院和/或娱乐设施中，由信息提示装置9推定多个顾客的情绪，基于推定出的情绪来使电影的情节变化，或者改变照明和/或效果声。
另外，在电影院和/或娱乐设施中，信息提示装置9也可以将多个顾客的被推定出的情绪显示于入口。例如，通过将有多少人感动了或者有多少人流泪了这样的信息显示于设施外，能够提高对外面的顾客的宣传效果。
图17是表示本实施方式中的信息提示装置的第四例(信息提示装置A)的功能块的框图。
如图17所示，信息提示装置A具备传感器10、情绪推定部12、判定部14以及提示控制部16。信息提示装置A作为机器人80的一部分功能而被实现，提示控制部16控制由机器人控制装置82的提示部17A进行的提示。
例如，情绪推定部12判断用户U1是否有想去厕所的情绪。判定部14基于情绪推定部12推定出的情绪，判定是否应向用户U1提供表示厕所的位置的引导信息，基于该结果，提示控制部16使提示部17A提示推定出的情绪。在此，能够基于由传感器10取得的、颈部的肌肉痉挛和/或出汗、或者肩膀的耸起的程度，来判断人是否想去厕所。由此，想去厕所的人能在不被周围的人注意的情况下前往厕所。此外，引导信息是指如“厕所在这边”这样的表示厕所的位置的信息，是表示厕所的位置的箭头等。
此外，关于对是否想去厕所的判断，也可以使用上述以外的方法，例如也可以根据血压进行推定，还可以根据出汗量，不对其方法进行限定。这利用了在想去厕所时血压会上升以及在想去厕所时出汗量会增多这一人类的特征。
另外，情绪推定部12判定用户U1的性兴奋度是否在升高。由此，能够由提示部17提供表示成人娱乐等场所的信息、或者进行用手机等通知同伴等提示。另外，在老人的性兴奋度升高的情况下，若进入厕所，则也可以自动提示性影像。
另外，情绪推定部12通过推定观看完体育比赛后从会场出来的多个观众的情绪，能够判断其支持了哪个队伍。然后，根据其支持了哪个队伍，还能够改变对该观众说的话语。例如，在喜悦的情绪多的情况下，可以使用使此喜悦增加的语言，在遗憾的情绪多的情况下，可以一起发发牢骚，由此将遗憾缓解。
图18是表示实施方式4中的信息提示装置的第五例(信息提示装置B)的功能块的框图。
如图18所示，信息提示装置B具备传感器10、情绪推定部12、判定部14、提示控制部16、提示部17、麦克风90以及声音识别部92。信息提示装置B在审讯官对作为嫌疑人的用户U1问话时使用，推定并提示嫌疑人的“急躁”的程度。
麦克风90是对审讯官以及嫌疑人的对话的声音进行收集并生成电信号的麦克风装置。
声音识别部92是取得麦克风90所生成的电信号并将审讯官以及嫌疑人的对话的声音进行文本化的处理部。声音的文本化可通过公知技术实现。
判定部14结合声音识别部92的声音识别结果，判断是否由提示部17提示情绪推定部12推定出的用户U1的情绪。
例如，情绪推定部12推定作为受审嫌疑人的用户U1的“急躁”的情绪，以不让嫌疑人知道的方式在室外提示给警察方面的人。另外，也可以通过麦克风90，同时监视室内的对话。信息提示装置B通过将“急躁”的情绪和对话相关联，能够提示出嫌疑人对什么怀有急躁的情绪等。另外，即便嫌疑人保持缄默，也能够根据情绪得知其对什么感到急躁，可作为调查方向的参考。提问内容虽然也可以仅通过扬声器等进行声音输出，但若记载为文字信息，则具有更易于得知对话的进展的优点。另外，信息提示装置B也可以以不让嫌疑人知道的方式由提示部17直接将推定出的情绪和/或对话内容提示给审讯官。
例如，在入境审查的场景中，情绪推定部12推定审查对象的情绪，提示给审查官。若审查对象怀有“急躁”或者“畏惧”的情绪，则审查官可以提出问题进行追问，依照此时的情绪来判断应对。信息提示装置B也可以通过从审查对象的角度看不到的监视器等来提示该情绪。对于怀有“紧张”、“急躁”或者“畏惧”的情绪的人，信息提示装置B也可以进行指示以使得审查官继续提问，并通过监视情绪的变动，从而更深入地进行筛查。另外，对于未被推定出“紧张”等情绪的人、或者怀有高兴的情绪的人，使入境审查变得简易，由此还能够缩短审查时间。另外，信息提示装置B也可以通过在取指纹的同时检测脉波和/或皮肤温度，来辨别紧张情绪和/或身体不适。信息提示装置B还能够根据一个人在出境时在安检门处报警器响起时的情绪的变化的程度，检测其犯了罪或者打算犯罪的可能性。
例如，在法院，信息提示装置B还能够根据证人、被告以及原告在证词中使用的语言和/或各自的急躁等情绪，来检验是否有伪证。律师能够基于该情绪提问。信息提示装置B还能够根据“反省”这种时候的情绪和/或哭泣时的情绪，推定酌情减刑的余地。
此外，在上述各实施方式中，表示了为了感测情绪而基于LF/HF等进行推定的例子，但感测手段并不限定于此，还有获得心率、心跳波形、脉波、脉波波形、眼睑开度、瞳孔径、血流量、氧饱和度、面色、视线、出汗量、呼吸数、呼吸量、皮肤温度、体温等生物信息而进行判断的方法，不对其方法进行限定。
此外，在上述各实施方式中，各构成要素既可以用专用的硬件构成，也可以通过执行适合于各构成要素的软件程序来实现。各构成要素也可以通过CPU或者处理器等程序执行部将存储于硬盘或者半导体存储器等记录介质中的软件程序读出并执行来实现。在此，实现上述各实施方式的信息提示装置等的软件是如下的程序。
即，该程序使计算机执行信息提示装置的控制方法，所述信息提示装置在可被多个用户视觉识别的提示部中提示信息，所述控制方法包括：基于由传感器取得的物理量，推定所述多个用户中的第一用户的情绪；使用所取得的所述物理量或者推定出的所述情绪，执行关于是否对推定出的所述情绪进行提示的判定处理；按照所述判定处理的结果，控制所述提示部对推定出的所述情绪的提示。
以上，基于实施方式说明了一个或者多个技术方案涉及的信息提示装置等，但本发明并不限定于该实施方式。只要不脱离本发明的宗旨，将本领域技术人员想到的各种变形应用于本实施方式和/或将不同的实施方式中的构成要素组合而构成的形态也可以包含在一个或者多个技术方案的范围内。
产业上的可利用性
本发明能够利用于更适当地提示推定出的情绪的信息提示装置。具体而言，能够利用于车辆的导航装置等。

Claims (12)

1.一种信息提示装置的控制方法，所述信息提示装置在可被多个用户视觉识别的提示部中提示信息，所述控制方法包括：
基于由传感器取得的物理量，推定所述多个用户中的第一用户的情绪；
使用所取得的所述物理量或者推定出的所述情绪，执行关于是否对推定出的所述情绪进行提示的判定处理；
按照所述判定处理的结果，控制所述提示部对推定出的所述情绪的提示。
2.根据权利要求1所述的控制方法，
在所述判定处理中，
判定所述第一用户是否在看所述提示部，
在所述提示的控制中，
(a)在判定为所述第一用户在看所述提示部的情况下，禁止所述提示，
(b)在判定为所述第一用户没在看所述提示部的情况下，允许所述提示。
3.根据权利要求1或者2所述的控制方法，
在所述判定处理中，
作为所述提示的频度，决定与所取得的所述物理量或者推定出的所述情绪相应的频度，
在所述提示的控制中，
进行控制以使得按照在所述判定处理中所决定的所述频度进行所述提示。
4.根据权利要求3所述的控制方法，
在所述判定处理中，
推定出的所述情绪的强度越高，就将所述提示的频度决定为越高的频度。
5.根据权利要求3所述的控制方法，
在所述判定处理中，
判定推定出的所述情绪是否是预先决定为禁止由所述提示部进行提示的情绪，
在所述提示的控制中，禁止所述预先决定的情绪的所述提示。
6.根据权利要求3所述的控制方法，
在所述判定处理中，
将推定出的所述情绪事先提示给所述第一用户，关于是否由所述提示部对所述事先提示的所述情绪进行提示，接受由所述第一用户做出的指示，
在所述提示的控制中，
按照所述第一用户针对所述事先提示所做出的指示，控制由所述提示部进行的提示。
7.根据权利要求1至6中任一项所述的控制方法，
在所述判定处理中，
判定作为所述传感器的摄像头所取得的图像中包含的用户的人数，判定所述多个用户是否为3人以上，
在所述提示的控制中，
在判定为所述多个用户是3人以上的情况下，允许所述提示。
8.根据权利要求1至7中任一项所述的控制方法，
在所述情绪的推定中，
基于作为所述传感器的摄像头所取得的包括所述第一用户的脸部的图像，将清醒、惊讶、喜悦、舒适、轻松、困倦、无聊、悲伤、不快、焦躁、愤怒、畏惧或者平静的情绪推定为所述第一用户的情绪。
9.根据权利要求1至8中任一项所述的控制方法，
所述第一用户是一车辆的驾驶员，
所述多个用户中除所述第一用户以外的用户是没有乘坐所述一车辆的人，
在推定所述情绪时，推定所述驾驶员的焦躁或者愤怒的情绪。
10.根据权利要求1至7中任一项所述的控制方法，
所述第一用户是在厕所室内使用厕所的使用者，
所述多个用户中除所述第一用户以外的用户是在所述厕所室外为了使用所述厕所而等待的等待者，
在推定所述情绪时，推定所述使用者的不快或者轻松的情绪。
11.根据权利要求1至7中任一项所述的控制方法，
所述第一用户是在厕所室外为了使用厕所而等待的等待者，
所述多个用户中除所述第一用户以外的用户是在厕所室内使用厕所的使用者，
在推定所述情绪时，推定所述等待者的不快或者焦躁的情绪。
12.一种信息提示装置，其在可被多个用户视觉识别的提示部中提示信息，该信息提示装置具备：
情绪推定部，基于由传感器取得的物理量，推定多个用户中的第一用户的情绪；
判定部，使用所取得的所述物理量或者推定出的所述情绪，执行关于是否对推定出的所述情绪进行提示的判定处理；以及
提示控制部，按照所述判定处理的结果，控制所述提示部对推定出的所述情绪的提示。
CN201610806345.5A 2015-10-08 2016-09-06 信息提示装置的控制方法、以及信息提示装置 Active CN106562793B (zh)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
US201562238866P 2015-10-08 2015-10-08
US62/238866 2015-10-08
JP2016097491A JP6656079B2 (ja) 2015-10-08 2016-05-13 情報提示装置の制御方法、及び、情報提示装置
JP2016-097491 2016-05-13

Publications (2)

Publication Number Publication Date
CN106562793A true CN106562793A (zh) 2017-04-19
CN106562793B CN106562793B (zh) 2021-12-21

Family

ID=78857260

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610806345.5A Active CN106562793B (zh) 2015-10-08 2016-09-06 信息提示装置的控制方法、以及信息提示装置

Country Status (1)

Country Link
CN (1) CN106562793B (zh)

Cited By (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107016852A (zh) * 2017-04-25 2017-08-04 上海亦源智能科技有限公司 具有防胁迫的智能停车出入控制系统及方法
WO2018232987A1 (zh) * 2017-06-19 2018-12-27 深圳市盛路物联通讯技术有限公司 一种驾驶员情绪不稳定触发的信息交互方法及系统
CN109177920A (zh) * 2018-09-03 2019-01-11 余利 一种智能安防的汽车门锁系统及装置
CN109360304A (zh) * 2018-09-20 2019-02-19 智慧互通科技有限公司 一种停车场车辆放行的方法及装置
CN109394203A (zh) * 2017-08-18 2019-03-01 广州市惠爱医院 精神障碍康复期情绪监测与干预方法
CN109471954A (zh) * 2018-09-29 2019-03-15 百度在线网络技术（北京）有限公司 基于车载设备的内容推荐方法、装置、设备和存储介质
CN109993856A (zh) * 2017-12-29 2019-07-09 同方威视技术股份有限公司 基于多生物特征的安检设备和方法
TWI680408B (zh) * 2018-05-26 2019-12-21 南開科技大學 可偵測銀髮族情緒之遊戲機結構
CN110688885A (zh) * 2018-06-19 2020-01-14 本田技研工业株式会社 控制装置和控制方法
CN110809430A (zh) * 2017-07-19 2020-02-18 松下知识产权经营株式会社 睡意推测装置以及觉醒诱导装置
CN111210814A (zh) * 2018-11-06 2020-05-29 本田技研工业株式会社 控制装置、智能体装置以及计算机可读存储介质
CN111368052A (zh) * 2020-02-28 2020-07-03 重庆百事得大牛机器人有限公司 基于语义识别的法律人工智能咨询系统
CN111787861A (zh) * 2018-03-09 2020-10-16 三菱电机株式会社 不愉快状态判定装置
CN112163467A (zh) * 2020-09-11 2021-01-01 杭州海康威视数字技术股份有限公司 情绪分析方法、装置、电子设备及机器可读存储介质
CN113128896A (zh) * 2021-04-29 2021-07-16 重庆文理学院 基于物联网的智慧车间管理系统及方法
CN113365556A (zh) * 2019-02-04 2021-09-07 三菱电机株式会社 情绪推定装置及情绪推定方法
CN113439049A (zh) * 2019-02-18 2021-09-24 三菱电机株式会社 交通工具晕动症推测装置、交通工具晕动症抑制装置以及交通工具晕动症推测方法
JP2022510793A (ja) * 2018-12-14 2022-01-28 バルブ コーポレーション ビデオゲーム状態を動的に制御するためのプレイヤーバイオフィードバック
US20220107686A1 (en) * 2020-10-01 2022-04-07 Agama-X Co., Ltd. Information processing apparatus and non-transitory computer readable medium
EP4120219A4 (en) * 2020-03-13 2023-08-16 Yamaha Hatsudoki Kabushiki Kaisha POSITION CORRESPONDING EMOTION ASSESSING DEVICE AND POSITION CORRESPONDING EMOTION ASSESSING SYSTEM
US11769595B2 (en) 2020-10-01 2023-09-26 Agama-X Co., Ltd. Information processing apparatus and non-transitory computer readable medium

Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1798521A (zh) * 2003-09-02 2006-07-05 松下电器产业株式会社 生物传感器和利用它的支持系统
CN101133438A (zh) * 2005-03-01 2008-02-27 松下电器产业株式会社 电子显示介质和用于电子显示介质的屏幕控制方法
EP2156788A1 (en) * 2007-06-08 2010-02-24 Panasonic Corporation Apparatus control device and apparatus control method
JP2011193275A (ja) * 2010-03-15 2011-09-29 Nikon Corp 表示装置
CN102472895A (zh) * 2010-04-20 2012-05-23 松下电器产业株式会社 图像显示装置
US20130009868A1 (en) * 2006-09-08 2013-01-10 Sony Corporation Display device and display method
CN104244824A (zh) * 2012-04-10 2014-12-24 株式会社电装 情绪监视系统
CN104548309A (zh) * 2015-01-05 2015-04-29 浙江工业大学 利用不同情感特征音乐调整驾驶员情绪状态的装置及方法
CN104871531A (zh) * 2012-12-20 2015-08-26 皇家飞利浦有限公司 监控等候区
CN104896685A (zh) * 2014-03-03 2015-09-09 松下电器（美国）知识产权公司 传感方法、传感系统及包含它们的空调设备

Patent Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1798521A (zh) * 2003-09-02 2006-07-05 松下电器产业株式会社 生物传感器和利用它的支持系统
CN101133438A (zh) * 2005-03-01 2008-02-27 松下电器产业株式会社 电子显示介质和用于电子显示介质的屏幕控制方法
US20080117323A1 (en) * 2005-03-01 2008-05-22 Kiyomi Sakamoto Electronic Display Device Medium and Screen Display Control Method Used for Electronic Display Medium
US20130009868A1 (en) * 2006-09-08 2013-01-10 Sony Corporation Display device and display method
EP2156788A1 (en) * 2007-06-08 2010-02-24 Panasonic Corporation Apparatus control device and apparatus control method
JP2011193275A (ja) * 2010-03-15 2011-09-29 Nikon Corp 表示装置
CN102472895A (zh) * 2010-04-20 2012-05-23 松下电器产业株式会社 图像显示装置
CN104244824A (zh) * 2012-04-10 2014-12-24 株式会社电装 情绪监视系统
US20150078632A1 (en) * 2012-04-10 2015-03-19 Denso Corporation Feeling monitoring system
CN104871531A (zh) * 2012-12-20 2015-08-26 皇家飞利浦有限公司 监控等候区
CN104896685A (zh) * 2014-03-03 2015-09-09 松下电器（美国）知识产权公司 传感方法、传感系统及包含它们的空调设备
CN104548309A (zh) * 2015-01-05 2015-04-29 浙江工业大学 利用不同情感特征音乐调整驾驶员情绪状态的装置及方法

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
李文娟: ""轿厢式电梯空间环境设计研究"", 《中国优秀硕士学位论文全文数据库》 *
章莉莉: ""地铁公共空间设计管理研究"", 《中国博士学位论文全文数据库》 *

Cited By (31)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107016852B (zh) * 2017-04-25 2023-01-24 上海亦源智能科技有限公司 具有防胁迫的智能停车出入控制系统及方法
CN107016852A (zh) * 2017-04-25 2017-08-04 上海亦源智能科技有限公司 具有防胁迫的智能停车出入控制系统及方法
WO2018232987A1 (zh) * 2017-06-19 2018-12-27 深圳市盛路物联通讯技术有限公司 一种驾驶员情绪不稳定触发的信息交互方法及系统
CN110809430A (zh) * 2017-07-19 2020-02-18 松下知识产权经营株式会社 睡意推测装置以及觉醒诱导装置
CN109394203A (zh) * 2017-08-18 2019-03-01 广州市惠爱医院 精神障碍康复期情绪监测与干预方法
CN109993856A (zh) * 2017-12-29 2019-07-09 同方威视技术股份有限公司 基于多生物特征的安检设备和方法
CN111787861B (zh) * 2018-03-09 2023-02-17 三菱电机株式会社 不愉快状态判定装置
CN111787861A (zh) * 2018-03-09 2020-10-16 三菱电机株式会社 不愉快状态判定装置
TWI680408B (zh) * 2018-05-26 2019-12-21 南開科技大學 可偵測銀髮族情緒之遊戲機結構
CN110688885A (zh) * 2018-06-19 2020-01-14 本田技研工业株式会社 控制装置和控制方法
CN110688885B (zh) * 2018-06-19 2022-12-06 本田技研工业株式会社 控制装置和控制方法
CN109177920A (zh) * 2018-09-03 2019-01-11 余利 一种智能安防的汽车门锁系统及装置
CN109360304A (zh) * 2018-09-20 2019-02-19 智慧互通科技有限公司 一种停车场车辆放行的方法及装置
CN109471954A (zh) * 2018-09-29 2019-03-15 百度在线网络技术（北京）有限公司 基于车载设备的内容推荐方法、装置、设备和存储介质
CN111210814B (zh) * 2018-11-06 2023-11-10 本田技研工业株式会社 控制装置、智能体装置以及计算机可读存储介质
CN111210814A (zh) * 2018-11-06 2020-05-29 本田技研工业株式会社 控制装置、智能体装置以及计算机可读存储介质
JP2022510793A (ja) * 2018-12-14 2022-01-28 バルブ コーポレーション ビデオゲーム状態を動的に制御するためのプレイヤーバイオフィードバック
JP7516371B2 (ja) 2018-12-14 2024-07-16 バルブ コーポレーション ビデオゲームデバイス
CN113365556A (zh) * 2019-02-04 2021-09-07 三菱电机株式会社 情绪推定装置及情绪推定方法
CN113439049A (zh) * 2019-02-18 2021-09-24 三菱电机株式会社 交通工具晕动症推测装置、交通工具晕动症抑制装置以及交通工具晕动症推测方法
CN113439049B (zh) * 2019-02-18 2024-04-09 三菱电机株式会社 交通工具晕动症推测装置、交通工具晕动症抑制装置以及交通工具晕动症推测方法
CN111368052A (zh) * 2020-02-28 2020-07-03 重庆百事得大牛机器人有限公司 基于语义识别的法律人工智能咨询系统
EP4120219A4 (en) * 2020-03-13 2023-08-16 Yamaha Hatsudoki Kabushiki Kaisha POSITION CORRESPONDING EMOTION ASSESSING DEVICE AND POSITION CORRESPONDING EMOTION ASSESSING SYSTEM
CN112163467B (zh) * 2020-09-11 2023-09-26 杭州海康威视数字技术股份有限公司 情绪分析方法、装置、电子设备及机器可读存储介质
CN112163467A (zh) * 2020-09-11 2021-01-01 杭州海康威视数字技术股份有限公司 情绪分析方法、装置、电子设备及机器可读存储介质
US11635816B2 (en) * 2020-10-01 2023-04-25 Agama-X Co., Ltd. Information processing apparatus and non-transitory computer readable medium
US11769595B2 (en) 2020-10-01 2023-09-26 Agama-X Co., Ltd. Information processing apparatus and non-transitory computer readable medium
US20220107686A1 (en) * 2020-10-01 2022-04-07 Agama-X Co., Ltd. Information processing apparatus and non-transitory computer readable medium
US12033758B2 (en) 2020-10-01 2024-07-09 Agama-X Co., Ltd. Information processing apparatus and non-transitory computer readable medium
CN113128896B (zh) * 2021-04-29 2023-07-18 重庆文理学院 基于物联网的智慧车间管理系统及方法
CN113128896A (zh) * 2021-04-29 2021-07-16 重庆文理学院 基于物联网的智慧车间管理系统及方法

Also Published As

Publication number Publication date
CN106562793B (zh) 2021-12-21

Similar Documents

Publication Publication Date Title
CN106562793A (zh) 信息提示装置的控制方法、以及信息提示装置
JP6656079B2 (ja) 情報提示装置の制御方法、及び、情報提示装置
US11194405B2 (en) Method for controlling information display apparatus, and information display apparatus
US11383721B2 (en) System and method for responding to driver state
WO2020054458A1 (ja) 情報処理装置、移動装置、および方法、並びにプログラム
US7020544B2 (en) Vehicle information processing device, vehicle, and vehicle information processing method
US7982620B2 (en) System and method for reducing boredom while driving
US20080119994A1 (en) Vehicular user hospitality system
US20210362594A1 (en) Car driver alcohol level and sleeping status detection and notification system
Jeon Emotions in driving
KR20230002180A (ko) 운전자의 주의 환기 장치 및 그 방법
Guggenheim et al. Can friendship serve as an impetus for safe driving among young drivers?
US11872992B2 (en) Vehicle user-assistance system, vehicle user-assistance device, and vehicle user-assistance server
Yu et al. Constructing the behavioral sequence of the takeover process—TOR, behavior characteristics and phases division: A real vehicle experiment
Ayas et al. Drowsiness mitigation through driver state monitoring systems: a scoping review
Mesken Measuring emotions in traffic
Dittrich et al. Emotional feedback to mitigate aggressive driving: A real-world driving study
Kato et al. Classification of positive and negative emotion evoked by traffic jam based on electrocardiogram (ECG) and pulse wave
Jeon et al. Participatory design process for an in-vehicle affect detection and regulation system for various drivers
CN115428093A (zh) 用于向用户提供用户适配的服务的技术
Luo et al. Estimating and Visualizing Drivers’ Emotions Using the Internet of Digital Reality
Johansson Why does a sleepy driver continue to drive?
Jeon et al. In-vehicle affect detection and mitigation interfaces: Strategies and research questions in designing unobtrusive interactions
Musicant et al. Estimating Driver Fatigue Based on Heart Activity, Respiration Rate
Perello-March Towards multimodal driver state monitoring systems for highly automated driving

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant