CN110147160A - 信息提供装置和信息提供方法 - Google Patents

信息提供装置和信息提供方法 Download PDF

Info

Publication number
CN110147160A
CN110147160A CN201811534268.8A CN201811534268A CN110147160A CN 110147160 A CN110147160 A CN 110147160A CN 201811534268 A CN201811534268 A CN 201811534268A CN 110147160 A CN110147160 A CN 110147160A
Authority
CN
China
Prior art keywords
emotion
vehicle
information
occupant
basic
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201811534268.8A
Other languages
English (en)
Other versions
CN110147160B (zh
Inventor
今泉聪
后藤绅一郎
相马英辅
汤原博光
泷川桂一
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Honda Motor Co Ltd
Original Assignee
Honda Motor Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Honda Motor Co Ltd filed Critical Honda Motor Co Ltd
Publication of CN110147160A publication Critical patent/CN110147160A/zh
Application granted granted Critical
Publication of CN110147160B publication Critical patent/CN110147160B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/14Means for informing the driver, warning the driver or prompting a driver intervention
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/21Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor using visual output, e.g. blinking lights or matrix displays
    • B60K35/22Display screens
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/29Instruments characterised by the way in which information is handled, e.g. showing information on plural displays or prioritising information according to driving conditions
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/85Arrangements for transferring vehicle- or driver-related data
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/08Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/012Head tracking input arrangements
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/015Input arrangements based on nervous system activity detection, e.g. brain waves [EEG] detection, electromyograms [EMG] detection, electrodermal response detection
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017Gesture based interaction, e.g. based on a set of recognized hand gestures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16Sound input; Sound output
    • G06F3/167Audio in a user interface, e.g. using voice commands for navigating, audio feedback
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/59Context or environment of the image inside of a vehicle, e.g. relating to seat occupancy, driver state or inner lighting conditions
    • G06V20/597Recognising the driver's state or behaviour, e.g. attention or drowsiness
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/174Facial expression recognition
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/18Information management
    • B60K2360/186Displaying information according to relevancy
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/18Information management
    • B60K2360/186Displaying information according to relevancy
    • B60K2360/1876Displaying information according to relevancy according to vehicle situations
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/589Wireless data transfers
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/592Data transfer involving external databases
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/08Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
    • B60W2040/0872Driver physiology
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/14Means for informing the driver, warning the driver or prompting a driver intervention
    • B60W2050/146Display means
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2540/00Input parameters relating to occupants
    • B60W2540/22Psychological state; Stress level or workload
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2540/00Input parameters relating to occupants
    • B60W2540/221Physiology, e.g. weight, heartbeat, health or special needs
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/01Indexing scheme relating to G06F3/01
    • G06F2203/011Emotion or mood input determined on the basis of sensed human body parameters such as pulse, heart rate or beat, temperature of skin, facial expressions, iris, voice pitch, brain activity patterns

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Mechanical Engineering (AREA)
  • Transportation (AREA)
  • Automation & Control Theory (AREA)
  • General Health & Medical Sciences (AREA)
  • Health & Medical Sciences (AREA)
  • Chemical & Material Sciences (AREA)
  • Multimedia (AREA)
  • Combustion & Propulsion (AREA)
  • Neurology (AREA)
  • Neurosurgery (AREA)
  • Dermatology (AREA)
  • Biomedical Technology (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Mathematical Physics (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Navigation (AREA)
  • User Interface Of Digital Computer (AREA)
  • Traffic Control Systems (AREA)
  • Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)

Abstract

本发明提供一种信息提供装置。信息提供装置(1)具有:情感推定部(104),其从乘员乘坐车辆(X)时起在规定期间内推定乘员的情感(步骤114);基本情感设定部(105),其根据乘员的情感来设定车辆(X)的基本情感(步骤120);车辆状态检测部(11),其检测车辆(X)的状态(步骤122);情感生成部(106),其根据基本情感和车辆(X)的状态来生成车辆(X)的情感(步骤126);信息确定部(108),其根据车辆(X)的情感来确定向乘员提供的信息(步骤128);和信息输出部(15、17),其向乘员输出信息(步骤130)。据此,能在减轻或消除伴随信息提供而带给车辆乘员的厌烦感的同时,提供乘员可能感兴趣的信息。

Description

信息提供装置和信息提供方法
技术领域
本发明涉及一种信息提供装置和信息提供方法。
背景技术
现有技术中,已知一种向车辆的乘员提供信息的装置。
在向驾驶中的乘员提供信息的情况下,有时驾驶员在集中精神驾驶时会感到厌烦,或者因为驾驶员的注意力集中于驾驶而无法正确识别信息。为了解决这样的技术问题,例如,专利文献1的技术公开了一种装置,其根据驾驶员的驾驶负荷等级,在驾驶负荷高的情况下保留信息而暂不提供,在驾驶负荷低的情况下提供信息,据此能够不妨碍驾驶员的注意力集中而提供信息。
现有技术文献
专利文献
专利文献1:日本发明专利公开公报特开2008-241309号
发明内容
【发明要解决的技术问题】
然而,在根据驾驶负荷等级来对信息的提供(提示)进行判断的专利文献1的技术中,根据接收到令人不愉快等的信息的乘员(包括驾驶员)的情感,驾驶员还可能会对所提供的信息感到厌烦。另外,也有可能有对单方面千篇一律的信息提供感到枯燥乏味的乘员。如果从信息提供装置持续提供令人厌烦的信息或枯燥乏味的信息,则乘员也有可能回避使用信息提供装置。
因此,本发明的目的在于:提供一种能够在减轻或消除伴随着信息的提供而带给车辆乘员的厌烦感的同时,提供乘员可能感兴趣的信息的信息提供装置和信息提供方法。
【解决技术问题的技术手段】
本发明的信息提供装置的特征在于,具有:情感推定部,其从乘员乘坐车辆时起在规定期间内推定乘员的情感;基本情感设定部,其根据由所述情感推定部推定出的所述乘员的情感,来设定成为所述车辆的情感的基础的基本情感(基础情感);车辆状态检测部,其检测所述车辆的状态;情感生成部,其根据所述基本情感和由所述车辆状态检测部检测到的所述车辆的状态,来生成所述车辆的情感;信息确定部,其根据所述车辆的情感来确定向所述乘员提供的信息;和信息输出部,其向所述乘员输出所述信息。
根据该结构的信息提供装置,由情感推定部从乘员乘坐车辆时起在规定期间内推定乘员的情感。
然后,由基本情感设定部根据由所述情感推定部推定出的所述乘员的情感,来设定成为所述车辆的情感的基础的基本情感。
然后,由情感生成部按照所述基本情感和由车辆状态检测部检测到的所述车辆的状态来生成所述车辆的情感。
然后,由信息确定部根据所述车辆的情感来确定向所述乘员提供的信息。
由于基本情感是根据从乘员乘坐车辆时起在规定期间内推定出的乘员的情感而设定的情感,因此,按照基本情感生成的车辆的情感成为与乘员从乘车时起规定期间内的情感相应的情感。
乘员的从乘车时起规定期间内的情感大多表示例如在休息日前激动等乘员的状况。通过考虑能表示这种乘员的状况的、乘员乘车时起规定期间内的情感而生成车辆的情感,且按照该车辆的情感来确定向乘员提供的信息,能够使乘员感到车辆对乘员的状况有共鸣,能使乘员对所提供的该信息感兴趣。
另外,不是按照车辆行驶中推定出的乘员的情感,而是由情感生成部按照车辆的状态考虑情感来生成车辆的情感。
在车辆行驶中推定出的乘员的情感受到与其他车辆的关系、交通信号灯的变化、道路状况等诸多要因影响,因此,根据乘员的性格,乘员的情感有可能剧烈变化。与此相对,车辆的状态的变化比较小,因此,通过按照车辆的状态考虑情感来生成车辆的情感,能够在使车辆的状态反映在车辆的情感中的同时,抑制车辆的情感的频繁变化。
据此,能够消除或减轻因车辆的情感的频繁变化而带给车辆的乘员的厌烦感。
如上所述那样,根据该结构的信息提供装置,能够在减轻或消除伴随着信息的提供而带给车辆的乘员的厌烦感的同时,提供乘员可能感兴趣的信息。
在本发明的信息提供装置中优选为,所述基本情感设定部构成为,还按照上次推定出的乘员的情感与本次推定出的乘员的情感的差分来设定基本情感。
根据该结构的信息提供装置,根据上次推定出的乘员的情感与本次推定出的乘员的情感的差分来设定基本情感。据此,在上次与本次之间存在乘员的情感变化的情况下,考虑该情感变化而生成基本情感,进而生成车辆的情感。通过按照该车辆的情感确定所提供的信息,能够使乘员感到车辆与乘员有共鸣。
在本发明的信息提供装置中优选为,还具有获取所述乘员的日程信息的日程信息获取部,所述基本情感设定部构成为,还考虑乘员的日程信息而设定所述基本情感。
当乘员的日程信息有可能成为乘员情感变化的主要原因时,也考虑该日程信息来设定车辆的基本情感,进而生成车辆的情感。通过按照该车辆的情感来确定向乘员提供的信息,能带给乘员宛如车辆与乘员有共鸣这样的印象。
附图说明
图1是基本系统的结构说明图。
图2是代理装置的结构说明图。
图3是移动终端装置的结构说明图。
图4是说明代理的情感表达的结构的图。
图5A~图5E是表示存储于信息存储部的各信息的例子的图,图5A是表示对象用户的情感履历的例子的图,图5B是表示对象用户的日程(schedule)信息的图,图5C是表示各活动(event)与辅助偏移量之间的关系的图,图5D是表示车辆的状态与辅助偏移量的关系的图,图5E是表示车辆的虚拟情感与输出的内容(content)之间的关系的图。
图6是信息输出处理的流程图。
图7是基本情感表达的映射图的说明图。
图8是附加部分的映射图的说明图。
【附图标记说明】
1:代理装置;2:移动终端装置;3:服务器;100:控制部;11:传感器部;111:GPS传感器;112:车速传感器;113:陀螺仪传感器;13:存储部;14:无线部;141:近距离无线通信部:142:无线通信网通信部;15:显示部;16:操作输入部;17:音频部;18:导航部;191:拍摄部(车内摄像头);192:语音输入部(麦克风);21:传感器部;211:GPS传感器;213:陀螺仪传感器;23:存储部;231:数据存储部;232:应用程序存储部;24:无线部;241:近距离无线通信部;242:无线通信网通信部;25:显示部;26:操作输入部;27:语音输出部;291:拍摄部(摄像头);292:语音输入部(麦克风);X:车辆(移动体)。
具体实施方式
(基本系统的结构)
图1所示的基本系统由搭载在对象车辆X(移动体)上的代理装置1、能够由乘员带入对象车辆X内部的移动终端装置2(例如智能手机)和服务器3构成。代理装置1、移动终端装置2和服务器3具有通过无线通信网(例如互联网)彼此无线通信的功能。代理装置1和移动终端装置2具有在共存于同一对象车辆X的空间内等物理上彼此靠近的情况下,通过近距离无线方式(例如Bluetooth(注册商标))彼此无线通信的功能。对象车辆X相当于本发明的“车辆”。
(代理装置的结构)
如图2所示,代理装置1例如具有控制部100、传感器部11(具有GPS传感器111、车速传感器112、陀螺仪传感器113和燃料传感器114。)、车辆信息部12、存储部13、无线部14(具有近距离无线通信部141和无线通信网通信部142。)、显示部15、操作输入部16、音频部17(语音输出部)、导航部18、拍摄部191(车内摄像头)和语音输入部192(麦克风)。代理装置1相当于本发明的“信息提供装置”的一例。显示部15和音频部17分别相当于本发明的“信息输出部”的一例。操作输入部16和语音输入部192分别相当于本发明的“输入部”的一例。传感器部11相当于本发明的“车辆状态检测部”。控制部100通过执行后述的运算来作为用户检测部101、日期时间信息识别部102、用户状态识别部103、情感推定部104、基本情感设定部105、情感生成部106和日程信息获取部107发挥功能。此外,信息提供装置的所有结构要素不需要均包含在代理装置1中,也可以通过使代理装置1通过通信而执行外部服务器等所需的功能,来使其作为信息提供装置的结构要素发挥功能。
传感器部11的GPS传感器111根据来自GPS(Global Positioning System)卫星的信号来计算当前位置。车速传感器112根据来自旋转轴的脉冲信号来计算对象车辆X的速度。陀螺仪传感器113检测角速度。燃料传感器114根据来自对象车辆X的燃料箱的信号,来计算对象车辆X的燃料剩余量。通过上述GPS传感器、车速传感器、陀螺仪传感器,能够准确地计算对象车辆X的当前位置和方向。另外,GPS传感器111也可以从GPS卫星获取表示当前日期时间的信息。
车辆信息部12通过控制器局域网总线(CAN-BUS)等车内网络来获取车辆信息。车辆信息例如包括点火开关SW的接通/断开(ON/OFF)、安全装置系统的动作状况(ADAS、ABS和气囊等)的信息。操作输入部16除了检测开关按下等操作之外,还检测能够用于乘员的情感推定的对方向盘、加速踏板或制动踏板的操作量、对车窗和空调的操作(温度设定等)等的输入。
存储部13具有代理图像131和数据存储部132。
代理图像131是作为车辆X的虚拟人物的脸部的图像而模仿了人的脸部的图像。如图4所示,代理图像131包括基本表情图像41和附加部分42。通过组合基本表情图像41和附加部分42来构成应用表情图像43。代理图像131例如是从服务器3下载的图像。
信息存储部132存储有各种信息,例如存储有图5A所示的用户的情感履历信息、图5B所示的用户的日程信息、图5C所示的表示活动与辅助偏移量的关系的信息、图5D所示的表示车辆的状态与辅助偏移量的关系的信息、图5E所示的表示车辆的情感与内容的关系的信息。此外,信息存储部132还存储在处理中附带地识别出的各种信息。图5A所示的用户的情感履历信息例如可在后述的信息输出处理(图6)的步骤240中获取。图5B所示的用户的日程信息例如可通过与用户持有的移动终端等通信来进行识别。
如图4所示,基本表情图像41例如是与喜欢、平静、讨厌和忍耐这样的情感对应的各种图像。附加部分42是与各个基本表情图像41对应的可爱、开心、愉快、安心、悲伤、愤怒、痛苦和难受有关的部分。
例如,通过组合喜欢的基本表情图像411和与喜欢对应的可爱的附加部分421,来构成可爱的应用表达图像431。
无线部14的近距离无线通信部141例如为Wi-Fi(Wireless Fidelity(注册商标))、蓝牙(Bluetooth(注册商标))等通信部,无线通信网通信部142是连接于以诸如3G、蜂窝通信、LTE通信等所谓的移动电话网络为代表的无线通信网络的通信部。
(移动终端装置的结构)
移动终端装置2例如如图3所示,具有控制部200、传感器部21(具有GPS传感器211和陀螺仪传感器213。)、存储部23(具有数据存储部231和应用程序存储部232。)、无线部24(具有近距离无线通信部241和无线通信网通信部242。)、显示部25、操作输入部26、语音输出部27、拍摄部291(摄像头)和语音输入部292(麦克风)。移动终端装置2也可以作为本发明的“信息提供装置”发挥功能。在这种情况下,显示部25和语音输出部27分别相当于本发明的“信息输出部”的一例。控制部200作为用户检测部201、日期时间信息识别部202、用户状态识别部203、情感推定部204、基本情感设定部205、情感生成部206和日程信息获取部207发挥功能。
移动终端装置2具有与代理装置1共同的结构要素。移动终端装置2不具有获取车辆信息的结构要素(例如,参照图2的燃料传感器114),但例如能够通过近距离无线通信部241从代理装置1或对象车辆X所具有的“车辆状态检测部”获取车辆信息。另外,移动终端装置2也可以按照存储在应用程序存储部232中的应用程序(软件),而具有与代理装置1的音频部17和导航部18分别相同的功能。
(服务器的结构)
服务器3由一个或多个计算机构成。服务器3构成为:从各个代理装置1或移动终端装置2接收数据和请求,将数据存储到数据库等存储部,且执行与请求对应的处理,将处理结果发送至代理装置1或移动终端装置2。
构成服务器3的计算机的一部分或全部也可以由移动站、例如一个或多个代理装置1或移动终端装置2的结构要素构成。
所谓“构成为”本发明的结构要素执行担当运算处理的意思是指“编程为”或“设计(design)为”:构成该结构要素的CPU等运算处理装置从ROM、RAM等存储器或记录介质除了读取需要的信息以外还读取软件,按照该软件对该信息执行运算处理。各结构要素可以由共同的处理器(运算处理装置)构成,各结构要素也可以由能够彼此通信的多个处理器构成。
(信息输出处理)
接着,参照图5~图8对信息输出处理进行说明。
代理装置1的控制部100(用户检测部101)通过拍摄部191和语音输入部192中的一方或双方来识别拍摄图像数据和语音数据中的一方或双方,且将其存储到数据存储部132(图6/步骤102)。
代理装置1的控制部100(用户检测部101)对在图6/步骤102中获取到的拍摄图像数据和语音数据中的一方或双方进行图像分析或语音分析,来判定是否检测到乘员(以下,适当地称为对象用户。)(图6/步骤104)。在此的图像分析或语音分析能够适用公知的技术。
在该判定结果为否定的情况下(图6/步骤104:否),代理装置1的控制部100执行图6/步骤102的处理。
在该判定结果为肯定的情况下(图6/步骤104:是),代理装置1的控制部100(日期时间信息识别部102)从GPS传感器111识别处理时刻的日期时间信息,且将其存储到数据存储部132(图6/步骤106)。该日期时间信息包括日期信息、时间信息和星期信息。
代理装置1的控制部100(日程信息获取部107)识别与在图6/步骤106中获取到的日期时间信息对应的对象用户的日程,且将其存储到数据存储部132(图6/步骤108)。例如,如果在图6/步骤106获取到的日期时间信息包含于2018/2/2 10:00~19:00,则代理装置1的控制部100识别出对象用户预定的活动为“○○会”。
代理装置1的控制部100(基本情感设定部105)识别与在图6/步骤106中获取到的日期时间信息对应的辅助偏移量,且将其存储到数据存储部132(图6/步骤108)。辅助偏移量是在后述的图6/步骤120的基本情感设定中使用的参数集,优选为维数与表示基本情感的参数集相同的参数集。例如,辅助偏移量由表示图7所示的稳定状态的第1值和表示平静度的第2值来表示。
代理装置1的控制部100例如也可以识别与在图6/步骤106中识别出的日期时间信息中包含的星期信息“星期五”对应的辅助偏移量(1,2)。代理装置1的控制部100例如也可以识别与在图6/步骤108中识别出的活动“○○会”对应的辅助偏移量(2,2)。代理装置1的控制部100也可以识别离用户预定的活动越近则后述的基本情感越容易成为肯定性情感(喜欢、平静等)这样的辅助偏移量。
代理装置1的控制部100(用户状态识别部103)识别对象用户的状态(图5/步骤112)。另外,控制部100将对象用户的状态中的一方或双方的时序数据存储到信息存储部132。
代理装置1的控制部100例如根据由操作输入部16检测到的操作、由拍摄部191拍摄到的图像、由语音输入部192检测到的语音和对象用户的生物体信息中的至少一种来识别对象用户的状态,其中,所述对象用户的生物体信息是从未图示的对象车辆X的用户即对象用户穿戴的可穿戴传感器获取到的信息。
例如,控制部100根据由操作输入部16检测到的操作,来识别作为对象用户的状态的、对“当前的心情?”等调查问卷的回答。
另外,例如,控制部100根据由拍摄部191拍摄到的图像,来识别作为对象用户的状态的、对象用户的表情和行为。
另外,例如,控制部100根据由语音输入部192检测到的语音,来识别作为对象用户的状态的、对象用户的发言内容和发言时的声音的高度。
另外,例如,控制部100识别从对象用户穿戴的可穿戴设备接收到的生物体信息(肌电图、脉搏、血压、血中氧浓度、体温等)。
控制部100(情感推定部104)根据在图5/步骤112中识别出的对象用户的状态,来推定对象用户的本次的情感(图5/步骤114)。
例如,控制部100也可以按照预先规定的规则,根据对象用户的状态来推定对象用户的情感。
对象用户的情感由多个参数的集合来表示。对象用户的情感是在后述的图6/步骤120的基本情感设定中使用的参数集,优选为维数与表示基本情感的参数集相同的参数集。
例如,对象用户的情感由表示图7所示的稳定状态的第1值和表示平静度的第2值来表示。
控制部100例如也可以根据对调查问卷的回答来推定对象用户的情感。例如,在对调查问卷的回答是“与平常一样”的情况下,控制部100也可以识别比较高的值(例如3)作为表示对象用户的稳定状态的第1值。在对调查问卷的回答是“与平常不同”的情况下,控制部100也可以识别比较低的值(例如-3)作为表示对象用户的稳定状态的第2值。
另外,在对象车辆X的速度在规定速度以上的状态持续规定时间以上的情况下,控制部100也可以识别比较高的值(例如3)作为表示对象用户的平静度的第2值。另外,在对象车辆X的速度小于规定速度的状态持续规定时间以上,或者对象车辆X的速度在短时间内频繁增减的情况下,控制部100也可以识别比较低的值(例如-3)作为表示对象用户的平静度的第2值。
另外,控制部100也可以以这些状态持续越长时间则第2值越高或越低的方式来识别第2值。
另外,控制部100也可以根据对象用户的表情来推定对象用户的情感。例如,控制部100也可以在进行图像分析而判断为对象用户为正在笑的表情的情况下,识别比较高的值(例如5)作为表示平静度的第2值。另外,例如,控制部100也可以在进行图像分析而判断为对象用户为气愤的表情的情况下,识别比较低的值(例如-5)作为表示平静度的第2值。除此之外或者取而代之,控制部100也可以考虑对象用户的视线或脸部朝向来推定对象用户的情感。
另外,控制部100也可以根据对象用户的行为来推定对象用户的情感。例如,控制部100也可以在进行图像分析而判断为几乎没有对象用户的动作的情况下,识别比较高的值(例如3)作为表示对象用户的稳定状态的第1值。另外,例如,控制部100也可以在进行图像分析而判断为对象用户不沉着地行动的情况下,识别比较低的值(例如-3)作为表示对象用户的稳定状态的第1值。
另外,控制部100也可以根据对象用户的发言内容来推定对象用户的情感。例如,控制部100也可以在进行语音分析而判断为对象用户的发言内容为称赞什么事或期待什么事等肯定性内容的情况下,识别比较高的值(例如5)作为表示平静度的第2值。例如,控制部100也可以在进行语音分析而判断为对象用户的发言内容为批判什么事等否定性内容的情况下,识别比较低的值(例如-5)作为表示平静度的第2值。另外,控制部100也可以在对象用户的发言内容中包含特定的关键词的情况下(“赞”、“超赞”等),将与该关键词相关联的情感的类别和情感的强度推定为对象用户的情感。
另外,控制部100也可以根据对象用户发言时的声音的高度来推定对象用户的情感。例如,控制部100也可以在对象用户发言时的声音的高度为规定高度以上的情况下,识别比较低的值(例如-3)作为表示对象用户的稳定状态的第1值。控制部100也可以在对象用户发言时的声音的高度小于规定高度的情况下,识别比较高的值(例如3)作为表示对象用户的稳定状态的第1值。
另外,控制部100也可以使用来自对象用户穿戴的可穿戴设备的生物体信息(肌电图、脉搏、血压、血中氧浓度、体温等)来识别表示对象用户的稳定状态的第1值和表示对象用户的平静度的第2值。
另外,例如,控制部100也可以使用情感引擎,根据对象车辆X的行驶状态和对象用户的状态,识别表示对象用户的稳定状态的第1值和表示对象用户的平静度的第2值,其中,所述情感引擎根据通过机器学习生成的对象车辆X的行驶状态和对象用户的状态来输出对象用户的情感。
另外,例如,控制部100也可以参照预先规定的表,根据对象车辆X的行驶状态和对象用户的状态,来识别表示对象用户的稳定状态的第1值和表示对象用户的平静度的第2值。
控制部100也可以将它们组合来识别表示对象用户的稳定状态的第1值和表示对象用户的平静度的第2值。
下面,说明以下情况:在图6/步骤114中,控制部100识别了表示对象用户的稳定状态的第1值“2”和表示对象用户的平静度的第2值“1”来作为表示对象用户本次的情感的参数集P1。
控制部100(情感推定部104)通过参照存储在信息存储部132中的对象用户的情感履历信息,来识别对象用户的上次推定的情感(图6/步骤116)。例如,控制部100将表示图5A所示的2018/2/27:00的对象用户的稳定状态的第1值“-1”和表示对象用户的平静度的第2值“-2”,识别为表示本次的对象用户的情感的参数集P0。
控制部100(基本情感设定部105)识别与在图6/步骤114中识别出的对象用户的情感对应的偏移量(图6/步骤118)。例如,如图7所示,控制部100也可以将向量V1识别为该偏移量,该向量V1是从表示在图6/步骤116中识别出的对象用户的上次的情感的参数集P2至表示图6/步骤114中识别出的对象用户的本次的情感的参数集P1的向量。控制部100也可以将对该向量乘以规定系数得到的向量识别为偏移量。
控制部100(基本情感设定部105)根据在图6/步骤118中识别出的偏移量,设定车辆的虚拟情感的基础即基本情感(图6/步骤120)。例如,控制部100也可以以原点为基准,将在图6/步骤118中识别出的偏移量即向量V1所示的参数集B1设定为表示基本情感的参数集。另外,控制部100也可以以参数集B1为基准,将考虑了在图6/步骤110中识别出的辅助偏移量而确定的参数集B2识别为表示基本情感的参数集。
控制部100根据由传感器部11获取到的信息来识别对象车辆X的状态(图6/步骤122)。另外,控制部100将识别出的对象车辆X的状态的时序数据存储到信息存储部132。
例如,控制部100(情感生成部)根据由传感器部11获取到的信息,识别作为对象车辆X的动作状态的时序的位置、对象车辆X的行驶速度、对象车辆X的方向。控制部100根据由传感器部11获取到的信息来识别对象车辆X的燃料剩余量。
控制部100(情感生成部)参照信息存储部132中存储的信息,识别与在图6/步骤122中识别出的对象车辆X的状态对应的辅助偏移量(图6/步骤124)。控制部100根据图5D所示的信息存储部132中存储的对象车辆X的状态与辅助偏移量的关系,识别与对象车辆X的状态对应的辅助偏移量。例如,在燃料剩余量在规定以下的情况下,控制部100识别对象车辆X的情感易于成为否定性情感(例如讨厌、忍耐)的辅助偏移量。例如,在一定时间以上对象车辆X的行驶速度在规定速度以上的情况下,控制部100识别对象车辆X的情感易于成为肯定性情感(例如喜欢、平静)的辅助偏移量。
控制部100(情感生成部106)根据在图6/步骤120中设定的基本情感和在图6/步骤124中识别出的辅助偏移量来确定对象车辆X的虚拟情感(图5/步骤126)。控制部100以在图6/步骤120中设定的基本情感的参数集所表示的位置为基准,移动在图6/步骤124中识别出的辅助偏移量的量,据此确定对象车辆X的虚拟情感。然后,控制部100以对象车辆X的情感为基础,根据图7或图8所示的情感映射图,确定对象车辆X的虚拟情感,且确定与该情感对应的表达。
此外,图7和图8的情感映射图由稳定状态的第1轴和平静度的第2轴表示。
例如,在代理情感指标值包含于图7的第1象限中的情况下,控制部100确定对象车辆X的虚拟情感为“喜欢”,且选择喜欢的基本表情图像411作为代理的情感表达的基本表达。控制部100也可以替代图像而选择内容或发声方式与代理的情感对应的音频消息或音乐,来作为代理的情感表达的基本表达,或者除了图像之外还选择内容或发声方式与代理的情感对应的音频消息或音乐,来作为代理的情感表达的基本表达。
另外,例如,在代理情感指标值为第1轴的值在第1阈值T1以上且第2轴的值在第2阈值T2以上的情况下,控制部100使用图8所示的映射图,确定对象车辆X的虚拟情感为“可爱”,且选择“可爱”的附加部分421作为代理的情感表达的应用表达。另外,例如,在代理情感指标值为第1轴的值在第1阈值T1以上且第2轴的值在零以上但低于第2阈值T2的情况下,控制部100确定对象车辆X的虚拟情感为“开心”,且选择“开心”的附加部分422作为代理的情感表达的应用表达。另外,例如,在代理情感指标值为第1轴的值在零以上但低于第1阈值T1的情况下,控制部100不选择作为代理的情感表达的应用表达的附加部分。另外,控制部100也可以根据与第1轴或第2轴不同的评价轴来选择附加部分。
控制部100还可以与图6/步骤114同样地推定对象用户的情感,确定对象车辆X的虚拟情感以使其接近对象用户的情感。
控制部100(信息确定部108)按照对象车辆X的虚拟情感来选择输出的内容和输出方式(图6/步骤128)。输出内容也可以是与用户的嗜好有关的问题、其他问题、新闻、小常识、用户正在行驶的地区的介绍、有名地点的介绍、音乐等内容及其说明等各种内容。优选为,输出方式是反映出对象车辆X的情感的方式,例如,如果对象车辆X的情感是喜欢(图7的第1象限),则优选输出的语音的音调较高。
控制部100例如也可以根据存储于信息存储部132的图5所示的对象车辆X与内容的关系,来识别应输出的内容。控制部100例如也可以向服务器3发送表示对象车辆X的虚拟情感的参数集,接收应输出的内容和输出方式。
控制部100按照所选择的输出的信息内容和输出方式,使显示部15和音频部17中的一方或双方输出信息(图6/步骤130)。
控制部100(用户状态识别部103)与图6/步骤112同样地识别对象用户的状态(图6/步骤132)。
控制部100(情感推定部104)与图6/步骤114同样地推定对象用户的情感(图6/步骤134)。
控制部100(用户检测部101)与图6/步骤102同样地获取拍摄图像数据和语音数据(图6/步骤136)。
控制部100(用户检测部101)根据在图6/步骤136中获取到的数据,与图6/步骤104同样地判定是否检测到乘员(图6/步骤138)。
在该判定结果为肯定的情况下(图6/步骤138:是),控制部100执行图6/步骤122以后的处理。
在该判定结果为否定的情况下(图6/步骤138:否),控制部100(情感推定部104)将表示在图6/步骤134中推定出的用户的情感的参数集存储到信息存储部132,结束信息输出处理。
(本实施方式的作用效果)
根据该结构的代理装置1(相当于本发明的“信息提供装置”),由控制部100(作为本发明的“情感推定部”发挥功能。)在对象用户乘坐对象车辆X之后推定对象用户的情感(图6/步骤114)。
然后,通过控制部100(作为本发明的“基本情感设定部”发挥功能。)根据由所述情感推定部104(控制部100)推定出的所述对象用户的情感,来设定成为对象车辆X的虚拟情感的基础的基本情感(图6/步骤120)。
然后,通过控制部100(情感生成部106)按照所述基本情感和由传感器部11(相当于本发明的“车辆状态检测部”。)检测到的对象车辆X的状态,来生成对象车辆X的情感(图6/步骤126)。
然后,通过控制部100(作为本发明的“信息确定部”发挥功能。)根据对象车辆X的情感来确定向对象用户提供的信息(图6/步骤128)。
由于基本情感是根据对象用户乘坐对象车辆X之后推定出的对象用户的情感而设定的情感,因此,按照基本情感生成的对象车辆X的情感成为与对象用户乘车时的情感相应的情感。
对象用户乘车时的情感大多表示例如在休息日前激动等对象用户的状况。通过考虑能表示这种对象用户的状况的、对象用户乘车时的情感来生成对象车辆X的虚拟情感,且按照该对象车辆X的虚拟情感来确定向对象用户提供的信息,能够使对象用户感到对象车辆X对于对象用户的状况有共鸣,能使对象用户对所提供的信息感兴趣。
另外,控制部100(作为本发明的“情感生成部”发挥功能。)不是按照在对象车辆X的行驶中推定的“乘员的情感”,而是按照“对象车辆X的状态”而考虑情感,来生成对象车辆X的情感(图6/步骤122、图6/步骤126)。
在对象车辆X的行驶中推定出的对象用户的情感受到与其他车辆的关系、交通信号灯的变化、道路状况等诸多要因影响,因此,根据对象用户的性格,乘员的情感有可能剧烈变化。与此相对,对象车辆X的状态的变化比较小,因此,通过考虑对象车辆X的状态来生成对象车辆X的虚拟情感,能够在使对象车辆X的状态反映在对象车辆X的情感中的同时,抑制对象车辆X的虚拟情感的频繁变化。
据此,能够消除或减轻因对象车辆X的虚拟情感的频繁变化而带给对象用户的厌烦感。
如上所述那样,根据该结构的代理装置1,能够在减轻或消除伴随着信息的提供而带给对象用户的厌烦感的同时,提供对象用户可能感兴趣的信息。
另外,根据该结构的代理装置1,按照上次推定出的对象用户的情感与本次推定出的对象用户的情感的差分来设定基本情感(图6/步骤114~图6/步骤120)。据此,在上次与本次之间存在对象用户的情感变化的情况下,考虑该情感变化而生成基本情感,进而生成对象车辆X的虚拟情感。通过按照该对象车辆X的虚拟情感来确定所提供的信息,能够使对象用户感到对象车辆X对于对象用户的情感变化有共鸣而选择所输出的信息。
当对象用户的日程信息有可能成为对象用户的情感变化的主要原因时,考虑该日程信息而设定对象车辆X的基本情感(图6/步骤106~步骤110、步骤120),进而生成对象车辆X的情感(图6/步骤126)。如此,考虑对象用户的日程信息来生成对象车辆X的虚拟情感,且根据该情感确定向对象用户提供的信息,据此,能带给对象用户宛如对象车辆X对于对象用户的状况有共鸣这样的印象。
(变形方式)
在本实施方式中,在检测到对象用户之后(图6/步骤104:是)依次进行处理的阶段,控制部100推定对象用户的情感,且考虑该对象用户的情感来设定基本情感(图6/步骤106~步骤120)。
取而代之或者除此之外,也可以在检测到对象用户之后(图6/步骤104:是),控制部100反复推定对象用户的情感直到经过规定期间为止,在经过该规定期间之后,考虑所推定出的情感来设定基本情感。
在此,所谓规定期间可以是通过实验求出的、高精度地推定对象用户刚刚乘车后的情感所需的充足的时间(例如10分钟),也可以是例如对象车辆X的状态成为规定状态(对象车辆X的速度成为规定速度以上或者对对象车辆X的操舵量成为规定量以上)为止的期间。
另外,在本实施方式中,以乘员(对象用户)为1人为前提进行了说明,但控制部100也可以对多个乘员进行同样的处理。
下面示出对多个乘员的处理一例。
用户状态识别部识别多个乘员各自的状态。
情感推定部鉴于多个乘员的各自的状态,来推定多个乘员各自的情感。
基本情感设定部根据多个乘员各自的情感来暂定多个乘员的共同的虚拟情感。例如,基本情感设定部通过获取多个乘员之间的、表示多个乘员各自的情感的参数集的平均值,来暂定表示多个乘员共同的虚拟情感的参数集。
基本情感设定部根据该暂定的多个乘员的共同的虚拟情感,来确定对象车辆X的虚拟情感。

Claims (4)

1.一种信息提供装置,其特征在于,
具有情感推定部、基本情感设定部、车辆状态检测部、情感生成部、信息确定部和信息输出部,其中,
所述情感推定部从乘员乘坐车辆时起在规定期间内推定乘员的情感;
所述基本情感设定部根据由所述情感推定部推定出的所述乘员的情感来设定成为所述车辆的情感的基础的基本情感;
所述车辆状态检测部检测所述车辆的状态;
所述情感生成部根据所述基本情感和由所述车辆状态检测部检测到的所述车辆的状态来生成所述车辆的情感;
所述信息确定部根据所述车辆的情感来确定向所述乘员提供的信息;
所述信息输出部向所述乘员输出所述信息。
2.根据权利要求1所述的信息提供装置,其特征在于,
所述基本情感设定部被构成为还按照上次推定出的乘员的情感与本次推定出的乘员的情感的差分来设定基本情感。
3.根据权利要求1或2所述的信息提供装置,其特征在于,
还具有获取所述乘员的日程信息的日程信息获取部,
所述基本情感设定部被构成为还考虑乘员的日程信息来设定所述基本情感。
4.一种信息提供方法,由具有信息输出部和车辆状态检测部的装置执行,其中,所述信息输出部向车辆的乘员输出指定的信息,所述车辆状态检测部检测所述车辆的状态,
该信息提供方法的特征在于,
包括以下步骤:
从乘员乘坐所述车辆时起在规定期间内推定乘员的情感;
根据推定出的所述乘员的情感来设定成为所述车辆的情感的基础的基本情感;
按照所述基本情感和由所述车辆状态检测部检测到的所述车辆的状态来生成所述车辆的情感;
根据所述车辆的情感来确定向所述乘员提供的信息;和
使所述信息输出部输出所确定的所述信息。
CN201811534268.8A 2018-02-07 2018-12-14 信息提供装置和信息提供方法 Active CN110147160B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2018020056A JP6713490B2 (ja) 2018-02-07 2018-02-07 情報提供装置及び情報提供方法
JP2018-020056 2018-02-07

Publications (2)

Publication Number Publication Date
CN110147160A true CN110147160A (zh) 2019-08-20
CN110147160B CN110147160B (zh) 2022-08-09

Family

ID=67475562

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201811534268.8A Active CN110147160B (zh) 2018-02-07 2018-12-14 信息提供装置和信息提供方法

Country Status (3)

Country Link
US (1) US11312389B2 (zh)
JP (1) JP6713490B2 (zh)
CN (1) CN110147160B (zh)

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107092664B (zh) * 2017-03-30 2020-04-28 华为技术有限公司 一种内容解释方法及装置
US11273836B2 (en) * 2017-12-18 2022-03-15 Plusai, Inc. Method and system for human-like driving lane planning in autonomous driving vehicles
KR102574937B1 (ko) * 2018-05-18 2023-09-05 현대자동차주식회사 차량 및 그 제어 방법
JP7264079B2 (ja) * 2020-02-05 2023-04-25 トヨタ自動車株式会社 感情推定装置、方法、プログラムおよび車両
US11878714B2 (en) * 2020-04-06 2024-01-23 Harman International Industries, Incorporated Techniques for customizing self-driving models
JP2022175359A (ja) * 2021-05-13 2022-11-25 株式会社デンソー 車両用情報提供装置、情報提供方法、及び情報提供プログラム
US20230052474A1 (en) * 2021-08-11 2023-02-16 Rovi Guides, Inc. Systems and methods for operating a vehicle based on physiological parameters of an occupant

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6190314B1 (en) * 1998-07-15 2001-02-20 International Business Machines Corporation Computer input device with biosensors for sensing user emotions
CN101428164A (zh) * 2008-08-19 2009-05-13 李隆 互联网人体信息波、音乐信息波电流及高压电场同步治疗仪
CN106562792A (zh) * 2015-10-08 2017-04-19 松下电器(美国)知识产权公司 信息提示装置的控制方法和信息提示装置
WO2017104793A1 (ja) * 2015-12-17 2017-06-22 国立大学法人広島大学 乗員の感性向上システム
CN206287926U (zh) * 2016-12-27 2017-06-30 广州市联奥信息科技有限公司 具备情绪表达能力的交互行车装置
CN107405120A (zh) * 2015-04-23 2017-11-28 索尼公司 信息处理装置、控制方法和程序

Family Cites Families (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003072488A (ja) * 2001-08-31 2003-03-12 Sony Corp 車載装置、車両及び車両情報の処理方法
JP3953024B2 (ja) * 2003-11-20 2007-08-01 ソニー株式会社 感情算出装置及び感情算出方法、並びに携帯型通信装置
JP2008070965A (ja) * 2006-09-12 2008-03-27 Fujitsu Ten Ltd 車両制御装置および車両制御方法
JP2008241309A (ja) 2007-03-26 2008-10-09 Denso Corp 車両用サービス提示装置
ATE555433T1 (de) * 2007-04-26 2012-05-15 Ford Global Tech Llc Emotives beratungssystem und verfahren
US9493130B2 (en) * 2011-04-22 2016-11-15 Angel A. Penilla Methods and systems for communicating content to connected vehicle users based detected tone/mood in voice input
JP2014528806A (ja) * 2011-10-04 2014-10-30 チルドレンズ メディカル センター コーポレーション 感情制御方法および装置
JP5729345B2 (ja) * 2012-04-10 2015-06-03 株式会社デンソー 感情モニタリングシステム
JP5987922B2 (ja) * 2015-01-08 2016-09-07 マツダ株式会社 ドライバ感情に基づく運転支援装置
US10228256B2 (en) * 2015-01-15 2019-03-12 Pcms Holdings, Inc. Systems and methods for providing navigation directions based on emotions and activities
US10630647B2 (en) * 2015-02-05 2020-04-21 Apple Inc. Secure wireless communication between controllers and accessories
US20170030726A1 (en) * 2015-07-31 2017-02-02 International Business Machines Corporation Selective human emotion metrics for navigation plans and maps
US20170115124A1 (en) * 2015-10-21 2017-04-27 Ford Global Technologies, Llc Driver Workload Prediction and Path Routing
US10289381B2 (en) * 2015-12-07 2019-05-14 Motorola Mobility Llc Methods and systems for controlling an electronic device in response to detected social cues
JP2017181449A (ja) * 2016-03-31 2017-10-05 カシオ計算機株式会社 電子機器、経路検索方法及びプログラム
US20180118218A1 (en) * 2016-10-27 2018-05-03 Ford Global Technologies, Llc Method and apparatus for vehicular adaptation to driver state
EP3525141B1 (en) * 2016-11-16 2021-03-24 Honda Motor Co., Ltd. Emotion inference device and emotion inference system
US10170111B2 (en) * 2017-01-19 2019-01-01 Toyota Motor Engineering & Manufacturing North America, Inc. Adaptive infotainment system based on vehicle surrounding and driver mood and/or behavior
US10151594B1 (en) * 2017-01-19 2018-12-11 State Farm Mutual Automobile Insurance Company Technology for generating alternate navigation directions for vehicles
US10150351B2 (en) * 2017-02-08 2018-12-11 Lp-Research Inc. Machine learning for olfactory mood alteration
JP6613290B2 (ja) * 2017-11-28 2019-11-27 株式会社Subaru 運転アドバイス装置及び運転アドバイス方法
US11919531B2 (en) * 2018-01-31 2024-03-05 Direct Current Capital LLC Method for customizing motion characteristics of an autonomous vehicle for a user

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6190314B1 (en) * 1998-07-15 2001-02-20 International Business Machines Corporation Computer input device with biosensors for sensing user emotions
CN101428164A (zh) * 2008-08-19 2009-05-13 李隆 互联网人体信息波、音乐信息波电流及高压电场同步治疗仪
CN107405120A (zh) * 2015-04-23 2017-11-28 索尼公司 信息处理装置、控制方法和程序
CN106562792A (zh) * 2015-10-08 2017-04-19 松下电器(美国)知识产权公司 信息提示装置的控制方法和信息提示装置
WO2017104793A1 (ja) * 2015-12-17 2017-06-22 国立大学法人広島大学 乗員の感性向上システム
CN206287926U (zh) * 2016-12-27 2017-06-30 广州市联奥信息科技有限公司 具备情绪表达能力的交互行车装置

Also Published As

Publication number Publication date
JP6713490B2 (ja) 2020-06-24
JP2019139354A (ja) 2019-08-22
US20190243459A1 (en) 2019-08-08
CN110147160B (zh) 2022-08-09
US11312389B2 (en) 2022-04-26

Similar Documents

Publication Publication Date Title
CN110147160A (zh) 信息提供装置和信息提供方法
CN109000635B (zh) 信息提供装置及信息提供方法
CN107886970B (zh) 信息提供装置
CN111806239A (zh) 电动车辆续航里程测量方法、电子设备及存储介质
US20180093673A1 (en) Utterance device and communication device
JP6382273B2 (ja) 施設満足度算出装置
CN101278324A (zh) 自适应驾驶员工作负荷估计器
JP6655726B2 (ja) 情報提供装置、及び移動体
JP6850815B2 (ja) 情報処理システム
CN108932290B (zh) 地点提案装置及地点提案方法
CN111310062A (zh) 匹配方法、匹配服务器、匹配系统以及存储介质
JP6657415B2 (ja) 情報提供装置、及び移動体
CN111797755A (zh) 一种汽车乘员情绪识别方法及电子设备
JP2010039642A (ja) サーバ、車載装置、及び、評価システム
JP2019207544A (ja) 走行制御装置、走行制御方法、及び走行制御プログラム
JP6816247B2 (ja) 情報提供装置
US20230401907A1 (en) Information processing device, information processing method, and storage medium
US20240025253A1 (en) Apparatus and method for providing information and entertainment in a motor vehicle
JP2024005069A (ja) 情報処理装置および情報処理システム
CN116260867A (zh) 一种场景信息的推送方法、装置及设备
JP2023130118A (ja) 施設評価装置
CN115416671A (zh) 一种情绪调节方法、装置及设备
JP2023044890A (ja) マッチングシステム及びマッチング方法
CN114731344A (zh) 用于运行车辆的方法、装置、计算机程序和计算机可读的存储介质
JP2021183978A (ja) ドライバ推定装置、制御方法、プログラム及び記憶媒体

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant