CN112568904B - 车辆交互方法、装置、计算机设备及存储介质 - Google Patents
车辆交互方法、装置、计算机设备及存储介质 Download PDFInfo
- Publication number
- CN112568904B CN112568904B CN201910945478.4A CN201910945478A CN112568904B CN 112568904 B CN112568904 B CN 112568904B CN 201910945478 A CN201910945478 A CN 201910945478A CN 112568904 B CN112568904 B CN 112568904B
- Authority
- CN
- China
- Prior art keywords
- vehicle
- emotion
- user
- driving control
- current
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/16—Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state
- A61B5/165—Evaluating the state of mind, e.g. depression, anxiety
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/174—Facial expression recognition
Landscapes
- Health & Medical Sciences (AREA)
- Engineering & Computer Science (AREA)
- Life Sciences & Earth Sciences (AREA)
- Psychiatry (AREA)
- General Health & Medical Sciences (AREA)
- Physics & Mathematics (AREA)
- Psychology (AREA)
- Biophysics (AREA)
- Theoretical Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Child & Adolescent Psychology (AREA)
- Developmental Disabilities (AREA)
- Educational Technology (AREA)
- Hospice & Palliative Care (AREA)
- Human Computer Interaction (AREA)
- Social Psychology (AREA)
- Oral & Maxillofacial Surgery (AREA)
- Multimedia (AREA)
- Pathology (AREA)
- Biomedical Technology (AREA)
- Heart & Thoracic Surgery (AREA)
- Medical Informatics (AREA)
- Molecular Biology (AREA)
- Surgery (AREA)
- Animal Behavior & Ethology (AREA)
- Public Health (AREA)
- Veterinary Medicine (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
本发明公开了一种车辆交互方法、装置、计算机设备及存储介质,在用户和车辆进行交互的过程中,对用户的当前情绪进行检测,并且在非驾驶控制模式下,若用户的当前情绪属于第一预设情绪,则根据所述当前情绪对车辆的第一目标系统的功能定义参数进行调整,其中,所述功能定义参数为所述第一目标系统在非驾驶控制模式下的功能定义相关的参数;根据调整后的功能定义参数控制车辆的所述第一目标系统进行反馈,可以根据用户的当前情绪的不同而调整车辆的第一目标系统发生反馈或者调整,使得车辆和用户的交互更加智能化,能够增强和丰富用户的交互体验。
Description
技术领域
本发明涉及车辆技术领域,尤其涉及一种车辆交互方法、装置、计算机设备及存储介质。
背景技术
随着汽车的普及和相关科学技术的发展,在日常生活中人们对汽车越来越依赖。而智能驾驶技术的不断发展,特别是L3及以上级别的自动驾驶普及之后,更是进一步解放了驾驶员的手脚。于是,驾驶员以及乘客与汽车的交互模式有了更多的可能,车载娱乐技术也将会获得更多的发展空间。
目前部分车辆中已经配备了车载游戏功能,驾驶员或者乘客可以在车内通过车载游戏功能进行娱乐。然而,在目前的车载娱乐技术中只是根据用户的操作进行机械式的互动,交互过程较为单一。
发明内容
本发明实施例提供一种车辆交互方法、装置、计算机设备及存储介质,以解决用户和车辆之间的交互不够智能化的问题。
第一方面,本发明实施例提供一种车辆交互方法,包括:
检测用户的当前情绪;
在非驾驶控制模式下,若用户的当前情绪属于第一预设情绪,则根据所述当前情绪对车辆的第一目标系统的功能定义参数进行调整,其中,所述功能定义参数为所述第一目标系统在非驾驶控制模式下的功能定义相关的参数;
根据调整后的功能定义参数控制车辆的所述第一目标系统进行反馈。
第二方面,本发明实施例提供一种车辆交互装置,包括:
情绪检测模块,用于检测用户的当前情绪;
第一响应模块,用于在非驾驶控制模式下,若用户的当前情绪属于第一预设情绪,则根据所述当前情绪对车辆的第一目标系统的功能定义参数进行调整,其中,所述功能定义参数为所述第一目标系统在非驾驶控制模式下和功能定义相关的参数;根据调整后的功能定义参数控制车辆的所述第一目标系统进行反馈。
第三方面,本发明实施例提供一种计算机设备,包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现上述车辆交互方法。
第四方面,本发明实施例提供一种计算机可读存储介质,所述计算机可读存储介质存储有计算机程序,所述计算机程序被处理器执行时实现上述车辆交互方法。
上述车辆交互方法、装置、计算机设备及存储介质中,在用户和车辆进行交互的过程中,对用户的当前情绪进行检测,并且在非驾驶控制模式下,若用户的当前情绪属于第一预设情绪,则根据所述当前情绪对车辆的第一目标系统的功能定义参数进行调整,其中,所述功能定义参数为所述第一目标系统在非驾驶控制模式下的功能定义相关的参数,根据调整后的功能定义参数控制车辆的所述第一目标系统进行反馈,使得车辆和用户的交互更加智能化,能够增强和丰富用户的交互体验。
附图说明
为了更清楚地说明本发明实施例的技术方案,下面将对本发明实施例的描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1是本发明一实施例中车辆交互方法的一流程图;
图2是本发明一实施例中车辆交互方法的另一流程图;
图3是本发明一实施例中车辆交互方法的另一流程图;
图4是本发明一实施例中车辆交互方法的另一流程图;
图5是本发明一实施例中车辆交互方法的另一流程图;
图6是本发明一实施例中车辆交互装置的一示意图;
图7是本发明一实施例中计算机设备的一示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
需要说明的是,当元件被称为“固定于”或“设置于”另一个元件,它可以直接在另一个元件上或者间接在该另一个元件上。当一个元件被称为是“连接于”另一个元件,它可以是直接连接到另一个元件或间接连接至该另一个元件上。
需要理解的是,术语“长度”、“宽度”、“上”、“下”、“前”、“后”“左”、“右”、“竖直”、“水平”、“顶”、“底”、“内”、“外”等指示的方位或位置关系为基于附图所示的方位或位置关系,仅是为了便于描述本发明和简化描述,而不是指示或暗示所指的装置或元件必须具有特定的方位、以特定的方位构造和操作,因此不能理解为对本发明的限制。
此外,术语“第一”、“第二”仅用于描述目的,而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此,限定有“第一”、“第二”的特征可以明示或者隐含地包括一个或者更多个该特征。在本发明的描述中,“多个”的含义是两个或两个以上,除非另有明确具体的限定。
本发明实施例提供的车辆交互方法,可应用在车辆的处理系统中,其中,车辆中的处理系统可以通过网络或者总线与车辆中的设备和/或机构或者其他通信设备进行通信。优选地,该车辆交互方法应用在汽车的处理系统中。在一实施例中,如图1所示,提供一种车辆交互方法,以该方法应用在车辆中的处理系统为例进行说明,包括:
S101:检测用户的当前情绪。
用户的当前情绪是指在当前时刻用户的情绪。示例性地,当前情绪可以包括开心、愉悦、愤怒、厌恶、疲惫、痛苦、忧伤或者其他情绪。检测用户的当前情绪可以通过图像采集装置采集用户的人脸图像之后,对人脸图像进行识别,从而得到用户的当前情绪。可选地,该图像采集装置可以设置在车辆的转向盘机构上,或者该图像采集装置可以悬挂在用户位置的正前方,可以理解地,图像采集装置只要设置在能够实时采集到用户的人脸图像即可。
可选地,该检测用户的当前情绪可以设置为实时检测或者定时检测。实时检测为对用户的当前情绪进行持续性地识别,而定时检测为根据设定的检测周期对用户的当前情绪进行间断性地识别,可以通过给设定检测周期的长短来调整检测的频率。
S102:在非驾驶控制模式下,若用户的当前情绪属于第一预设情绪,则根据所述当前情绪对车辆的第一目标系统的功能定义参数进行调整,其中,所述功能定义参数为所述第一目标系统在非驾驶控制模式下的功能定义相关的参数。
其中,非驾驶控制模式为用户和车辆之间区别于驾驶控制模式的交互模式,示例性地,可以为车载娱乐模式(游戏、影音)或者乐器模拟交互模式等。即用户通过和车辆中的各个装置和/或机构的交互实现娱乐功能或者其他功能。
第一预设情绪为预先设定的至少一个情绪的集合。可选地,该第一预设情绪可以为区别于正常的情绪的集合。示例性地,该第一预设情绪可以为不稳定的情绪,该不稳定的情绪可以包括正面的情绪和/或负面的情绪,例如,开心、愉悦、愤怒、厌恶、疲惫等。进一步地,该第一预设情绪还可以根据具体交互方式或者交互内容的不同而设置不同的内容。示例性地,在车载游戏模式和乐器模拟交互模式下,预先设定的第一预设情绪可以不同。进一步地,在车载游戏模式下,不同类型的游戏也可以设置不同的第一预设情绪,或者,在乐器模拟交互模式下,不同的乐器模拟也可以设定不同的第一预设情绪。
在一实施例中,所述第一目标系统包括输入机构、显示机构和反馈机构;
所述功能定义参数包括所述输入机构的功能定义参数、所述显示机构的功能定义参数和所述反馈机构的功能定义参数中的至少一项。
第一目标系统为车辆中的若干装置和/或机构的集合,第一目标系统包括输入机构、显示机构或反馈机构中的至少一项。其中,输入机构可以包括转向盘装置、换挡装置、踏板装置、语音采集装置、手势识别装触摸装置或者车辆内部的其他具有输入功能的装置等至少一项。显示机构可以包括挡风玻璃、投影设备、车内后视镜、车外后视镜、仪表盘、中控PAD或者其他具有显示功能的装置等至少一项。反馈机构可以包括座椅升降机构、整车升降机构、转向盘反馈机构、安全带反馈机构、座椅振动反馈机构或者语音反馈机构等至少一项。可以理解地,上述语音采集装置和语音反馈机构可以通过一个实体装置来实现,即一个语音装置即可以实现语音采集功能,也可以实现语音反馈功能。或者,上述语音采集装置和语音反馈机构分别通过不同的实体装置来分开实现。
S103:根据调整后的功能定义参数控制车辆的所述第一目标系统进行反馈。
具体地,控制车辆的第一目标系统进行响应为针对用户的当前情绪的反馈。该具体的响应方式可以根据用户的当前情绪的不同而有所区别。可以为控制车辆的输入机构、显示机构或反馈机构中的至少一项进行响应。示例性地,在车载娱乐模式中,如检测到用户表现出喜悦(表情愉悦、兴奋)的情绪时,可以控制输入机构中的转向盘装置、换挡装置、踏板装置及各类开关的操作力/阻尼适当变小,以提高操作灵敏度和触觉感知,让用户在喜悦情况下,系统能更快地响应。进一步地,还可以控制显示机构中的挡风玻璃、仪表、中控等的显示画面可以增强清晰度、亮度或锐度,并增加动感情境,以及一些更加惊险刺激的画面,增强视觉冲击,以便让用户的兴奋度进一步提高。还可以控制反馈机构中的整车及座椅升降机构(主要实现整车的倾斜、抖动、摇摆)、转向盘及座椅振动提醒(辅助实现转向盘和座椅的抖动,增强触觉感知效果),或者可以适当增强反馈程度,以配合显示系统中的画面(视觉冲击)效果。进一步地,还可以控制语音反馈机构播放比较愉悦欢快的背景音乐。反之,在用户表现为愤怒的情绪时,可以控制输入机构中的转向盘装置换挡装置、踏板装置及各类开关的操作力/阻尼适当变大,以降低操作灵敏度,转移用户的注意力;进一步地,还可以控制显示机构中的挡风玻璃、仪表、中控等的显示画面可以适当减弱清晰度、亮度或锐度,并减少动感情境,增加一些令人愉悦的画面(如挡风玻璃外显示美丽的鸟鸣林间的山水风景),以改善视觉效果,让用户逐步平静舒缓下来。还可以控制反馈机构中的整车及座椅升降机构、转向盘及座椅振动提醒可以适当减轻反馈程度,以配合显示系统中的画面效果。进一步地,还可以控制语音反馈机构播放节奏缓慢的柔和动听的背景音乐,同时,语音系统可以介入,适当进行语音提醒和交互,以充分改进用户的体验效果。
在本实施例中,在用户和车辆进行交互的过程中,对用户的当前情绪进行检测,并且在非驾驶控制模式下,若用户的当前情绪属于第一预设情绪,则根据所述当前情绪对车辆的第一目标系统的功能定义参数进行调整,然后根据调整后的功能定义参数控制车辆的所述第一目标系统进行反馈,可以根据用户的当前情绪的不同而调整车辆的第一目标系统发生反馈或者调整,使得车辆和用户的交互更加智能化,能够增强和丰富用户的交互体验。
在一个实施例中,所述第一预设情绪包括至少一个情绪类别。
在第一预设情绪中包括了至少一个情绪类别。该情绪类别的划分可以根据不同的实际应用场景或者交互模式而有所区别。可选地,该情绪类别可以包括正面情绪类别和负面情绪类别,或者该情绪类别可以根据偏离正常情绪的程度划分,可以分为一般(平静)、激烈(开心、不快)、异常激烈(大笑、愤怒)等不同类别。进一步地,还可以根据具体交互场景的不同而定制一些其他的情绪类别,在此不再赘述。
如图2所示,所述根据所述当前情绪对所述第一目标系统的功能定义参数进行调整,包括:
S201:确定所述用户的当前情绪在第一预设情绪中所属的情绪类别。
S202:根据所述当前情绪所属的情绪类别确定调整方式。
S203:根据所述调整方式对所述第一目标系统的所述功能定义参数进行调整。
根据第一预设情绪中划分好的情绪类别来确定用户的当前情绪应该属于哪一类别。其中,不同的情绪类别对应了不同的响应方式,该响应方式可以包括控制的装置和/或机构不同、控制的装置和/或机构的调整方式不同、控制的装置和/或机构的调整强度不同、控制的装置和/或机构的反馈方式不同、控制的装置和/或机构的反馈强度不同等。预先确定每一情绪类别对应的响应方式,在确定了用户的当前情绪在第一预设情绪中所属的情绪类别之后,进一步根据所述当前情绪所属的情绪类别确定响应方式,最后再根据调整方式对所述第一目标系统的所述功能定义参数进行调整。
在本实施例中,第一预设情绪中包括至少一个情绪类别,且不同的情绪类别对应不同的响应方式,进而可以更精细的根据不同的当前情绪确定调整方式,最后根据所述调整方式对所述第一目标系统的所述功能定义参数进行调整,使得车辆和用户的交互更加精细和多样化,进一步体现了车辆和用户交互的智能化。
在一个实施例中,所述第一目标系统包括输入机构、显示机构和反馈机构;
所述功能定义参数包括所述输入机构的功能定义参数、所述显示机构的功能定义参数和所述反馈机构的功能定义参数中的至少一项。
进一步地,所述功能定义参数包括所述输入机构的操作阻尼、所述显示机构的显示画面的显示参数、所述显示机构的显示画面的显示元素数据、所述反馈机构的反馈强度或所述反馈机构的反馈方式至少一项。
在一实施例中,所述情绪类别包括正面预设情绪和负面预设情绪;
所述根据所述当前情绪所属的情绪类别确定调整方式,包括:
若所述用户的当前情绪为正面预设情绪,则所述调整方式为正向调整;
若所述用户的当前情绪为负面预设情绪,则所述调整方式为反向调整。
本实施例中,所述情绪类别包括正面预设情绪和负面预设情绪。
其中,正面预设情绪为积极的情绪,示例性地,正面预设情绪可以包括开心、大小、愉悦、兴奋、激动中的至少一项。正面预设情绪对应的调整方式为正向调整。正向调整为对正面预设情绪的正面反馈、放大。正向调整可以指增加显示画面的积极元素,如调整显示画面的色温为偏暖,在显示画面增加动画效果等。
而负面预设情绪可以为消极的情绪,示例性地,负面预设情绪可以包括厌恶、愤怒、疲劳中的至少一项。负面预设情绪对应的调整方式为反向调整。反向调整为对负面预设情绪的抑制、控制或者调整。反向调整可以指减少显示画面的积极元素,如调整显示画面的色温为偏冷,取消显示画面内的动画效果等。
在一个具体实施方式中,若所述调整方式为正向调整,则根据所述调整方式对所述第一目标系统的所述功能定义参数进行调整可以包括:
减少所述输入机构的操作阻尼,和/或,增强所述反馈机构的反馈强度。
具体地,可以对输入机构中的操作阻尼进行调整,减少输入机构中的操作阻尼,从而使得用户的操控更加灵敏,提高响应的实时性,能够更好地引导或者保持住用户的当前情绪(正面预设情绪)。还可以增强所述反馈机构的反馈强度,具体地,可以增强反馈机构的反馈频率和/或反馈幅度。示例性地,控制座椅升降机构的反馈频率更高,从而实现对车辆座椅的晃动更强。或者增加转向盘振动反馈机构的反馈幅度,以增强转向盘机构的振动的强度。通过上述方式可以实现在用户的当前情绪属于正面预设情绪时,更好地引导和保持用户的当前情绪,以增强用户的交互体验。
在一个具体实施方式中,若所述调整方式为反向调整,则根据所述调整方式对所述第一目标系统的所述功能定义参数进行调整可以包括:
增加所述输入机构的操作阻尼,和/或,减少所述反馈机构的反馈强度。
具体地,可以对输入机构中的操作阻尼进行调整,增加输入机构中的操作阻尼,从而使得用户的操控的灵敏度降低,可以起到分散用户注意力的目的,使得用户的当前情绪(负面预设情绪)慢慢缓解,促使用户回归到正常的情绪或者正面预设情绪中来。还可以减少所述反馈机构的反馈强度,具体地,可以减少反馈机构的反馈频率和/或反馈幅度。示例性地,控制座椅升降机构的反馈频率更低,从而实现对车辆座椅的晃动减弱。或者减少转向盘振动反馈机构的反馈幅度,以减少转向盘机构的振动的强度。避免在用户处于负面预设情绪的情形下过度刺激用户,不利于用户的身心健康。
在本实施例中,情绪类别包括正面预设情绪和负面预设情绪,通过对当前情绪属于的情绪类别的不同(正面预设情绪或负面预设情绪)而选择不同的调整方式(正向调整或反向调整),可以使得车辆和用户的交互过程中,在保证用户的良好体验的同时,更好地针对用户的当前情绪进行调整,引导正向情绪,抑制或者调整负面情绪,也可以一定程度上保障用户的身心健康。
在一实施例中,所述第一预设情绪包括正面预设情绪和负面预设情绪;
所述根据调整后的功能定义参数控制车辆的所述第一目标系统进行反馈,包括:
根据调整后的功能定义参数,控制所述显示机构在显示画面中调整第一显示元素,其中,所述第一显示元素和所述正面预设情绪关联;
和/或,
根据调整后的功能定义参数,控制所述显示机构在显示画面中调整第二显示元素,其中,所述第二显示元素和所述负面预设情绪关联。
本实施例中,第一显示元素可以是当用户的当前情绪为正面预设情绪时,显示画面做出正向调节所涉及的页面展示内容或方式,包括但不限于减少页面响应反应时间,提高页面显示色温,增强页面动态效果,增加正向操作图标的显示,以保持用户的当前情绪。
第二显示元素可以是当用户的当前情绪为负面预设情绪时,显示画面做出负向调节所涉及的页面展示内容或方式,包括但不限于延长页面响应反应时间,降低页面显示色温,减弱页面动态效果,增加负向操作图标的显示,以缓解用户的当前情绪。
在一实施例中,所述根据调整后的功能定义参数控制车辆的所述第一目标系统进行反馈,包括:
响应于用户对输入机构的操作行为,控制所述显示机构中的显示画面进行调整;
检测所述显示画面中的显示元素,根据所述调整后的功能定义参数从所述显示画面中确定目标显示元素,并对所述目标显示元素进行增加、减少或者替换,以调节用户的当前情绪。
本实施例中,显示元素可以指显示画面做出调节所涉及的页面展示内容或方式,包括但不限于变更页面响应反应时间,改变页面显示色温,改变页面动态效果,改变带有指示情绪的操作图标的显示比例。
示例性地,当检测到用户的情绪为正面预设情绪时,可以在原有的显示画面上增加闪光、画面抖动、颜色渲染等刺激性的元素,以更好地响应用户的正向预设情绪。
在一实施例中,所述根据调整后的功能定义参数控制车辆的所述第一目标系统进行反馈,还包括:
响应于用户对输入机构的操作行为,确定第一目标系统中的反馈装置;
根据所述调整后的功能定义参数确定所述反馈装置的反馈方式和反馈强度;
控制所述反馈装置以调整后的反馈方式和调整后的反馈强度进行反馈。
本实施例中,用户对输入机构的操作行为包括但不限于触摸屏操作、语音指令控制、用户手势识别。相应的,反馈装置可以指响应用户操作行为的输出装置,可以是显示屏,也可以是车载音响。
反馈方式可以是正面的,如提高所述显示机构的显示画面的显示参数可以包括提高显示画面的清晰度、亮度或者锐度等,或者其他可以提高显示画面的视觉冲击效果的显示参数。
反馈强度可以是正面的。例如,控制所述反馈装置中的语音反馈系统播放律动音乐。律动音乐为节奏较为欢快的音乐类型,以更好地引导和保护用户的正面情绪。
反馈方式可以是负面的,如降低显示画面的清晰度、亮度或者锐度等,或者其他能够降低显示画面的视觉冲击效果的显示参数。
反馈强度可以是负面的。例如,控制所述反馈装置中的语音反馈系统播放舒缓音乐。舒缓音乐为节奏较为缓慢、温柔音乐类型,以更好地引导用户摆脱负面情绪。
在一实施例中,所述响应于用户对输入机构的操作行为,控制所述显示机构中的显示画面进行调整,包括:
根据调整后的功能定义参数调整所述输入机构的操作阻尼;
响应于用户对输入机构的操作行为,根据调整后的所述输入机构的操作阻尼生成操作信息;
根据所述操作信息控制所述显示机构中的显示画面进行调整。
本实施例中,调整后的功能定义参数可以是正向的,也可以是反向的。若调整后的功能定义参数是正向的,则调整输入机构的操作阻尼包括减小转向盘装置、换挡装置、踏板装置及各类开关的操作阻尼。此时,用户对输入机构的操控更加灵敏,可让用户在正面情绪下,系统能更快地响应。同时,可在显示画面中增加刺激性元素。刺激性元素可以为额外的画面、颜色、背景图像或特效等至少一项。示例性地,在原有的显示画面上增加闪光、画面抖动、颜色渲染等刺激性的元素,以更好地响应用户的正向情绪。
若调整后的功能定义参数是反向的,则调整输入机构的操作阻尼包括增大转向盘装置、换挡装置、踏板装置及各类开关的操作阻尼。同时,可在在显示画面中增加舒缓元素。舒缓元素可以为额外的画面、颜色、背景图像或特效等至少一项。示例性地,在原有的显示画面上减少闪光、画面抖动、颜色渲染等刺激性的元素,并减少动感情境,增加一些令人愉悦的背景画面(如显示美丽的鸟鸣林间的山水风景),以改善视觉效果,让用户逐步平静舒缓下来。
在一个实施例中,在所述控制车辆的第一目标系统进行响应之后,所述车辆交互方法还包括:
在所述非驾驶控制模式中,对用户的当前情绪属于第一预设情绪的情况进行统计,根据统计结果形成情绪输出报告。
在非驾驶控制模式中,统计用户的当前情绪属于第一预设情绪的情况。具体地,对在非驾驶控制模式中,用户的当前情绪属于第一预设情绪的频率进行统计,可以通过计算用户的当前情绪属于第一预设情绪的次数和所有检测的当前情绪的次数的比值来确定。进一步地,在非驾驶控制模式中,在更具体地交互模式中对用户的当前情绪属于第一预设情绪的情况进行统计,示例性地,可以以每一种车载娱乐模式为单位进行统计,或者以每一种具体地交互娱乐模式(车载游戏或者乐器模拟)进行统计,还可以以用户每次进行非驾驶控制模式(进入非驾驶控制模式到此次推出该模式)为单位进行统计。
在一个具体实施方式中,对用户的当前情绪属于第一预设情绪的情况进行统计还包括对用户的当前情绪属于第一预设情绪中的每一种情绪类型的情况进行统计,统计用户的当前情绪具体属于哪一种情绪类型的频率,更好地展现用户对该次体验或者对该具体地交互模式的真实感受。
情绪输出报告为对用户在该非驾驶控制模式中的情绪变化情况的总结。具体地,该情绪输出报告可以包括用户在该非驾驶控制模式中出现的情绪的种类,每一种种类的情绪出现的频率,用户的当前情绪属于第一预设情绪的频率,用户的当前情绪属于哪一种情绪类型的频率等数据。进一步地,该情绪输出报告还可以根据上述各种情绪数据统计用户对该非驾驶控制模式的体验满意度等数据。可以理解地,在其中用户出现正面情绪地频率越高,可以代表用户的体验满意度越高,具体的体验满意度的转化或者计算过程可以根据不同的实际应用场景进行设置。
在本实施例中,在所述非驾驶控制模式中,对用户的当前情绪属于第一预设情绪的情况进行统计,根据统计结果形成情绪输出报告。可以在用户完成非驾驶控制模式的体验之后,直观地观察用户在其中的情绪情况,可以反映用户对此次交互的满意与否,可以为后续的交互模式的改进提供数据借鉴。
在一个实施例中,在所述检测用户的当前情绪之后,所述车辆交互方法还包括:
在驾驶控制模式下,若用户的当前情绪属于第二预设情绪,则控制车辆的第二目标系统进行响应,所述第二目标系统包括输入机构、显示机构或反馈机构中的至少一项。
其中,驾驶控制模式为用户和车辆之间进行和车辆驾驶相关的交互模式。示例性的,用户控制车辆的各种装置和/或机构进行车辆的驾驶功能。
第二预设情绪为预先设定的至少一个情绪的集合。可选地,该第二预设情绪可以为区别于正常的情绪的集合。示例性地,该第二预设情绪可以为不稳定的情绪,该不稳定的情绪可以包括正面的情绪和/或负面的情绪,例如,开心、愉悦、愤怒、厌恶、疲惫等。进一步地,该第二预设情绪还可以根据具体交互方式或者交互内容的不同而设置不同的内容。示例性地,在车辆手动驾驶模式、车辆辅助驾驶模式和车辆自动驾驶模式下,预先设定的第一预设情绪可以不同。
第二目标系统为车辆中的若干装置和/或机构的集合,第二目标系统包括输入机构、显示机构或反馈机构中的至少一项。其中,输入机构可以包括转向盘装置、换挡装置、踏板装置、语音采集装置、手势识别装触摸装置或者车辆内部的其他具有输入功能的装置等至少一项。显示机构可以包括挡风玻璃、投影设备、车内后视镜、车外后视镜、仪表盘、中控PAD或者其他具有显示功能的装置等至少一项。反馈机构可以包括座椅升降机构、整车升降机构、转向盘反馈机构、安全带反馈机构、座椅振动反馈机构或者语音反馈机构等至少一项。可以理解地,上述语音采集装置和语音反馈机构可以通过一个实体装置来实现,即一个语音装置即可以实现语音采集功能,也可以实现语音反馈功能。或者,上述语音采集装置和语音反馈机构分别通过不同的实体装置来分开实现。
具体地,控制车辆的第二目标系统进行响应为针对用户的当前情绪的反馈。该具体的响应方式可以根据用户的当前情绪的不同而有所区别。可以为控制车辆的输入机构、显示机构或反馈机构中的至少一项进行响应。
可选地,可以控制第二目标系统进入辅助驾驶模式或者智能驾驶模式。具体地,其中,辅助驾驶模式为利用安装在车辆上的各式各样传感器(毫米波雷达、激光雷达、单\双目摄像头以及卫星导航),在车辆行驶过程中随时来感应周围的环境,收集数据,进行静态、动态物体的辨识、侦测与追踪,并结合导航仪地图数据,进行系统的运算与分析,从而预先让驾驶者察觉到可能发生的危险,有效增加汽车驾驶的舒适性和安全性。在该步骤中,控制车辆中的第二目标系统进入辅助驾驶模式即控制车辆内预设的装置和/或机构进入该辅助驾驶模式,以更好地保证用户的行车安全。而自动驾驶模式为将车辆的第二目标系统进入自动驾驶模式。
进一步地,控制车辆的第二目标系统进行响应还可以控制所述反馈机构中的语音装置播放预设的语音数据,所述预设的语音数据包括音乐、交互语音或者提示语音至少一项。
其中,播放的音乐的类型可以和用户的当前情绪对应,示例性地,若用户的当前情绪为疲劳,则可以播放节奏较为紧凑的音乐。若用户的当前情绪为愤怒,则可以播放较为舒缓的音乐。交互语音为和用户通过语音进行交互,可以通过智能聊天系统来引导用户从当前不当的情绪状态中恢复到正常的情绪中。提示语音为固定的提醒或告警语音,可以通过固定的短语、句子或者较为刺耳的声音来引起用户的注意。
在本实施例中,通过控制反馈机构中的语音装置播放预设的语音数据,以帮助用户在车辆驾驶时从不当的情绪中恢复到正常的情绪中,可以保证用户车辆驾驶的安全。
在一个实施例中,如图3所示,所述检测用户的当前情绪,包括:
S301:获取用户的人脸图像。
S302:对所述人脸图像进行检测,得到用户的当前情绪。
其中,用户的人脸图像可以通过车辆内的图像采集装置进行采集,再发送到车辆的处理系统中。具体地,该图像采集装置可以设置在车辆的转向盘机构上,或者该图像采集装置可以悬挂在用户正前方,可以理解地,图像采集装置只要设置在能够实时采集到用户的人脸图像即可。
在特定情绪状态下人们会产生特定面部肌肉运动和表情模式,如心情愉悦时嘴角上翘,眼部会出现环形褶皱,愤怒时会皱眉,睁大眼睛等。在采集到人脸图像之后,对人脸图像中的表情单元进行检测和识别,即可确定用户的当前情绪。可选地,对人脸图像的检测还可以通过微表情识别算法或者深度学习模型来实现。
在本实施例中,通过获取用户的人脸图像,再对获取的人脸图像进行检测,可以快速高效的确定用户的当前情绪。
在一个实施例中,如图4所示,述检测用户的当前情绪,包括:
S401:获取用户的人脸图像和生理信号参数。
S402:根据所述人脸图像和所述生理信号参数确定用户的当前情绪。
其中,生理信号参数可以包括用户的心率、脉搏等生理参数。具体地,用户的生理信号参数可以通过设置在转向盘机构上的心电感应电极进行获取。可选地,在转向盘机构的轮缘中设置心电感应电极。当用户双手握住转向盘的轮缘时,位于轮缘中的心电感应电极会测试用户的心率、脉搏等生理参数,并发送到车辆的处理系统中。进一步地,该生理信号参数还可以通过第三方设备来获取,可以和用户佩带的智能检测设备建立连接,再从智能检测设备中获取用户的生理信号参数。可选的,该智能检测设备可以为智能手环、智能手表或者其他便携检测设备。
在得到人脸图像和生理信号参数之后,通过人脸图像和所述生理信号参数共同确定用户的当前情绪,可以提高度对用户的当前情绪的检测精度,更好地保证了后续过程地顺利进行。
在一个具体实施方式中,根据所述人脸图像和所述生理信号参数确定用户的当前情绪可以参见表1进行判断。
如表1所示,通过判断人类图像和生理信号参数都符合一定的条件时,才确定用户的当前情绪,提高了对用户的当前情绪的检测精度。
在一个实施例中,在所述在非驾驶控制模式下,若用户的当前情绪属于第一预设情绪,则控制车辆的第一目标系统进行响应之前,所述车辆交互方法还包括:
接收模式选择指令,根据所述模式选择指令判断车辆的当前状态是否符合切换条件;
若所述车辆的当前状态符合切换条件,控制车辆中的第一目标系统进入非驾驶控制模式。
其中,模式选择指令为控制车辆的第一目标机构进入非驾驶控制模式的触发指令。在一些情况下,可以设置切换条件,对车辆的当前状态进行判断,以自动转换当前车辆的控制模式。可选地,控制车辆中的第一目标机构进入非驾驶控制模式,还包括将车内这些设备和/或机构和车辆行驶模式的交互切断或者隔离开,以确保安全。
具体地,该模式选择指令可以为区别于车辆驾驶模式的切换指令,即将车辆的第一目标机构从执行车辆驾驶功能的方式切换至执行非车辆驾驶功能。进一步地,该模式选择指令还可以为预先定义的具体不同的模拟模式。示例性地,可以预先从车辆的设备和/或机构中确定一定数量的设备和/或机构作为第一目标机构,且该第一目标机构对应一特定的非驾驶控制模式,该特定的非驾驶控制模式可以为车载娱乐模式(游戏、影音)或者乐器模拟交互模式等。
用户可以通过不同的方式和车辆的处理系统进行交互,可以包括但不限于实体按键输入(具体触发方式可以包括按压、触摸或者滑动等)、语音输入、肢体姿态输入(手势、肢体动作等)或者微表情输入等方式。可选地,还可以借助第三方设备和车辆的处理系统建立连接之后进行交互,再通过该第三方设备进行指令的输入。可以理解地,模式选择指令可以通过上述任一方式进行输入。
预先设定好的一个特定指令作为模式选择指令,对应地,该特定指令可以通过上述任一交互形式来体现。示例性地,该特定指令可以为对车辆内某一按键的按压或者触摸操作,或者,该特定指令可以为特定的语音信息,或者该特定指令可以为特定的手势或者肢体动作,或者,该特定指令可以为预设的表情。
在本实施例中,车辆的处理系统在接收到模式选择指令之后,控制车辆中的第一目标机构进入非车辆驾驶模式,实现用户和车辆的多样化交互,并且,通过一个模式切换指令即可实现车辆不同交互模式的切换,体现了用户和车辆之间的智能化交互。
在一个实施例中,如图5所示,在接收模式选择指令之后,并且在所述控制车辆中的第一目标系统入非驾驶控制模式之前,所述车辆交互方法还包括:
S501:判断车辆的当前状态是否符合切换条件。
车辆的当前状态可以包括车辆自身状态。可选地,车辆的当前状态还包括车内环境状态或者车外环境状态等至少一项。示例性地,车辆自身状态包括异常状态(存在故障)、未启动状态、手动驾驶状态、辅助驾驶状态或者自动驾驶状态等。可选地,车辆自身状态可以通过监测车辆内部对应设备和/或机构的状态来获得,通过对设备和/或机构的状态进行监测,可以更加快速、便捷地确定车辆的自身状态。可选地,车内环境状态可以包括适合和不适合两种状态。进一步地,车内环境状态还可以包括一个中间状态,即需要用户进一步确认的状态。该中间状态可以为车内环境可能具备一些不恰当的情形,需要用户自行判断。车内环境状态可以通过监测车内乘客的数量、乘客年龄或者乘客状态(晕车、疲惫、舒适)等来获得。具体地,可以通过车辆内部设置图像或者视频采集设备来监测上述车内环境状态。乘客的数量、乘客年龄或者乘客状态可以通过预设的检测算法或者机器学习模型来识别。可以理解地,车内环境状态可以通过应用场景的不同来预先进行不同的定义。示例性地,若车内乘客数量过多、车内具有年纪较小的儿童、车内具有老年人或者车内具有乘客状态不佳(晕车、疲惫或者处于睡眠中)等情况,可以定义车内环境状态为不适合。反之,若车内没有出现上述情形,可以定义车内环境状态为适合。
车外环境状态可以通过车辆所处位置周边的环境是否安全来确定,以更好地保证用户和车辆的安全。例如,车辆所处位置的车况、车流量或者道路情况等因素确定。可选地,车外环境状态也可以包括适合和不适合两种。示例性地,若检测到车辆所处位置附近车流量较高、处于高速行驶状态或者附近有交通事故发生等情况,则可以定义车外环境状态为不适合。反之,若车外没有出现上述情形,可以定义车外环境状态为适合。具体地,上述车辆环境状态可以通过图像或者视频采集设备采集车外的图像或者视频之后进行检测而确定,或者通过接入第三方接口来获取上述车外环境状态。示例性地,接入第三方地图数据来获取。
在一个具体实施方式中,还包括一个用户身份验证或者登录环节,即对用户身份或者权限的认证,在通过该验证之后,才触发后续的步骤,保证控制车辆中的目标机构进入非驾驶控制模式是用户的真实意图,避免误操作。或者设置一个用户登录环节,确定上述第一模式切换指令是否为用户的真实意图,防止误操作。该用户身份验证或者登录环节可以在接收到的模式切换指令为预设的触发指令之前或者之后进行。该用户验证环节也可以通过但不限于账号密码、指纹、声纹、面部识别等方式进行。具体用户身份或者权限可以预先设定,例如:车主或者经过车主授权的用户。
该切换条件为非驾驶控制模式的对应条件,通过设置切换条件,来确定非驾驶控制模式的进入条件。该切换条件可以设定为特定的当前状态,即该车辆的当前状态符合一定的条件。可以通过设定车辆自身状态满足一定的条件来确定切换条件,或者,通过设定车辆自身状态满足一定的条件,并辅以车内环境状态和/或车外环境状态满足一定的条件共同确定切换条件。
示例性地,该切换条件为车辆处于自动驾驶状态,或者,该切换条件为车辆处于自动驾驶状态,而且车内环境状态和车外环境状态均为适合。
或者,该切换条件为车辆处于未启动状态,或者,该切换条件为车辆处于未启动状态,而且车内环境状态和车外环境状态均为适合。
S502:若所述车辆的当前状态符合切换条件,则执行所述控制车辆中的第一目标系统入非驾驶控制模式的步骤。
在该步骤中,若所述车辆的当前状态符合切换条件,则执行所述控制车辆中的第一目标系统入非驾驶控制模式的步骤。
在本实施例中,在接收到模式选择指令之后,通过判断车辆的当前状态是否符合切换条件来确定是否执行所述控制车辆中的第一标机构进入非驾驶控制模式的步骤,更好地保证了用户和车辆的安全。
在一个实施例中,所述切换条件包括第一切换条件和第二切换条件。
所述若所述车辆的当前状态符合切换条件,则执行所述控制车辆中的目标机构进入非驾驶控制模式的步骤,包括:
若所述车辆的当前状态符合第一切换条件,则控制所述车辆中的第一目标机构进入第一非驾驶控制模式;若所述车辆的当前状态符合第二切换条件,则控制所述车辆中的第三目标机构进入第二非驾驶控制模式。
其中,该第一非驾驶控制模式和第二非驾驶控制模式之间可以为不同等级、不同层次或者不同类型的非驾驶控制模式。可选地,第二非驾驶控制模式是相对于第一非驾驶控制模式更高等级的非驾驶控制模式,或者,第二非驾驶控制模式是相对于第一非驾驶控制模式更深层次的非驾驶控制模式,或者,第二非驾驶控制模式和第一非驾驶控制模式为不同类型的非驾驶控制模式。其中,不同等级的交互模式可以通过目标机构的数量、目标机构的功能或者用户权限来区分。不同层次的非驾驶控制模式可以通过不同的交互内容、目标机构的数量或者交互方式来区分。不同类型的非驾驶控制模式通过预先定义不同的乐器模拟场景来体现。
具体地,第一非驾驶控制模式和第二非驾驶控制模式之间的不同可以通过两个模式之间控制不同数量的目标机构(第一目标机构和第三目标机构)来区分。可选地,第二非驾驶控制模式可以比第一非驾驶控制模式控制更多数量的目标机构进入非驾驶控制模式。示例性地,该第一非驾驶控制模式可以为和车辆进行有限的交互,即用户和车辆内的一小部分的硬件机构进行交互而实现对应的功能。而第二非驾驶控制模式可以为完全的交互,即用户和车辆内的大部分甚至所有的硬件机构都可以进行交互而实现乐器模拟的功能。进一步地,第二非驾驶控制模式和第一非驾驶控制模式控制相同的硬件机构进入非驾驶控制模式,但是在第二非驾驶控制模式中对应硬件机构实现的功能更加全面或者完善,即第二非驾驶控制模式中对应的硬件机构可以实现更多的乐器模拟功能。示例性地,对于车辆中的转向盘而言,在第一非驾驶控制模式中,用户可以控制转向盘上地功能按键实现和车辆的乐器模拟的交互,而在第二非驾驶控制模式中,用户还可以控制转向盘的转向来实现和车辆的乐器模拟的交互。进一步地,第二非驾驶控制模式还可以为进行交互的硬件机构的数量和功能都比第一非驾驶控制模式更多。
第一切换条件为第一非驾驶控制模式的对应条件,第二切换条件为第二非驾驶控制模式的对应条件。通过设置第一切换条件和第二切换条件,来确定两个交互模式(第一非驾驶控制模式和第二非驾驶控制模式)的进入条件。该第一切换条件可以设定为特定的当前状态,即该车辆的当前状态符合一定的条件。可以通过设定车辆自身状态满足一定的条件来确定第一切换条件,或者,通过设定车辆自身状态满足一定的条件,并辅以车内环境状态和/或车外环境状态满足一定的条件共同确定第一切换条件。
示例性地,该第一切换条件为车辆处于自动驾驶状态,或者,该第一切换条件为车辆处于自动驾驶状态,而且车内环境状态和车外环境状态均为适合。
同理,该第二切换条件可以设定为特定的当前状态,即该车辆的当前状态符合一定的条件。可以通过设定车辆自身状态来确定第二切换条件,或者,通过设定车辆自身状态,并辅以车内环境状态和/或车外环境状态共同确定第二切换条件。
示例性地,该第一切换条件为车辆处于未启动状态,或者,该第二切换条件为车辆处于未启动状态,而且车内环境状态和车外环境状态均为适合。
在该实施例中,第一切换条件和第二切换条件为不同的触发条件,具体根据不同的第一非驾驶控制模式和第二非驾驶控制模式来对应设置,可以实现用户对不同非驾驶控制模式的自定义设置,提高了用户和车辆交互的灵活性。
在本实施例中,在接收到输入指令为预设的触发指令之后,通过判断车辆的当前状态是否符合特定的触发条件来进入不同的非驾驶控制模式,更好地对车辆实现智能化地控制,并且,通过设置不同的触发条件来对应不同的交互模式,也保证了车辆和乘客在不同模式下的安全。
在一个具体实施方式中,在判断所述车辆的当前状态符合预设的第一切换条件之后,且在控制所述车辆进入第一非驾驶控制模式之前,所述车辆控制方法还包括一个自检环节,即检查车辆内部各个硬件机构的状态。在该自检环节通过之后,再控制所述车辆进入第一非驾驶控制模式,以保证车辆硬件机构的正常运行,保证用户和车辆交互的顺利,也保证了安全。
在一个具体实施方式中,在判断所述车辆的当前状态符合预设的第二切换条件之后,且在控制所述车辆进入第二非驾驶控制模式之前,所述车辆控制方法还包括一个自检环节,即检查车辆内部各个硬件机构的状态。在该自检环节通过之后,再控制所述车辆进入第二非驾驶控制模式,以保证车辆硬件机构的正常运行,保证用户和车辆交互的顺利,也保证了安全。
应理解,上述实施例中各步骤的序号的大小并不意味着执行顺序的先后,各过程的执行顺序应以其功能和内在逻辑确定,而不应对本发明实施例的实施过程构成任何限定。
在一实施例中,提供一种车辆交互装置,该车辆交互装置与上述实施例中车辆交互方法一一对应。如图6所示,该车辆交互装置包括情绪检测模块601和第一响应模块602。各功能模块详细说明如下:
情绪检测模块601,用于检测用户的当前情绪。
第一响应模块602,用于在非驾驶控制模式下,若用户的当前情绪属于第一预设情绪,则根据所述当前情绪对车辆的第一目标系统的功能定义参数进行调整,其中,所述功能定义参数为所述第一目标系统在非驾驶控制模式下和功能定义相关的参数;根据调整后的功能定义参数控制车辆的所述第一目标系统进行反馈。
优选地,所述第一预设情绪包括至少一个情绪类别;
第一响应模块602包括:
情绪类别确定单元,用于确定所述用户的当前情绪在第一预设情绪中所属的情绪类别;
响应方式确定单元,用于根据所述当前情绪所属的情绪类别确定调整方式;
参数调整单元,用于根据所述调整方式对所述第一目标系统的所述功能定义参数进行调整。
优选地,所述第一目标系统包括输入机构、显示机构和反馈机构;
所述功能定义参数包括所述输入机构的功能定义参数、所述显示机构的功能定义参数和所述反馈机构的功能定义参数中的至少一项。
优选地,所述情绪类别包括正面预设情绪和负面预设情绪;
响应方式确定单元包括:
正向调整子单元,用于若所述用户的当前情绪为正面预设情绪,则所述调整方式为正向调整;
反向调整子单元,用于若所述用户的当前情绪为负面预设情绪,则所述调整方式为反向调整。
优选地,所述第一预设情绪包括正面预设情绪和负面预设情绪;
第一响应模块602包括:
第一调整单元,用于根据调整后的功能定义参数,控制所述显示机构在显示画面中调整第一显示元素,其中,所述第一显示元素和所述正面预设情绪关联;
和/或,
第二调整单元,用于根据调整后的功能定义参数,控制所述显示机构在显示画面中调整第二显示元素,其中,所述第二显示元素和所述负面预设情绪关联。
优选地,第一响应模块602还包括:
操作响应单元,用于响应于用户对输入机构的操作行为,控制所述显示机构中的显示画面进行调整;
显示控制单元,用于检测所述显示画面中的显示元素,根据所述调整后的功能定义参数从所述显示画面中确定目标显示元素,并对所述目标显示元素进行增加、减少或者替换,以调节用户的当前情绪。
优选地,第一响应模块602还包括:
确定反馈装置单元,用于响应于用户对输入机构的操作行为,确定第一目标系统中的反馈装置;
确定反馈方式单元,用于根据所述调整后的功能定义参数确定所述反馈装置的反馈方式和反馈强度;
执行反馈单元,用于控制所述反馈装置以调整后的反馈方式和调整后的反馈强度进行反馈。
优选地,操作响应单元包括:
阻尼调整子单元,用于根据调整后的功能定义参数调整所述输入机构的操作阻尼;
生成操作信息子单元,用于响应于用户对输入机构的操作行为,根据调整后的所述输入机构的操作阻尼生成操作信息;
画面调整子单元,用于根据所述操作信息控制所述显示机构中的显示画面进行调整。
优选地,车辆交互装置还包括:
输出报告模块,用于在所述非驾驶控制模式中,对用户的当前情绪属于第一预设情绪的情况进行统计,根据统计结果形成情绪输出报告。
可选的,车辆交互装置还包括:
第二响应模块,用于在驾驶控制模式下,若用户的当前情绪属于第二预设情绪,则控制车辆的第二目标系统进行响应,所述第二目标系统包括输入机构、显示机构或反馈机构中的至少一项。
优选地,第二响应模块包括:
驾驶模式切换单元,用于控制所述第二目标系统进入辅助驾驶模式或者自动驾驶模式。
优选地,第二响应模块还包括:
语音播报单元,用于控制所述反馈机构中的语音装置播放预设的语音数据,所述预设的语音数据包括音乐、交互语音或者提示语音至少一项。
优选地,情绪检测模块601包括:
获取图像单元,用于获取用户的人脸图像;
检测情绪单元,用于对所述人脸图像进行检测,得到用户的当前情绪。
优选地,检测情绪单元包括:
获取参数子单元,用于获取用户的人脸图像和生理信号参数;
确定情绪子单元,用于根据所述脸表情图像和所述生理信号参数确定用户的当前情绪。
优选地,车辆交互装置还包括:
条件判断模块,用于接收模式选择指令,根据所述模式选择指令判断车辆的当前状态是否符合切换条件;
模式切换模块,用于若所述车辆的当前状态符合切换条件,控制车辆中的第一目标系统进入非驾驶控制模式。
关于车辆交互装置的具体限定可以参见上文中对于车辆交互方法的限定,在此不再赘述。上述车辆交互装置中的各个模块可全部或部分通过软件、硬件及其组合来实现。上述各模块可以硬件形式内嵌于或独立于计算机设备中的处理器中,也可以以软件形式存储于计算机设备中的存储器中,以便于处理器调用执行以上各个模块对应的操作。
在一个实施例中,提供了一种计算机设备,该计算机设备可以是车辆中的处理系统,其内部结构图可以如图7所示。该计算机设备包括通过系统总线连接的处理器、存储器、网络接口和数据库。其中,该计算机设备的处理器用于提供计算和控制能力。该计算机设备的存储器包括非易失性存储介质、内存储器。该非易失性存储介质存储有操作系统、计算机程序和数据库。该内存储器为非易失性存储介质中的操作系统和计算机程序的运行提供环境。该计算机设备的数据库用于存储上述实施例中的车辆交互方法中所使用到的数据。该计算机设备的网络接口用于与外部的终端通过网络连接通信。该计算机程序被处理器执行时以实现上述实施例中的车辆交互方法。
在一个实施例中,提供了一种计算机设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,处理器执行计算机程序时实现上述实施例中的车辆交互方法。
在一个实施例中,提供了一种计算机可读存储介质,其上存储有计算机程序,计算机程序被处理器执行时实现上述实施例中的车辆交互方法。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程,是可以通过计算机程序来指令相关的硬件来完成,所述的计算机程序可存储于一非易失性计算机可读取存储介质中,该计算机程序在执行时,可包括如上述各方法的实施例的流程。其中,本申请所提供的各实施例中所使用的对存储器、存储、数据库或其它介质的任何引用,均可包括非易失性和/或易失性存储器。非易失性存储器可包括只读存储器(ROM)、可编程ROM(PROM)、电可编程ROM(EPROM)、电可擦除可编程ROM(EEPROM)或闪存。易失性存储器可包括随机存取存储器(RAM)或者外部高速缓冲存储器。作为说明而非局限,RAM以多种形式可得,诸如静态RAM(SRAM)、动态RAM(DRAM)、同步DRAM(SDRAM)、双数据率SDRAM(DDRSDRAM)、增强型SDRAM(ESDRAM)、同步链路(Synchlink)DRAM(SLDRAM)、存储器总线(Rambus)直接RAM(RDRAM)、直接存储器总线动态RAM(DRDRAM)、以及存储器总线动态RAM(RDRAM)等。
所属领域的技术人员可以清楚地了解到,为了描述的方便和简洁,仅以上述各功能单元、模块的划分进行举例说明,实际应用中,可以根据需要而将上述功能分配由不同的功能单元、模块完成,即将所述装置的内部结构划分成不同的功能单元或模块,以完成以上描述的全部或者部分功能。
以上所述实施例仅用以说明本发明的技术方案,而非对其限制;尽管参照前述实施例对本发明进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围,均应包含在本发明的保护范围之内。
Claims (17)
1.一种车辆交互方法,其特征在于,包括:
检测用户的当前情绪;
在非驾驶控制模式下,若用户的当前情绪属于第一预设情绪,则根据所述当前情绪对车辆的第一目标系统的功能定义参数进行调整,其中,所述功能定义参数为所述第一目标系统在非驾驶控制模式下的功能定义相关的参数,所述非驾驶控制模式为用户和车辆之间区别于驾驶控制模式的交互模式;
根据调整后的功能定义参数控制车辆的所述第一目标系统进行反馈,所述第一目标系统包括输入机构、显示机构和反馈机构;
在所述在非驾驶控制模式下,若用户的当前情绪属于第一预设情绪,则控制车辆的第一目标系统进行响应之前,接收模式选择指令,根据所述模式选择指令判断车辆的当前状态是否符合切换条件;所述切换条件包括第一切换条件和第二切换条件;
若所述车辆的当前状态符合所述第一切换条件,则控制所述车辆中的第一目标机构进入第一非驾驶控制模式;若所述车辆的当前状态符合所述第二切换条件,则控制所述车辆中的第三目标机构进入第二非驾驶控制模式;所述第一非驾驶控制模式和第二非驾驶控制模式之间为不同的非驾驶控制模式。
2.如权利要求1所述的车辆交互方法,其特征在于,所述第一预设情绪包括至少一个情绪类别;
所述根据所述当前情绪对所述第一目标系统的功能定义参数进行调整,包括:
确定所述用户的当前情绪在第一预设情绪中所属的情绪类别;
根据所述当前情绪所属的情绪类别确定调整方式;
根据所述调整方式对所述第一目标系统的所述功能定义参数进行调整。
3.如权利要求1所述的车辆交互方法,其特征在于,所述功能定义参数包括所述输入机构的功能定义参数、所述显示机构的功能定义参数和所述反馈机构的功能定义参数中的至少一项。
4.如权利要求2所述的车辆交互方法,其特征在于,所述情绪类别包括正面预设情绪和负面预设情绪;
所述根据所述当前情绪所属的情绪类别确定调整方式,包括:
若所述用户的当前情绪为正面预设情绪,则所述调整方式为正向调整;
若所述用户的当前情绪为负面预设情绪,则所述调整方式为反向调整。
5.如权利要求1所述的车辆交互方法,其特征在于,所述第一预设情绪包括正面预设情绪和负面预设情绪;
所述根据调整后的功能定义参数控制车辆的所述第一目标系统进行反馈,包括:
根据调整后的功能定义参数,控制所述显示机构在显示画面中调整第一显示元素,其中,所述第一显示元素和所述正面预设情绪关联;
和/或,
根据调整后的功能定义参数,控制所述显示机构在显示画面中调整第二显示元素,其中,所述第二显示元素和所述负面预设情绪关联。
6.如权利要求1所述的车辆交互方法,其特征在于,所述根据调整后的功能定义参数控制车辆的所述第一目标系统进行反馈,包括:
响应于用户对输入机构的操作行为,控制所述显示机构中的显示画面进行调整;
检测所述显示画面中的显示元素,根据所述调整后的功能定义参数从所述显示画面中确定目标显示元素,并对所述目标显示元素进行增加、减少或者替换,以调节用户的当前情绪。
7.如权利要求6所述的车辆交互方法,其特征在于,所述根据调整后的功能定义参数控制车辆的所述第一目标系统进行反馈,还包括:
响应于用户对输入机构的操作行为,确定第一目标系统中的反馈装置;
根据所述调整后的功能定义参数确定所述反馈装置的反馈方式和反馈强度;
控制所述反馈装置以调整后的反馈方式和调整后的反馈强度进行反馈。
8.如权利要求6所述的车辆交互方法,其特征在于,所述响应于用户对输入机构的操作行为,控制所述显示机构中的显示画面进行调整,包括:
根据调整后的功能定义参数调整所述输入机构的操作阻尼;
响应于用户对输入机构的操作行为,根据调整后的所述输入机构的操作阻尼生成操作信息;
根据所述操作信息控制所述显示机构中的显示画面进行调整。
9.如权利要求1所述的车辆交互方法,其特征在于,在所述根据所述当前情绪控制车辆的所述第一目标系统进行反馈之后,所述车辆交互方法还包括:
在所述非驾驶控制模式中,对用户的当前情绪属于第一预设情绪的情况进行统计,根据统计结果形成情绪输出报告。
10.如权利要求1所述的车辆交互方法,其特征在于,在所述检测用户的当前情绪之后,所述车辆交互方法还包括:
在驾驶控制模式下,若用户的当前情绪属于第二预设情绪,则控制车辆的第二目标系统进行响应,所述第二目标系统包括输入机构、显示机构或反馈机构中的至少一项。
11.如权利要求10所述的车辆交互方法,其特征在于,所述控制车辆的第二目标系统进行响应,包括:
控制所述第二目标系统进入辅助驾驶模式或者自动驾驶模式。
12.如权利要求10所述的车辆交互方法,其特征在于,所述控制车辆的第二目标系统进行响应,包括:
控制所述反馈机构中的语音装置播放预设的语音数据,所述预设的语音数据包括音乐、交互语音或者提示语音至少一项。
13.如权利要求1所述的车辆交互方法,其特征在于,所述检测用户的当前情绪,包括:
获取用户的人脸图像;
对所述人脸图像进行检测,得到用户的当前情绪。
14.如权利要求1所述的车辆交互方法,其特征在于,所述检测用户的当前情绪,包括:
获取用户的人脸图像和生理信号参数;
根据所述人脸图像和所述生理信号参数确定用户的当前情绪。
15.一种车辆交互装置,其特征在于,包括:
情绪检测模块,用于检测用户的当前情绪;
第一响应模块,用于在非驾驶控制模式下,若用户的当前情绪属于第一预设情绪,则根据所述当前情绪对车辆的第一目标系统的功能定义参数进行调整,其中,所述功能定义参数为所述第一目标系统在非驾驶控制模式下和功能定义相关的参数,所述非驾驶控制模式为用户和车辆之间区别于驾驶控制模式的交互模式;根据调整后的功能定义参数控制车辆的所述第一目标系统进行反馈,所述第一目标系统包括输入机构、显示机构和反馈机构;
所述车辆交互装置还包括:
条件判断模块,用于在所述在非驾驶控制模式下,若用户的当前情绪属于第一预设情绪,则控制车辆的第一目标系统进行响应之前,接收模式选择指令,根据所述模式选择指令判断车辆的当前状态是否符合切换条件;所述切换条件包括第一切换条件和第二切换条件;
模式切换模块,用于若所述车辆的当前状态符合所述第一切换条件,则控制所述车辆中的第一目标机构进入第一非驾驶控制模式;若所述车辆的当前状态符合所述第二切换条件,则控制所述车辆中的第三目标机构进入第二非驾驶控制模式;所述第一非驾驶控制模式和第二非驾驶控制模式之间为不同的非驾驶控制模式。
16.一种计算机设备,包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序,其特征在于,所述处理器执行所述计算机程序时实现如权利要求1至14中任一项所述车辆交互方法。
17.一种计算机可读存储介质,所述计算机可读存储介质存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现如权利要求1至14中任一项所述车辆交互方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910945478.4A CN112568904B (zh) | 2019-09-30 | 2019-09-30 | 车辆交互方法、装置、计算机设备及存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910945478.4A CN112568904B (zh) | 2019-09-30 | 2019-09-30 | 车辆交互方法、装置、计算机设备及存储介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN112568904A CN112568904A (zh) | 2021-03-30 |
CN112568904B true CN112568904B (zh) | 2022-05-13 |
Family
ID=75116901
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201910945478.4A Active CN112568904B (zh) | 2019-09-30 | 2019-09-30 | 车辆交互方法、装置、计算机设备及存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN112568904B (zh) |
Families Citing this family (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114845040A (zh) * | 2021-07-08 | 2022-08-02 | 长城汽车股份有限公司 | 基于人车交互的图像处理方法、装置、车辆及存储介质 |
CN113805985A (zh) * | 2021-08-06 | 2021-12-17 | 广州小鹏汽车科技有限公司 | 操作指引方法及装置、车辆及存储介质 |
CN114684152A (zh) * | 2022-02-25 | 2022-07-01 | 智己汽车科技有限公司 | 驾驶体验数据处理的方法、装置、车辆及介质 |
CN115904075B (zh) * | 2022-11-28 | 2024-01-02 | 中国汽车技术研究中心有限公司 | 车辆配置改进方法、系统、设备和存储介质 |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2016005289A1 (en) * | 2014-07-08 | 2016-01-14 | Jaguar Land Rover Limited | System and method for automated device control for vehicles using driver emotion |
CN109131167A (zh) * | 2018-08-03 | 2019-01-04 | 百度在线网络技术(北京)有限公司 | 用于控制车辆的方法和装置 |
Family Cites Families (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102874259B (zh) * | 2012-06-15 | 2015-12-09 | 浙江吉利汽车研究院有限公司杭州分公司 | 一种汽车驾驶员情绪监视及车辆控制系统 |
CN103873512A (zh) * | 2012-12-13 | 2014-06-18 | 深圳市赛格导航科技股份有限公司 | 基于脸部识别技术的车载无线传输音乐的方法 |
CN105022294B (zh) * | 2015-06-16 | 2018-01-12 | 卡桑德电子科技(扬州)有限公司 | 具有驾驶状态人机界面的便携式通信设备、系统及工作方法 |
CN105279494A (zh) * | 2015-10-23 | 2016-01-27 | 上海斐讯数据通信技术有限公司 | 可调节用户情绪的人机交互系统、方法及设备 |
CN105812484B (zh) * | 2016-04-25 | 2019-03-12 | 奇瑞汽车股份有限公司 | 车载交互系统 |
CN106627589A (zh) * | 2016-12-27 | 2017-05-10 | 科世达(上海)管理有限公司 | 一种车辆行驶安全辅助方法、系统及车辆 |
CN108528329A (zh) * | 2017-12-15 | 2018-09-14 | 蔚来汽车有限公司 | 用于车辆氛围灯的控制方法和系统 |
CN108819839A (zh) * | 2018-05-04 | 2018-11-16 | 北京汽车集团有限公司 | 车辆氛围灯控制方法、装置、系统及车辆 |
-
2019
- 2019-09-30 CN CN201910945478.4A patent/CN112568904B/zh active Active
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2016005289A1 (en) * | 2014-07-08 | 2016-01-14 | Jaguar Land Rover Limited | System and method for automated device control for vehicles using driver emotion |
CN109131167A (zh) * | 2018-08-03 | 2019-01-04 | 百度在线网络技术(北京)有限公司 | 用于控制车辆的方法和装置 |
Also Published As
Publication number | Publication date |
---|---|
CN112568904A (zh) | 2021-03-30 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN112568904B (zh) | 车辆交互方法、装置、计算机设备及存储介质 | |
CN110914884B (zh) | 车辆控制器和车辆控制方法 | |
CN108327722B (zh) | 用于通过移动模式来识别车辆驾驶员的系统和方法 | |
CN107791893B (zh) | 车辆座椅 | |
US20200247422A1 (en) | Inattentive driving suppression system | |
US11195405B2 (en) | Dozing alert apparatus | |
CN108688593B (zh) | 用于通过移动模式来识别车辆的至少一个乘客的系统和方法 | |
CN111739201A (zh) | 车辆的交互方法及装置、电子设备、存储介质和车辆 | |
CN112829767B (zh) | 一种基于监测驾驶员误操作的自动驾驶控制系统及方法 | |
JPWO2019044427A1 (ja) | 支援方法およびそれを利用した支援システム、支援装置 | |
WO2019208450A1 (ja) | 運転支援装置、運転支援方法及びプログラム | |
US20200155054A1 (en) | Vehicle occupant health monitor system and method | |
CN111086480A (zh) | 车辆唤醒方法、车机及车辆 | |
CN116767255B (zh) | 一种用于新能源汽车的智能座舱联动方法及系统 | |
CN110435567A (zh) | 一种疲劳驾驶的管理方法和装置 | |
CN111292493A (zh) | 一种振动提醒方法、装置、电子设备及系统 | |
CN112572320B (zh) | 车辆控制方法、装置、计算机设备及存储介质 | |
CN112572305A (zh) | 车辆转向盘的控制方法、设备及介质 | |
CN207059776U (zh) | 一种机动车驾驶许可装置 | |
JP6485345B2 (ja) | 電子情報処理システム及びコンピュータプログラム | |
WO2022124163A1 (ja) | 覚醒装置、覚醒刺激制御方法 | |
CN112572467B (zh) | 车辆系统、车辆控制方法、计算机设备及存储介质 | |
CN111783550B (zh) | 驾驶人情绪的监控调节方法及系统 | |
US20230012769A1 (en) | Interactive system and associated interaction method | |
CN117011927A (zh) | 车载设备控制方法、装置及电子设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |